JP2017027607A - Display format change system and electronic book terminal - Google Patents

Display format change system and electronic book terminal Download PDF

Info

Publication number
JP2017027607A
JP2017027607A JP2016168354A JP2016168354A JP2017027607A JP 2017027607 A JP2017027607 A JP 2017027607A JP 2016168354 A JP2016168354 A JP 2016168354A JP 2016168354 A JP2016168354 A JP 2016168354A JP 2017027607 A JP2017027607 A JP 2017027607A
Authority
JP
Japan
Prior art keywords
symbol
character
display form
viewpoint
electronic book
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2016168354A
Other languages
Japanese (ja)
Inventor
林 潤 平 小
Jumpei KOBAYASHI
林 潤 平 小
見 和 男 伏
Kazuo Fushimi
見 和 男 伏
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Dai Nippon Printing Co Ltd
Original Assignee
Dai Nippon Printing Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Dai Nippon Printing Co Ltd filed Critical Dai Nippon Printing Co Ltd
Priority to JP2016168354A priority Critical patent/JP2017027607A/en
Publication of JP2017027607A publication Critical patent/JP2017027607A/en
Pending legal-status Critical Current

Links

Landscapes

  • User Interface Of Digital Computer (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

PROBLEM TO BE SOLVED: To make it easy to browse an electronic book without causing trouble to a reader by reducing the useless stop and saccade of the reader's view point.SOLUTION: A display format change system 1 comprises: a view point detection unit 11 for detecting the view point of a reader in a display screen where electronic book data is displayed; a stop detection unit 12 for finding that the view point is stopped for more than a prescribed time at any place in the display screen; and a virtual character symbol number information string creation unit 14 for creating virtual character symbol number information strings 32 in which the line heads of lines accord with each other. On the basis of a signal from the stop detection unit 12, if the line head of a line where the view point stops of character symbol number information 30 does not accord with the line head of the next line, a display format change unit 15 changes the display format of the character symbol number information 30 on the basis of the virtual character information string 32.SELECTED DRAWING: Figure 1

Description

本発明は、電子書籍を閲覧する読者が読み易くなるよう表示形態を変更する表示形態変更システムと、この表示形態変更システムを内蔵する電子書籍端末に関する。   The present invention relates to a display form changing system for changing a display form so that a reader who browses an electronic book can easily read, and an electronic book terminal incorporating the display form changing system.

近年、市場の要求や、電子部品の高機能化および低価格化に伴って、電子書籍市場が活性化している。電子書籍は、かさばらずに多くの書籍を持ち運べて、いつでもどこでも簡易に閲覧できるという大きな利点がある。ユーザは、電子書籍のデータ形式に合致した携帯機器やPCなどの種々の電子書籍端末で電子書籍ビューアを起動して、場所および時間を問わず、任意の電子書籍を閲覧することができる。   In recent years, the electronic book market has been activated along with market demands and higher functionality and lower prices of electronic components. Electronic books have the great advantage of being able to carry many books without being bulky and easily browse them anytime and anywhere. A user can start an electronic book viewer on various electronic book terminals such as a portable device or a PC that matches the data format of the electronic book, and can browse any electronic book regardless of location and time.

このように、電子書籍は、携帯が容易であることから、実際の本を閲覧する場合よりも、外乱の多い環境下で閲覧する機会が増える。ところが、歩行中や乗り物の中で電子書籍を閲覧する場合、電子書籍端末を持つ手が揺れたり、人間の視線が電子書籍端末からそれやすくなるため、目と表示画面の距離が変動してしまう。   As described above, since the electronic book is easy to carry, there are more opportunities to browse in an environment with much disturbance than when browsing an actual book. However, when browsing an e-book while walking or in a vehicle, the hand holding the e-book terminal is shaken, or the human gaze is more likely to deviate from the e-book terminal, so the distance between the eyes and the display screen varies. .

また、電子書籍は、屋内だけでなく、屋外で閲覧されることも多く、周囲の明るさも大きく変化する。また、照明光源の種類も、太陽光や蛍光灯、白熱灯など、目への負担が異なる様々な光源の下で読まれる。さらに、電子書籍端末の種類や各ユーザの生活スタイルにより、座って閲覧する場合や、立って閲覧する場合、寝転がって閲覧する場合、急いで閲覧する場合、精読する場合など、閲覧の仕方も様々である。   In addition, electronic books are often viewed not only indoors but also outdoors, and the brightness of the surroundings changes greatly. The type of illumination light source can also be read under various light sources such as sunlight, fluorescent lamps, and incandescent lamps that have different loads on the eyes. In addition, depending on the type of electronic book terminal and the lifestyle of each user, there are various ways to browse, such as when browsing while sitting, browsing while standing, browsing when lying down, browsing quickly, or reading carefully. It is.

紙の書籍は、各頁内の文字の印字態様は固定であり、変更はできない。例えば、視力の弱い人が読む場合でも、その文字のサイズを変更することはできない。このような紙の書籍の物理的制約から、今までは、「紙に印字された文字を読みやすい環境」を読者自身が構築してきた。例えば、暗闇では読めないので読書灯を用意するなどして部屋を明るくしたり、文字が小さくて読めないのでメガネをかけたり、といった行動もその一つである。   For paper books, the printing mode of characters in each page is fixed and cannot be changed. For example, even when a person with weak eyesight reads, the size of the character cannot be changed. Until now, readers themselves have created an “environment that makes it easy to read characters printed on paper” because of the physical constraints of paper books. For example, it is not possible to read in the dark. For example, a reading light is provided to brighten the room, or characters are too small to read and glasses are put on.

これに対して、電子書籍は、本来的には文字の配置を変更可能で、また、文字の拡大縮小や背景色の変更などの表示形態の変更は、一般的なビューアが標準で備えている。   In contrast, e-books can essentially change the arrangement of characters, and general viewers have standard changes in display form such as character enlargement / reduction and background color change. .

ところが、現在の電子書籍の文字の配置は、完成された紙の書籍の組版を再現したものがほとんどである。つまり、文字サイズや背景色を変更することはできても、電子書籍本体の文字配置をわざと変更できなくしていることも多く、文字配置を「動的に変更できる」という前提で考えられた組版の技術は発展途上である。   However, most current electronic book character layouts reproduce a typesetting of a completed paper book. In other words, even though the text size and background color can be changed, it is often the case that the text layout of the e-book itself cannot be changed intentionally, and the typesetting was based on the premise that the text layout can be changed dynamically. This technology is still developing.

特開2009−301206号公報JP 2009-301206 A

http://www.sokudoku.gr.jp/rapid/outline/http://www.sokudoku.gr.jp/rapid/outline/

一般的に、人間の視覚は、図8に示すように視野内の全ての文字にピントが合っていると感じているが、実際は、中心窩とよばれる視野の中心部分のみ解像度が高く、その周辺の周辺視野とよばれる領域では解像度が低くなっており、周辺視野では図示のように大部分がぼやけた状態で視認されている。ここで重要なのは、解像度の高い中心窩は範囲が狭いこと、および解像度の低い周辺視野では文字を「文字」としては認識できないことである。そのため、文字を「読む」ためには、中心窩を読みたい文字に当てる必要がある。   Generally, human vision feels that all characters in the visual field are in focus as shown in FIG. 8, but in reality, only the central part of the visual field, called the fovea, has a high resolution. The resolution is low in the peripheral so-called peripheral visual field, and most of the peripheral visual field is visually recognized as shown in the figure. What is important here is that the high-resolution fovea has a narrow range, and the character cannot be recognized as a “character” in the peripheral vision with a low resolution. Therefore, in order to “read” a character, it is necessary to hit the character that wants to read the fovea.

図5は非特許文献1に記載された視点トラッキング結果を示す図である。図5のハッチング部分は、読者が中心窩を一定時間動かさなかった場所であり、この動作を本明細書では「停留」と呼ぶ。また、停留場所から次の停留場所までの移動を本明細書ではサッケードと呼ぶ。読者は、読書中に停留とサッケードを繰り返していることがわかる。   FIG. 5 is a diagram illustrating the viewpoint tracking result described in Non-Patent Document 1. The hatched portion in FIG. 5 is a place where the reader has not moved the fovea for a certain period of time, and this operation is referred to as “stop” in this specification. In addition, the movement from one stop location to the next stop location is referred to as a saccade in this specification. Readers can see that they are repeatedly stopping and saccade while reading.

ここで重要なのは、人間の視点は「すべての文字に停留しているわけではない」ことである。このことは、人間が読書中に文字として認識しているのは一部であり、脳の何らかのアルゴリズムによって認識すべき文字と読み飛ばしてもよい文字を区別し、かつ読み飛ばした文字も脳にて補完していることを意味する。つまり、読書の効率を考えると、脳が補完できる文字は読み飛ばすべきで、無駄な停留とサッケードは極力抑制すべきである。   The important point here is that the human perspective is not "not all characters". This is because some humans recognize characters as characters during reading, distinguish between characters that should be recognized by some algorithm of the brain and characters that can be skipped, and characters that are skipped are also in the brain. Means that In other words, considering the efficiency of reading, characters that can be complemented by the brain should be skipped, and unnecessary stops and saccades should be suppressed as much as possible.

図10は読者の停留中の行動を示している。読者は、停留中には、(1)中心窩での文字認識と、(2)周辺視野での次に中心窩を移動させるべき場所の探索(サッケード先探索)と、を同時に実行している。このことは、ある一回の停留でサッケード先が見つけられない場合は、認識する必要のない文字に中心窩を当てながら少しずつ目的の移動先を探っていくという無駄なサッケードが多発することを意味する。   FIG. 10 shows the reader's behavior during the stoppage. The reader is simultaneously performing (1) character recognition in the fovea and (2) searching for a place to move the fovea in the peripheral field of view (saccade destination search) while stationary. . This means that if a saccade destination cannot be found at a single stop, there will be many useless saccades where the target destination is searched little by little while placing the fovea on a character that does not need to be recognized. means.

図11は無駄なサッケードが多発しがちな例を示している。一般的な文書は、限られた紙面に文字を配置するために「改行」を導入し、文字列を分断して紙面に落とし込んでいる。この改行箇所では、行末から次の行の行頭へ視点をジャンプさせる必要がある。つまり、読者は、まず中心窩で「行末」を認識した後、次の行の「行頭」を周辺視野で探索し、サッケードすることで中心窩を行頭に合わせる、といった動作が必要となる。もし行末に中心窩を置いている時点で行頭を捉えられない場合、行頭を探すための無駄なサッケードが多発することになる。   FIG. 11 shows an example in which wasteful saccades tend to occur frequently. In general documents, “line feed” is introduced in order to place characters on a limited page, and the character string is divided and dropped on the page. At this line break, it is necessary to jump the viewpoint from the end of the line to the beginning of the next line. That is, the reader first needs to recognize the “end of line” in the fovea, and then search for the “start of line” in the next line in the peripheral field of view and saccade to align the fovea with the start of the line. If the beginning of the line is not captured when the fovea is placed at the end of the line, there will be many useless saccades to find the line.

電子書籍は、紙の書籍と異なり、各頁内の文字情報や画像情報の表示形態を比較的自由に変更できるにもかかわらず、従来の電子書籍端末は、読者の視点の無駄な停留とサッケードを抑制することを目的として、各頁内の文字情報や画像情報の表示形態を変更するようなことは行っていない。   Unlike electronic books, e-book readers can change the display format of text information and image information within each page relatively freely. In order to suppress this, the display form of character information and image information in each page is not changed.

特許文献1には、ユーザの視線移動を抑制する技術が開示されているが、ユーザの視点検出は行っておらず、ユーザの視点を表示画面内の特定位置に置くことを前提としている。したがって、特許文献1の開示技術を利用しても、上述した視点の無断な停留とサッケードを抑制することはできない。   Patent Document 1 discloses a technique for suppressing the movement of the user's line of sight, but does not detect the user's viewpoint, and assumes that the user's viewpoint is placed at a specific position in the display screen. Therefore, even if the technique disclosed in Patent Document 1 is used, the above-described unauthorized stopping and saccade of the viewpoint cannot be suppressed.

本発明は、上述した問題点を解決するためになされたものであり、読者の視点の無駄な停留とサッケードを抑制して、読者の手を煩わせることなく電子書籍を閲覧しやすくした視点誘導装置および電子書籍端末を提供するものである。   The present invention has been made to solve the above-mentioned problems, and is a viewpoint guidance that makes it easy to browse an electronic book without bothering the reader's hand by suppressing wasteful stopping and saccade of the reader's viewpoint. An apparatus and an electronic book terminal are provided.

本発明は、電子書籍データを表示させる表示画面内における読者の視点を検出する視点検出部と、前記視点が前記表示画面内の任意の場所に所定時間以上停留したことを検出する停留検出部と、電子書籍データに含まれる複数行に渡って配置された文字記号数字情報に基づいて、各行の行頭が一致するような仮想文字記号数字情報列を作成する仮想文字記号数字情報列作成部と、前記停留検出部からの信号に基づいて、視点が停留する一の行の行頭と、次の行の行頭とが不一致の場合に、前記仮想文字記号数字情報列作成部で作成された仮想文字記号数字情報列に基づいて、前記文字記号数字情報の表示形態を変更する表示形態変更部と、を備えることを特徴とする表示形態変更システムである。   The present invention includes a viewpoint detection unit that detects a reader's viewpoint in a display screen that displays electronic book data, and a stop detection unit that detects that the viewpoint has stopped at an arbitrary location in the display screen for a predetermined time or more. A virtual character-symbol-number information string creating unit that creates a virtual character-symbol-number information string such that the heads of each line match based on the character-symbol-number information arranged over a plurality of lines included in the electronic book data; Based on the signal from the stop detection unit, the virtual character symbol created by the virtual character symbol / numerical information sequence creation unit when the head of the first row where the viewpoint stops and the head of the next row do not match A display form changing system comprising: a display form changing unit for changing a display form of the character / symbol / numeric information based on a numerical information string.

本発明は、表示装置と、サーバとの間で無線通信を行うことが可能な通信部と、読者が種々の情報を入力する入力部と、電子書籍データを前記表示装置の表示画面に表示させる表示制御部と、表示形態変更システムと、を備え、前記表示形態変更システムは、前記表示装置の表示画面内における読者の視点を検出する視点検出部と、前記視点が前記表示画面内の任意の場所に所定時間以上停留したことを検出する停留検出部と、電子書籍データに含まれる複数行に渡って配置された文字記号数字情報に基づいて、各行の行頭が一致するような仮想文字記号数字情報列を作成する仮想文字記号数字情報列作成部と、前記停留検出部からの信号に基づいて、視点が停留する一の行の行頭と、次の行の行頭とが不一致の場合に、前記仮想文字記号数字情報列作成部で作成された仮想文字記号数字情報列に基づいて、前記文字記号数字情報の表示形態を変更する表示形態変更部と、を備えることを特徴とする電子書籍端末である。   The present invention provides a communication unit capable of performing wireless communication between a display device and a server, an input unit for a reader to input various information, and displays electronic book data on a display screen of the display device. A display control unit; and a display form change system, wherein the display form change system detects a reader's viewpoint in the display screen of the display device, and the viewpoint is an arbitrary one in the display screen. A virtual character symbol number that matches the beginning of each line based on the stationary detection unit that detects that it has stopped at a place for more than a predetermined time and the character symbol number information arranged over multiple lines included in the electronic book data Based on the signal from the virtual character / symbol / numeric information string creating unit that creates the information string, and the signal from the stop detecting unit, when the head of one line where the viewpoint stops and the head of the next line do not match, Number of virtual character symbols Based on the virtual character symbol numerical information columns created by the information sequence creation unit, and a display mode changing unit for changing the display form of the character symbol numerical information, an electronic book terminal, characterized in that it comprises a.

本発明によれば、読者の視点の無駄な停留とサッケードを抑制できるため、読者の手を煩わせることなく電子書籍を閲覧しやすくすることができる。   According to the present invention, wasteful stopping and saccade from the reader's viewpoint can be suppressed, so that it is possible to easily browse an electronic book without bothering the reader.

図1は本発明の一実施形態に係る表示形態変更システム1を内蔵する電子書籍端末2の概略構成を示すブロック図。FIG. 1 is a block diagram showing a schematic configuration of an electronic book terminal 2 incorporating a display form changing system 1 according to an embodiment of the present invention. 図2は図1の電子書籍端末2の処理動作を示すフローチャート。FIG. 2 is a flowchart showing the processing operation of the electronic book terminal 2 of FIG. 図3は電子書籍データ内の文字記号数字情報の一例を示す図。FIG. 3 is a diagram illustrating an example of character symbol number information in electronic book data. 図4は仮想文字記号数字情報列を示す図。FIG. 4 is a diagram showing a virtual character symbol / numeral information string. 図5(a)(b)は文字列の流れを示す図。5A and 5B are diagrams showing the flow of character strings. 図6(a)(b)は表示形態変更部によるレンダリングを示す図。6A and 6B are diagrams showing rendering by the display form changing unit. 図7(a)(b)は文字記号数字情報を一行上方へもっていく状態を示す図。FIGS. 7A and 7B are views showing a state in which the character / symbol / numeral information is moved upward by one line. 図8は人間の視野の一例を示す図。FIG. 8 is a diagram illustrating an example of a human visual field. 図9は非特許文献1に記載された視点トラッキング結果を示す図。FIG. 9 is a diagram showing a viewpoint tracking result described in Non-Patent Document 1. 図10は読者の停留中の行動を示す図。FIG. 10 is a diagram showing the behavior of the reader when it is stopped. 図11は無駄なサッケードが多発しがちな例を示す図。FIG. 11 is a diagram showing an example in which wasteful saccades tend to occur frequently.

以下、本発明の実施の形態について、詳細に説明する。図1は本発明の一実施形態に係る視点誘導装置1を内蔵する電子書籍端末2の概略構成を示すブロック図である。   Hereinafter, embodiments of the present invention will be described in detail. FIG. 1 is a block diagram showing a schematic configuration of an electronic book terminal 2 incorporating a viewpoint guidance device 1 according to an embodiment of the present invention.

図1の電子書籍端末2は、電源を投入すると、ユーザが意識しなくても、定期的にサーバ20と通信を行って、電子書籍データの更新を行う。また、ユーザの指示の下でサーバ20と通信を行って、新たな電子書籍データのダウンロードや削除を行うことも可能である。   When the electronic book terminal 2 in FIG. 1 is turned on, the electronic book data is updated by periodically communicating with the server 20 without being conscious of the user. It is also possible to communicate with the server 20 under the user's instruction to download or delete new electronic book data.

図1の電子書籍端末2は、電子書籍を閲覧することに特化した専用端末でもよいし、汎用のOS(オペレーティングシステム)上で種々のアプリケーションソフトウェア(以下、アプリと呼ぶ)を実行させることができるPCやタブレット、スマートフォン等の電子機器でもよい。汎用のOS上で動作する電子機器を電子書籍端末2として利用する場合、電子書籍ビューアの機能を実現するアプリをOS上で起動することになる。また、PCを電子書籍端末2として利用する場合、そのPCは携帯可能なPCでもよいし、据置型のPCでもよい。このように、電子書籍端末2は、必ずしも携帯可能な電子機器である必要はない。   The electronic book terminal 2 in FIG. 1 may be a dedicated terminal specialized for browsing electronic books, or may execute various application software (hereinafter referred to as applications) on a general-purpose OS (operating system). It may be an electronic device such as a PC, tablet, or smartphone. When an electronic device operating on a general-purpose OS is used as the electronic book terminal 2, an application that realizes the function of the electronic book viewer is started on the OS. When a PC is used as the electronic book terminal 2, the PC may be a portable PC or a stationary PC. Thus, the electronic book terminal 2 is not necessarily a portable electronic device.

図1の電子書籍端末2は、表示装置3と、表示装置3の表示画面に表示させる情報を生成する表示制御部4と、読者の視点検出に用いることが可能なセンサ5と、サーバ20との間で無線通信を行う通信部6と、ユーザが種々の情報を入力する入力部7と、入力部7に入力された情報に基づいてユーザの入力情報を解析する操作解析部8と、電子書籍データを記憶する電子書籍記憶部9と、電子書籍端末2内の各部を制御するメインコントローラ10と、表示形態変更システム1とを備えている。   The electronic book terminal 2 of FIG. 1 includes a display device 3, a display control unit 4 that generates information to be displayed on the display screen of the display device 3, a sensor 5 that can be used to detect a reader's viewpoint, and a server 20. A communication unit 6 for performing wireless communication, an input unit 7 for a user to input various information, an operation analysis unit 8 for analyzing user input information based on information input to the input unit 7, and an electronic The electronic book storage part 9 which memorize | stores book data, the main controller 10 which controls each part in the electronic book terminal 2, and the display form change system 1 are provided.

メインコントローラ10は、通信部6を介してサーバ20と通信を行う制御や、センサ5からの出力信号を表示形態変更システム1に送信する制御や、表示形態変更システム1からの出力信号に基づいて表示制御部4に表示画面の変更を指示する処理などを行う。   The main controller 10 performs control to communicate with the server 20 via the communication unit 6, control to transmit an output signal from the sensor 5 to the display form change system 1, and based on an output signal from the display form change system 1. Processing for instructing the display control unit 4 to change the display screen is performed.

表示形態変更システム1は、視点検出部11と、停留検出部12と、電子書籍メタ情報記憶部13と、仮想文字記号数字情報作成部14と、表示形態変更部15とを有する。   The display form change system 1 includes a viewpoint detection unit 11, a stop detection unit 12, an electronic book meta information storage unit 13, a virtual character symbol / numeral information creation unit 14, and a display form change unit 15.

視点検出部11は、センサ5の出力信号に基づいて表示画面内におけるユーザ(以下、読者と呼ぶ)の視点を検出する。   The viewpoint detection unit 11 detects the viewpoint of the user (hereinafter referred to as a reader) in the display screen based on the output signal of the sensor 5.

停留検出部12は、読者の視点が表示画面内の任意の場所に所定時間以上停留したことを検出する。一般的な人間の文字認識時間は、約0.2〜0.3秒と言われているため、上述した所定時間も、例えば0.2〜0.3秒程度に設定する。   The stop detection unit 12 detects that the reader's viewpoint has stopped at an arbitrary place in the display screen for a predetermined time or more. Since the general human character recognition time is said to be about 0.2 to 0.3 seconds, the above-mentioned predetermined time is also set to about 0.2 to 0.3 seconds, for example.

電子書籍メタ情報記憶部13は、文字記号数字情報および画像情報を含む電子書籍データに付随したメタ情報を記憶する。メタ情報には、電子書籍データを表示するための種々の設定情報、例えば、表示画面内の文字数、行数、フォントサイズ、フォント種別、文字装飾情報などが含まれる。   The electronic book meta information storage unit 13 stores meta information attached to electronic book data including character / symbol / numeric information and image information. The meta information includes various setting information for displaying the electronic book data, for example, the number of characters in the display screen, the number of lines, the font size, the font type, and character decoration information.

ここで、電子書籍データが含む文字記号数字情報とは、電子書籍端末2で表示可能な任意の文字、記号および数字であり、ASCIIコードのように汎用コード化された情報を指す。これに対して、画像情報とは、図や表、グラフ、写真、イラストなど、汎用コード化されていない種々の画像形式の情報を指す。   Here, the character / symbol / numeric information included in the electronic book data refers to arbitrary characters, symbols, and numbers that can be displayed on the electronic book terminal 2, and refers to information that is converted into a general-purpose code such as an ASCII code. On the other hand, image information refers to information in various image formats that are not general-purpose coded, such as diagrams, tables, graphs, photographs, and illustrations.

サーバ20は、初期状態では、既知のアルゴリズムを用いて電子書籍データの言語解析を行って、一般の読者が視点を所定時間以上置くと思われる文字記号数字情報と画像情報を特定して、特定した各情報を停留場所候補として電子書籍メタ情報記憶部13に記憶する。停留場所候補を選定するに当たっては、上述した言語解析による手法だけでなく、特定の単語(例えば接続詞)を無条件で停留場所候補としたり、繰り返し出現する文字列や段落は停留場所候補から除外したり、個々の読者の過去の履歴を参照したり、読者の年齢や性別等に応じて停留場所候補の選定手法を変える等、任意の手法が採用可能である。   In the initial state, the server 20 performs linguistic analysis of electronic book data using a known algorithm, and identifies and identifies character / numeric information and image information that a general reader is expected to put a viewpoint on for a predetermined time or more. Each piece of information is stored in the electronic book meta information storage unit 13 as a stop location candidate. In selecting a stop location candidate, not only the above-mentioned method by language analysis, but also a specific word (for example, a conjunction) is unconditionally selected as a stop location candidate, and repeated character strings and paragraphs are excluded from the stop location candidates. Arbitrary methods can be adopted, such as referring to the past history of individual readers, or changing the selection method of the stop location candidates according to the age and sex of the readers.

また電子書籍メタ情報記憶部13には、上述のように仮想文字記号数字情報列作成部14が接続されている。   The electronic book meta information storage unit 13 is connected to the virtual character / symbol / numeric information string creation unit 14 as described above.

一般に、電子書籍データに含まれる文字記号数字情報30は、複数行に渡って配置されている(図3参照)。仮想文字記号数字情報列作成部14は、電子書籍データに含まれる文字記号数字情報30に基づいて、各行の行頭が一致するような仮想文字記号数字情報列32を作成するものである。   Generally, the character symbol number information 30 included in the electronic book data is arranged over a plurality of lines (see FIG. 3). The virtual character / symbol / numeric information string creating unit 14 creates a virtual character / symbol / numerical information string 32 such that the heads of the respective lines coincide with each other based on the character / symbol / numeric information 30 included in the electronic book data.

ここで「各行の行頭が一致する」とは各行の行頭が完全に一致する場合、および改行することにより各行の行頭が略一致する場合の双方を含む。   Here, “the head of each line matches” includes both the case where the head of each line completely matches and the case where the head of each line substantially matches by a line feed.

また表示形態変更部15は、停留検出部12および電子書籍メタ情報記憶部13からの信号に基づいて、視点が停留する一の行の行頭と、次の行の行頭が不一致の場合に、仮想文字記号数字情報列作成部14からの仮想文字記号数字情報列32に基づいて文字記号数字情報30の表示形態を変更するようになっている。   Further, the display form changing unit 15 determines whether the head of one line where the viewpoint stops and the line of the next line do not match based on signals from the stop detection unit 12 and the electronic book meta information storage unit 13. The display form of the character / symbol / numeric information 30 is changed based on the virtual character / symbol / numeric information string 32 from the character / symbol / numeric information string creating unit 14.

次にこのような構成からなる本実施の形態の作用について、図1乃至図7により説明する。   Next, the operation of the present embodiment having such a configuration will be described with reference to FIGS.

ここで図2は図1の電子書籍端末2の処理動作を示すフローチャートである。このフローチャートは、電子書籍端末2の電源を投入して、読者が電子端末ビューアを起動させた時点で開始される。電子端末ビューアが起動している最中は、センサ5は、継続して読者の視点をトラッキングして、視点を検出する。視点を検出する手法には、種々の公知の手法が知られており、いずれの手法を用いてもよい。   FIG. 2 is a flowchart showing the processing operation of the electronic book terminal 2 of FIG. This flowchart is started when the electronic book terminal 2 is turned on and the reader activates the electronic terminal viewer. While the electronic terminal viewer is activated, the sensor 5 continuously tracks the reader's viewpoint and detects the viewpoint. Various known methods are known as the method for detecting the viewpoint, and any method may be used.

例えば、角膜反射方式では、人間の眼球の黒目と白目の反射率の違いを利用して視点の位置を検出する。角膜反射方式で用いられるセンサ5は、発光素子と受光素子を有し、発光素子から赤外光を読者の眼球に照射し、眼球からの反射光を受光素子で受光する。眼球の黒目は反射率が低く、白目は反射率が高い。このため、受光素子を水平(左右)方向に2個設ければ、黒目が右側の受光素子側に移動すると、右側の受光素子が受光する反射光の光量は左側の受光素子が受光する反射光の光量よりも少なくなる。これにより、眼球の左右方向の移動を検出できる。また、眼球が上下に移動した場合も、発光素子と眼球との高低差によって、左右2個の受光素子の反射光の光量の和が増加したり、減少したりするため、その増減量により、眼球が上に移動したか、あるいは下に移動したかを検出できる。   For example, in the corneal reflection method, the position of the viewpoint is detected using the difference in reflectance between the black eye and the white eye of the human eyeball. The sensor 5 used in the corneal reflection method has a light emitting element and a light receiving element, irradiates infrared light from the light emitting element to the reader's eyeball, and receives light reflected from the eyeball by the light receiving element. The black eye of the eyeball has a low reflectance, and the white eye has a high reflectance. For this reason, if two light receiving elements are provided in the horizontal (left and right) direction, when the black eye moves to the right light receiving element, the amount of reflected light received by the right light receiving element is the reflected light received by the left light receiving element. Less than the amount of light. Thereby, the movement of the eyeball in the left-right direction can be detected. Also, even when the eyeball moves up and down, the sum of the amount of reflected light of the two left and right light receiving elements increases or decreases due to the height difference between the light emitting element and the eyeball. It is possible to detect whether the eyeball has moved up or down.

このような視点検出の仕組みを利用して、まずは、センサ5内の2個の受光素子で読者の眼球からの反射光を受光し(ステップS1)、その受光量により、眼球の上下左右の移動を検出し、この検出結果から、読者の表示画面内の視点位置を検出する(ステップS2)。視点位置の検出は、より具体的には、表示装置3の表示画面内での座標位置を特定することにより行う。   Using such a viewpoint detection mechanism, first, reflected light from the reader's eyeball is received by the two light receiving elements in the sensor 5 (step S1), and the eyeball moves up, down, left, and right according to the amount of received light. And the viewpoint position in the reader's display screen is detected from the detection result (step S2). More specifically, the viewpoint position is detected by specifying a coordinate position in the display screen of the display device 3.

視点検出の手法が変われば、上述したステップS1,S2の処理内容も変わる可能性があるが、本実施形態では、公知の手法を用いて視点検出を行うことを前提としているため、他の手法による視点検出の処理手順の説明は割愛する。   If the viewpoint detection method changes, the processing contents of steps S1 and S2 described above may also change. However, in the present embodiment, it is assumed that viewpoint detection is performed using a known method. The description of the viewpoint detection processing procedure by means of is omitted.

センサ5を用いた視点位置の検出処理に並行して、電子書籍ビューアによる電子書籍表示処理と、表示形態変更システム1による表示形態変更処理とが行われる。この電子書籍表示処理と表示形態変更処理も、電子書籍ビューアが起動している最中、継続して行われる。電子書籍表示処理はメインコントローラ10が行う処理であるのに対し、表示形態変更処理は表示形態変更システム1が行う処理である。   In parallel with the viewpoint position detection process using the sensor 5, an electronic book display process by the electronic book viewer and a display form change process by the display form change system 1 are performed. The electronic book display process and the display form change process are also continuously performed while the electronic book viewer is activated. The electronic book display process is a process performed by the main controller 10, whereas the display form change process is a process performed by the display form change system 1.

電子書籍表示処理では、電子書籍記憶部9に記憶された電子書籍データと、電子書籍メタ情報記憶部13に記憶された電子書籍データの付属情報とを読み込んで(ステップS11)、これらの情報に基づいて、表示装置3に電子書籍を表示する(ステップS12)。   In the electronic book display process, the electronic book data stored in the electronic book storage unit 9 and the attached information of the electronic book data stored in the electronic book meta information storage unit 13 are read (step S11). Based on this, the electronic book is displayed on the display device 3 (step S12).

電子書籍データは、上述したように文字記号数字情報と画像情報とで構成されている。文字記号数字情報は、表示形態(フォントの種類、フォントサイズ、強調表示の有無など)を設定変更でき、画像情報の表示形態(サイズなど)も設定変更できる。これら文字記号数字情報や画像情報の表示形態の設定情報は、電子書籍メタ情報記憶部13に記憶されたメタ情報に記述されている。したがって、上述したステップS12では、電子書籍データ内の文字記号数字情報と画像情報の表示形態を、メタ情報に基づいて設定して表示装置3に表示する。   As described above, the electronic book data is composed of character / numeric information and image information. In the character / symbol / numeric information, the display form (font type, font size, presence / absence of highlighting, etc.) can be set and changed, and the display form (size etc.) of the image information can be changed. The setting information of the display form of the character symbol number information and the image information is described in the meta information stored in the electronic book meta information storage unit 13. Therefore, in step S12 described above, the display form of the character / numeric information and the image information in the electronic book data is set based on the meta information and displayed on the display device 3.

表示装置3に電子書籍データを表示している最中に、ステップS2により読者の視点が検出された場合、表示形態変更処理が起動する。表示形態変更処理では、まず、視点検出部11による視点の検出結果に基づいて、現在の視点に対応する表示画面内での座標位置を特定し、その座標位置に存在する文字記号数字情報または画像情報を特定する(ステップS13)。   When the reader's viewpoint is detected in step S2 while the electronic book data is being displayed on the display device 3, the display form changing process is activated. In the display form change processing, first, based on the detection result of the viewpoint by the viewpoint detection unit 11, the coordinate position in the display screen corresponding to the current viewpoint is specified, and the character / numeric information or image existing at the coordinate position is specified. Information is specified (step S13).

次に、停留検出部12により、視点が現在の位置に所定時間以上停留したか否かを判定する(ステップS14)。視点が現在の位置に所定時間以上停留せずに移動した場合は、ステップS13の処理に戻る。   Next, the stop detection unit 12 determines whether the viewpoint has stopped at the current position for a predetermined time or more (step S14). If the viewpoint has moved to the current position without stopping for a predetermined time or longer, the process returns to step S13.

視点が現在の位置に所定時間以上停留した場合は、その位置を現在の停留位置とみなす。   If the viewpoint stops at the current position for a predetermined time or longer, that position is regarded as the current stop position.

次に表示形態変更部15は停留検出部12および電子書籍メタ情報記憶部13からの信号に基づいて、視点が停留する一の行の行頭と次に行の行頭とが不一致か否か判定する。そして表示形態変更部15は視点が停留する一の行の行頭と次の行の行頭とが不一致の場合、仮想文字記号数字情報列作成部14において作成された仮想文字記号数字情報列32に基づいて、文字記号数字情報30の表示形態を変更する。   Next, the display form changing unit 15 determines whether or not the beginning of the first row where the viewpoint stops and the beginning of the next row are inconsistent based on the signals from the stop detection unit 12 and the electronic book meta information storage unit 13. . Then, the display form changing unit 15 is based on the virtual character / symbol / numerical information sequence 32 created in the virtual character / symbol / numerical information sequence creating unit 14 when the head of one line where the viewpoint is stopped does not match the beginning of the next line. Thus, the display form of the character symbol number information 30 is changed.

以下、仮想文字記号数字情報列作成部14および表示形態変更部15における動作を詳述する。   Hereinafter, operations in the virtual character / symbol / numerical information string creating unit 14 and the display form changing unit 15 will be described in detail.

まず仮想文字記号数字情報列作成部14では、電子書籍メタ情報記憶部13からの電子書籍データ中の文字記号数字情報30に基づいて、予め仮想文字記号数字情報列32を作成しておく。   First, the virtual character / symbol / numerical information creation unit 14 creates a virtual character / symbol / numerical information sequence 32 in advance based on the character / symbol / numeric information 30 in the electronic book data from the electronic book meta-information storage unit 13.

すなわち、電子書籍データ中の文字記号数字情報30は、一般に複数行に渡って配置されている(図3参照)。図3において、上段の文字記号数字情報30aと、中断の文字記号数字情報30bと、下段の文字記号数字情報30cとにより全体の文字記号数字情報30が構成され、上段の文字記号数字情報30aの行頭と、中段の文字記号数字情報30bの行頭と、下段の文字記号数字情報30cは一致していない。   That is, the character symbol number information 30 in the electronic book data is generally arranged over a plurality of lines (see FIG. 3). In FIG. 3, the upper character / numeric information 30a is composed of upper character / numeric information 30a, suspended character / numeric information 30b, and lower character / numeric information 30c. The beginning of the line, the beginning of the middle character / numeric information 30b, and the lower character / numeric information 30c do not match.

そこで仮想文字記号数字情報列作成部14において、各行の行頭が一致するような仮想文字記号数字情報列32を作成する(図4参照)。   Therefore, the virtual character / symbol / numeric information string creating unit 14 creates a virtual character / symbol / numeric information string 32 in which the heads of the respective lines coincide (see FIG. 4).

図4に示すように、仮想文字記号数字情報列32は、電子書籍データ中の文字記号数字情報30に比べると、すべての行の行頭が一致する。   As shown in FIG. 4, in the virtual character / symbol / numerical information string 32, the heads of all the lines coincide with each other as compared with the character / symbol / numeric information 30 in the electronic book data.

ここで図5(a)(b)により、文字列の流れについて説明する。   Here, the flow of the character string will be described with reference to FIGS.

図5(a)は電子書籍データ中の文字記号数字情報30の文字列の流れを示し、図5(b)は仮想文字記号数字情報列32の文字列の流れを示す。   5A shows the flow of the character string of the character / symbol / numeric information 30 in the electronic book data, and FIG. 5 (b) shows the flow of the character string of the virtual character / symbol / numeric information string 32.

図5(a)において、上段の文字記号数字情報30aの最後の行の行末から、次の行の行頭、すなわち中段の文字記号数字情報30bの最初の行の行頭までの視点移動ルートは、上段の文字記号数字情報30a内における一の行の行末から次の行の行頭までの視点移動ルートと異なり長くなっている。このように、ある行の行末から次の行の行頭までの視点移動ルートが長くなると、次の行の行頭を探す無駄なサッケードが発生してしまう。   In FIG. 5A, the viewpoint movement route from the end of the last line of the upper character / numeric information 30a to the beginning of the next line, that is, the first line of the middle character / numeric information 30b is the upper line. Unlike the viewpoint movement route from the end of one line to the beginning of the next line in the character symbol number information 30a. Thus, when the viewpoint movement route from the end of one line to the beginning of the next line becomes long, a useless saccade that searches for the beginning of the next line occurs.

これに対して図5(b)に示す仮想文字記号数字情報列32の文字列では、各行の行頭が一致しているため、各々の行の行末から次の行の行頭までの視点移動ルートは同一となる。このため各行において、行の行末から次の行の行頭を容易に探すことができ、無駄なサッケードを除くことができる。   On the other hand, in the character string of the virtual character / symbol / numeric information string 32 shown in FIG. 5B, since the heads of the respective lines match, the viewpoint movement route from the end of each line to the beginning of the next line is It will be the same. Therefore, in each line, the beginning of the next line can be easily searched from the end of the line, and useless saccades can be eliminated.

本発明においては、表示形態変更部15において上述した仮想文字記号数字情報列32を用いて、文字記号数字情報30の表示形態を変更する。   In the present invention, the display form changing unit 15 changes the display form of the character / symbol / numeric information 30 using the virtual character / symbol / numeric information string 32 described above.

具体的には、図6(a)(b)に示すように、表示形態変更部15は、文字記号数字情報30のうち、すべての上段、中段、下段の文字記号数字情報30a、30b、30cが仮想文字記号数字情報列32と同一位置、すなわち表示装置3の表示画面3Aの横方向中央にくるよう文字記号数字情報30の表示形態を変更する。   Specifically, as shown in FIGS. 6A and 6B, the display form changing unit 15 includes all upper, middle, and lower character / symbol information 30a, 30b, and 30c among the character / symbol / number information 30. Is changed to the same position as the virtual character / symbol / numerical information string 32, that is, in the horizontal center of the display screen 3 </ b> A of the display device 3.

例えば、表示形態変更部15は、図6(a)に示すように、上段の文字記号数字情報30aを読んでいるとき、上段の文字記号数字情報30aが表示画面3Aの横方向中央にくるよう文字記号数字情報30の表示形態を変更する。   For example, as shown in FIG. 6A, the display form changing unit 15 reads the upper character / symbol / numeric information 30a so that the upper character / numeric information 30a is at the center in the horizontal direction of the display screen 3A. The display form of the character symbol number information 30 is changed.

次に上段の文字記号数字情報30aの最終の行に視点が移動すると、表示形態変更部15は停留検出部12および電子書籍メタ情報記憶部13からの信号に基づいて上段の文字記号数字情報30aの最終の行の行頭と、次の中段の文字記号数字情報30bの最初の行の行頭とが不一致であると判定する。   Next, when the viewpoint moves to the last line of the upper character / symbol / numeric information 30a, the display form changing unit 15 determines the upper character / numeric information 30a based on the signals from the stop detection unit 12 and the electronic book meta information storage unit 13. Is determined to be inconsistent with the beginning of the first line of the next middle character / numeric information 30b.

ここで、行頭の一致および不一致の判定手法について述べる。   Here, a method for determining the coincidence and inconsistency of line heads will be described.

例えば文字列を表示画面3A上にレンダリングした結果、各文字とそれぞれの文字に対応する座標(x,y座標)が計算され、メインコントローラ10のメモリ上に記憶される。   For example, as a result of rendering a character string on the display screen 3 </ b> A, each character and coordinates (x, y coordinates) corresponding to each character are calculated and stored in the memory of the main controller 10.

そして各文字と、対応する座標とに基づいて、行頭の一致および不一致を判定する。   Then, based on each character and the corresponding coordinates, match or mismatch of the beginning of the line is determined.

具体的には、電子書籍のメタ情報からテキスト<p>あいうえおかきくけこさしすせそ</p>を流し込んで、レンダリングした結果の文字列の配置が、
あいうえおか
きくけこさし
−−−すせそ
であるとする。
Specifically, the text <p> the textbook <p> from the e-book's meta information </ p> is inserted, and the arrangement of the rendered strings is
Let's say that it is Suseso.

この場合、各文字は各々以下のように対応する座標をもつ。
あ(x,y)=(1,1)
い(x,y)=(2,1)
・・・
か(x,y)=(6,1)
き(x,y)=(1,2)
・・・
し(x,y)=(6,2)
す(x,y)=(4,3)
In this case, each character has a corresponding coordinate as follows.
Oh (x, y) = (1, 1)
(X, y) = (2,1)
...
(X, y) = (6,1)
(X, y) = (1,2)
...
(X, y) = (6, 2)
(X, y) = (4,3)

また停留検出部12で求められる視点の位置も座標上で特定される。   The position of the viewpoint obtained by the stop detection unit 12 is also specified on the coordinates.

例えば座標上で視点が「か」の位置まできたとき、「か」の行の行頭「あ」(1,1)と、次の行の行頭「き」(1,2)は座標上で行頭が一致する、と判定される。   For example, when the viewpoint comes to the position of “ka” on the coordinates, the beginning of the line “ka” (1, 1) and the beginning of the next line “ki” (1, 2) are the beginning of the line on the coordinates. Are determined to match.

次に座標上で視点が「し」の位置まできたとき、「し」行の行頭「き」(1,2)と、次の行の行頭「す」(4,3)は座標上で行頭が不一致と判定される。   Next, when the viewpoint reaches the position of “shi” on the coordinates, the beginning of the “shi” line “ki” (1, 2) and the beginning of the next line “su” (4, 3) are on the coordinates. Is determined to be inconsistent.

そして、上段の文字記号数字情報30aの最終の行の行頭と、中段の文字記号数字情報30bの最初の行の行頭とが不一致であると判定した場合、表示形態変更部15は文字記号数字情報30を全体として表示画面3A内で右側へ移動させて、中段の文字記号数字情報30bを仮想文字記号数字情報列32に合わせて表示画面3Aの横方向中央までもってくる(図6(b)参照)。ここで図6(a)(b)は表示形態変更部15による表示画面3A上におけるレンダリングを示す図である。   When it is determined that the beginning of the last line of the upper character / numeric information 30a and the first line of the middle character / numeric information 30b do not match, the display form changing unit 15 displays the character / numeric information. 30 is moved to the right in the display screen 3A as a whole, and the middle character / numeric information 30b is brought to the horizontal center of the display screen 3A in accordance with the virtual character / numeric information string 32 (see FIG. 6B). ). Here, FIGS. 6A and 6B are diagrams showing rendering on the display screen 3A by the display form changing unit 15. FIG.

この場合、表示形態変更部15は、停留検出部12が上段の文字記号数字情報30aの最終の行の行末に視点が停留したと判定したとき、文字記号数字情報30を全体として表示画面3A内で右側へ移動させることが好ましい。   In this case, when the stop detection unit 12 determines that the viewpoint has stopped at the end of the last line of the upper character / numeric information 30a, the display form changing unit 15 displays the character / numeric information 30 as a whole in the display screen 3A. It is preferable to move to the right.

上述のように表示形態変更部15による文字記号数字情報30の表示画面3A内での移動方向(横方向)は、文字記号数字情報の配置方向(横方向)に一致する。   As described above, the moving direction (horizontal direction) of the character / symbol / numeric information 30 in the display screen 3A by the display form changing unit 15 matches the arrangement direction (horizontal direction) of the character / symbol / numeric information.

以上のように本実施の形態によれば、視点が停留する行の行頭と、次の行の行頭とが不一致の場合、予め作成され各行の行頭が一致する仮想文字記号数字情報列に基づいて文字記号数字情報の表示形態を変更したので、常にある行の行末から次の行の行頭までの視点移動ルートを同一にすることができ、無駄なサッケードを除くことができる。   As described above, according to the present embodiment, when the head of the line where the viewpoint is stopped and the head of the next line do not match, based on the virtual character symbol number information sequence created in advance and the head of each line matches. Since the display form of the character / symbol / numeric information is changed, the viewpoint movement route from the end of one line to the beginning of the next line can be always made the same, and useless saccades can be eliminated.

なお、図7(a)(b)に示すように、表示形態変更部15は、停留検出部12からの信号に基づいて、表示画面3A内において最も上方にある行の行末に視点が停留したと判断したとき(図7(a)参照)、文字記号数字情報30を全体として一つ上方へ移動させて、次の行を最も上方の行まで移動させてもよい(図7(b)参照)。   As shown in FIGS. 7A and 7B, the display form changing unit 15 stops the viewpoint at the end of the uppermost line in the display screen 3A based on the signal from the stop detection unit 12. (See FIG. 7A), the character / numeric information 30 as a whole may be moved upward by one and the next line may be moved to the uppermost line (see FIG. 7B). ).

このように文字記号数字情報30を全体として一つ上方へ移動させることにより、表示画面3A内において視点を最上段で左右方向に移動するだけで容易に文字記号数字情報30を読み取ることができる。   In this way, by moving the character / symbol / numeral information 30 upward as a whole, the character / symbol / numerical information 30 can be easily read by simply moving the viewpoint in the left-right direction at the top in the display screen 3A.

なお、上述した実施形態で説明した表示形態変更システム1および電子書籍端末2の少なくとも一部は、ハードウェアで構成してもよいし、ソフトウェアで構成してもよい。ソフトウェアで構成する場合には、視点誘導装置1および電子書籍端末2の少なくとも一部の機能を実現するプログラムをフレキシブルディスクやCD−ROM等の記録媒体に収納し、コンピュータに読み込ませて実行させてもよい。記録媒体は、磁気ディスクや光ディスク等の着脱可能なものに限定されず、ハードディスク装置やメモリなどの固定型の記録媒体でもよい。   Note that at least a part of the display form changing system 1 and the electronic book terminal 2 described in the above-described embodiment may be configured by hardware or software. When configured by software, a program for realizing at least a part of the functions of the viewpoint guidance device 1 and the electronic book terminal 2 is stored in a recording medium such as a flexible disk or a CD-ROM, and is read and executed by a computer. Also good. The recording medium is not limited to a removable medium such as a magnetic disk or an optical disk, but may be a fixed recording medium such as a hard disk device or a memory.

また、表示形態変更システム1および電子書籍端末2の少なくとも一部の機能を実現するプログラムを、インターネット等の通信回線(無線通信も含む)を介して頒布してもよい。さらに、同プログラムを暗号化したり、変調をかけたり、圧縮した状態で、インターネット等の有線回線や無線回線を介して、あるいは記録媒体に収納して頒布してもよい。   Moreover, you may distribute the program which implement | achieves at least one part function of the display form change system 1 and the electronic book terminal 2 via communication lines (including wireless communication), such as the internet. Further, the program may be distributed in a state where the program is encrypted, modulated or compressed, and stored in a recording medium via a wired line such as the Internet or a wireless line.

本発明の態様は、上述した個々の実施形態に限定されるものではなく、当業者が想到しうる種々の変形も含むものであり、本発明の効果も上述した内容に限定されない。すなわち、特許請求の範囲に規定された内容およびその均等物から導き出される本発明の概念的な思想と趣旨を逸脱しない範囲で種々の追加、変更および部分的削除が可能である。   The aspect of the present invention is not limited to the individual embodiments described above, and includes various modifications that can be conceived by those skilled in the art, and the effects of the present invention are not limited to the contents described above. That is, various additions, modifications, and partial deletions can be made without departing from the concept and spirit of the present invention derived from the contents defined in the claims and equivalents thereof.

1 表示形態変更システム
2 電子書籍端末
3 表示装置
4 表示制御部
5 センサ
6 通信部
7 入力部
8 操作解析部
9 電子書籍記憶部
10 メインコントローラ
11 視点検出部
12 停留検出部
13 電子書籍メタ情報記憶部
14 仮想文字記号数字情報作成部
15 表示形態変更部
20 サーバ
30 文字記号数字情報
30a 上段の文字記号数字情報
30b 中段の文字記号数字情報
30c 下段の文字記号数字情報
32 仮想文字記号数字情報列
DESCRIPTION OF SYMBOLS 1 Display form change system 2 Electronic book terminal 3 Display apparatus 4 Display control part 5 Sensor 6 Communication part 7 Input part 8 Operation analysis part 9 Electronic book memory | storage part 10 Main controller 11 View point detection part 12 Stop detection part 13 Electronic book meta information storage Unit 14 virtual character symbol number information creation unit 15 display form change unit 20 server 30 character symbol number information 30a upper character symbol number information 30b middle character symbol number information 30c lower character symbol number information 32 virtual character symbol number information string

Claims (10)

電子書籍データを表示させる表示画面内における読者の視点を検出する視点検出部と、 前記視点が前記表示画面内の任意の場所に所定時間以上停留したことを検出する停留検出部と、
電子書籍データに含まれる複数行に渡って配置された文字記号数字情報に基づいて、各行の行頭が一致するような仮想文字記号数字情報列を作成する仮想文字記号数字情報列作成部と、
前記停留検出部からの信号に基づいて、視点が停留する一の行の行頭と、次の行の行頭とが不一致の場合に、前記仮想文字記号数字情報列作成部で作成された仮想文字記号数字情報列に基づいて、前記文字記号数字情報の表示形態を変更する表示形態変更部と、を備えることを特徴とする表示形態変更システム。
A viewpoint detection unit for detecting a reader's viewpoint in a display screen for displaying electronic book data; a stop detection unit for detecting that the viewpoint has stopped at an arbitrary place in the display screen for a predetermined time; and
A virtual character-symbol-number information string creating unit that creates a virtual character-symbol-number information string such that the beginning of each line matches, based on the character-symbol-number information arranged over a plurality of lines included in the electronic book data;
Based on the signal from the stop detection unit, the virtual character symbol created by the virtual character symbol / numerical information sequence creation unit when the head of the first row where the viewpoint stops and the head of the next row do not match A display form changing system comprising: a display form changing unit that changes a display form of the character / symbol / numeric information based on a numerical information string.
前記表示形態変更部は、文字記号数字情報を仮想文字記号数字情報列に合わせて各行の配置方向へ移動させることを特徴とする請求項1記載の表示形態変更システム。   The display form changing system according to claim 1, wherein the display form changing unit moves the character / symbol / numeric information in the arrangement direction of each row according to the virtual character / symbol / numeric information string. 前記表示形態変更部は文字記号数字情報を仮想文字記号数字情報列に合わせて横方向へ移動させることを特徴とする請求項2記載の表示形態変更システム。   3. The display form changing system according to claim 2, wherein the display form changing unit moves the character / symbol / numeric information in a horizontal direction in accordance with the virtual character / symbol / numeric information string. 前記表示形態変更部は前記停留検出部からの信号に基づいて、視点が一の行の行末にきたとき、仮想文字記号数字情報列に基づいて前記文字記号数字情報の表示形態を変更することを特徴とする請求項1記載の表示形態変更システム。   The display form changing unit changes the display form of the character / symbol / numeric information based on a virtual character / symbol / numerical information sequence when the viewpoint comes to the end of one line based on a signal from the stop detection unit. The display form changing system according to claim 1, wherein 前記表示形態変更部は前記停留検出部からの信号に基づいて、視点が一の行の行末にきたとき、次の行を当該一の行まで移動させることを特徴とする請求項1記載の表示形態変更システム。   The display according to claim 1, wherein when the viewpoint comes to the end of one line, the display form changing unit moves the next line to the one line based on a signal from the stop detection unit. Form change system. 表示装置と、
サーバとの間で無線通信を行うことが可能な通信部と、
読者が種々の情報を入力する入力部と、
電子書籍データを前記表示装置の表示画面に表示させる表示制御部と、
表示形態変更システムと、を備え、
前記表示形態変更システムは、
前記表示装置の表示画面内における読者の視点を検出する視点検出部と、
前記視点が前記表示画面内の任意の場所に所定時間以上停留したことを検出する停留検出部と、
電子書籍データに含まれる複数行に渡って配置された文字記号数字情報に基づいて、各行の行頭が一致するような仮想文字記号数字情報列を作成する仮想文字記号数字情報列作成部と、
前記停留検出部からの信号に基づいて、視点が停留する一の行の行頭と、次の行の行頭とが不一致の場合に、前記仮想文字記号数字情報列作成部で作成された仮想文字記号数字情報列に基づいて、前記文字記号数字情報の表示形態を変更する表示形態変更部と、を備えることを特徴とする電子書籍端末。
A display device;
A communication unit capable of wireless communication with the server;
An input section for the reader to input various information;
A display control unit for displaying electronic book data on the display screen of the display device;
A display form changing system,
The display form changing system includes:
A viewpoint detector for detecting the viewpoint of the reader in the display screen of the display device;
A stop detection unit that detects that the viewpoint has stopped at an arbitrary place in the display screen for a predetermined time or more;
A virtual character-symbol-number information string creating unit that creates a virtual character-symbol-number information string such that the beginning of each line matches, based on the character-symbol-number information arranged over a plurality of lines included in the electronic book data;
Based on the signal from the stop detection unit, the virtual character symbol created by the virtual character symbol / numerical information sequence creation unit when the head of the first row where the viewpoint stops and the head of the next row do not match An electronic book terminal comprising: a display form changing unit that changes a display form of the character / symbol / numeric information based on a numerical information string.
前記表示形態変更部は、文字記号数字情報を仮想文字記号数字情報列に合わせて各行の配置方向へ移動させることを特徴とする請求項6記載の電子書籍端末。   7. The electronic book terminal according to claim 6, wherein the display form changing unit moves the character / symbol / numeric information in the arrangement direction of each row in accordance with the virtual character / symbol / numeric information string. 前記表示形態変更部は文字記号数字情報を仮想文字記号数字情報列に合わせて横方向へ移動させることを特徴とする請求項7記載の電子書籍端末。   8. The electronic book terminal according to claim 7, wherein the display form changing unit moves the character / symbol / numeric information in the horizontal direction in accordance with the virtual character / symbol / numeric information string. 前記表示形態変更部は前記停留検出部からの信号に基づいて、視点が一の行の行末にきたとき、仮想文字記号数字情報列に基づいて前記文字記号数字情報の表示形態を変更することを特徴とする請求項6記載の電子書籍端末。   The display form changing unit changes the display form of the character / symbol / numeric information based on a virtual character / symbol / numerical information sequence when the viewpoint comes to the end of one line based on a signal from the stop detection unit. The electronic book terminal according to claim 6. 前記表示形態変更部は前記停留検出部からの信号に基づいて、視点が一の行の行末にきたとき、次の行を当該一の行まで移動させることを特徴とする請求項6記載の電子書籍端末。   7. The electronic apparatus according to claim 6, wherein the display form changing unit moves the next line to the one line when the viewpoint comes to the end of the line based on the signal from the stop detection unit. Book terminal.
JP2016168354A 2016-08-30 2016-08-30 Display format change system and electronic book terminal Pending JP2017027607A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2016168354A JP2017027607A (en) 2016-08-30 2016-08-30 Display format change system and electronic book terminal

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2016168354A JP2017027607A (en) 2016-08-30 2016-08-30 Display format change system and electronic book terminal

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2012103140A Division JP2013232072A (en) 2012-04-27 2012-04-27 Display configuration change system and electronic book terminal

Publications (1)

Publication Number Publication Date
JP2017027607A true JP2017027607A (en) 2017-02-02

Family

ID=57950551

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2016168354A Pending JP2017027607A (en) 2016-08-30 2016-08-30 Display format change system and electronic book terminal

Country Status (1)

Country Link
JP (1) JP2017027607A (en)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0822385A (en) * 1994-02-22 1996-01-23 Nippon Hoso Kyokai <Nhk> Method and device for displaying line of sight correspondence
JPH09297651A (en) * 1996-05-07 1997-11-18 Canon Inc Personal computer and facsimile equipment
JP2006107048A (en) * 2004-10-04 2006-04-20 Matsushita Electric Ind Co Ltd Controller and control method associated with line-of-sight
JP2009301206A (en) * 2008-06-11 2009-12-24 Fuji Xerox Co Ltd Information display device and program
JP2014077814A (en) * 2011-02-14 2014-05-01 Panasonic Corp Display control device and display control method

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0822385A (en) * 1994-02-22 1996-01-23 Nippon Hoso Kyokai <Nhk> Method and device for displaying line of sight correspondence
JPH09297651A (en) * 1996-05-07 1997-11-18 Canon Inc Personal computer and facsimile equipment
JP2006107048A (en) * 2004-10-04 2006-04-20 Matsushita Electric Ind Co Ltd Controller and control method associated with line-of-sight
JP2009301206A (en) * 2008-06-11 2009-12-24 Fuji Xerox Co Ltd Information display device and program
JP2014077814A (en) * 2011-02-14 2014-05-01 Panasonic Corp Display control device and display control method

Similar Documents

Publication Publication Date Title
US11727695B2 (en) Language element vision augmentation methods and devices
US9229231B2 (en) Updating printed content with personalized virtual data
US9183807B2 (en) Displaying virtual data as printed content
US11182940B2 (en) Information processing device, information processing method, and program
JP6553418B2 (en) Display control method, display control device and control program
JP2006107048A (en) Controller and control method associated with line-of-sight
US11768909B2 (en) Systems and methods for providing accessible search results
US10769200B1 (en) Result re-ranking for object recognition
US11397320B2 (en) Information processing apparatus, information processing system, and non-transitory computer readable medium
JP2016066115A (en) Digital content browsing support device, browsing support method, and program
JP5924580B2 (en) Viewpoint guidance device and electronic book terminal
JP5924579B2 (en) Viewpoint guidance device and electronic book terminal
JP5994370B2 (en) Character size changing device and electronic book terminal
JP4951266B2 (en) Display device, related information display method and program
JP2017027607A (en) Display format change system and electronic book terminal
JP2013232072A (en) Display configuration change system and electronic book terminal
JP7259828B2 (en) Display device, display method, program
US20220222025A1 (en) Information processing device, program, and information providing system
CN112825135A (en) Display device, display method, and medium
JP6770613B2 (en) Control program
KR20110134254A (en) Training device and method of point of view and recognition
KR20120051275A (en) Training device of point of view and recognition
KR20230102646A (en) Method, device and system for servicing digital comics
KR20230069614A (en) Device for providing digital comic and control method thereof
WO2022238936A2 (en) Systems and methods for making websites accessible

Legal Events

Date Code Title Description
A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20170531

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20170606

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20170802

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20171004

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20180202