JP2019164843A - Control program - Google Patents

Control program Download PDF

Info

Publication number
JP2019164843A
JP2019164843A JP2019124923A JP2019124923A JP2019164843A JP 2019164843 A JP2019164843 A JP 2019164843A JP 2019124923 A JP2019124923 A JP 2019124923A JP 2019124923 A JP2019124923 A JP 2019124923A JP 2019164843 A JP2019164843 A JP 2019164843A
Authority
JP
Japan
Prior art keywords
display
information
user
display element
display control
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2019124923A
Other languages
Japanese (ja)
Other versions
JP6770613B2 (en
Inventor
真悠 横矢
Mayu Yokoya
真悠 横矢
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Intellectual Property Corp of America
Original Assignee
Panasonic Intellectual Property Corp of America
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Panasonic Intellectual Property Corp of America filed Critical Panasonic Intellectual Property Corp of America
Priority to JP2019124923A priority Critical patent/JP6770613B2/en
Publication of JP2019164843A publication Critical patent/JP2019164843A/en
Application granted granted Critical
Publication of JP6770613B2 publication Critical patent/JP6770613B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • User Interface Of Digital Computer (AREA)

Abstract

To provide a control program capable of reducing overlook of information to which one should pay attention.SOLUTION: A control program causes a computer to execute display control processing for displaying one or more display elements on a display surface, based on data indicating one or more pieces of information, detecting a position of an eye point on the display surface and acquiring the same as sight line information related to a sight line of the user, then identifying the display element satisfying a prescribed requirement as a highlight candidate and satisfying a prescribed positional relationship with the sight line of the user indicated by the sight line information, out of the display elements to be displayed, determining a positional range on the basis of information indicating a layout of the display elements and detection result of the position of the point, displaying the display element in the determined position range so as to be enhanced in a first display mode, out of the identified display elements, and displaying the display elements other than the above-mentioned display element in a second display mode different from the first display mode.SELECTED DRAWING: Figure 4

Description

本発明は、文書等のデータについての表示技術に関する。   The present invention relates to a display technique for data such as documents.

従来、コンピュータは、表示されるための情報を示す文書等のデータに基づいて、ディスプレイ等に、情報を表す表示要素の集合である画像等を表示するよう表示制御を行う。この制御は、例えば、アプリケーションプログラム、ウェブブラウザその他のプログラムにより実行される。ところで、ディスプレイ等に多くの表示要素(情報)が表されると、ユーザにとって読み辛くなり得る。読み易くするために、ユーザの視線情報により、ウェブページを閲覧しているユーザに注目されている領域(ウェブページの領域)に含まれる文字を拡大する技術(ドキュメント表示態様変換装置)が知られている(特許文献1参照)。   2. Description of the Related Art Conventionally, a computer performs display control based on data such as a document indicating information to be displayed so that an image or the like, which is a set of display elements representing information, is displayed on a display or the like. This control is executed by, for example, an application program, a web browser, or other programs. By the way, if many display elements (information) are displayed on a display or the like, it may be difficult for the user to read. In order to make it easy to read, a technique (document display mode conversion device) for enlarging characters included in an area (web page area) attracting attention by a user browsing a web page is known based on the user's line-of-sight information. (See Patent Document 1).

特開2002−169637号公報JP 2002-169637 A

特許文献1の技術では、ユーザが注目すれば文字等の情報が一律に強調(文字の拡大等)されるに過ぎない。このため、例えばユーザが重要な情報を表す表示要素に注目しなければ、ユーザは、重要な情報の表示要素を見落としてしまい、重要な情報を認識できない。   With the technique of Patent Literature 1, if a user pays attention, information such as characters is only emphasized uniformly (enlargement of characters, etc.). For this reason, for example, if a user does not pay attention to the display element showing important information, the user overlooks the display element of important information and cannot recognize important information.

そこで、本発明は、注目すべき情報についての見落としを低減させ得る表示制御方法を用いる表示制御装置で用いられる制御プログラムを提供する。   Therefore, the present invention provides a control program used in a display control apparatus that uses a display control method that can reduce oversight of noticeable information.

上記課題を解決するために本発明の一態様に係る制御プログラムは、コンピュータに、1以上の情報を示すデータに基づいて、前記1以上の情報のうちの少なくとも1以上の情報を表す1以上の表示要素を表示面に表示するよう制御する表示制御処理を実行させるための制御プログラムであって、前記表示制御処理は、前記表示面におけるユーザの視点の位置を検出し、検出した当該視点の位置を前記ユーザの視線に関する視線情報として取得し、前記データに基づいて表示される表示要素のうち、前記視線情報が示す前記ユーザの視線と所定の位置関係を満たし、かつ、強調候補としての所定要件を満たす表示要素を特定し、特定した表示要素を強調して表示するように表示制御を行い、前記表示制御として、前記視点の位置の検出結果及び前記データが示す情報を表す1以上の表示要素のレイアウトを示すレイアウト情報に基づいて位置範囲を決定し、前記データに基づいて前記表示面に表示されて前記所定要件を満たす表示要素のうち決定された当該位置範囲内の表示要素を特定し、特定した当該表示要素を強調するように、当該表示要素を第1表示態様にして前記表示面に表示し、当該表示要素以外の1以上の表示要素を前記第1表示態様と異なる第2表示態様にして前記表示面に表示する。   In order to solve the above problems, a control program according to an aspect of the present invention provides a computer with one or more information representing at least one of the one or more pieces of information based on data indicating one or more pieces of information. A control program for executing display control processing for controlling display elements to be displayed on a display surface, wherein the display control processing detects a position of a user's viewpoint on the display surface, and detects the position of the detected viewpoint Among the display elements displayed based on the data, satisfying a predetermined positional relationship with the user's line of sight indicated by the line-of-sight information, and a predetermined requirement as an enhancement candidate The display control is performed so that the specified display element is specified, and the specified display element is highlighted and displayed. A position range is determined based on layout information indicating a layout of one or more display elements representing information indicated by the data, and is determined among display elements that are displayed on the display surface and satisfy the predetermined requirement based on the data. One or more display elements other than the display element are displayed on the display surface in the first display mode so that the display element within the position range is specified and the specified display element is emphasized. Is displayed on the display surface in a second display mode different from the first display mode.

本発明によれば、ユーザが注目すべき情報について見落とすことが低減され得る。   According to the present invention, oversight of information that a user should pay attention to can be reduced.

実施の形態1に係る表示制御システムの全体構成を示す図である。1 is a diagram illustrating an overall configuration of a display control system according to Embodiment 1. FIG. カメラの配置の一例を示す図である。It is a figure which shows an example of arrangement | positioning of a camera. 実施の形態1に係る表示制御装置の機能ブロック図である。3 is a functional block diagram of the display control apparatus according to Embodiment 1. FIG. 実施の形態1に係る表示制御処理の一例を示すフローチャートである。3 is a flowchart illustrating an example of display control processing according to Embodiment 1. 実施の形態1に係る強調候補判別処理の一例を示すフローチャートである。6 is a flowchart illustrating an example of enhancement candidate determination processing according to Embodiment 1; 実施の形態1に係る強調処理の一例を示すフローチャートである。6 is a flowchart illustrating an example of enhancement processing according to the first embodiment. 表示制御装置が受信して表示するためのデータの一例を示す図である。It is a figure which shows an example of the data for a display control apparatus to receive and display. 実施の形態1に係る表示制御装置により表示された画面(表示面)の変化の一例を示す図である。6 is a diagram illustrating an example of a change in a screen (display surface) displayed by the display control apparatus according to Embodiment 1. FIG. 実施の形態2に係る表示制御装置で用いられる強調候補識別用情報の一例を示す図である。It is a figure which shows an example of the emphasis candidate identification information used with the display control apparatus which concerns on Embodiment 2. FIG. 実施の形態2に係る強調候補判別処理の一例を示すフローチャートである。10 is a flowchart illustrating an example of enhancement candidate determination processing according to Embodiment 2. 実施の形態2に係る表示制御装置により表示された画面(表示面)の変化の一例を示す図である。10 is a diagram illustrating an example of a change in a screen (display surface) displayed by the display control apparatus according to Embodiment 2. FIG. 実施の形態3に係る表示制御装置の機能ブロック図である。10 is a functional block diagram of a display control apparatus according to Embodiment 3. FIG. 実施の形態3に係る表示制御装置で用いられる属性情報の一例を示す図である。FIG. 10 is a diagram showing an example of attribute information used in a display control apparatus according to Embodiment 3. 実施の形態3に係る表示制御装置で用いられる範囲決定用テーブルの一例を示す図である。FIG. 10 is a diagram illustrating an example of a range determination table used in a display control apparatus according to Embodiment 3. 実施の形態3に係る表示制御処理の一例を示すフローチャートである。10 is a flowchart illustrating an example of display control processing according to Embodiment 3.

本発明の一態様に係る制御プログラムは、コンピュータに、1以上の情報を示すデータに基づいて、前記1以上の情報のうちの少なくとも1以上の情報を表す1以上の表示要素を表示面に表示するよう制御する表示制御処理を実行させるための制御プログラムであって、前記表示制御処理は、前記表示面におけるユーザの視点の位置を検出し、検出した当該視点の位置を前記ユーザの視線に関する視線情報として取得し、前記データに基づいて表示される表示要素のうち、前記視線情報が示す前記ユーザの視線と所定の位置関係を満たし、かつ、強調候補としての所定要件を満たす表示要素を特定し、特定した表示要素を強調して表示するように表示制御を行い、前記表示制御として、前記視点の位置の検出結果及び前記データが示す情報を表す1以上の表示要素のレイアウトを示すレイアウト情報に基づいて位置範囲を決定し、前記データに基づいて前記表示面に表示されて前記所定要件を満たす表示要素のうち決定された当該位置範囲内の表示要素を特定し、特定した当該表示要素を強調するように、当該表示要素を第1表示態様にして前記表示面に表示し、当該表示要素以外の1以上の表示要素を前記第1表示態様と異なる第2表示態様にして前記表示面に表示する。この制御プログラムをコンピュータにインストールすれば、コンピュータが、ユーザにとって注目すべき情報についての見落としを低減させる表示制御装置として機能するようになる。例えば、適切に強調候補としての所定要件として定めておくことで、特定の注目すべき表示内容(表示要素が表す情報)を目立たせてユーザが認識し易くすることができる。また、ディスプレイの画面等といった表示面におけるユーザの視点との位置関係次第で、注目すべき表示要素(例えば重要情報を表す表示要素)を目立つように表示させ得るため、効果的にユーザの見落としを低減させ得る。また、ユーザの視点に関係した一定範囲の領域(位置範囲)内に存在する注目すべき情報(例えば重要情報)をユーザに認識させ易くすることができる。なお、全ての表示要素が強調されるのではなく、強調候補としての所定要件及びユーザの視点の位置により強調される表示要素が限定されるため、表示制御システムにおいて表示要素群を初期表示する際に要する処理負荷(強調のための処理負荷)が比較的軽減され得る。また、文書データの場合における文字列の間隔等のレイアウトに応じて、例えば文字列の隙間が多い程、位置範囲を大きく決定し得る。   A control program according to an aspect of the present invention displays, on a display surface, one or more display elements representing at least one or more pieces of information of the one or more information based on data indicating one or more pieces of information on a computer. A control program for executing a display control process for controlling the display, wherein the display control process detects a position of a user's viewpoint on the display surface, and the detected position of the viewpoint is a line of sight regarding the line of sight of the user. Among display elements acquired as information and displayed based on the data, a display element that satisfies a predetermined positional relationship with the user's line of sight indicated by the line-of-sight information and satisfies a predetermined requirement as an enhancement candidate is specified. The display control is performed so that the specified display element is highlighted, and as the display control, the detection result of the viewpoint position and the information indicated by the data are displayed. A position range is determined based on layout information indicating a layout of one or more display elements, and a display area that is displayed on the display surface based on the data and satisfies the predetermined requirement is within the determined position range. A display element is specified, the display element is displayed on the display surface in a first display mode so as to emphasize the specified display element, and one or more display elements other than the display element are displayed in the first display mode. A second display mode different from the above is displayed on the display surface. If this control program is installed in the computer, the computer functions as a display control device that reduces oversight of information that should be noted by the user. For example, by appropriately defining the predetermined requirement as an emphasis candidate, it is possible to make the display content (information represented by the display element) of particular attention conspicuous so that the user can easily recognize it. In addition, depending on the positional relationship with the user's viewpoint on the display surface such as a display screen, it is possible to display noticeable display elements (for example, display elements representing important information) prominently, effectively overlooking the user. Can be reduced. In addition, it is possible to make it easier for the user to recognize noticeable information (for example, important information) that exists within a certain range (position range) related to the user's viewpoint. Note that not all display elements are emphasized, but the display elements to be emphasized are limited depending on the predetermined requirement as an enhancement candidate and the position of the user's viewpoint. The processing load required for processing (processing load for emphasis) can be relatively reduced. In addition, according to the layout such as the character string interval in the case of document data, for example, the position range can be determined to be larger as the character string gap increases.

なお、この全般的又は具体的な態様は、システム、方法、集積回路又はコンピュータで読み取り可能なCD−ROM等の記録媒体で実現されてもよく、システム、方法、集積回路、コンピュータプログラム又は記録媒体の任意な組み合わせで実現されてもよい。   This general or specific aspect may be realized by a system, a method, an integrated circuit, or a computer-readable recording medium such as a CD-ROM. The system, method, integrated circuit, computer program, or recording medium It may be realized by any combination of the above.

以下、実施の形態に係る表示制御装置を含む表示制御システムについて、図面を参照しながら説明する。ここで示す実施の形態は、いずれも本発明の一具体例を示すものである。従って、以下の実施の形態で示される数値、構成要素、構成要素の配置及び接続形態、並びに、ステップ(工程)及びステップの順序等は、一例であって本発明を限定するものではない。以下の実施の形態における構成要素のうち、独立請求項に記載されていない構成要素については、任意に付加可能な構成要素である。また、各図は、模式図であり、必ずしも厳密に図示されたものではない。   Hereinafter, a display control system including a display control apparatus according to an embodiment will be described with reference to the drawings. Each of the embodiments shown here shows a specific example of the present invention. Therefore, numerical values, components, arrangement and connection forms of components, and steps (processes) and order of steps shown in the following embodiments are merely examples, and do not limit the present invention. Among the constituent elements in the following embodiments, constituent elements that are not described in the independent claims can be arbitrarily added. Each figure is a mimetic diagram and is not necessarily illustrated strictly.

(実施の形態1)
以下、本発明の実施の一態様として、表示制御方法を実現する表示制御システムについて図面を用いて説明する。
(Embodiment 1)
Hereinafter, as an embodiment of the present invention, a display control system for realizing a display control method will be described with reference to the drawings.

(構成)
図1は、実施の形態1に係る表示制御システム10の全体構成を示す図である。
(Constitution)
FIG. 1 is a diagram illustrating an overall configuration of a display control system 10 according to the first embodiment.

表示制御システム10は、情報を示すデータに基づいて情報を表す表示要素を表示し、ユーザが注目すべき情報を表す表示要素を強調するように表示の制御を行う表示制御方法を実現するためのシステムである。図1に示すように表示制御システム10は、ネットワーク11を介して相互に通信可能な表示制御装置100及びサーバ装置200を備える。ネットワーク11は例えばインターネット等の広域通信網を含み得るが、ローカルネットワーク(LAN)等であってもよい。   The display control system 10 displays a display element representing information based on data representing information, and realizes a display control method for controlling display so as to emphasize a display element representing information that a user should pay attention to. System. As shown in FIG. 1, the display control system 10 includes a display control device 100 and a server device 200 that can communicate with each other via a network 11. The network 11 may include a wide area communication network such as the Internet, but may be a local network (LAN) or the like.

表示制御装置100は、例えばパーソナルコンピュータ、タブレット、スマートフォンその他のコンピュータ(情報処理装置)である。表示制御装置10は、ハードウェア構成として図1に示すように、プロセッサ(マイクロプロセッサ)101、メモリ102、通信インタフェース(I/F)103、ディスプレイ104、カメラ105及び入力装置106を備える。   The display control device 100 is, for example, a personal computer, tablet, smartphone, or other computer (information processing device). As shown in FIG. 1, the display control apparatus 10 includes a processor (microprocessor) 101, a memory 102, a communication interface (I / F) 103, a display 104, a camera 105, and an input device 106.

メモリ102は、プログラム及びデータを予め保持しているROM、プログラムの実行に際してデータ等の記憶に利用するためのRAM等であり、例えば不揮発性メモリを含んでいてもよい。プロセッサ101は、メモリ102に格納された制御プログラム等を実行することにより例えば通信I/F103、ディスプレイ104、カメラ105等の各部を制御して各種処理を行う。通信I/F103は、無線又は有線で、ネットワーク11を介してサーバ装置200と通信するための通信回路である。ディスプレイ104は、例えば液晶ディスプレイ等、表示要素を画面(表示面)に表示する装置である。表示要素は、何らかの情報を表す図形、文字、写真、図表その他の画像データ等の所謂表示オブジェクトである。カメラ105は、ディスプレイ104を見る人(ユーザ)の視線を検出するために撮影を行うセンサである。図2にディスプレイ104とカメラ105との配置の一例を示す。カメラ105は、ディスプレイ104の画面(表示面)に向かう人を撮影可能に配置される。カメラ105は、例えば赤外線LED(Light Emitting Diode)を含み、赤外光をユーザに照射して、ユーザの目の角膜で反射した反射光の位置とユーザの瞳孔の位置とを含む画像を赤外線イメージセンサで撮影する。表示制御装置100は、視線検知機構を備え、この視線検知機構が、カメラ105での撮影結果から、例えば角膜の反射光の位置と瞳孔の位置とからユーザの視線を検知し、検知結果として視線を表す視線情報を生成する。入力装置106は、キーボード、ポインティングデバイス、タッチパネル等のユーザの操作を受け付ける装置である。表示制御装置100は、メモリ102の他にデータの記憶に利用するためにハードディスク装置等の補助記憶装置を備えてもよい。   The memory 102 is a ROM that stores a program and data in advance, a RAM that is used to store data when the program is executed, and may include, for example, a nonvolatile memory. The processor 101 executes various processes by controlling each unit such as the communication I / F 103, the display 104, and the camera 105 by executing a control program stored in the memory 102, for example. The communication I / F 103 is a communication circuit for communicating with the server apparatus 200 via the network 11 in a wireless or wired manner. The display 104 is a device that displays display elements on a screen (display surface) such as a liquid crystal display. The display element is a so-called display object such as a figure, a character, a photograph, a chart, or other image data representing some information. The camera 105 is a sensor that performs photographing to detect the line of sight of a person (user) who looks at the display 104. FIG. 2 shows an example of the arrangement of the display 104 and the camera 105. The camera 105 is arranged so as to be able to photograph a person heading to the screen (display surface) of the display 104. The camera 105 includes, for example, an infrared LED (Light Emitting Diode), irradiates the user with infrared light, and displays an image including the position of reflected light reflected by the cornea of the user's eyes and the position of the user's pupil as an infrared image. Take a picture with the sensor. The display control apparatus 100 includes a line-of-sight detection mechanism. The line-of-sight detection mechanism detects a user's line of sight based on, for example, the position of reflected light from the cornea and the position of the pupil, based on the result of photographing by the camera 105, The line-of-sight information representing is generated. The input device 106 is a device that accepts user operations such as a keyboard, a pointing device, and a touch panel. In addition to the memory 102, the display control device 100 may include an auxiliary storage device such as a hard disk device for use in data storage.

表示制御装置100は、例えば、プロセッサ101により、オペレーティングシステム及びアプリケーションプログラムを実行することで、文書の表示及び編集の機能、ウェブブラウザとしての機能等といった各種機能を実行する。そして、アプリケーションプログラム等が、文書の表示等の機能を実行するに際して、情報を示すデータ(文書等)を、予め定められた所定規則(データフォーマット種別、文字コード表、ウェブページ記述言語の仕様等)に基づいて解釈することで、画面(表示面)に表示されるべき表示要素を特定し得る。   For example, the display control apparatus 100 executes various functions such as a document display and editing function, a web browser function, and the like by executing an operating system and an application program by the processor 101. When the application program or the like executes a function such as displaying a document, data indicating the information (document or the like) is converted into predetermined rules (data format type, character code table, web page description language specification, etc.) ), The display element to be displayed on the screen (display surface) can be specified.

サーバ装置200は、表示制御装置100と連携して処理を行い得るコンピュータであり、例えば、プロセッサ、メモリ、通信I/F等を備える。サーバ装置200は、例えば、メールサーバ機能或いはウェブサーバ機能を備える。サーバ装置200は、ウェブサーバ機能を備える場合に、ウェブページを管理し、ブラウザとしての機能を有する表示制御装置100からの要求に応じてウェブページに係るデータを送信する。サーバ装置200は更に、各ウェブページについて各ブラウザからのアクセス回数(データの要求回数)を管理し、表示制御装置100からの要求に応じてそのアクセス回数を表示制御装置100に送信する機能を有する。   The server device 200 is a computer that can perform processing in cooperation with the display control device 100, and includes, for example, a processor, a memory, a communication I / F, and the like. The server device 200 has, for example, a mail server function or a web server function. When the server device 200 has a web server function, the server device 200 manages the web page, and transmits data related to the web page in response to a request from the display control device 100 having a browser function. The server device 200 further has a function of managing the number of accesses from each browser (the number of data requests) for each web page and transmitting the number of accesses to the display control device 100 in response to a request from the display control device 100. .

以下、図3を用いて表示制御装置100の機能構成要素について説明する。図3は、表示制御装置100の機能ブロック図である。   Hereinafter, functional components of the display control apparatus 100 will be described with reference to FIG. FIG. 3 is a functional block diagram of the display control apparatus 100.

表示制御装置100は、機能面における構成要素として図3に示すように、記憶部110、表示制御部120、視線情報取得部130、強調対象特定部140及び通信部150を備える。   As shown in FIG. 3, the display control device 100 includes a storage unit 110, a display control unit 120, a line-of-sight information acquisition unit 130, an emphasis target specifying unit 140, and a communication unit 150 as functional components.

記憶部110は、メモリ102の一領域等で実現され、1以上の情報を表示するために用いられるデータを記憶する機能を有し、例えば通信部150がサーバ装置200から取得したデータ等を記憶する。データで示される情報は、何らかの意味、概念等を表すものであり、表示制御装置100によりそのデータに基づいてその情報を表す表示要素が表示面に表示されることで、ユーザの視覚により把握される。1以上の情報を示すデータには、例えば、ウェブページに関してHTML(HyperText Markup Language)で記述された
HTML文書、文字列等の表示及び編集のためのワードプロセッサ等の特定アプリケーションプログラム用の文書ファイル、メール、地図データ、デジタル書籍等、様々なものがある。本実施の形態においては情報を示すデータの一例として、主にHTML文書を取り上げて説明する。
The storage unit 110 is implemented in one area of the memory 102 and has a function of storing data used to display one or more pieces of information. For example, the storage unit 110 stores data acquired from the server device 200 by the communication unit 150 To do. The information indicated by the data represents some meaning, concept, etc., and the display element representing the information is displayed on the display surface based on the data by the display control device 100, so that it is grasped by the user's vision. The The data indicating one or more information includes, for example, an HTML document described in HTML (HyperText Markup Language) for a web page, a document file for a specific application program such as a word processor for displaying and editing character strings, and mail. There are various things such as map data and digital books. In the present embodiment, an HTML document will be mainly described as an example of data indicating information.

表示制御部120は、記憶部110に記憶されたデータに基づいて画面に表示要素を表示するよう制御し、強調対象特定部140により特定された表示要素を強調して表示するように表示制御を行う機能を有する。表示制御部120は、制御プログラムを実行するプロセッサ101、ディスプレイ104等により実現される。   The display control unit 120 controls the display elements to be displayed on the screen based on the data stored in the storage unit 110, and performs display control so that the display elements specified by the highlight target specifying unit 140 are highlighted. Has the function to perform. The display control unit 120 is realized by the processor 101 that executes the control program, the display 104, and the like.

表示制御部120による表示制御は、表示面(ディスプレイ104の画面)へ表示要素を特定の表示態様で表示する制御である。例えば、強調しないで表示した場合よりも強調して表示した場合の方が表示要素は、目立つ。1つ以上の文字からなる文字列である表示要素については例えば次のようになる。即ち、表示制御部120は、強調対象特定部140により特定された表示要素(つまり強調対象の表示要素)を強調するように、その表示要素を、予め定められた通常サイズの文字フォントより、相対的に大きなサイズの文字フォント等といった目立つ第1表示態様で表示し、更に、強調対象特定部140により特定されなかった表示要素(例えば強調対象の周囲の表示要素等)を、第1表示態様より目立たない通常サイズの文字フォント等といった第2表示態様で表示する。この場合に、第1表示態様として、例えば高解像度で表示するのであれば、第2表示態様としては低解像度で表示することとしてもよい。強調対象は、強調候補の表示要素(つまり注目されるべき表示要素)のうち、ユーザの視線と所定の位置関係を満たす表示要素である。   The display control by the display control unit 120 is control for displaying a display element in a specific display mode on the display surface (screen of the display 104). For example, the display element is more conspicuous when displayed with emphasis than when displayed without emphasis. For example, a display element that is a character string composed of one or more characters is as follows. That is, the display control unit 120 sets the display element relative to a predetermined normal size character font so as to emphasize the display element specified by the emphasis target specifying unit 140 (that is, the display element to be emphasized). In addition, display elements that are displayed in a conspicuous first display mode such as a character font with a large size and that are not specified by the highlight target specifying unit 140 (for example, display elements around the highlight target) are displayed in the first display mode. The display is performed in the second display mode such as an inconspicuous normal size character font. In this case, as the first display mode, for example, if the display is performed with high resolution, the second display mode may be displayed with low resolution. The emphasis target is a display element that satisfies a predetermined positional relationship with the user's line of sight among display elements that are candidates for emphasis (that is, display elements to be noted).

視線情報取得部130は、カメラ105での撮影結果からユーザの視線を検知してユーザの視線に関する視線情報を生成する表示制御装置100内の視線検知機構から、その視線情報を取得する機能を有する。視線情報は、例えば、表示面(ディスプレイ104の画面)とユーザの眼の位置関係及びユーザの視線の方向を示し、或いは、表示面におけるユーザの視点を示す。視線情報取得部130は、ユーザの視線に関する視線情報に基づいて表示面におけるユーザの視点の位置を検出する。即ち、視線情報取得部130は、例えば視線検知機構が表示面上の視点を算定して視線情報に含めていれば、その視点を得る。また、例えば視線検知機構が生成する視線情報が、表示面とユーザの眼の位置関係及びユーザの視線の方向を示すものであれば、視線情報に基づいて計算により視点を得る。視線情報取得部130は、制御プログラムを実行するプロセッサ101等により実現される。   The line-of-sight information acquisition unit 130 has a function of acquiring the line-of-sight information from the line-of-sight detection mechanism in the display control apparatus 100 that detects the line of sight of the user from the photographing result of the camera 105 and generates the line-of-sight information related to the user's line of sight. . The line-of-sight information indicates, for example, the positional relationship between the display surface (screen of the display 104) and the user's eyes and the direction of the user's line of sight, or the user's viewpoint on the display surface. The line-of-sight information acquisition unit 130 detects the position of the user's viewpoint on the display surface based on the line-of-sight information regarding the user's line of sight. That is, the line-of-sight information acquisition unit 130 obtains the viewpoint if the line-of-sight detection mechanism calculates the viewpoint on the display surface and includes the viewpoint in the line-of-sight information, for example. For example, if the line-of-sight information generated by the line-of-sight detection mechanism indicates the positional relationship between the display surface and the user's eyes and the direction of the user's line of sight, the viewpoint is obtained by calculation based on the line-of-sight information. The line-of-sight information acquisition unit 130 is realized by the processor 101 or the like that executes a control program.

強調対象特定部140は、ユーザが注目すべき情報を表す、強調すべき表示要素を特定する機能を有する。即ち、強調対象特定部140は、視線情報取得部130により取得された視線情報等を参照することで、表示制御部120がデータに基づいて表示する表示要素のうち、ユーザの視線と所定の位置関係を満たす表示要素であり、かつ、強調候補としての所定要件を満たす表示要素を特定する機能を有する。この特定される表示要素は、表示制御部120によって既に表示されているものに限らず、ユーザの操作等に応じて表示制御部120によりこれから表示されようとするものであってもよい。強調候補でない表示要素は強調表示の対象にはならない。強調候補としての所定要件は、ユーザの視線との位置関係とは拘わりのない要件であり、例えば重要情報を表す表示要素を規定する要件である。例えば、通信部150がサーバ装置200から取得したHTML文書等のデータに基づくウェブページの表示においては、HTML文書等の作成者等が、ある表示要素が強調候補であるか否かについて識別する情報(強調候補のタグ等)をデータ中に含めていてもよい。この場合に、強調候補のタグにより強調候補と定められた表示要素が、強調候補としての所定要件を満たす表示要素となる。ユーザの視線と所定の位置関係を満たす表示要素は、例えば、表示面におけるユーザの視点の位置の検出結果との位置関係が所定の位置関係(例えば視点を含む一定サイズの矩形領域内、視点を中心とした一定半径の円内等)である表示要素である。   The emphasis target specifying unit 140 has a function of specifying a display element to be emphasized that represents information to be noted by the user. That is, the emphasis target specifying unit 140 refers to the line-of-sight information acquired by the line-of-sight information acquisition unit 130, and among the display elements that the display control unit 120 displays based on the data, the user's line of sight and the predetermined position It has a function of specifying a display element that satisfies the relationship and satisfies a predetermined requirement as an enhancement candidate. The specified display elements are not limited to those already displayed by the display control unit 120, but may be displayed from now on by the display control unit 120 in accordance with a user operation or the like. Display elements that are not candidates for emphasis are not subject to emphasis display. The predetermined requirement as the enhancement candidate is a requirement that is not related to the positional relationship with the user's line of sight, for example, a requirement that defines a display element that represents important information. For example, in the display of a web page based on data such as an HTML document acquired by the communication unit 150 from the server device 200, information for identifying whether or not a display element is a highlight candidate by a creator of the HTML document or the like (Emphasis candidate tags, etc.) may be included in the data. In this case, the display element determined as the enhancement candidate by the enhancement candidate tag is a display element that satisfies the predetermined requirement as the enhancement candidate. A display element that satisfies a user's line of sight and a predetermined positional relationship has, for example, a positional relationship with the detection result of the position of the user's viewpoint on the display surface. A display element that is within a circle with a constant radius at the center.

強調対象特定部140は、制御プログラムを実行するプロセッサ101、通信I/F103等により実現される。強調対象特定部140は、ユーザが注目すべき情報を表す強調すべき表示要素を特定する上述の機能のために、一例としての機能構成要素として、強調候補判別部141及び位置範囲決定部142を有する。   The emphasis target specifying unit 140 is realized by the processor 101 that executes the control program, the communication I / F 103, and the like. The emphasis target specifying unit 140 includes an emphasis candidate determination unit 141 and a position range determination unit 142 as functional components as an example for the above-described function of specifying a display element to be emphasized that represents information to be noted by the user. Have.

強調候補判別部141は、強調候補としての所定要件を満たす表示要素を判別する機能を担う。強調候補判別部141は、強調候補としての所定要件を満たす表示要素か否かを、重要情報指定要素により指定される重要情報を表すか否かに基づいて判別する。ここで、重要情報指定要素は、ユーザに注目されるべき情報を指定するデータであり、例えば重要情報を指定するタグである。ここでは、説明の便宜上、ウェブページを記述するHTMLに、注目すべき情報(重要情報)を指定するタグとしてimportantタグを新たに追加した例を用いて説明する。importantタグは、指定する重要情報を要素とし、指定する表示態様(太字、色指定、サイズ指定、その他のスタイル等)を属性とするタグである。強調候補判別部141は、HTML文書におけるimportantタグで指定される重要情報を表す表示要素を、強調候補としての所定要件を満たす表示要素として判別する。なお、表示制御部120は、importantタグの属性により強調時の表示態様を特定し得る。   The enhancement candidate determination unit 141 has a function of determining display elements that satisfy predetermined requirements as enhancement candidates. The enhancement candidate determination unit 141 determines whether or not the display element satisfies a predetermined requirement as an enhancement candidate based on whether or not it represents important information designated by the important information designation element. Here, the important information designating element is data designating information to be noticed by the user, for example, a tag designating important information. Here, for convenience of explanation, an explanation will be given using an example in which an important tag is newly added as a tag for designating notable information (important information) in HTML describing a web page. The “important” tag is a tag having important information to be specified as an element and having a display mode (bold, color designation, size designation, other style, etc.) to be designated as an attribute. The enhancement candidate discriminating unit 141 discriminates a display element that represents important information specified by an important tag in an HTML document as a display element that satisfies a predetermined requirement as an enhancement candidate. The display control unit 120 can specify the display mode at the time of emphasis by the attribute of the important tag.

強調候補判別部141は、更に、HTML文書におけるリンク情報を表す表示要素、つまりAタグ(アンカータグ)で示される情報に係る表示要素については、強調候補としての所定要件を満たすか否かを、その表示要素が表すリンク情報により関連付けられた他の文書(外部文書)の閲覧数に基づいて判別する。具体的には、例えば、強調候補判別部141は、Aタグで示されるURI(Uniform Resource Identifier)が指すHTML文書に係るウェブページへのアクセス回数をサーバ装置200から取得してそのアクセス回数(つまりそのウェブページに係るHTML文書の閲覧数)が所定閾値(例えば1万回)を超えている場合にAタグに係る表示要素が所定要件を満たすと判別し、所定閾値を超えていなければ、その表示要素が所定要件を満たさないと判別する。例えば、HTML文書で定義されるウェブページの表示要素としての広告バナー(広告主のウェブページへリンクするリンク情報に係る画像)については、強調候補判別部141は、閲覧数が所定閾値を超えているウェブページ(ウェブサイト)へリンクする広告バナーを、強調候補としての所定要件を満たすものであると判別する。   The enhancement candidate determination unit 141 further determines whether or not a display element representing link information in an HTML document, that is, a display element related to information indicated by an A tag (anchor tag) satisfies a predetermined requirement as an enhancement candidate. A determination is made based on the number of browsing other documents (external documents) associated with the link information represented by the display element. Specifically, for example, the emphasis candidate determination unit 141 obtains the number of accesses to the web page related to the HTML document indicated by the URI (Uniform Resource Identifier) indicated by the A tag from the server device 200 and obtains the number of accesses (that is, It is determined that the display element related to the A tag satisfies the predetermined requirement when the number of HTML documents related to the web page exceeds a predetermined threshold (for example, 10,000 times), and if the predetermined threshold is not exceeded, It is determined that the display element does not satisfy the predetermined requirement. For example, for an advertisement banner (image related to link information linked to an advertiser's web page) as a display element of a web page defined in an HTML document, the emphasis candidate determination unit 141 has the number of views exceeding a predetermined threshold. It is determined that an advertisement banner linked to a web page (web site) satisfies a predetermined requirement as an emphasis candidate.

位置範囲決定部142は、ユーザの視点の位置の検出結果に基づいてユーザの視線(視点)と所定の位置関係を満たす表示要素を特定する機能を担う。即ち、位置範囲決定部142は、表示面(ディスプレイ104の画面)におけるユーザの視点の位置に基づいて位置範囲を決定し、強調候補としての所定要件を満たす表示要素のうちその位置範囲内の表示要素を特定する。位置範囲は、強調対象の表示要素を表示位置に関する条件で限定するために用いられる領域である。なお、視点の位置に基づいて位置範囲を決定する手順はいかなる手順でもよく、範囲の大きさ及び形状を先に決定してからその範囲の位置を決定してもよいし、一括して位置範囲(形状、大きさ及び位置)を決定してもよい。位置範囲決定部142は、例えば視点を中心とした一定サイズ(例えば幅10cm高さ3cm等)の矩形領域として位置範囲を決定する。   The position range determination unit 142 has a function of identifying display elements that satisfy a predetermined positional relationship with the user's line of sight (viewpoint) based on the detection result of the position of the user's viewpoint. That is, the position range determination unit 142 determines the position range based on the position of the user's viewpoint on the display surface (screen of the display 104), and displays within the position range among the display elements that satisfy the predetermined requirements as enhancement candidates. Identify the element. The position range is an area used for limiting the display element to be emphasized with a condition regarding the display position. The procedure for determining the position range based on the position of the viewpoint may be any procedure. The size and shape of the range may be determined first, and then the position of the range may be determined. (Shape, size and position) may be determined. The position range determination unit 142 determines the position range as a rectangular area having a fixed size (for example, a width of 10 cm, a height of 3 cm, etc.) centered on the viewpoint.

通信部150は、制御プログラムを実行するプロセッサ101、通信I/F103等により実現され、ネットワーク11を介してサーバ装置200からデータ(HTML文書等)を受信して記憶部110に格納する機能を有する。   The communication unit 150 is realized by the processor 101 that executes the control program, the communication I / F 103, and the like, and has a function of receiving data (such as an HTML document) from the server device 200 via the network 11 and storing the data in the storage unit 110. .

(動作)
以下、上述の構成を備える表示制御システム10の動作例について説明する。
(Operation)
Hereinafter, an operation example of the display control system 10 having the above-described configuration will be described.

図4は、表示制御装置100の実行する表示制御処理の一例を示すフローチャートである。以下、同図に即して表示制御装置100の動作を説明する。   FIG. 4 is a flowchart illustrating an example of the display control process executed by the display control apparatus 100. Hereinafter, the operation of the display control apparatus 100 will be described with reference to FIG.

表示制御装置100は、入力装置106により受け付けられるユーザによる操作等に応じてブラウザ機能を実行し、通信部150によりサーバ装置200からデータ(ウェブページを記述したHTML文書)を受信して記憶部110に格納する(ステップS11)。   The display control device 100 executes a browser function in accordance with a user operation accepted by the input device 106, receives data (HTML document describing a web page) from the server device 200 by the communication unit 150, and stores the storage unit 110. (Step S11).

表示制御部120は、記憶部110に格納されたデータ(HTML文書)を解釈してそのHTML文書に基づき、ディスプレイ104の画面に表示要素を表示する(ステップS12)。表示制御部120は、HTML文書が示す各情報を表す各表示要素の表示面での配置(レイアウト)を決定して表示する。表示制御部120は、各表示要素の位置、スタイル等については、予め定めているデフォルト値に、HTML文書において各表示要素の配置を特定するための値の記述が含まれていればその値を反映することで、特定する。ステップS12での表示により、ユーザは、ディスプレイ104の画面に表示された、複数の表示要素の集合としてのウェブページを閲覧できる。   The display control unit 120 interprets the data (HTML document) stored in the storage unit 110 and displays display elements on the screen of the display 104 based on the HTML document (step S12). The display control unit 120 determines and displays an arrangement (layout) on the display surface of each display element representing each piece of information indicated by the HTML document. The display control unit 120 determines the position, style, and the like of each display element if a predetermined default value includes a description of a value for specifying the arrangement of each display element in the HTML document. Identify by reflecting. By the display in step S <b> 12, the user can view a web page as a set of a plurality of display elements displayed on the screen of the display 104.

視線情報取得部130は、表示制御装置100における視線検知機構から視線情報を取得し、表示面におけるユーザの視点を検出する(ステップS13)。   The line-of-sight information acquisition unit 130 acquires line-of-sight information from the line-of-sight detection mechanism in the display control apparatus 100, and detects the user's viewpoint on the display surface (step S13).

続いて位置範囲決定部142は、検出されたユーザの視点の位置に応じて、強調対象を限定するための位置範囲を決定する(ステップS14)。位置範囲決定部142は、例えば、画面上でユーザが見ている部分である視点を中心として一定サイズの矩形の範囲をその位置範囲として決定する。   Subsequently, the position range determination unit 142 determines a position range for limiting the emphasis target according to the detected position of the viewpoint of the user (step S14). The position range determination unit 142 determines, for example, a rectangular range of a certain size as the position range centered on the viewpoint that is the part that the user is viewing on the screen.

次に、強調対象特定部140は、位置範囲内の表示要素のうち、強調候補判別処理(後述)により強調候補としての所定要件を満たす表示要素を強調候補判別部141で判別する。これにより、強調対象となる表示要素(つまりその位置範囲内で強調候補の表示要素)を特定する(ステップS15)。   Next, the emphasis target identifying unit 140 uses the emphasis candidate determination unit 141 to determine a display element that satisfies a predetermined requirement as an emphasis candidate by using an emphasis candidate determination process (described later) among the display elements within the position range. Thereby, a display element to be emphasized (that is, a display element that is a highlight candidate within the position range) is specified (step S15).

そして、表示制御部120は、強調対象特定部140により特定された表示要素を強調するようにデータに基づき表示要素の表示態様を定めて表示する(ステップS16)。これにより、例えば、強調対象特定部140により特定された表示要素(強調対象の表示要素)が目立つ第1表示態様で表示され、強調対象特定部140により特定されていない表示要素が目立たない第2表示態様で表示される。ステップS13〜S16は繰り返され、この結果として、ユーザの視点の移動に応じて強調対象が変化するため、強調して表示される表示要素が切り替わるようになる。なお、表示制御部120は、ステップS12での表示(初期表示)においてはディスプレイ104の画面に表示する全ての表示要素を第2表示態様で表示しておき、ステップS16で、強調対象の表示要素のみを第1表示態様に変更して表示することとし、一旦強調対象とされた表示要素が強調対象から外された時点で第2表示態様に変更して表示してもよい。   Then, the display control unit 120 determines and displays the display mode of the display element based on the data so as to emphasize the display element specified by the emphasis target specifying unit 140 (step S16). Thereby, for example, the display element specified by the highlight target specifying unit 140 (display element to be emphasized) is displayed in a conspicuous first display mode, and the display element not specified by the highlight target specifying unit 140 is not conspicuous second. Displayed in display mode. Steps S <b> 13 to S <b> 16 are repeated, and as a result, the highlighting object changes according to the movement of the user's viewpoint, so that the display element to be highlighted is switched. The display control unit 120 displays all display elements to be displayed on the screen of the display 104 in the second display mode in the display (initial display) in step S12, and in step S16, the display elements to be highlighted. Only the first display mode may be changed and displayed, and when the display element that is once the highlight target is removed from the highlight target, the second display mode may be changed and displayed.

以下、上述のステップS15での強調候補の判別の具体例について、図5に即して説明する。図5は、強調候補を判別するための強調候補判別処理の一例を示すフローチャートである。   Hereinafter, a specific example of the determination of the emphasis candidate in step S15 will be described with reference to FIG. FIG. 5 is a flowchart illustrating an example of enhancement candidate determination processing for determining enhancement candidates.

まず、強調候補判別部141は、ステップS14で決定された位置範囲内に表示される未着目の表示要素に着目する(ステップS21)。   First, the enhancement candidate determination unit 141 focuses on an unfocused display element displayed within the position range determined in step S14 (step S21).

強調候補判別部141は、着目した表示要素が、HTML文書において重要情報を表すimportantタグで指定された要素であるかを判定する(ステップS22)。強調候補判別部141は、着目した表示要素が、importantタグで指定された要素であれば、強調候補としての所定要件を満たすものとして、その表示要素が強調候補であると判別する(ステップS23)。   The enhancement candidate determination unit 141 determines whether the focused display element is an element specified by an important tag representing important information in the HTML document (step S22). The emphasis candidate determination unit 141 determines that the display element is an emphasis candidate as satisfying the predetermined requirement as an emphasis candidate if the focused display element is an element specified by the important tag (step S23). .

強調候補判別部141は、着目した表示要素が、importantタグで指定された要素でなければ、Aタグで指定されたリンク情報を表すものであってそのリンク先のウェブページのアクセス回数(つまり閲覧数)が所定閾値(例えば1万回)を超えているか否かを判定する(ステップS24)。強調候補判別部141は、着目した表示要素が、Aタグで指定されたリンク情報を表し、かつリンク先のウェブページのアクセス回数が所定閾値を超えている場合には、強調候補としての所定要件を満たすものとして、その表示要素が強調候補であると判別する(ステップS23)。強調候補判別部141は、リンク先のウェブページのアクセス回数については、サーバ装置200に要求することで取得する。なお、強調候補判別部141は、着目した表示要素が、importantタグで指定された要素でなく、Aタグで指定されたリンク情報を表し、かつそのリンク先のウェブページのアクセス回数が所定閾値を超えているものでない場合には、その表示要素は強調候補でないと扱う。   The emphasis candidate determination unit 141 represents the link information specified by the A tag if the focused display element is not the element specified by the import tag, and the number of accesses to the linked web page (that is, browsing) It is determined whether or not (number) exceeds a predetermined threshold (for example, 10,000 times) (step S24). The emphasis candidate determination unit 141 indicates a predetermined requirement as an emphasis candidate when the focused display element represents link information specified by the A tag and the access count of the linked web page exceeds a predetermined threshold. It is determined that the display element is an enhancement candidate (step S23). The emphasis candidate determination unit 141 obtains the number of accesses to the linked web page by making a request to the server device 200. Note that the emphasis candidate determination unit 141 represents the link information specified by the A tag, not the element specified by the important tag, and the number of accesses to the linked web page has a predetermined threshold value. If it does not exceed, the display element is treated as not a highlight candidate.

強調候補判別部141は、ステップS14で決定された位置範囲内に表示される未着目の表示要素が残っている限り、ステップS21に戻って未着目の表示要素に着目してステップS22での判定等を繰り返す(ステップS25)。   The enhancement candidate determination unit 141 returns to step S21 and pays attention to the unfocused display element as long as there remains an unfocused display element displayed in the position range determined in step S14. Etc. are repeated (step S25).

この強調候補判別処理により、位置範囲内における強調候補としての所定要件を満たす表示要素が判別され、ステップS15において強調対象の表示要素として特定される。   With this enhancement candidate determination process, display elements that satisfy the predetermined requirements as enhancement candidates within the position range are determined, and are specified as enhancement target display elements in step S15.

以下、上述のステップS16での表示要素の強調の具体例について、図6に即して説明する。図6は、強調対象の表示要素を強調するための強調処理の一例を示すフローチャートである。   Hereinafter, a specific example of emphasizing the display element in step S16 will be described with reference to FIG. FIG. 6 is a flowchart illustrating an example of an emphasis process for emphasizing a display element to be emphasized.

表示制御部120は、ステップS15で強調対象と特定されていない表示要素(強調対象でない表示要素)についてHTML文書において表示態様の指定があるか否かを判別する(ステップS31)。表示態様の指定があれば、強調対象でない表示要素を、指定された表示態様にし(ステップS32)、表示態様の指定がなければ予め定められた基本的な値(デフォルト値)に対応する表示態様にする(ステップS33)。なお、ステップS31ではHTML文書での定義に基づいて関連するスタイルシート等があれば参照して、表示態様の指定があるか否かを判別する。また、表示制御部120は、HTML文書において表示要素の表示態様のうち一部の項目だけについて指定がなされていれば他の項目についてはデフォルト値を適用することで、表示に際しての表示態様を定める。   The display control unit 120 determines whether or not a display mode is specified in the HTML document for a display element that is not specified as an emphasis target in Step S15 (a display element that is not an emphasis target) (Step S31). If the display mode is specified, the display element that is not the highlight target is set to the specified display mode (step S32), and if the display mode is not specified, the display mode corresponding to a predetermined basic value (default value). (Step S33). In step S31, if there is a related style sheet or the like based on the definition in the HTML document, it is determined whether or not a display mode is specified. The display control unit 120 determines the display mode at the time of display by applying default values to other items if only some of the display modes of the display elements are specified in the HTML document. .

また、表示制御部120は、ステップS15で強調対象と特定された表示要素(強調対象の表示要素)についてHTML文書において強調時の表示態様の指定があるか否かを判別する(ステップS34)。上述したimportantタグは、強調時の表示態様を属性として定められ、その属性がステップS34での判別に用いられる。表示制御部120は、強調時の表示態様の指定があれば、強調対象の表示要素を、指定された表示態様にする(ステップS35)。そして、強調時の表示態様の指定がなければ予め定められた強調時のデフォルト値(例えば非強調時の基本的な値の150%に拡大するような値)に対応する表示態様にする(ステップS36)。   Further, the display control unit 120 determines whether or not the display mode at the time of emphasis is specified in the HTML document for the display element (the emphasis target display element) specified as the emphasis target in step S15 (step S34). The above-described important tag is defined with the display mode at the time of emphasis as an attribute, and the attribute is used for determination in step S34. If the display mode at the time of emphasis is specified, the display control unit 120 sets the display element to be emphasized to the specified display mode (step S35). If the display mode at the time of emphasis is not specified, a display mode corresponding to a predetermined default value at the time of emphasis (for example, a value that expands to 150% of the basic value at the time of non-emphasis) is set (step S36).

表示制御部120がこの強調処理を行うことで、ステップS16では、ユーザに注目されるべき強調対象の表示要素が、強調対象でない表示要素よりも目立つ表示態様で表示面(ディスプレイ104の画面)に表示されるようになる。   When the display control unit 120 performs this emphasis process, in step S16, the display element to be emphasized that should be noticed by the user is displayed on the display surface (screen of the display 104) in a display manner that is more conspicuous than the display element that is not the emphasis target. It will be displayed.

以下、図7及び図8を用いて表示制御装置100による表示例を示す。   Hereinafter, display examples by the display control apparatus 100 will be described with reference to FIGS. 7 and 8.

図7は、表示制御装置100がサーバ装置200から受信したデータ(HTML文書)の一例を示す図である。   FIG. 7 is a diagram illustrating an example of data (HTML document) received from the server apparatus 200 by the display control apparatus 100.

このHTML文書においては、importantタグにより、「特別条件:LMN・・・」という情報を示す文字列を表す表示要素が、ユーザに注目されるべき情報(重要情報)として、作成者等によって定められている。そして、view−style属性は、「特別条件:LMN・・・」という情報を示す文字列を表す表示要素についての強調時の表示態様を定める記述の一例として規定したものである。このview−style属性により、「特別条件:LMN・・・」という情報を示す文字列を表す表示要素は、強調時には基本的なサイズ(デフォルト値)の200%の拡大サイズの文字フォントが用いられ、下線が付されることが定められている。   In this HTML document, a display element representing a character string indicating information of “special condition: LMN...” Is determined by an author tag or the like as information (important information) to be noticed by the user. ing. The view-style attribute is defined as an example of a description that defines a display mode at the time of emphasis on a display element representing a character string indicating information “special condition: LMN...”. With this view-style attribute, the display element representing the character string indicating the information “special condition: LMN...” Uses a character font having an enlarged size of 200% of the basic size (default value) when emphasized. , Underlined.

また、このHTML文書においては、「ABCシステム仕様へのリンク」、「xxx関連商品サイトへのリンク」等のリンク情報が示されている。   In the HTML document, link information such as “link to ABC system specification” and “link to xxx related product site” is shown.

図7に示したHTML文書に基づいて、ブラウザとして機能する場合の表示制御装置100がディスプレイ104に表示する画面(表示面)の、ユーザの視点の変化に応じた画面遷移を図8に示す。   Based on the HTML document shown in FIG. 7, FIG. 8 shows a screen transition in accordance with a change in the user's viewpoint on the screen (display surface) displayed on the display 104 by the display control apparatus 100 when functioning as a browser.

画面21aは、ユーザの視線20aの先の視点19aが画面の右上端付近にある場合の画面の状態を示している。ここで、説明の便宜上、表示制御装置100は、表示制御処理(図4)のステップS14で、ユーザの視点19aを中心とした、画面21aに表示された文字列の2行分に相当する高さを有する一定サイズの矩形領域を位置範囲として決定するものとする。この視点19aを中心としたその位置範囲内に、強調候補としての所定要件を満たす表示要素は存在しない(図7参照)。このため、例えば「特別条件:LMN・・・」という情報を示す文字列を表す表示要素22a、「ABCシステム仕様へのリンク」というリンク情報を表す表示要素23a、「xxx関連商品サイトへのリンク」というリンク情報を表す表示要素24a等は、いずれも通常サイズの基本的な値(デフォルト値)に対応する表示態様で表示されている。つまり、画面21aの各表示要素(例えば各行の文字列等)は強調表示されていない。   The screen 21a shows the state of the screen when the viewpoint 19a ahead of the user's line of sight 20a is near the upper right end of the screen. Here, for the convenience of explanation, the display control device 100 has a high level corresponding to two lines of the character string displayed on the screen 21a centered on the user's viewpoint 19a in step S14 of the display control process (FIG. 4). A rectangular region having a certain size and having a certain size is determined as the position range. There is no display element that satisfies the predetermined requirement as an enhancement candidate within the position range centered on the viewpoint 19a (see FIG. 7). For this reason, for example, a display element 22a representing a character string indicating information of “special condition: LMN...”, A display element 23a representing link information of “link to ABC system specifications”, and a “link to an xxx related product site” Are displayed in a display form corresponding to the basic value (default value) of the normal size. That is, each display element (for example, a character string of each line) on the screen 21a is not highlighted.

画面21bは、画面21aの状態からユーザの視線が少し右下に下がり(1行分程度降り)、ユーザの視線20bの先の視点19bが「特別条件:LMN・・・」という情報を示す文字列を表す表示要素22bに近づいた場合の画面の状態を示している。なお、表示要素22bは、画面21aにおける表示要素22aの表示態様が変化したものである。視点19bを中心とした上述の一定サイズの矩形領域である位置範囲に、importantタグで示されており強調候補としての所定要件を満たす表示要素22bが存在する。このため、表示要素22bは、強調対象として特定され(ステップS22、S23)、view−style属性に基づいて200%の拡大サイズで表示される(ステップS35)。   On the screen 21b, from the state of the screen 21a, the user's line of sight slightly falls to the lower right (about one line down), and the point of view 19b beyond the user's line of sight 20b is a character indicating information of "special condition: LMN ..." The screen state when approaching the display element 22b representing a column is shown. The display element 22b is obtained by changing the display mode of the display element 22a on the screen 21a. A display element 22b that is indicated by an important tag and satisfies a predetermined requirement as an emphasis candidate exists in a position range that is a rectangular region of the above-described fixed size centered on the viewpoint 19b. For this reason, the display element 22b is specified as an emphasis target (steps S22 and S23), and is displayed in an enlarged size of 200% based on the view-style attribute (step S35).

画面21cは、画面21bの状態からユーザの視線がかなり下に下がり、ユーザの視線20cの先の視点19cが、「ABCシステム仕様へのリンク」、「xxx関連商品サイトへのリンク」等のリンク情報の間に移動した場合の画面の状態を示している。なお、表示要素24bは、画面21a及び画面21bにおける表示要素24aの表示態様が変化したものである。視点19cを中心とした上述の一定サイズの矩形領域である位置範囲に、Aタグで示されたリンク情報を表す表示要素23aと表示要素24bとがある。ここでは説明の便宜上、表示要素24bが表すリンク情報のリンク先のウェブページのアクセス回数が所定閾値を超えており、表示要素23aが表すリンク情報のリンク先のウェブページのアクセス回数が所定閾値を超えていないものとする。このため表示要素23aと表示要素24bとのうち、表示要素24bのみが強調候補としての所定要件を満たし、強調対象として特定され(ステップS24、S23)、通常サイズの150%の拡大サイズで表示される(ステップS36)。   In the screen 21c, the user's line of sight drops considerably from the state of the screen 21b, and the viewpoint 19c ahead of the user's line of sight 20c is a link such as "link to ABC system specification" or "link to xxx related product site". The screen state when moving between pieces of information is shown. The display element 24b is obtained by changing the display mode of the display element 24a on the screen 21a and the screen 21b. There are a display element 23a and a display element 24b representing the link information indicated by the A tag in the position range which is a rectangular area of the above-mentioned fixed size with the viewpoint 19c as the center. Here, for convenience of explanation, the access count of the link destination web page of the link information represented by the display element 24b exceeds a predetermined threshold value, and the access count of the link destination web page of the link information represented by the display element 23a exceeds the predetermined threshold value. It shall not exceed. For this reason, of the display elements 23a and 24b, only the display element 24b satisfies the predetermined requirement as an emphasis candidate, is specified as an emphasis target (steps S24 and S23), and is displayed in an enlarged size of 150% of the normal size. (Step S36).

ユーザの視線が移動した場合に視線との位置関係によって何らかの表示要素が常に強調されるのでは、特定の情報をユーザに注目すべきとして認識させることができない。これに対して、表示制御システム10では上述のように、ユーザの視線と一定の位置関係を有し、かつユーザに注目されるべき情報を表す表示要素が強調されるため、ユーザは注目されるべき情報について認識し易くなり、その情報の見落としが低減される。   When the user's line of sight moves, some display element is always emphasized by the positional relationship with the line of sight, so that it is impossible to make the user recognize that specific information should be noted. On the other hand, as described above, the display control system 10 emphasizes display elements that have a certain positional relationship with the user's line of sight and represent information that should be noted by the user, and thus the user is focused. It is easy to recognize the information to be reduced, and oversight of the information is reduced.

(実施の形態2)
以下、実施の形態1で示した表示制御システム10の強調候補判別部141の一部を変形した実施の形態2について説明する。実施の形態2では、強調候補判別部141の具体的な動作が実施の形態1とは異なるが、表示制御システム10の装置構成、各装置のハードウェア構成及び機能構成は実施の形態1と概ね同様であるため、ここでは、各装置及び各構成要素について実施の形態1と同様の符号を用いて説明する。実施の形態2に係る表示制御システム10は、特に説明しない点については実施の形態1と同様である。例えば、本実施の形態における表示制御装置100も、図4に示す表示制御処理を実行する。
(Embodiment 2)
Hereinafter, a second embodiment in which a part of the enhancement candidate determination unit 141 of the display control system 10 shown in the first embodiment is modified will be described. In the second embodiment, the specific operation of the enhancement candidate discriminating unit 141 is different from that in the first embodiment. However, the device configuration of the display control system 10, the hardware configuration and the functional configuration of each device are substantially the same as those in the first embodiment. Since these are the same, each device and each component will be described using the same reference numerals as those in the first embodiment. The display control system 10 according to the second embodiment is the same as that of the first embodiment, unless otherwise described. For example, the display control apparatus 100 in the present embodiment also executes the display control process shown in FIG.

本実施の形態では、表示制御装置100における通信部150が、メールサーバ機能を備えるサーバ装置200から受信して記憶部110に格納するデータが、メール(電子メール)である例を挙げて説明する。メールは、例えばHTML形式であればHTMLに従って記述されたデータにより、メールで示される情報を表す表示要素(文字等)の内容が定められ、また、表示態様が定められ得る。また、例えばテキスト形式であれば、文字コード列によりメールで示される情報を表す表示要素(文字等)の内容が定められる。   In the present embodiment, an example in which the communication unit 150 in the display control apparatus 100 receives data from the server apparatus 200 having a mail server function and stores it in the storage unit 110 is mail (e-mail). . In the case of e-mail, for example, in HTML format, the contents of display elements (characters, etc.) representing information indicated by the e-mail are determined by data described according to HTML, and the display mode can be determined. For example, in the case of a text format, the content of a display element (character or the like) representing information indicated by mail is determined by a character code string.

本実施の形態では、表示制御装置100における強調候補判別部141は、データ(メール)に基づいて表示される表示要素が、強調候補としての所定要件を満たす表示要素か否かを、ユーザの状況及び強調候補識別用情報に基づいて判別する。図9に強調候補識別用情報の一例を示す。強調候補識別用情報は、強調候補の表示要素を識別するための識別子を含み、識別子と優先度とを対応付けた情報である。ここでは、優先度は数値が小さい程、より優先的に注目されるべき表示要素を指すものとして説明する。図9の例では、最も高い優先度(優先度1)の表示要素は、隅付き括弧で囲まれた表示要素である。次に高い優先度(優先度2)の表示要素は、角括弧(ブラケット)で囲まれた表示要素である。ユーザの状況は、例えば、ユーザが、表示される情報を急いで閲覧しなければならない状態(つまり急いでいる状態)か否か等である。例えば、ユーザが、急いでいる状態か否かを示す情報を表示制御装置100に入力することで、表示制御装置100はユーザの状況を参照できるようになる。また、表示制御装置100が、ユーザの視線の移動速度、ユーザの操作速度(例えば画面のスクロールを指示する操作速度等)等から、ユーザが急いでいる状態か否かというユーザの状況を検出することとしてもよい。また、ユーザの外出その他の予定を示すスケジュール情報が表示制御装置100に入力されている場合において、表示制御装置100はそのスケジュール情報を参照することにより、ユーザが急いでいる状態か否かを検出してもよい。例えば外出予定まで所定時間(例えば数分)以内であれば表示制御システムは、ユーザが急いでいる状態であると検出し得る。急いでいる状態において、急いでいる度合いについて、例えば、高、中、低等と区別してもよい。   In the present embodiment, the emphasis candidate determination unit 141 in the display control apparatus 100 determines whether or not the display element displayed based on the data (email) is a display element that satisfies a predetermined requirement as an emphasis candidate. And it discriminate | determines based on the information for emphasis candidate identification. FIG. 9 shows an example of enhancement candidate identification information. The emphasis candidate identification information includes information for identifying an emphasis candidate display element and associates the identifier with the priority. Here, the priority is described as indicating a display element that should be noted with higher priority as the numerical value is smaller. In the example of FIG. 9, the display element with the highest priority (priority 1) is a display element surrounded by brackets with corners. The display element with the next highest priority (priority 2) is a display element surrounded by square brackets (brackets). The situation of the user is, for example, whether or not the user has to quickly browse the displayed information (that is, the state in which the user is in a hurry). For example, by inputting information indicating whether or not the user is in a hurry state to the display control device 100, the display control device 100 can refer to the user's situation. In addition, the display control device 100 detects the user's situation as to whether or not the user is in a hurry based on the movement speed of the user's line of sight, the user's operation speed (for example, the operation speed for instructing scrolling of the screen, etc.) It is good as well. In addition, when schedule information indicating a user's going out or other schedule is input to the display control apparatus 100, the display control apparatus 100 detects whether the user is in a hurry state by referring to the schedule information. May be. For example, if it is within a predetermined time (for example, several minutes) before going out, the display control system can detect that the user is in a hurry. In the state of rushing, the degree of rushing may be distinguished from, for example, high, medium, low, and the like.

また、本実施の形態における表示制御部120は、メールにおける強調対象の表示要素(文字等)の表示態様を、その表示要素が強調対象でない場合或いは強調対象でない他の表示要素の表示態様に対して相対的に目立つように150%に拡大して表示する。   In addition, the display control unit 120 according to the present embodiment changes the display mode of a display element (such as a character) to be emphasized in an e-mail when the display element is not the highlight target or other display elements that are not the highlight target. The display is enlarged to 150% so that it is relatively conspicuous.

以下、本実施の形態における強調候補判別部141による、強調候補の判別(図4、ステップS15参照)の具体例について、図10に即して説明する。図10は、実施の形態2に係る強調候補判別処理の一例を示すフローチャートである。   Hereinafter, a specific example of enhancement candidate determination (see FIG. 4, step S15) by the enhancement candidate determination unit 141 according to the present embodiment will be described with reference to FIG. FIG. 10 is a flowchart illustrating an example of the enhancement candidate determination process according to the second embodiment.

まず、強調候補判別部141は、位置範囲決定部142により、図4のステップS14で位置範囲が決定された後において、ユーザの状況に応じて指定優先度を特定する(ステップS42)。具体的には、強調候補判別部141は例えばユーザが急いでいる状態であるか否か、或いは、急いでいる程度に応じて、指定優先度を特定する。ここでは、ユーザが急いでいる状態であれば指定優先度として、優先度の最も高い優先度1を指す値を特定し、急いでいない状態であれば指定優先度として、優先度の次に高い優先度2を指す値を特定するものとする。   First, after the position range is determined in step S14 of FIG. 4 by the position range determination unit 142, the enhancement candidate determination unit 141 specifies the designation priority according to the user's situation (step S42). Specifically, the emphasis candidate determination unit 141 specifies the designated priority according to, for example, whether or not the user is in a hurry state or the degree of hurry. Here, if the user is in a hurry state, a value indicating the highest priority 1 is specified as the designated priority, and if it is not in a hurry state, the designated priority is the next highest priority. A value indicating priority 2 is specified.

続いて、強調候補判別部141は、ステップS14で決定された位置範囲内において、ステップS42で特定した指定優先度以上の強調候補識別子が付された表示要素を検索する(ステップS42)。例えば、ユーザが急いでいる状態であれば、指定優先度以上は優先度の最も高い優先度1のみとなり、強調候補判別部141は、優先度1に対応した強調候補識別子である隅付き括弧で囲まれた表示要素を検索する。また、例えば、ユーザが急いでいない状態であれば、指定優先度以上は優先度2以上のため、強調候補判別部141は、優先度1又は優先度2に対応した強調候補識別子である隅付き括弧又は角括弧で囲まれた表示要素を検索する。   Subsequently, the emphasis candidate determination unit 141 searches for a display element to which an emphasis candidate identifier of the specified priority or higher specified in step S42 is attached within the position range determined in step S14 (step S42). For example, if the user is in a hurry, the priority level is higher than the priority level 1 that is higher than the specified priority level, and the emphasis candidate determination unit 141 is a bracket with a corner that is an emphasis candidate identifier corresponding to the priority level 1. Search for enclosed display elements. In addition, for example, if the user is not in a hurry, the specified priority or higher is equal to or higher than priority 2. Therefore, the emphasis candidate determination unit 141 has corners that are emphasis candidate identifiers corresponding to priority 1 or priority 2. Search for display elements enclosed in parentheses or square brackets.

強調候補判別部141は、ステップS42での検索の結果として、強調候補識別子が付された表示要素(つまり強調候補識別子で囲まれた表示要素)が検出された場合に限り(ステップS43)、検出された表示要素を強調候補と判別する(ステップS44)。即ち、ステップS42での検索の結果として、検出がなされなかった場合には、ステップS14で決定された位置範囲内のいずれの表示要素も強調候補ではないことになる。   The enhancement candidate discriminating unit 141 detects only when the display element to which the enhancement candidate identifier is attached (that is, the display element surrounded by the enhancement candidate identifier) is detected as a result of the search in step S42 (step S43). The displayed display element is determined as an enhancement candidate (step S44). That is, if no detection is made as a result of the search in step S42, none of the display elements within the position range determined in step S14 is an enhancement candidate.

ユーザの状況に応じてユーザが注目すべき情報は変化するため、上述の強調候補判別処理(図10)を行う表示制御装置100では、ユーザの視線及びユーザの状況に応じて、強調して表示される表示要素を変動させる。   Since the information that should be noted by the user changes according to the user's situation, the display control apparatus 100 that performs the above-described enhancement candidate determination process (FIG. 10) emphasizes the display according to the user's line of sight and the user's situation. The displayed element is changed.

以下、図11を用いて本実施の形態に係る表示制御装置100による表示例を示す。   Hereinafter, the example of a display by the display control apparatus 100 which concerns on this Embodiment using FIG. 11 is shown.

表示制御装置100がメールに基づいてディスプレイ104に表示する画面(表示面)の、ユーザの視点の変化に応じた画面遷移を図11に示す。同図の例においてメールの送信者は、メール中の受信者(ユーザ)に注目させたい部分に強調候補識別子(隅付き括弧等)を付している。   FIG. 11 shows a screen transition corresponding to a change in the viewpoint of the user on the screen (display surface) displayed on the display 104 based on the mail by the display control apparatus 100. In the example shown in the figure, the sender of the mail attaches an emphasis candidate identifier (such as a bracket with a corner) to the part that the receiver (user) wants to pay attention to in the mail.

画面31aは、ユーザの視線30aの先の視点が画面の最上行付近にある場合の画面の状態を示している。ここでは、説明の便宜上、視線30aの先の視点の位置は画面の上下方向(垂直方向)の位置で示されるものとし、表示制御装置100は、表示制御処理(図4)のステップS14で、ユーザの視点の位置を含む概ね2行分の文字列に相当する程度の高さを有する矩形領域を位置範囲として決定するものとする。また、前提として、ユーザが急いでいない状態であると検出されていることとする。画面31aでは、ユーザの視点を含む2行分程度の位置範囲に、隅付き括弧又は角括弧で囲まれた表示要素が含まれていない。このため、表示要素(文字列)32a、33a等を含むメールの内容を表す各文字列(各表示要素)は全て強調されておらず、通常サイズで表示されている。   The screen 31a shows the state of the screen when the point of view ahead of the user's line of sight 30a is near the top row of the screen. Here, for convenience of explanation, it is assumed that the position of the viewpoint ahead of the line of sight 30a is indicated by the position in the vertical direction (vertical direction) of the screen, and the display control apparatus 100 performs step S14 in the display control process (FIG. 4). A rectangular area having a height corresponding to a character string of approximately two lines including the position of the user's viewpoint is determined as the position range. Also, as a premise, it is assumed that the user is not in a hurry state. In the screen 31a, the position range of about two lines including the user's viewpoint does not include a corner bracket or a display element surrounded by square brackets. For this reason, each character string (each display element) representing the contents of the mail including the display elements (character strings) 32a, 33a, etc. is not emphasized and is displayed in the normal size.

画面31bは、画面31aの状態からユーザの視線が下に下がり、ユーザの視線30bの先の視点が隅付き括弧で囲まれた「重要:ABCシステムが更新されます。」という表示要素32bの少しだけ上に位置した場合の画面の状態を示している。なお、表示要素32bは、画面31aにおける表示要素32aの表示態様が変化したものである。これは、強調候補判別部141による強調候補判別処理(図10)により、ユーザが急いでいない状態であるため、ユーザの視点を含む位置範囲において、優先度1又は優先度2の強調候補識別子で囲まれた文字列が検索され(ステップS41〜S43)、検出された表示要素32bが強調候補と判別(ステップS44)され、表示制御部120により強調された結果である。このような強調による表示態様の変化について、ここでHTML形式のメールを例にして説明する。この表示態様の変化は、例えば表示に用いるHTMLファイルに表示態様を変化させるためのタグを挿入するようにして改変することにより実現することができる。例えば、隅付き括弧、角括弧で囲まれた文字列を表示する場合にはその文字列を拡大する、といったテーブルを表示制御システム10が保持し、視線が近辺に入るとそのテーブルの情報をもとに、表示に用いるHTMLファイルに強調表示のタグを挿入することができる。   In the screen 31b, the user's line of sight drops from the state of the screen 31a, and the point of view ahead of the user's line of sight 30b is surrounded by brackets with corners. A little of the display element 32b of “Important: ABC system is updated.” It shows the state of the screen when it is positioned only above. The display element 32b is obtained by changing the display mode of the display element 32a on the screen 31a. This is an emphasis candidate identifier of priority 1 or priority 2 in the position range including the user's viewpoint because the user is not in a hurry due to the emphasis candidate determination process (FIG. 10) by the emphasis candidate determination unit 141. The enclosed character string is searched (steps S41 to S43), and the detected display element 32b is determined as an enhancement candidate (step S44) and is emphasized by the display control unit 120. The change in display mode due to such emphasis will be described here by taking an HTML mail as an example. This change in the display mode can be realized by, for example, modifying the HTML file used for display by inserting a tag for changing the display mode. For example, when the display control system 10 holds a table such as a bracket with a corner and a character string enclosed by the brackets, the display control system 10 holds the table. In addition, a highlighted tag can be inserted into an HTML file used for display.

画面31cは、画面31bの状態からユーザの視線が更に下に下がり、ユーザの視線30cの先の視点が、角括弧で囲まれた「要件:7月1日からAモジュールのバージョン12aを利用してください。」という表示要素33bの少しだけ上に位置した場合の画面の状態を示している。なお、表示要素33bは、画面31a及び画面31bにおける表示要素33aの表示態様が変化し、強調されたものである。この表示態様の変化も上述したように、例えば表示に用いるHTMLファイルに表示態様を変化させるためのタグを挿入するようにして改変することにより実現することができる。また、画面31cにおいては、画面31bにおける表示要素32bから、強調されなくなった(通常サイズに戻った)表示要素32aが表示されている。もし、ユーザが急いでいることが検出されていた場合であれば、優先度2に対応した強調候補識別子(角括弧)は検索されないので(ステップS41、S42)、画面31cには、表示要素33bの代わりに表示要素33aが表示されることになる。   In the screen 31c, the user's line of sight drops further from the state of the screen 31b, and the point of view ahead of the user's line of sight 30c is enclosed in square brackets "Requirement: Use version 12a of the A module from July 1st. The screen state when the display element 33b is positioned slightly above the display element 33b is shown. The display element 33b is emphasized by changing the display mode of the display element 33a on the screen 31a and the screen 31b. As described above, this change in display mode can also be realized by modifying the HTML file used for display, for example, by inserting a tag for changing the display mode. On the screen 31c, the display element 32a that is no longer emphasized (returned to the normal size) is displayed from the display element 32b on the screen 31b. If it is detected that the user is in a hurry, the highlight candidate identifier (square brackets) corresponding to the priority 2 is not searched (steps S41 and S42), and the display element 33b is displayed on the screen 31c. Instead, the display element 33a is displayed.

このように、本実施の形態における表示制御システム10では、表示制御装置100が、強調候補識別子が付された表示要素をユーザの視線との位置関係及びユーザの状況に応じて強調した表示態様で表示するか強調しない表示態様で表示するかを切り替える。   As described above, in the display control system 10 according to the present embodiment, the display control device 100 emphasizes the display element to which the emphasis candidate identifier is attached according to the positional relationship with the user's line of sight and the user's situation. Switch between display and display in non-emphasized display mode.

(実施の形態3)
以下、実施の形態1で示した表示制御システム10の表示制御装置100の一部を変形した実施の形態3について説明する。
(Embodiment 3)
Hereinafter, a third embodiment in which a part of the display control device 100 of the display control system 10 shown in the first embodiment is modified will be described.

(構成)
図12は、実施の形態3に係る表示制御装置100aの機能ブロック図である。表示制御装置100aは、実施の形態1に係る表示制御装置100の一部を変形したものである。
(Constitution)
FIG. 12 is a functional block diagram of the display control apparatus 100a according to the third embodiment. The display control device 100a is obtained by modifying a part of the display control device 100 according to the first embodiment.

表示制御装置100aは、機能面における構成要素として図12に示すように、記憶部110a、表示制御部120、視線情報取得部130、強調対象特定部140a、通信部150及び属性情報取得部160を備える。強調対象特定部140aは、強調候補判別部141を変形した強調候補判別部141a、及び、位置範囲決定部142を変形した位置範囲決定部142aを有する。表示制御装置100aの構成要素のうち実施の形態1で示した表示制御装置100の構成要素と同一のものについては、同じ符号を付しており、適宜説明を省略する。表示制御装置100aのハードウェア構成は、表示制御装置100と同一であり、表示制御装置100aは視線検知機構を備える。また、表示制御装置100aは、ここで説明しない点については表示制御装置100と同様である。   As shown in FIG. 12, the display control apparatus 100a includes a storage unit 110a, a display control unit 120, a line-of-sight information acquisition unit 130, an emphasis target specification unit 140a, a communication unit 150, and an attribute information acquisition unit 160, as shown in FIG. Prepare. The enhancement target specifying unit 140a includes an enhancement candidate determination unit 141a obtained by modifying the enhancement candidate determination unit 141, and a position range determination unit 142a obtained by modifying the position range determination unit 142. Among the constituent elements of the display control apparatus 100a, the same constituent elements as those of the display control apparatus 100 shown in the first embodiment are denoted by the same reference numerals, and description thereof will be omitted as appropriate. The hardware configuration of the display control device 100a is the same as that of the display control device 100, and the display control device 100a includes a line-of-sight detection mechanism. The display control device 100a is the same as the display control device 100 in points not described here.

記憶部110aは、メモリ102の一領域等で実現され、実施の形態1で示した記憶部110と同様の機能を有する。記憶部110aは、更に、ユーザの属性を示す属性情報、及び、ユーザの視点に基づいて位置範囲の大きさを決定するために用いられる範囲決定用テーブルを記憶する機能を有する。   The storage unit 110a is realized by an area of the memory 102 and the like, and has the same function as the storage unit 110 described in the first embodiment. The storage unit 110a further has a function of storing attribute information indicating user attributes and a range determination table used for determining the size of the position range based on the user viewpoint.

図13に属性情報の一例を示す。同図に示すように、ユーザについての属性情報は、例えば性別、年代、年齢、趣味、住所等の情報である。属性情報は、例えばユーザにより入力装置106に入力され、記憶部110aに格納される。   FIG. 13 shows an example of attribute information. As shown in the figure, the attribute information about the user is information such as gender, age, age, hobby, address, and the like. The attribute information is input to the input device 106 by a user, for example, and stored in the storage unit 110a.

図14は、範囲決定用テーブルの一例を示す図である。同図の例では、範囲決定用テーブルは、ユーザの視力、年代及び性別についての各種の組み合わせパターンと、位置範囲の大きさとを対応付けて構成されている。この範囲決定用テーブルは、位置範囲決定部142aにより参照される。範囲決定用テーブルは、位置範囲の大きさを、例えば、ユーザの視野の大きさにある程度比例させるべく、実験等に基づいて設計されてもよく、例えばユーザの視力、年代、年齢、性別等の属性を用いて位置範囲の大きさが特定されるように構成され得る。図14の例では、範囲決定用テーブルにおいて位置範囲の大きさは、「最大」、「大」、「中」、「小」及び「最小」の5段階で表しているが、より具体的なサイズを表すようにしてもよい。   FIG. 14 is a diagram illustrating an example of a range determination table. In the example shown in the figure, the range determination table is configured by associating various combination patterns for the user's visual acuity, age, and gender with the size of the position range. This range determination table is referred to by the position range determination unit 142a. The range determination table may be designed based on experiments, for example, in order to make the size of the position range proportional to the size of the user's visual field to some extent, for example, the user's visual acuity, age, age, sex, etc. The size of the position range can be specified using the attribute. In the example of FIG. 14, the size of the position range in the range determination table is represented by five levels of “maximum”, “large”, “medium”, “small”, and “minimum”. You may make it represent a size.

強調対象特定部140aは、視線情報取得部130により取得された視線情報等を参照することで、表示制御部120がデータに基づいて表示する表示要素のうち、ユーザの視線と所定の位置関係を満たす所定の位置範囲における表示要素であり、かつ、強調候補としての所定要件を満たす表示要素を特定する機能を有する。所定の位置範囲は、ユーザの属性及びユーザの状況に基づいて定められた大きさの位置範囲である。即ち、強調対象特定部140aは、ユーザが注目すべき情報を表す強調すべき表示要素を特定する機能を有する。強調対象特定部140aは、制御プログラムを実行するプロセッサ101、通信I/F103等により実現される。   The emphasis target specifying unit 140a refers to the line-of-sight information acquired by the line-of-sight information acquisition unit 130, so that the display control unit 120 displays a predetermined positional relationship with the user's line of sight among the display elements displayed based on the data. The display element has a function of specifying a display element that satisfies a predetermined requirement as an enhancement candidate and that is a display element in a predetermined position range to be satisfied. The predetermined position range is a position range having a size determined based on the user attribute and the user situation. That is, the highlight target specifying unit 140a has a function of specifying a display element to be emphasized that represents information to be noted by the user. The emphasis target specifying unit 140a is realized by the processor 101 that executes the control program, the communication I / F 103, and the like.

強調候補判別部141aは、強調候補としての所定要件を満たす表示要素を判別する機能を担う。強調候補判別部141aは、データに基づいて表示する表示要素について、強調候補としての所定要件を満たす表示要素か否かを、データの内容に関する情報に基づいて、ユーザの属性に応じてデータの内容を解析することで判別する。例えば、一般に同じ属性を有する人において重要となるキーワード等を予め登録した辞書を利用することで、文書等のデータにおける重要なキーワードを表す表示要素を強調候補としての所定要件を満たす表示要素と判別し得る。強調候補判別部141aは、属性情報(図13参照)が示すユーザの属性としての趣味がサッカーであれば、サッカーが趣味の人において重要となるキーワード(サッカー、ゴールキーパー、オフサイド等)を登録した辞書を用いて、データを解析することで、強調候補としての表示要素か否かの判別を行う。また、ユーザの属性としての住所が、A市B町であれば、その場所に関する情報、例えばその市町村名(A市、B町)の記述を含む情報(地名、店舗案内、イベントの開催場所の情報等)を表す表示要素が強調候補としての所定要件を満たすと判別し得る。   The enhancement candidate determination unit 141a has a function of determining display elements that satisfy predetermined requirements as enhancement candidates. The enhancement candidate discriminating unit 141a determines whether or not the display element to be displayed based on the data is a display element that satisfies the predetermined requirement as the enhancement candidate, based on the information about the content of the data and the content of the data. It discriminates by analyzing. For example, by using a dictionary that pre-registers keywords that are generally important for people who have the same attributes, display elements that represent important keywords in data such as documents are identified as display elements that satisfy the predetermined requirements as enhancement candidates. Can do. If the hobby as the user attribute indicated by the attribute information (see FIG. 13) is soccer, the emphasis candidate determination unit 141a registers keywords (soccer, goalkeeper, offside, etc.) that are important for people who have a hobby of soccer. By using the dictionary to analyze the data, it is determined whether or not the display element is an enhancement candidate. Further, if the address as the user attribute is A city B town, information on the location, for example, information including the description of the city name (A city, B town) (location name, store information, event location) It can be determined that a display element representing information or the like satisfies a predetermined requirement as an enhancement candidate.

位置範囲決定部142aは、位置範囲の大きさを決定し、ユーザの視点の位置の検出結果に基づいてユーザの視線(視点)と所定の位置関係を満たす位置範囲内の表示要素を特定する機能を担う。位置範囲決定部142aは、記憶部110aに記憶されている範囲決定用テーブルを用いて、表示制御装置100aによりデータに基づいて表示面に表示される、強調候補としての所定要件を満たす表示要素のうちで、ユーザの視線と所定の位置関係を満たす位置範囲内のものを強調して表示するための位置範囲の大きさを決定する。   The position range determining unit 142a determines the size of the position range, and specifies display elements in the position range that satisfy a predetermined positional relationship with the user's line of sight (viewpoint) based on the detection result of the position of the user's viewpoint. Take on. The position range determination unit 142a uses the range determination table stored in the storage unit 110a to display display elements that satisfy the predetermined requirements as enhancement candidates that are displayed on the display surface based on the data by the display control device 100a. Among them, the size of the position range for emphasizing and displaying those in the position range that satisfies a predetermined positional relationship with the user's line of sight is determined.

(動作)
以下、上述の構成を備える表示制御装置100aの動作例について説明する。
(Operation)
Hereinafter, an operation example of the display control apparatus 100a having the above-described configuration will be described.

図15は、表示制御装置100aの実行する表示制御処理の一例を示すフローチャートである。以下、同図に即して表示制御装置100aの動作を説明する。   FIG. 15 is a flowchart illustrating an example of display control processing executed by the display control apparatus 100a. Hereinafter, the operation of the display control apparatus 100a will be described with reference to FIG.

表示制御装置100aは、入力装置106により入力されるユーザの属性に基づいて属性情報を記憶部110aに格納する(ステップS51)。なお、表示制御装置100aに対して属性情報は何らかの方法で少なくとも1度与えられればよく、データに基づく表示の度に入力される必要はない。   The display control device 100a stores the attribute information in the storage unit 110a based on the user attribute input by the input device 106 (step S51). Note that the attribute information may be given to the display control device 100a at least once by some method, and does not need to be input every time display is performed based on the data.

表示制御装置100aは、入力装置106により受け付けられるユーザによる操作等に応じて、通信部150によりサーバ装置200からデータを受信して記憶部110aに格納する(ステップS52)。データは、例えば、ウェブページに係るHTML文書、メール、ワードプロセッサ等のアプリケーションプログラム用の文書等である。   The display control device 100a receives data from the server device 200 through the communication unit 150 and stores the data in the storage unit 110a in accordance with a user operation accepted by the input device 106 (step S52). The data is, for example, a document for an application program such as an HTML document relating to a web page, mail, or a word processor.

表示制御部120は、記憶部110aに格納された、情報を示すデータに基づいて、ディスプレイ104の画面に、情報を表す表示要素を表示する(ステップS53)。表示制御部120は、各表示要素の表示態様を、予め定めている通常サイズ等と特定して表示する。ステップS53での表示により、ユーザは、ディスプレイ104の画面に表示された、複数の表示要素で表された情報を視認し得る。   The display control unit 120 displays a display element representing information on the screen of the display 104 based on the data indicating the information stored in the storage unit 110a (step S53). The display control unit 120 displays the display mode of each display element by specifying it as a normal size or the like set in advance. By the display in step S53, the user can visually recognize information represented by a plurality of display elements displayed on the screen of the display 104.

視線情報取得部130は、表示制御装置100aにおける視線検知機構から視線情報を取得し、表示面におけるユーザの視点を検出する(ステップS54)。   The line-of-sight information acquisition unit 130 acquires line-of-sight information from the line-of-sight detection mechanism in the display control apparatus 100a, and detects the user's viewpoint on the display surface (step S54).

続いて位置範囲決定部142aは、属性情報及びユーザの状況に基づき位置範囲の大きさを決定して、ユーザの視点の位置に応じて、強調対象を限定するための位置範囲の位置を決定する(ステップS55)。位置範囲決定部142aは、例えば、ステップS51で記憶部110aに格納された属性情報(図13参照)に基づいて、範囲決定用テーブル(図14参照)から、位置範囲の大きさを特定する。そして、実施の形態2で示したようなユーザが急いでいる状態であるか否かといったユーザの状況に応じて、その特定した大きさを修正する。例えば、ユーザが急いでいる状態であれば急いでいない状態に比べて位置範囲が狭くなるように修正する。ユーザの状況は、例えば、ユーザによる画面の連続閲覧時間、視線の動く速度等から算定したユーザの疲労度であってもよく、ユーザの疲労が大きい場合には、位置範囲を比較的狭くなるように修正することとしてもよい。   Subsequently, the position range determination unit 142a determines the size of the position range based on the attribute information and the user situation, and determines the position of the position range for limiting the enhancement target according to the position of the user's viewpoint. (Step S55). For example, the position range determination unit 142a specifies the size of the position range from the range determination table (see FIG. 14) based on the attribute information (see FIG. 13) stored in the storage unit 110a in step S51. And the specified magnitude | size is corrected according to a user's condition whether it is in the state where the user is in a hurry as shown in Embodiment 2. For example, if the user is in a hurry state, the position range is corrected to be narrower than that in a state where the user is not in a hurry. The user's situation may be, for example, the user's fatigue degree calculated from the continuous viewing time of the screen by the user, the speed of movement of the line of sight, etc. When the user's fatigue is great, the position range is relatively narrow. It is good also as correcting to.

次に、強調対象特定部140aは、位置範囲内の表示要素のうち、ユーザの属性情報に基づいて強調候補としての所定要件を満たす表示要素を判別して、位置範囲内の強調候補を強調対象として特定する(ステップS56)。   Next, the emphasis target specifying unit 140a determines a display element satisfying a predetermined requirement as an emphasis candidate based on user attribute information from among display elements in the position range, and emphasizes the emphasis candidate within the position range. (Step S56).

そして、表示制御部120は、強調対象特定部140aにより特定された表示要素を強調するようにデータに基づき表示要素の表示態様を定めて表示する(ステップS57)。このような強調するように表示要素の表示態様を定めて表示するため、例えばHTML文書(ファイル)に基づくウェブページの表示においては、ソースとなるHTMLファイルに表示態様を変化させるためのタグを挿入するようにして改変することにより強調等を実現することができる。例えば、ユーザ属性或いはユーザの状況に基づいて特定した表示要素に対して、予め強調の表示態様(例えば文字フォントのサイズ等)を定めたテーブルを表示制御システム10が保持し、視線が近辺に入るとそのテーブルの情報をもとに、ウェブページの表示に用いるHTMLファイルに強調表示のタグを挿入することで、強調した表示態様で表示することができる。これにより、例えば、強調対象特定部140aにより特定された表示要素(強調対象の表示要素)が目立つ第1表示態様(例えば第2表示態様よりも大きいサイズで拡大表示する態様等)で表示され、強調対象特定部140aにより特定されていない表示要素が目立たない第2表示態様で表示される。ステップS54〜S57は繰り返され、この結果として、ユーザの視点の移動に応じて強調対象が変化するため、強調して表示される表示要素が切り替わるようになる。なお、表示制御部120は、ステップS53での表示(初期表示)においてはディスプレイ104の画面に表示する全ての表示要素を第2表示態様で表示しておき、ステップS57で、強調対象の表示要素のみを第1表示態様に変更して表示することとし、一旦強調対象とされた表示要素が強調対象から外された時点で第2表示態様に変更して表示してもよい。   Then, the display control unit 120 determines and displays the display mode of the display element based on the data so as to emphasize the display element specified by the emphasis target specifying unit 140a (step S57). In order to display the display elements in such a manner as to emphasize them, for example, when displaying a web page based on an HTML document (file), a tag for changing the display form is inserted into the source HTML file. Thus, emphasis or the like can be realized by making modifications. For example, the display control system 10 holds a table that preliminarily displays an emphasis display mode (for example, character font size) for display elements specified based on user attributes or user conditions, and the line of sight enters the vicinity. Based on the information of the table, the highlighted display mode can be displayed by inserting the highlighted tag into the HTML file used for displaying the web page. Thereby, for example, the display element specified by the highlight target specifying unit 140a (the display element to be emphasized) is displayed in a conspicuous first display mode (for example, an enlarged display mode with a size larger than the second display mode). Display elements that are not specified by the emphasis target specifying unit 140a are displayed in an inconspicuous second display mode. Steps S54 to S57 are repeated, and as a result, the highlighting object changes according to the movement of the user's viewpoint, so that the display element to be highlighted is switched. Note that the display control unit 120 displays all display elements to be displayed on the screen of the display 104 in the second display mode in the display (initial display) in step S53, and in step S57, the display elements to be highlighted. Only the first display mode may be changed and displayed, and when the display element that is once the highlight target is removed from the highlight target, the second display mode may be changed and displayed.

(他の実施の形態等)
以上のように、本発明に係る技術の例示として実施の形態1〜3を用いて説明した。しかしながら、上述の実施の形態は一例にすぎず、各種の変更、付加、省略等が可能であることは言うまでもない。
(Other embodiments, etc.)
As mentioned above, it demonstrated using Embodiment 1-3 as an illustration of the technique which concerns on this invention. However, it goes without saying that the above-described embodiment is merely an example, and various modifications, additions, omissions, and the like are possible.

(1)上述した表示制御装置100、100aは視線検知機構を備えることとしたが、視線検知機構は、表示制御装置100の外部に存在してもよく、表示制御装置100、100aは、ユーザの視線に関する視線情報を取得できればよい。また、視線検知機構がユーザの視線或いは表示面におけるユーザの視点を検知する方法として、眼の赤外線撮影による方法の他、いかなる方法を用いてもよい。また、表示制御装置100は、視線検知機構から視線情報を得る代わりに、入力装置106であるポインティングデバイスが指す位置(カーソル、マウスポインタ等で指す位置等)を視点と看做して、ポインティングデバイスが指す位置の情報を、視線を示す視線情報として取得することとしてもよい。   (1) Although the display control devices 100 and 100a described above are provided with a line-of-sight detection mechanism, the line-of-sight detection mechanism may exist outside the display control device 100, and the display control devices 100 and 100a It is only necessary to obtain line-of-sight information regarding the line of sight. In addition, as a method for detecting the user's line of sight or the user's viewpoint on the display surface by the line-of-sight detection mechanism, any method other than the method using infrared imaging of the eyes may be used. Further, instead of obtaining the line-of-sight information from the line-of-sight detection mechanism, the display control apparatus 100 regards the position pointed to by the pointing device that is the input device 106 (the position pointed by the cursor, the mouse pointer, etc.) as the viewpoint, and the pointing device. It is good also as acquiring the information of the position which pointed out as gaze information which shows a gaze.

(2)表示要素は、例えばディスプレイの画面である表示面に表示されることとしたが、プロジェクタによりスクリーン、壁等に投影される投影画面等の表示面に表示されるものであってもよい。この表示面は、平面であっても曲面であってもよい。また、表示要素は、2次元的に表示面に表示される他、空間への投影等により立体(3次元)的に表示されるものであってもよい。表示制御装置100等において強調対象として特定され得る表示要素は、ユーザの視線と所定の位置関係を満たす表示要素であるところ、例えば、空間においてユーザの視線(直線)から一定半径の円筒に含まれる表示要素等であってもよい。   (2) The display element is displayed on a display surface which is a screen of a display, for example. However, the display element may be displayed on a display surface such as a projection screen projected on a screen, a wall or the like by a projector. . This display surface may be a flat surface or a curved surface. Further, the display element may be displayed in a three-dimensional (three-dimensional) manner by being projected onto a space or the like in addition to being displayed two-dimensionally on the display surface. The display elements that can be specified as an emphasis target in the display control device 100 or the like are display elements that satisfy a predetermined positional relationship with the user's line of sight, for example, are included in a cylinder having a constant radius from the user's line of sight (straight line) in space. It may be a display element or the like.

(3)上述した表示制御装置100、100aはディスプレイ104を備えることとしたが、必ずしもディスプレイ104を備える必要はない。例えば、表示制御部120は、外部の表示装置(ディスプレイ等)に対して1以上の表示要素を含む画像表示用の映像信号を出力することでその表示装置での表示を制御することとしてもよい。表示制御システム10は、例えば、表示装置(ディスプレイ等)、表示装置上の表示を制御する表示制御装置、表示装置上の表示を制御するサーバ装置、表示制御装置の一部の機能を分担するサーバ装置等のうち1つ以上を含む形態をとり得る。   (3) Although the display control devices 100 and 100a described above include the display 104, it is not always necessary to include the display 104. For example, the display control unit 120 may control the display on the display device by outputting a video signal for image display including one or more display elements to an external display device (display or the like). . The display control system 10 includes, for example, a display device (display, etc.), a display control device that controls display on the display device, a server device that controls display on the display device, and a server that shares some functions of the display control device. It can take the form of including one or more of the devices and the like.

(4)実施の形態3では、範囲決定用テーブル(図14)を用いて位置範囲決定部142aにより位置範囲が決定されることとした。表示要素の表示の基礎となる情報を示すデータ(文書等)が、例えば、パラグラフ単位、3行等の行数単位、100画素等といった画素数単位等といった範囲の大きさについて指定する範囲指定要素を含むこととし、位置範囲決定部142aは、範囲決定用テーブルを用いる代わりに、この範囲指定要素に基づいて位置範囲を決定することとしてもよい。例えば図7のHTML文書における<view size>等といったタグにより例えば100画素四方の大きさ等といった範囲の大きさを示すこととしてもよい。この他、位置範囲決定部142aは、データが示す情報を表す1以上の表示要素の配置、サイズ等を示すレイアウト情報に基づいて位置範囲の決定を行うこととしてもよい。レイアウト情報において表示要素の配置は、例えば、画面における位置座標、或いは、1行あたりの文字数、行間隔等の情報で示され得る。このレイアウト情報は、表示要素を表示するための文書等のデータの一部として示されていてもよいし、別個に存在してもよい。位置範囲決定部142aは、例えば、レイアウト情報に基づいて、メール、文書等のデータにおける文字列の隙間が多い程、位置範囲を大きく決定することとしてもよい。   (4) In the third embodiment, the position range is determined by the position range determination unit 142a using the range determination table (FIG. 14). A range designating element for designating the size of a range in which data (document or the like) indicating information that is the basis of display of a display element is, for example, a paragraph unit, a line number unit such as 3 lines, or a pixel number unit such as 100 pixels The position range determination unit 142a may determine the position range based on the range specifying element instead of using the range determination table. For example, a size such as a size of 100 pixels square may be indicated by a tag such as <view size> in the HTML document of FIG. In addition, the position range determination unit 142a may determine the position range based on layout information indicating the arrangement, size, and the like of one or more display elements indicating information indicated by the data. In the layout information, the arrangement of display elements can be indicated by, for example, position coordinates on the screen, information such as the number of characters per line, line spacing, and the like. This layout information may be shown as part of data such as a document for displaying a display element, or may exist separately. For example, the position range determination unit 142a may determine the position range to be larger as the character string gap in the data such as mail and document increases, based on the layout information.

(5)上述したHTML文書、ワードプロセッサ等の特定アプリケーションプログラム用の文書ファイル、メール、地図データ、デジタル書籍等といった、情報を示すデータは、動画を示す動画情報(動画の再生領域を指定する情報)を含んでもよい。その動画の再生領域となる表示要素としての動画表示オブジェクトについて、表示制御部120は、強調を、その再生領域で動画を再生することにより行うこととしてもよい。具体例として、表示制御装置100、100aは、HTML文書に、<video src=“動画.mp4” poster=“1フレーム.jpg”></video>等の記述が含まれることに基づき表示される動画表示オブジェクトを強調するときには、動画.mp4を再生し、強調しないときには、1フレーム.jpgに係る静止画を表示するようにしてもよい。また、表示制御部120は、例えば、広告用の動画を表示するための再生領域を含み、非強調時において再生領域内に静止画で広告を表示している動画表示オブジェクトを、強調時に、再生領域内で広告用の動画を再生(例えば経時的に変化する動画の映像を表示)するように表示制御を行い得る。また、データは、情報を表示するための表示領域に係る領域情報を示すものであってもよい。この場合に、表示制御装置は、データに基づいて、領域情報を表す表示要素としての、表示領域を含む表示領域オブジェクトを、表示するよう制御し、表示制御部120は、表示領域オブジェクトの表示領域にユーザの属性情報に応じた情報を挿入することにより、その表示領域オブジェクトについての強調を行うこととしてもよい。表示領域オブジェクトは、例えば、広告バナー等の情報を表示する表示領域を含む一種の表示要素である。これにより、例えば、属性情報を趣味に係る属性とすると、ユーザの趣味に関連する情報が表示領域オブジェクトの表示領域に挿入され得る。このため、ユーザ毎に挿入される情報が異なり得る。この挿入される情報は、例えば表示制御システムが属性情報毎に対応付けて保有している情報のうちから、選定され得る。   (5) Data indicating information such as the above-described HTML document, document file for a specific application program such as a word processor, mail, map data, digital book, etc. is moving image information indicating moving images (information for specifying a reproduction area of moving images). May be included. The display control unit 120 may perform emphasis on the moving image display object as a display element serving as the moving image reproduction area by reproducing the moving image in the reproduction area. As a specific example, the display control apparatuses 100 and 100a are displayed based on the fact that a description such as <video src = “moving picture.mp4” poster = “1 frame.jpg”> </ video> is included in the HTML document. When emphasizing a video display object, a video. When playing mp4 and not emphasizing it, 1 frame. A still image related to jpg may be displayed. In addition, the display control unit 120, for example, includes a reproduction area for displaying a moving image for advertisement, and reproduces a moving image display object displaying an advertisement as a still image in the reproduction area when not emphasized. Display control can be performed so that a moving image for advertisement is reproduced in the region (for example, a moving image that changes over time is displayed). Further, the data may indicate area information related to a display area for displaying information. In this case, the display control device controls to display the display area object including the display area as the display element representing the area information based on the data, and the display control unit 120 displays the display area object display area. The display area object may be emphasized by inserting information corresponding to the attribute information of the user. The display area object is a kind of display element including a display area for displaying information such as an advertisement banner. Thereby, for example, when attribute information is an attribute related to a hobby, information related to the user's hobby can be inserted into the display area of the display area object. For this reason, the information inserted for every user may differ. This inserted information can be selected from, for example, information that the display control system holds in association with each attribute information.

(6)上述した表示制御装置100、100aにおける機能構成要素の機能分担は一例にすぎず、任意の分担が可能である。例えば、強調対象特定部140は、表示制御部120における表示制御の一部、つまり、強調対象を強調するためにその強調対象を特定する部分を分担するものとして構成されてもよく、表示制御部120に包含されていてもよい。   (6) The function sharing of the functional components in the display control devices 100 and 100a described above is merely an example, and arbitrary sharing is possible. For example, the emphasis target specifying unit 140 may be configured to share a part of display control in the display control unit 120, that is, a part for specifying the emphasis target in order to emphasize the emphasis target. 120 may be included.

(7)上述した表示制御処理(図4参照)では、表示要素がユーザの視線と所定の位置関係に係る条件を満たすか否かの判定を、視点から一定範囲内の位置範囲を定めて、その位置範囲内に表示要素が含まれるか否かにより行う手順(ステップS14、S15)を示したが、各表示要素から一定範囲内の領域を定めて、その領域内に視点が含まれるか否かにより行ってもよい。   (7) In the display control process (see FIG. 4) described above, a determination is made as to whether or not the display element satisfies a condition relating to a user's line of sight and a predetermined positional relationship. Although the procedure (steps S14 and S15) performed based on whether or not a display element is included in the position range is shown, an area within a certain range is determined from each display element, and whether or not a viewpoint is included in the area. This may be done depending on the situation.

(8)上述の実施の形態1では、表示する情報を示すデータであるHTML文書にimportantタグを記述した例を示したが、このデータは、XML文書であってもよく、表示制御装置100は、XML文書に対応付けられたスタイルシートに基づいてXML文書に基づく表示要素の表示態様を特定するものであってもよい。また、HTML文書にリンク情報が示される例を示したが、リンク情報は、HTML文書の他、ワードプロセッサ等のアプリケーションプログラム用の文書等にも、他の文書(外部文書)へのアクセスのための情報として含まれ得る。このため、表示制御装置100では、例えば、ワードプロセッサ等のアプリケーションプログラムにおいてその外部文書が利用(閲覧)された回数を管理していてもよく、この回数に応じて、強調候補判別部141が、リンク情報に係る表示要素が所定要件を満たすか否かを判別することとしてもよい。   (8) In the first embodiment described above, an example is described in which an important tag is described in an HTML document that is data indicating information to be displayed. However, this data may be an XML document, and the display control apparatus 100 The display mode of the display element based on the XML document may be specified based on the style sheet associated with the XML document. Moreover, although the example in which link information is shown in the HTML document has been shown, the link information is used for accessing other documents (external documents) in HTML documents as well as documents for application programs such as word processors. Can be included as information. For this reason, the display control apparatus 100 may manage, for example, the number of times that the external document is used (viewed) in an application program such as a word processor. It may be determined whether or not the display element related to the information satisfies a predetermined requirement.

(9)上述した位置範囲決定部142は、ユーザの視点との関係で位置範囲を決定して位置範囲内の表示要素を特定することとしたが、範囲ではなくユーザの視線上にある表示要素を特定することとしてもよい。また、位置範囲決定部142は、ユーザの視点の位置に基づいて、ユーザの視点を含まない位置範囲を決定してもよい。また、位置範囲の形状は、矩形、円に限られず、多角形その他のいかなる形状であってもよい。   (9) The position range determination unit 142 described above determines the position range in relation to the user's viewpoint and specifies the display element in the position range. However, the display element is not on the range but on the user's line of sight. It is good also as specifying. Further, the position range determination unit 142 may determine a position range that does not include the user viewpoint based on the position of the user viewpoint. The shape of the position range is not limited to a rectangle and a circle, and may be any other shape such as a polygon.

(10)上述したユーザの属性情報は、ユーザについて測定された情報(例えばユーザの現在地等)であってもよい。位置範囲決定部142aは、位置範囲の大きさについて、ユーザの属性情報と、ユーザが急いでいる状態か否か等といったユーザの状況との両方を用いて決定することとしたが、その一方だけを用いて決定することとしてもよい。また、強調候補判別部141aは、ユーザの属性情報に基づいて、データを解析して、各表示要素が強調候補としての所定要件を満たすか否かを判別することとしたが、強調候補としての所定要件を満たすか否かを、ユーザ属性を用いずに、データの内容に関する情報(例えば、データのジャンル、トピック等を示す情報)から判別してもよい。データがHTML文書の場合においては例えばタイトル、見出し等を示すタグに基づいて、ジャンル等を特定してもよい。例えば、ジャンル毎に注目されるべき情報項目等を対応付けた辞書を用いて、データが書評というジャンルに該当する場合に、書籍タイトル、著者名等を注目されるべき情報と選定し、書籍タイトル、著者名等を表す表示要素を強調候補としての所定要件を満たす表示要素と判別し得る。また、例えばデータがコンピュータプログラムというジャンルに該当する場合において、エラー箇所を表す表示要素を強調候補としての所定要件を満たす表示要素と判別し得る。また、強調候補判別部141、141aは、強調候補としての所定要件を満たす表示要素であるか否かについて、ユーザが過去に閲覧した文書に基づいて判別することとしてもよい。このために、表示制御装置100、100aは、ユーザが過去に閲覧した文書(例えばユーザがアクセスしたHTML文書等)についての記録(ログ情報)を記憶部等に蓄積してもよい。例えば、ユーザが過去に閲覧した文書の内容を参照することにより、その文書に所定数以上含まれる言葉を表す表示要素が、強調候補としての所定要件を満たすと判別することとしてもよい。また、例えば、キーワードを登録した辞書を用いて、ユーザが過去に閲覧した文書からキーワードを抽出し、その抽出したキーワードを表す表示要素が、強調候補としての所定要件を満たすと判別することとしてもよい。   (10) The above-described user attribute information may be information measured for the user (for example, the user's current location). The position range determination unit 142a determines the size of the position range using both the user attribute information and the user situation such as whether or not the user is in a hurry, but only one of them is determined. It is good also as determining using. Further, the enhancement candidate determination unit 141a analyzes the data based on the user attribute information and determines whether each display element satisfies the predetermined requirement as the enhancement candidate. Whether or not the predetermined requirement is satisfied may be determined from information on the contents of the data (for example, information indicating the genre, topic, etc. of the data) without using the user attribute. In the case where the data is an HTML document, for example, a genre or the like may be specified based on a tag indicating a title, a heading, or the like. For example, using a dictionary in which information items to be noted for each genre are associated, and when the data corresponds to a genre of book reviews, the book title, author name, etc. are selected as information to be noted, and the book title Thus, a display element representing an author name or the like can be determined as a display element that satisfies a predetermined requirement as an emphasis candidate. For example, when the data corresponds to a genre called a computer program, a display element representing an error part can be determined as a display element satisfying a predetermined requirement as an enhancement candidate. The enhancement candidate determination units 141 and 141a may determine whether or not the display element satisfies a predetermined requirement as an enhancement candidate based on a document browsed in the past by the user. For this purpose, the display control devices 100 and 100a may accumulate records (log information) about documents (for example, HTML documents accessed by the user) that the user has browsed in the past in a storage unit or the like. For example, by referring to the contents of a document browsed in the past by the user, it may be determined that a display element representing a word included in the document satisfies a predetermined requirement as an emphasis candidate. Alternatively, for example, using a dictionary in which keywords are registered, keywords may be extracted from documents browsed by the user in the past, and it may be determined that a display element representing the extracted keywords satisfies a predetermined requirement as an enhancement candidate. Good.

(11)上述した表示制御部120は、強調対象の表示要素を第1表示態様(例えば第2表示態様よりサイズが大きい態様、下線が付された態様等)にし、強調対象でない表示要素を第2表示態様にして表示するよう表示制御を行うこととしたが、この第1表示態様は、第2表示態様に比べて目立つ態様であればよい。表示制御部120は、表示制御としての表示要素の強調を、例えば、その表示要素をカラーである第1表示態様で表示し、その表示要素以外の1以上の表示要素をモノクロである第2表示態様で表示することにより行い得る。カラーでの表示とは、表示要素の色として白色、灰色、黒色以外の色を含ませて表示することであり、モノクロでの表示とは、表示要素の色として白色、灰色、黒色の範囲内の色だけを用いて表示することである。なお、灰色は、特定の単色に限られず、例えば濃淡の異なる複数階調の各灰色を含み得る。具体的なカラー或いはモノクロでの表示の方法として、表示要素が画像であれば画像処理(例えば所謂色調補正等)を施すことで色を変更(モノクロ化等)を行い、また、表示要素が文字の場合に例えば文字色を変更するようにHTML文書等を書き換えること等で実現し得る。また、表示制御部120は、表示制御としての表示要素の強調を、例えば、その表示要素をある解像度の第1表示態様で表示し、その表示要素以外の1以上の表示要素を第1表示態様の解像度よりも低下させた解像度の第2表示態様で表示することにより行い得る。例えば、表示要素の画像(画素の集合)に対して一定範囲毎にその範囲内の画素群の値の平均値をその範囲の各画素の値として与える画像処理等を用いることで解像度を低下させることができる。また、一例としては、表示要素が画像であれば、その画像に対して、平滑化等の画像処理を施すことで解像度を低下させ、表示要素が文字であれば、通常の文字フォントから予め対応付けてある解像度の低い文字フォントに変更するようにHTML文書等を書き換えること等で、解像度の低下を実現し得る。また、表示制御部120は、表示制御としての表示要素の強調を、例えば、その表示要素をある第1表示態様で表示し、その表示要素以外の1以上の表示要素を第1表示態様の表示要素よりもエッジを弱めた第2表示態様で表示することにより行い得る。表示要素についてのエッジは、例えば、表示要素における画素の濃度(輝度)勾配の変化が相対的に急峻な部分(例えば輪郭等)であり、エッジを弱めた第2表示態様は、エッジを弱めない場合である第1表示態様に対してエッジの急峻さの度合い(例えば濃度勾配)が小さくなるように画像処理を施すことで実現し得る。また、これは、例えば表示要素が画像であれば、その画像に対して画像処理を施すことでエッジ強度を修正し、表示要素が文字であれば、通常の文字フォントから予め対応付けてあるエッジ強度を弱めた文字フォントに変更するようにHTML文書等を書き換えること等で、実現し得る。   (11) The display control unit 120 described above changes the display element to be emphasized to the first display mode (for example, a mode larger than the second display mode, an underlined mode, etc.), and sets the display element that is not the highlight target to the first display mode. Although the display control is performed so that the display is performed in the two display mode, the first display mode may be a conspicuous mode as compared with the second display mode. The display control unit 120 displays the emphasis of the display element as the display control, for example, in a first display mode in which the display element is in color, and in the second display in which one or more display elements other than the display element are in monochrome. This can be done by displaying in a manner. Color display means that the display element color includes colors other than white, gray, and black. Monochrome display means that the display element color is within the range of white, gray, and black. It is to display using only the color of. Note that gray is not limited to a specific single color, and may include, for example, grays having a plurality of gradations with different shades. As a specific color or monochrome display method, if the display element is an image, the color is changed (monochrome etc.) by performing image processing (for example, so-called color tone correction), and the display element is a character. In this case, for example, it can be realized by rewriting an HTML document or the like so as to change the character color. Further, the display control unit 120 displays the emphasis of the display element as the display control, for example, in a first display mode with a certain resolution, and displays one or more display elements other than the display element in the first display mode. This can be done by displaying in the second display mode with a resolution lower than the resolution of. For example, the resolution is lowered by using image processing or the like that gives the average value of the pixel group in the range as the value of each pixel in the range with respect to the image (a set of pixels) of the display element. be able to. For example, if the display element is an image, the resolution is reduced by applying image processing such as smoothing to the image. If the display element is a character, the normal character font is used in advance. A reduction in resolution can be realized by rewriting an HTML document or the like so as to change to a low-resolution character font. Further, the display control unit 120 displays, for example, display element emphasis as display control by displaying the display element in a certain first display mode and displaying one or more display elements other than the display element in the first display mode. This can be done by displaying in the second display mode in which the edge is weaker than the element. The edge of the display element is, for example, a portion (for example, contour) in which the change in the pixel density (luminance) gradient in the display element is relatively steep, and the second display mode in which the edge is weakened does not weaken the edge This can be realized by performing image processing so that the degree of sharpness of the edge (for example, density gradient) is reduced with respect to the first display mode. In addition, for example, if the display element is an image, the edge strength is corrected by performing image processing on the image. If the display element is a character, an edge associated in advance from a normal character font is used. This can be realized by rewriting an HTML document or the like so as to change to a character font with reduced strength.

(12)上述した表示制御装置100は例えば通信部150及び記憶部110を含まず、外部の装置或いは記憶媒体からデータを取得する機能(言わば取得部)を有することとしてもよい。   (12) The display control apparatus 100 described above does not include the communication unit 150 and the storage unit 110, for example, and may have a function of acquiring data from an external device or storage medium (in other words, an acquisition unit).

(13)上記実施の形態における各装置(表示制御装置、サーバ装置等)を構成する構成要素の一部又は全部は、1個のシステムLSI(Large Scale Integration:大規模集積回路)から構成されているとしてもよい。システムLSIは、複数の構成部を1個のチップ上に集積して製造された超多機能LSIであり、具体的には、マイクロプロセッサ、ROM、RAM等を含んで構成されるコンピュータシステムである。前記RAMには、コンピュータプログラムが記録されている。前記マイクロプロセッサが、前記コンピュータプログラムに従って動作することにより、システムLSIは、その機能を達成する。また、上記各装置を構成する構成要素の各部は、個別に1チップ化されていてもよいし、一部又はすべてを含むように1チップ化されてもよい。また、ここでは、システムLSIとしたが、集積度の違いにより、IC、LSI、スーパーLSI、ウルトラLSIと呼称されることもある。また、集積回路化の手法はLSIに限るものではなく、専用回路又は汎用プロセッサで実現してもよい。LSI製造後に、プログラムすることが可能なFPGA(Field Programmable Gate Array)や、LSI内部の回路セルの接続や設定を再構成可能なリコンフィギュラブル・プロセッサを利用してもよい。更には、半導体技術の進歩又は派生する別技術によりLSIに置き換わる集積回路化の技術が登場すれば、当然、その技術を用いて機能ブロックの集積化を行ってもよい。バイオ技術の適用等が可能性としてあり得る。   (13) Part or all of the components constituting each device (display control device, server device, etc.) in the above-described embodiment are configured by one system LSI (Large Scale Integration). It may be. The system LSI is an ultra-multifunctional LSI manufactured by integrating a plurality of components on a single chip. Specifically, the system LSI is a computer system including a microprocessor, a ROM, a RAM, and the like. . A computer program is recorded in the RAM. The system LSI achieves its functions by the microprocessor operating according to the computer program. In addition, each part of the constituent elements constituting each of the above devices may be individually made into one chip, or may be made into one chip so as to include a part or all of them. Although the system LSI is used here, it may be called IC, LSI, super LSI, or ultra LSI depending on the degree of integration. Further, the method of circuit integration is not limited to LSI's, and implementation using dedicated circuitry or general purpose processors is also possible. An FPGA (Field Programmable Gate Array) that can be programmed after manufacturing the LSI, or a reconfigurable processor that can reconfigure the connection and setting of circuit cells inside the LSI may be used. Furthermore, if integrated circuit technology comes out to replace LSI's as a result of the advancement of semiconductor technology or a derivative other technology, it is naturally also possible to carry out function block integration using this technology. Biotechnology can be applied as a possibility.

(14)上記各装置(表示制御装置、サーバ装置等)を構成する構成要素の一部又は全部は、各装置に脱着可能なICカード又は単体のモジュールから構成されているとしてもよい。前記ICカード又は前記モジュールは、マイクロプロセッサ、ROM、RAM等から構成されるコンピュータシステムである。前記ICカード又は前記モジュールは、上記の超多機能LSIを含むとしてもよい。マイクロプロセッサが、コンピュータプログラムに従って動作することにより、前記ICカード又は前記モジュールは、その機能を達成する。このICカード又はこのモジュールは、耐タンパ性を有するとしてもよい。   (14) A part or all of the components constituting each of the above devices (display control device, server device, etc.) may be constituted by an IC card or a single module that can be attached to and detached from each device. The IC card or the module is a computer system including a microprocessor, a ROM, a RAM, and the like. The IC card or the module may include the super multifunctional LSI described above. The IC card or the module achieves its function by the microprocessor operating according to the computer program. This IC card or this module may have tamper resistance.

(15)本発明の一態様としては、上記に示す表示制御方法であるとしてもよい。また、この方法をコンピュータにより実現するコンピュータプログラムであるとしてもよいし、前記コンピュータプログラムからなるデジタル信号であるとしてもよい。また、本発明の一態様としては、前記コンピュータプログラム又は前記デジタル信号をコンピュータで読み取り可能な記録媒体、例えば、フレキシブルディスク、ハードディスク、CD−ROM、MO、DVD、DVD−ROM、DVD−RAM、BD(Blu-ray(登録商標) Disc)、半導体メモリ等に記録したものとしてもよい。また、これらの記録媒体に記録されている前記デジタル信号であるとしてもよい。また、本発明の一態様としては、前記コンピュータプログラム又は前記デジタル信号を、電気通信回線、無線又は有線通信回線、インターネットを代表とするネットワーク、データ放送等を経由して伝送するものとしてもよい。また、本発明の一態様としては、マイクロプロセッサとメモリを備えたコンピュータシステムであって、前記メモリは、上記コンピュータプログラムを記録しており、前記マイクロプロセッサは、前記コンピュータプログラムに従って動作するとしてもよい。また、前記プログラム又は前記デジタル信号を前記記録媒体に記録して移送することにより、或いは前記プログラム又は前記デジタル信号を、前記ネットワーク等を経由して移送することにより、独立した他のコンピュータシステムにより実施するとしてもよい。   (15) One aspect of the present invention may be the display control method described above. Further, the present invention may be a computer program that realizes this method by a computer, or may be a digital signal composed of the computer program. In one embodiment of the present invention, the computer program or the digital signal can be read by a computer, such as a flexible disk, a hard disk, a CD-ROM, an MO, a DVD, a DVD-ROM, a DVD-RAM, and a BD. (Blu-ray (registered trademark) Disc), recorded on a semiconductor memory, or the like. The digital signal may be recorded on these recording media. Further, as one aspect of the present invention, the computer program or the digital signal may be transmitted via an electric communication line, a wireless or wired communication line, a network typified by the Internet, data broadcasting, or the like. Further, an aspect of the present invention may be a computer system including a microprocessor and a memory, the memory recording the computer program, and the microprocessor operating according to the computer program. . In addition, the program or the digital signal is recorded on the recording medium and transferred, or the program or the digital signal is transferred via the network or the like and executed by another independent computer system. You may do that.

(16)上記実施の形態及び上記変形例で示した各構成要素及び機能を任意に組み合わせることで実現される形態も本発明の範囲に含まれる。   (16) Embodiments realized by arbitrarily combining the constituent elements and functions shown in the embodiment and the modification are also included in the scope of the present invention.

本発明は、文書、メール等に基づく表示のために利用可能である。   The present invention can be used for display based on documents, mails, and the like.

10 表示制御システム
100、100a 表示制御装置
101 プロセッサ
102 メモリ
103 通信インタフェース(I/F)
104 ディスプレイ
105 カメラ
106 入力装置
11 ネットワーク
110、110a 記憶部
120 表示制御部
130 視線情報取得部
140、140a 強調対象特定部
141、141a 強調候補判別部
142、142a 位置範囲決定部
150 通信部
160 属性情報取得部
200 サーバ装置
19a、19b、19c 視点
20a、20b、20c、30a、30b、30c 視線
21a、21b、21c、31a、31b、31c 画面
22a、22b、23a、24a、24b、32a、32b、33a、33b 表示要素
DESCRIPTION OF SYMBOLS 10 Display control system 100, 100a Display control apparatus 101 Processor 102 Memory 103 Communication interface (I / F)
DESCRIPTION OF SYMBOLS 104 Display 105 Camera 106 Input device 11 Network 110, 110a Storage part 120 Display control part 130 Gaze information acquisition part 140, 140a Emphasis target specific part 141, 141a Emphasis candidate discrimination | determination part 142, 142a Position range determination part 150 Communication part 160 Attribute information Acquisition unit 200 Server device 19a, 19b, 19c Viewpoint 20a, 20b, 20c, 30a, 30b, 30c Line of sight 21a, 21b, 21c, 31a, 31b, 31c Screen 22a, 22b, 23a, 24a, 24b, 32a, 32b, 33a 33b Display elements

Claims (1)

コンピュータに、1以上の情報を示すデータに基づいて、前記1以上の情報のうちの少なくとも1以上の情報を表す1以上の表示要素を表示面に表示するよう制御する表示制御処理を実行させるための制御プログラムであって、
前記表示制御処理は、
前記表示面におけるユーザの視点の位置を検出し、検出した当該視点の位置を前記ユーザの視線に関する視線情報として取得し、
前記データに基づいて表示される表示要素のうち、前記視線情報が示す前記ユーザの視線と所定の位置関係を満たし、かつ、強調候補としての所定要件を満たす表示要素を特定し、
特定した表示要素を強調して表示するように表示制御を行い、
前記表示制御として、前記視点の位置の検出結果及び前記データが示す情報を表す1以上の表示要素のレイアウトを示すレイアウト情報に基づいて位置範囲を決定し、前記データに基づいて前記表示面に表示されて前記所定要件を満たす表示要素のうち決定された当該位置範囲内の表示要素を特定し、特定した当該表示要素を強調するように、当該表示要素を第1表示態様にして前記表示面に表示し、当該表示要素以外の1以上の表示要素を前記第1表示態様と異なる第2表示態様にして前記表示面に表示する
制御プログラム。
To cause a computer to execute a display control process for controlling to display one or more display elements representing at least one of the one or more pieces of information on a display surface based on data indicating the one or more pieces of information Control program
The display control process includes:
Detecting the position of the user's viewpoint on the display surface, and acquiring the detected position of the viewpoint as line-of-sight information related to the line of sight of the user;
Among the display elements displayed based on the data, specify a display element that satisfies a predetermined positional relationship with the user's line of sight indicated by the line-of-sight information and satisfies a predetermined requirement as an enhancement candidate,
Display control is performed so that the specified display element is highlighted.
As the display control, a position range is determined based on the detection result of the position of the viewpoint and layout information indicating a layout of one or more display elements indicating information indicated by the data, and is displayed on the display surface based on the data. The display element in the determined position range is identified among the display elements that satisfy the predetermined requirement, and the display element is set to the first display mode on the display surface so as to emphasize the identified display element. A control program for displaying and displaying one or more display elements other than the display element on the display surface in a second display mode different from the first display mode.
JP2019124923A 2019-07-04 2019-07-04 Control program Active JP6770613B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2019124923A JP6770613B2 (en) 2019-07-04 2019-07-04 Control program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2019124923A JP6770613B2 (en) 2019-07-04 2019-07-04 Control program

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2015119380A Division JP6553418B2 (en) 2015-06-12 2015-06-12 Display control method, display control device and control program

Publications (2)

Publication Number Publication Date
JP2019164843A true JP2019164843A (en) 2019-09-26
JP6770613B2 JP6770613B2 (en) 2020-10-14

Family

ID=68065678

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2019124923A Active JP6770613B2 (en) 2019-07-04 2019-07-04 Control program

Country Status (1)

Country Link
JP (1) JP6770613B2 (en)

Also Published As

Publication number Publication date
JP6770613B2 (en) 2020-10-14

Similar Documents

Publication Publication Date Title
JP6553418B2 (en) Display control method, display control device and control program
CN105917369B (en) Modifying advertisement resizing for presentation in a digital magazine
JP4583218B2 (en) Method, computer program, and system for evaluating target content
JP5324669B2 (en) Display the OCR recognized text from the publication and the corresponding image for selection on the client device.
RU2662632C2 (en) Presenting fixed format documents in reflowed format
KR101253213B1 (en) Method and apparatus for controlling video display in mobile terminal
US20130054572A1 (en) Accurate search results while honoring content limitations
CA2780223C (en) Content displaying apparatus, content displaying method, content displaying program, recording medium, server apparatus, content offering method, and content offering program
JP2007286864A (en) Image processor, image processing method, program, and recording medium
WO2014155742A1 (en) Information processing system, control method for information processing system, information processing device, control method for information processing device, information storage medium, and program
US11270485B2 (en) Automatic positioning of textual content within digital images
WO2018130069A1 (en) Method and apparatus for generating bearing page for image collection content, computing device, and storage medium
WO2020117291A1 (en) Context aware skim-read friendly text view
WO2020071158A1 (en) Output content generation device, output content generation method, and program
JP6770613B2 (en) Control program
US20160042545A1 (en) Display controller, information processing apparatus, display control method, computer-readable storage medium, and information processing system
JP6576534B1 (en) Information display program, information display method, information display device, and information processing system
US10891021B2 (en) Dynamic variation for selection option information presentation
US20140337700A1 (en) Terminal device, web server, and method
JP5096997B2 (en) Similar color scheme generation apparatus, similar color scheme generation method, and similar color scheme generation program
US11526652B1 (en) Automated optimization of displayed electronic content imagery
JP7376185B2 (en) Post display control device, post display control method, and program
JP2012014597A (en) Attentional area display system, attentional area display method and attentional area display program
JP5508145B2 (en) Content display device, content display method, content display program, and recording medium
US20170115836A1 (en) Selection option information presentation system and method

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20190704

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20200821

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20200908

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20200925

R150 Certificate of patent or registration of utility model

Ref document number: 6770613

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150