WO2012002209A1 - 情報表示システム、情報表示装置、情報表示方法、情報表示プログラム、情報提供装置、および、記録媒体 - Google Patents

情報表示システム、情報表示装置、情報表示方法、情報表示プログラム、情報提供装置、および、記録媒体 Download PDF

Info

Publication number
WO2012002209A1
WO2012002209A1 PCT/JP2011/064237 JP2011064237W WO2012002209A1 WO 2012002209 A1 WO2012002209 A1 WO 2012002209A1 JP 2011064237 W JP2011064237 W JP 2011064237W WO 2012002209 A1 WO2012002209 A1 WO 2012002209A1
Authority
WO
WIPO (PCT)
Prior art keywords
information
display
position information
gaze
displayed
Prior art date
Application number
PCT/JP2011/064237
Other languages
English (en)
French (fr)
Inventor
真也 高見
Original Assignee
楽天株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 楽天株式会社 filed Critical 楽天株式会社
Priority to BR112012018903-4A priority Critical patent/BR112012018903B1/pt
Priority to KR1020127021060A priority patent/KR101400480B1/ko
Priority to ES11800674.1T priority patent/ES2533435T3/es
Priority to CN201180014107.6A priority patent/CN102804122B/zh
Priority to JP2012521904A priority patent/JP5124702B2/ja
Priority to US13/520,604 priority patent/US9396165B2/en
Priority to EP11800674.1A priority patent/EP2515221B1/en
Publication of WO2012002209A1 publication Critical patent/WO2012002209A1/ja

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00Handling natural language data
    • G06F40/10Text processing
    • G06F40/103Formatting, i.e. changing of presentation of documents
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90Details of database functions independent of the retrieved data types
    • G06F16/95Retrieval from the web
    • G06F16/957Browsing optimisation, e.g. caching or content distillation
    • G06F16/9577Optimising the visualization of content, e.g. distillation of HTML documents
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013Eye tracking input arrangements
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/0485Scrolling or panning
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048Indexing scheme relating to G06F3/048
    • G06F2203/04806Zoom, i.e. interaction techniques or interactors for controlling the zooming operation

Definitions

  • the present invention relates to a technical field of an information display system, an information display device, an information display method, an information display program, an information providing device, and a recording medium that provide information obtained by reducing Web pages and the like.
  • Patent Document 1 discloses a cursor pointer processing program that automatically moves a cursor pointer onto data in a screen updated by automatic scrolling in conjunction with automatic scrolling of data.
  • the present invention has been made in view of such a problem, and an example of the problem is displayed in a portion that is not displayed in the screen when there is an amount of content information that does not fit in the screen. It is an object of the present invention to provide an information display system, an information display device, an information display method, an information display program, an information providing device, and a recording medium that can easily confirm the location of the content related to the part.
  • the invention according to claim 1 is a display unit capable of displaying content information, and of the content information displayed on the display unit among the content information displayed on the display unit.
  • Display position information acquisition means for acquiring display position information for specifying a display portion
  • operation position information acquisition means for acquiring operation position information related to an operation position operated by a user in the display portion, and the operation position Based on the information, a gaze part identifying unit that identifies a gaze part gazed by the user in the display part, a feature element extraction unit that extracts a feature element from the gaze part, and the content that is not yet displayed on the display unit
  • An undisplayed portion of information is included in the undisplayed portion, and an undisplayed portion specifying means for specifying from the display position information
  • the contraction information contracted content information comprises a contraction information generating means for generating on the basis of the characteristic element, and the contraction information display means for displaying the contraction information on the display means.
  • the non-displayed part specifying means indicates the display position information and an initial display part of the content information on the display means.
  • the undisplayed portion is specified based on position information.
  • the information display system in the information display system according to the first or second aspect, there is no input for a certain period of time based on the input means for accepting input and the input information of the input means, and the input is made again.
  • Input determination information acquisition means for acquiring input determination information when the input information is acquired
  • the contraction information display means displays the input determination information on the display means when the input determination information is acquired.
  • the contraction information generation unit generates the contraction information
  • the contraction information display unit displays the contraction information when the display part or the gaze part is changed. It is characterized by being displayed.
  • the display position information for specifying the display portion of the content information displayed on the display means out of the content information displayed on the display means.
  • Display position information acquisition step for acquiring operation position information acquisition step for acquiring operation position information related to the operation position operated by the user in the display portion, and the display portion based on the operation position information by the user.
  • a gaze portion identifying step for identifying a gaze portion that has been watched a feature element extracting step for extracting a feature element from the gaze portion; and a non-displayed portion of the content information that is not yet displayed on the display means.
  • display position information for acquiring display position information for specifying a display portion of the content information displayed on the display means among the content information displayed on the display means on a computer.
  • a non-display portion identifying step for identifying a non-display portion of the content information not yet displayed on the display means from the display position information, and a feature element extracted from the gaze portion
  • the reduced information obtained by reducing the content information included in the undisplayed portion is A contraction information display step of displaying on the causes execution.
  • display position information for acquiring display position information for specifying a display portion of the content information displayed on the display means among the content information to be displayed on the display means by the computer.
  • a non-display portion identifying step for identifying a non-display portion of the content information not yet displayed on the display means from the display position information, and a feature element extracted from the gaze portion
  • the reduced information obtained by reducing the content information included in the undisplayed portion is to a contraction information display step of displaying an information display program for execution, the information display program is recorded in a computer-readable.
  • the invention according to claim 8 is a display for receiving from the terminal display position information for specifying a display portion of the content information displayed on the display unit among the content information displayed on the display unit of the terminal.
  • Position information receiving means for receiving operation position information related to an operation position operated by the user on the display portion from the terminal, and the display portion based on the operation position information.
  • Gaze part specifying means for specifying the gaze part that has been performed, feature element extraction means for extracting a feature element from the gaze part, and the undisplayed part of the content information that has not yet been displayed on the display unit, the display position information
  • Non-displayed part specifying means for specifying from the above and reduced information obtained by reducing the content information included in the non-displayed part.
  • Comprising a contraction information generating means for generating on the basis of the element, and a contraction information transmitting means for transmitting the contraction information to the terminal.
  • the invention according to claim 9 is a display position information acquisition means for acquiring display position information for specifying a display portion of the content information displayed on the display unit, among the content information to be displayed on the display unit.
  • the operation position information acquisition means for acquiring operation position information related to the operation position operated on the screen by the user from the operation unit, and the gaze portion watched by the user in the display portion based on the operation position information Gaze portion identifying means for identifying a feature element, feature element extracting means for extracting a feature element from the gaze portion, and an undisplayed portion of the content information that has not yet been displayed on the display section.
  • display part specifying means and reduced information obtained by reducing the content information included in the undisplayed part are generated. That comprises a contracted information generating means, and contraction information display means for displaying the contraction information on the display unit.
  • the display position information for specifying the display portion of the content information displayed on the display means, and the operation position information related to the operation position operated by the user on the display portion are acquired, and the operation position is acquired.
  • identify the gaze portion gazed by the user in the display portion extract the feature element from the gaze portion, identify the undisplayed portion of the content information that is not yet displayed on the display means, from the display position information,
  • By generating contraction information of content information included in the undisplayed part based on the feature elements if there is an amount of content information that does not fit on the screen, it is watched by the user in the part that is not displayed on the screen You can easily check the contents related to the parts.
  • FIG. 1 is a schematic diagram illustrating a schematic configuration example of the information display system according to the present embodiment.
  • the information display system 1 includes, for example, an information providing server (an example of an information providing apparatus) 10 that provides distribution of content such as a Web page and information (for example, a summary) obtained by reducing the Web page. And a terminal 20 (an example of an information display device) of a user who browses a Web page on the Internet.
  • an information providing server an example of an information providing apparatus
  • information for example, a summary
  • a terminal 20 an example of an information display device of a user who browses a Web page on the Internet.
  • the information providing server 10 and the terminal 20 are connected by a network 3 and can transmit and receive data using a communication protocol (for example, TCP / IP).
  • the network 3 is constructed by, for example, the Internet, a dedicated communication line (for example, a CATV (Community Antenna Television) line), a mobile communication network (including a base station, etc.), a gateway, and the like.
  • the information providing server 10 receives, from the terminal 20, display position information for specifying a display portion of the content information displayed on the display unit of the terminal 20 among the content information transmitted to the terminal 20. Then, the information providing server 10 generates contracted information such as summary information of content information not displayed on the display portion based on the display position information, and transmits the contracted information to the terminal 20.
  • FIG. 2 is a block diagram illustrating an example of a schematic configuration of the information providing server 10.
  • the information providing server 10 functioning as a computer includes a communication unit 11, a storage unit 12, an input / output interface unit 13, and a system control unit 14.
  • the system control unit 14 and the input / output interface unit 13 are connected via a system bus 15.
  • the communication unit 11 is connected to the network 3 to control the communication state with the terminal 20 and the like, and is further connected to the local area network to exchange data with a server on the local area network.
  • the storage unit 12 is configured by, for example, a hard disk drive or the like, and stores an operating system and a server program, various programs such as a program to be downloaded to the terminal 20 and executed, data, and the like. Note that the various programs may be acquired from, for example, another server device via the network 3, or may be recorded on a recording medium and read via a drive device.
  • the storage unit 12 includes a content database (hereinafter referred to as “content DB”) 12a, a contracted information database (hereinafter referred to as “contracted information DB”) 12b, and the like.
  • content DB a content database
  • contracted information DB contracted information database
  • the content DB 12a stores Web page files described in a markup language such as HTML (HyperText Markup Language) and XML (Extensible Markup Language).
  • the content DB 12a stores text data, image data, moving image data, and the like as information related to the Web page.
  • the contracted information DB 12b stores contracted information such as summary information summarizing information about Web pages.
  • contracted information such as summary information summarizing information about Web pages.
  • the contraction information of the information related to the Web page in addition to the summary information, a portion extracted from the Web page, a display in which the Web page is reduced, and the like can be cited.
  • operation information on the Web page in the terminal 20 is transmitted to the information providing server 10, or contracted information is transmitted from the information providing server 10.
  • the script etc. which acquire and display are embedded.
  • This script is described by, for example, known JavaScript, but is not limited to this, and can be arbitrarily selected. Details of these scripts are well-known techniques, and detailed explanations thereof are omitted.
  • the input / output interface unit 13 performs interface processing between the communication unit 11 and the storage unit 12 and the system control unit 14.
  • the system control unit 14 includes a CPU (Central Processing Unit) 14a, a ROM (Read Only Memory) 14b, a RAM (Random Access Memory) 14c, and the like.
  • the CPU 14 a reads out and executes various programs stored in the ROM 14 b and the storage unit 12, thereby performing web page transmission processing and the like based on a request from the terminal 20 or the like.
  • FIG. 3 is a block diagram illustrating an example of a schematic configuration of the terminal 20.
  • the terminal 20 functioning as a computer is a portable terminal such as a personal computer, a portable wireless telephone, or a PDA, and includes a communication unit 21, a storage unit 22, a display unit 23, and an operation unit. 24, an input / output interface unit 25, and a system control unit 26.
  • the system control unit 26 and the input / output interface unit 25 are connected via a system bus 27.
  • the communication unit 21 controls communication with the information providing server 10 through the network 3.
  • the communication unit 21 has a wireless communication function in order to connect to the mobile communication network of the network 3.
  • the storage unit 22 includes, for example, a hard disk drive and stores an operating system, a web browser program, and the like. Further, the storage unit 22 stores the movement of the scroll by the operation unit 24 and the movement of the pointer that moves on the display unit 23.
  • the various programs may be acquired via the network 3, for example, or may be recorded on a recording medium and read via a drive device.
  • the display unit 23 (an example of a display unit) is configured by, for example, a liquid crystal display element or an EL (Electro Luminescence) element.
  • the display unit 23 displays a pointer that is moved by a mouse operation, a Web page acquired from the information providing server 10, and the like.
  • the operation unit 24 (an example of an input unit) is configured by, for example, a keyboard and a mouse.
  • the display unit 23 is a touch switch type display panel such as a touch panel
  • the operation unit 24 acquires position information of a location where the screen of the display unit 23 is pressed.
  • the input means there may be an imaging means such as a camera or a sensor.
  • the input / output interface unit 25 is an interface between the communication unit 21, the storage unit 22, and the system control unit 26.
  • the system control unit 26 includes, for example, a CPU 26a, a ROM 26b, and a RAM 26c.
  • the CPU 26a reads and executes various programs stored in the ROM 26b, the RAM 26c, and the storage unit 22, or executes a Web page script
  • the system control unit 26 displays reduced information such as summary information. It is displayed on the display unit 23.
  • a graphic area for displaying content information on the display unit 23 is formed in the RAM 26c and the like.
  • FIG. 4 is a schematic diagram illustrating an example of content information provided by the information providing server 10.
  • FIG. 5 is a sequence diagram illustrating an operation example of displaying the contracted information in the information display system 1.
  • FIG. 6 is a schematic diagram illustrating an example of content information displayed on the terminal 20.
  • FIG. 7 is a schematic diagram illustrating an example of a screen for displaying the contracted information on the terminal 20.
  • FIG. 8 is a schematic diagram illustrating an example of the contraction information displayed on the terminal 20.
  • the terminal 20 receives content information from the information providing server 10.
  • the content information 30 (an example of content information to be displayed on the display unit 23) has an information amount that does not fit within the screen of the display unit 23 of the terminal 20.
  • the content information 30 includes a display area 31 (an example of a display part), an existing display area 32 (an example of a non-display part), and a non-display area 33 (an example of a non-display part) displayed on the screen of the Web browser 40. And divided.
  • the display area 31 is an area where the Y coordinate is Y1 to Y2.
  • the already-displayed area 32 is an area where the Y coordinate is 0 to Y1, and is already displayed in the screen of the Web browser 40, and is currently displayed in the screen of the Web browser 40 by the user's scrolling operation or the like. This is not an area.
  • the non-display area 33 is an area where the Y coordinate is Y2 to Ymax, and is not yet displayed in the screen of the Web browser 40.
  • the displayed area 32 and the non-display area 33 are non-display areas (an example of non-display parts) that are not currently displayed in the screen of the web browser 40.
  • the position coordinates in the X direction become the display position information.
  • the terminal 20 measures and stores operation position information for specifying a gaze area (an example of a gaze portion that is gazed by the user in the display portion) (step S1). Specifically, as shown in FIG. 6, the system control unit 26 of the terminal 20 moves the scroll in the display area 31 of the Web browser 40 by the user operation unit 24 and the locus of the pointer 45 moving on the display unit 23. Operation position information such as 45 a is measured and stored in the storage unit 22. As described above, the system control unit 26 of the terminal 20 displays the operation position information related to the operation position operated by the user on the display portion (display area 31) (screen, pointer movement, click, pinch-in, pinch-out, etc.). It functions as an example of operation position information acquisition means to acquire.
  • a gaze area an example of a gaze portion that is gazed by the user in the display portion
  • the terminal 20 acquires a reduced display trigger (step S2). Specifically, the system control unit 26 of the terminal 20 receives a signal such as a right click of the mouse of the operation unit 24, and displays a menu display frame on the content of the display area 31 in the Web browser 40 as shown in FIG. 46 is displayed. In the menu display frame 46, “display summary”, “display excerpt”, and “display reduced” for displaying contraction information are displayed. When “display summary” in the menu display frame 46 is selected, the system control unit 26 of the terminal 20 acquires a trigger for summary display as an example of a trigger for reduced display. The system control unit 26 of the terminal 20 acquires an extract display trigger when “display extract” is selected, and acquires a reduced display trigger when “display reduced” is selected.
  • the terminal 20 acquires display area information (step S3). Specifically, since the system control unit 26 of the terminal 20 acquires the display area information of the content information 30, the position coordinates (Y1, Y2) in the Y direction of the display area 31 where the content information 30 is displayed on the web browser 40. ) To get. More specifically, the system control unit 26 of the terminal 20 acquires the position coordinates of the display area 31 of the content information 30 as an example of display position information from the graphic area information of the RAM 26c. As described above, the system control unit 26 of the terminal 20 acquires display position information for specifying the display area 31 displayed on the display unit 23 among the content information 30.
  • Y2-Y1 is the display width Yw in the Y direction of the Web browser 40 opened on the display unit 23.
  • the system control unit 26 of the terminal 20 determines operation position information related to the operation position operated on the screen by the user. For example, the operation position for specifying the gaze area 34 in the display area 31 that is stored in the storage unit 22 from the scroll movement information in the Web browser 40 or the movement locus 45a of the pointer 45. Determine information.
  • the locus 45a such as the maximum value and the minimum value in the XY direction of the locus 45a of the pointer 45, the position where the locus 45a is folded back, and the point where the pointer 45 stays long.
  • the Y value and the position information of the pointer 45 may be stored in the storage unit 22.
  • the gaze area may be a gaze area 34 ⁇ / b> B that has been gaze in the already displayed area 32 as a display portion.
  • the terminal 20 transmits information on the display area / gaze area (step S4). Specifically, the system control unit 26 of the terminal 20 transmits the position coordinates (Y1, Y2) in the Y direction of the display area 31 of the content information 30 and the position coordinates (Ya, Y) of the gaze area 34 through the communication unit 21. The operation position information for specifying the gaze area such as Yb) is transmitted to the information providing server 10.
  • the information providing server 10 receives display area / gaze area information (step S5). Specifically, the system control unit 14 of the information providing server 10 displays the display position information for specifying the display area 31 of the content information 30 displayed on the display unit 23 of the terminal 20 and the screen in the display area 31 by the user. As an example of the operation position information regarding the operated operation position, the position coordinates (Y1, Y2) of the display area 31 in the Y direction, the position coordinates (Ya, Yb) of the gaze area 34 in the Y direction, and the like are received from the terminal 20.
  • the information providing server 10 specifies a gaze area (step S6). Specifically, the system control unit 14 of the information providing server 10 specifies the gaze area 34 from the operation position information such as the position coordinates (Ya, Yb) in the Y direction. Furthermore, as shown in FIG. 6, the system control unit 14 of the information providing server 10 may specify the gaze area 34 a based on the maximum value or the minimum value in the XY direction of the locus 45 a of the pointer 45.
  • the information providing server 10 extracts feature elements from the gaze area (step S7). Specifically, the system control unit 14 of the information providing server 10 determines texts such as sentences and phrases from the contents of the gaze area 34 and the gaze area 34a as examples of characteristic elements (characteristic elements of content in the gaze area). Information, image information, etc. are extracted. At this time, the system control unit 14 of the information providing server 10 applies the existing automatic summary generation method to the content information 30 to extract feature elements or reverse the appearance frequency of words in the content of the gaze area 34. The feature elements are extracted by a predetermined algorithm for extracting the feature elements such as the frequency. In addition, the system control unit 14 of the information providing server 10 may use, as a feature element, a nearby phrase or image in which the stay time of the pointer 45 is long based on the operation position information.
  • the information providing server 10 specifies a non-display area (an example of a non-display part) (step S8). Specifically, the system control unit 14 of the information providing server 10 converts the display area 32 and the non-display area 33 (non-display areas 32 and 33) of the content information 30 not displayed on the display unit 23 into the display area 31. It is specified from the position coordinates (Y1, Y2) and the position coordinates (0, Ymax) of the content information 30. More specifically, the system control unit 14 of the information providing server 10 specifies the position coordinates (0, Y1) as the position information of the displayed area 32 and the position coordinates (Y2, Ymax) as the position information of the undisplayed area 33. To do.
  • a non-display area an example of a non-display part
  • the system control unit 14 of the information providing server 10 determines the position coordinates (Y1, Y2) of the display area 31 and the content information 30 on the display unit 23.
  • the undisplayed area 33 is specified based on the initial position coordinates (0, Yw) as an example of the initial display position information indicating the initial display area.
  • the information providing server 10 summarizes the contents of the non-display area based on the feature elements (step S9). Specifically, the system control unit 14 of the information providing server 10 extracts a part of text information or image information including a feature element in the non-display area 33 and summarizes the part to generate summary information. A predetermined amount of text information or image information including feature elements is extracted to generate an excerpt, or a reduced image in the vicinity where the feature elements exist in the non-display area 33 is generated. As described above, the system control unit 14 of the information providing server 10 generates the reduced information of the content in the undisplayed area by using a predetermined algorithm for generating reduced information such as summary information, excerpts, and reduced images. . Note that the system control unit 14 of the information providing server 10 may specify text information and image information similar to feature elements in the non-display area 33 and generate contracted information such as summary information and reduced images.
  • the system control unit 14 of the information providing server 10 divides the content information 30 in the non-display area into predetermined units, obtains reduced information such as summary information and reduced display for each unit, and is closest to the feature element. Reduced information such as summary information of the contents may be reduced information displayed on the terminal 20.
  • the system control unit 14 of the information providing server 10 uses, for example, text described in an image annotation (ALT tag information) as a feature element, and from the undisplayed area based on the feature element. Reduced information such as summary information is generated.
  • the system control unit 14 of the information providing server 10 selects an image having characteristics similar to the image feature such as the size and color of the image of the feature element in the undisplayed area. It may be extracted from the content and may be reduced information.
  • the information providing server 10 transmits the contracted information (step S10). Specifically, the system control unit 14 of the information providing server 10 transmits contracted information such as summary information to the terminal 20 through the communication unit 11. Then, the system control unit 26 of the terminal 20 receives contracted information such as summary information from the information providing server 10 through the communication unit 21.
  • the terminal 20 displays the contraction information (step S11). Specifically, as illustrated in FIG. 8, the system control unit 26 of the terminal 20 summarizes an example of the contracted information in the summary display frame 41 opened on the content of the display area 31 on the screen of the Web browser 40. Information 35 is displayed. The summary information 35 is linked, and when clicked with the mouse of the operation unit 24 or the like, the system control unit 26 of the terminal 20 scrolls the screen of the Web browser 40 and corresponds to the summary information 35. Move to a location where the content information 30 is described. Further, when “display excerpt” is designated in the menu display frame 46, an excerpt of a portion including a feature element is displayed on the Web page. When “reduction display” is designated in the menu display frame 46, a reduced display obtained by reducing the screen information of the Web page is displayed.
  • the display position information for specifying the display area 31 of the content information 30, the gaze area 34 watched in the display area 31, and the gaze area 34 B watched in the existing display area 32 is received from the terminal 20, based on the operation position information, the gaze area 34, 34B is identified, the feature element is extracted from the gaze area 34, 34B, and is still displayed on the display unit 23
  • the content information non-display area 33 is identified from the display position information, the contract information such as the summary information of the content information included in the non-display area 33 is generated based on the feature element, and the contract information such as the summary information is generated.
  • display position information for example, position coordinates (Y1, Y2)
  • initial display position information for example, initial display position information (0, Yw)
  • display position information for example, position coordinates (Y1, Y2)
  • initial display position information for example, initial display position information (0, Yw)
  • the system control unit 26 of the terminal 20 may be a rectangular area or a region surrounded by a locus such as a pointer 45 or a touch on the screen by the user's freehand as the gaze area. In the case of a region surrounded by a locus, the gaze area may be a rectangular region including this region.
  • the system control unit 26 of the terminal 20 displays the vicinity of the position where the pointer stayed (stay point) or the position where the mouse click button was pressed on the screen of the Web browser 40 for a predetermined time or longer. It may be a gaze area.
  • the system control unit 26 of the terminal 20 may use a position where an input has been made on the touch panel, for example, a touched position, a pinch-in, or a vicinity of a pinched-in part as a gaze area.
  • the operation position information may be the coordinates of the four corners in the case of the rectangle selected area, or the coordinates of the four corners of the rectangle including this area in the case of the area surrounded by the freehand. Further, the operation position information may be the coordinates of the position where the pointer stayed, the coordinates of the position where the click button was pressed, or the coordinates of the position where the input was made on the touch panel. Further, the operation position information may be trajectory data itself.
  • FIG. 9 is a schematic diagram showing a modification of the contracted information displayed on the terminal 20.
  • FIG. 10 is a schematic diagram illustrating a modified example of the contraction information displayed on the terminal 20.
  • summary information 36 including image data 36 a may be displayed in the summary display frame 41 of the Web browser 40.
  • summary information 37 may be displayed on the title bar 42 of the Web browser 40.
  • the first summary information 35 and the second summary information 38 may be displayed in the summary display frame 41 of the Web browser 40. If the order of the first summary information 35 and the second summary information 38 is the order described in the content information 30, it becomes easier to grasp the contents of the content information 30 in the undisplayed area 33. .
  • FIG. 11 is a schematic diagram illustrating a modification of the content information provided by the information providing server 10.
  • the system control unit 14 of the information providing server 10 specifies an undisplayed area of content information that is not yet displayed on the display unit 23 with reference to, for example, the content DB 12a.
  • the system control unit 14 of the information providing server 10 may use a browsing history acquired from a cookie or the like.
  • a browsing history extracted from a browsing history DB (not shown) included in the information providing server 10 may be used.
  • a document 60 (an example of content information) covers three pages, and the already-displayed portion 62 of the first page that has already been displayed on the application screen 70, From the display portion 61 of the second page displayed on the screen 70, the system control unit 26 of the terminal 20 specifies the gaze portion 64 from the locus of the pointer 45 and the like as in step S6. Then, the system control unit 26 of the terminal 20 extracts the feature elements from the gaze portion 64 as in step S7, and summarizes the content of the third page of the undisplayed portion 63 based on the feature elements as in step S9.
  • Step S9 the system control unit 26 of the terminal 20 determines whether or not the page has been displayed by scrolling the mouse of the operation unit 24, an operation history of the page operation button 47 for displaying the content of the next page or the previous page, or the like. Determine.
  • step S2 the operation unit 24 of the terminal 20 and the system control unit 14 of the information providing server 10 input operation information and the like of the operation unit 24 of the terminal 20 as acquisition of a condensed display trigger such as a summary display. Based on the information, input determination information may be acquired when there is no input such as an operation for a certain period of time and an input such as an operation is performed again.
  • the system control unit 26 of the terminal 20 determines whether or not the web browser 40 is operated by the operation unit 24 such as a mouse or a keyboard. . Then, when there is an input from the operation unit 24, the system control unit 26 of the terminal 20 waits until there is no input from the operation unit 24.
  • the terminal 20 acquires the position coordinates. Therefore, the system control unit 26 of the terminal 20 displays the content information 30 on the Web browser 40 as in step S3.
  • the position coordinates (Y1, Y2) of the display area 31 in the Y direction are acquired.
  • the system control unit 26 of the terminal 20 acquires the position coordinates of the display area 31 of the content information 30 as an example of the display position information from the information on the graphic area of the RAM 26c.
  • the system control unit 26 of the terminal 20 In order to determine whether or not the state of no input from the operation unit 24 has elapsed for a predetermined time or longer, the system control unit 26 of the terminal 20 The presence or absence is determined and new display position information is acquired. This is to check the usage status such as whether the user is actually using the application of the terminal 20 without leaving his / her seat. In particular, the system control unit 26 of the terminal 20 checks whether or not there is an operation on the web browser 40. For example, the system control unit 26 of the terminal 20 determines whether or not there is an operation on the web browser 40 while working on another window screen or the like with the web browser 40 open.
  • the system control unit 26 of the terminal 20 analyzes an image captured by the camera, This information may be determined to check the usage status of the user, and it may be determined that there has been no input for a certain period of time and input has been made again.
  • step S4 when a predetermined time or more has elapsed, the system control unit 26 of the terminal 20 passes through the communication unit 21 as shown in step S4, the position coordinates (Y1, Y2) of the display area 31 of the content information 30 in the Y direction, The position coordinates (Ya, Yb) of the gaze area 34 in the Y direction and the like are transmitted to the information providing server 10, and the information providing server 10 performs steps S5 to S10.
  • the operation determination information is acquired when there is no operation for a certain period of time and the operation is performed again.
  • the summary information or the like is reduced.
  • the system control unit 26 of the terminal 20 may execute an information display program for displaying the contraction information on the display unit 23 of the terminal 20 by an agent such as a Web browser.
  • an agent such as a Web browser.
  • the display position information for specifying the display area 31 displayed on the display unit 23 or the gaze in the display area 31 is acquired from the operation unit 24, and the undisplayed area 33 that is not displayed on the display unit 23 among the content information is specified from the display position information.
  • the gaze areas 34 and 34a are identified, the feature elements are extracted from the gaze areas 34 and 34a, and the non-display area 33 of the content information not yet displayed on the display unit 23 is identified from the display position information. Then, generation of reduced information such as summary information of content information included in the non-display area 33 is generated based on the feature element, and the reduced information such as summary information is generated. And displays the information on the display unit 23. In particular, this applies to information input to the word processor as the content information 30. Also, a function such as displaying contraction information may be added to a Web browser or the like by an add-on.
  • system control unit 14 of the information providing server 10 displays a summary display frame 41 opened on the content of the display area 31 on the screen of the web browser 40 and displays summary information 35 in the summary display frame 41.
  • Reduction information such as summary information is displayed on the display unit 23 by generating a page or a program or transmitting reduction information such as summary information to the terminal 20.
  • the system control unit 14 of the information providing server 10 receives the operation information of the operation unit 24 of the terminal 20 from the terminal 20, and determines whether or not the operation is performed again for a certain period of time based on the operation information.
  • the operation determination information when the operation is performed again as the determination result may be acquired.
  • the contracted information such as summary information may be transmitted to the terminal 20.
  • system control unit 14 of the information providing server 10 obtains information about the scroll movement of the Web browser 40 by the operation unit 24 and the information about the locus 45 a of the pointer 45 moving on the display unit 23 measured by the terminal 20.
  • the operation from step S1 to step S4 may be performed after receiving from the terminal 20.
  • an area is related to the feature element based on the feature element. May be limited.
  • the system control unit 14 of the information providing server 10 narrows the portion to be summarized (the portion to be contracted) and increases the processing speed.
  • FIG. 13 is a sequence diagram showing a modified example of the operation for displaying the contracted information in the information display system 1.
  • FIG. 14 is a schematic diagram showing a modification of the gaze area in the content information of FIG.
  • the terminal 20 measures and stores the operation position information for specifying the gaze area as in step S1 (step S21).
  • the terminal 20 acquires and stores display area information (step S22).
  • the system control unit 26 of the terminal 20 acquires display area information and stores it in the storage unit 22 as in step S3. For example, as shown in FIG. 14, the position coordinates (Y3, Y4) in the Y direction of the display area 31 are acquired and stored in the storage unit 22.
  • the terminal 20 determines whether or not the display area or the gaze area has been changed (step S23). As shown in FIG. 14, the system control unit 26 of the terminal 20 detects a change in the display area 31 due to a movement such as scrolling in the Web browser 40 by the operation unit 24 and a change in the gaze area due to a movement or locus of the pointer 85. To do.
  • the system control unit 26 of the terminal 20 starts to scroll the web browser 40 and determines that the scrolling has stopped for a predetermined time, for example, after receiving a scroll signal from the operation unit 24, the scroll signal does not come for a predetermined time. In this case, it may be determined that the display area 31 has been changed.
  • the system control unit 26 of the terminal 20 compares the position coordinates (Yc, Yd) of the gaze area 80 in the Y direction with the position coordinates (Ye, Yf) of the gaze area 81 in the Y direction, and is greater than or equal to a predetermined value. When the position coordinates are moving, it is determined that the gaze area has been changed.
  • the pointer moves from the pointer 85 to the pointer 86 by the movement of the screen by scrolling with a mouse or the like, and moves from the pointer 86 to the position of the pointer 87 via the locus 86a and the locus 87a. Furthermore, it is assumed that the user has moved to the position of the pointer 88 via the locus 88a.
  • the system control unit 26 of the terminal 20 determines that the gaze area is changed when the staying point such as the pointer fluctuates, when the pointer moves, or when the mouse click button is newly pressed. You may judge.
  • the system control unit 26 of the terminal 20 may determine that the gaze area is changed when the coordinates of the four corners of the rectangle change.
  • the system control unit 26 of the terminal 20 may determine that the gaze area has been changed when the position input on the touch panel is different from a predetermined time before.
  • examples of changes in the gaze area include expansion and reduction of the gaze area and movement of the gaze area.
  • Examples of enlargement of the gaze area include a case where Yd of the position coordinates (Yc, Yd) in the Y direction of the gaze area 80 increases or a case where Yc decreases.
  • An example of the movement of the gaze area is movement from the gaze area 80 to the gaze area 81.
  • FIG. 14 in the case of the gaze area 80 to the gaze area 81, there is no overlapping area, but there may be an overlapping area.
  • the terminal 20 transmits position information of the display area / gazing area (step S24).
  • the system control unit 26 of the terminal 20 Operation position information such as the position coordinates (Y3, Y4) in the Y direction of the display area 31 of the content information 30 and the position coordinates (Ye, Yf) in the Y direction of the gaze area 81 are transmitted to the information providing server 10.
  • the system control unit 26 of the terminal 20 is configured such as the coordinate information of the X coordinate value and the Y coordinate value of the position indicated by the pointers 86, 87, 88, the start point and end point of the trajectories 86a, 87a, 88a, and the return point of the trajectory.
  • the coordinate information of the X coordinate value and the Y coordinate value at a position where the radius of curvature is a predetermined value or less, and the coordinate information of the trajectories 86a, 87a, 88a themselves may be transmitted.
  • the system control unit 26 of the terminal 20 transmits operation position information of the Y-direction position coordinates (Yc, Yd) of the gaze area 80 before scrolling together with the operation position information of the gaze area 81 after scrolling. May be.
  • the system control unit 26 of the terminal 20 may transmit display area difference information and gaze area difference information.
  • the system control unit 26 of the terminal 20 uses the Y-direction difference position coordinates (Y3-Y1, Y4-Y2) of the display area 31 and the Y-direction difference position coordinates (Ye-Yc, Yf-Yd) of the gaze area.
  • the difference information such as is transmitted.
  • the system control unit 26 of the terminal 20 may transmit difference information of the gaze area 81 with respect to the display area 31. For example, difference information of difference position coordinates (Ye ⁇ Y3, Yf ⁇ Y3) based on the start point Y3 in the Y direction of the display area 31 may be transmitted.
  • the information providing server 10 receives the position information of the display area / gazing area as in step S5 (step S25).
  • the information providing server 10 specifies a gaze area (step S26). Specifically, the system control unit 14 of the information providing server 10 specifies the gaze area 81 from the operation position information such as the position coordinates (Ye, Yf) in the Y direction. Furthermore, the system control unit 14 of the information providing server 10 may specify the gaze area 81a from the loci 86a and 87a of the pointers 86 and 87 as shown in FIG. For example, the system control unit 14 of the information providing server 10 may be a text region or the text region that is above (Y direction) or in the vicinity from the end point (position indicated by the pointer 87) of the locus 87a that is an example of the position where the pointer has stayed for a predetermined time.
  • the system control unit 14 of the information providing server 10 specifies the gaze area 81 from the operation position information such as the position coordinates (Ye, Yf) in the Y direction.
  • the system control unit 14 of the information providing server 10 may specify the gaze area 81a from the loc
  • a rectangular area (gaze area 81a) surrounding a non-blank area such as an image area may be specified from the content information 30 by image processing or the like based on the coordinate information of the end point of the locus 87a. Further, the system control unit 14 of the information providing server 10 may specify the gaze area 82a from a rectangular area surrounding a text area or the like below ( ⁇ Y direction) or in the vicinity from the position indicated by the pointer 88. Then, the system control unit 14 of the information providing server 10 may obtain the gaze area 82 from the identified gaze area 82a. Note that the system control unit 14 of the information providing server 10 may specify the gaze area 80a from a rectangular area that surrounds a text area or the like that is above or near the position indicated by the Y pointer 85.
  • the information providing server 10 extracts feature elements from the gaze areas 81 and 82 (gaze areas 81a and 82a) as in step S7 (step S27).
  • the system control unit 14 of the information providing server 10 may extract feature elements from both the gaze area 81 (81a) and the gaze area 82 (82a), or give priority to one gaze area. And feature elements may be extracted.
  • the system control unit 14 of the information providing server 10 extracts feature elements only from the gaze area 82 (82a) gazes after the gaze area 81 (81a).
  • a feature element is extracted from the area where the gaze area 81 (81 a) and the gaze area 82 (82 a) overlap. It may be a gaze area. As described above, by narrowing the gaze area from which the feature elements are extracted, the amount of information can be reduced, and information reflecting the user's preference can be displayed.
  • the information providing server 10 specifies an undisplayed area as in step S8 (step S28).
  • the information providing server 10 reduces the contents of the undisplayed area based on the feature elements as in step S9 (step S29).
  • the information providing server 10 transmits the contracted information as in step S10 (step S30).
  • the terminal 20 displays the contraction information as in step S11 (step S31).
  • the information display system 1 determines whether the display portion or the gaze portion has been changed based on the operation position information, and when the display portion (display area 31) or the gaze portion (gaze area 80) has been changed.
  • the display portion display area 31
  • the gaze portion gaze area 80
  • the system control unit 26 of the terminal 20 identifies the gaze area in step S6 (S26) (gaze part identifying means), extracts a feature element from the gaze area in step S7 (S27) (feature element extraction means),
  • the undisplayed area in step S8 (S28) may be specified (undisplayed portion specifying means), and the content in the undisplayed area may be contracted (contracted information generating means) based on the feature element in step S9 (S29).
  • the embodiment and the modification as described above may be realized by adding a program to the Web browser of the terminal 20.
  • the add-on program acquires the display position information for identifying the display portion of the content information displayed on the display means from among the content information to be displayed on the display means (steps S3 and S23). ), An operation position information acquisition step (corresponding to steps S1 and S21) for acquiring operation position information related to the operation position operated on the screen by the user in the display portion, and a user in the display portion based on the operation position information.
  • a gaze part identifying step (corresponding to step S6 and step S23) for identifying the gaze part that has been gazes at, and an undisplayed part specification for identifying the undisplayed part of the content information not yet displayed on the display means from the display position information Step (corresponding to step S8 and step S8) and gaze unit
  • a reduced information display step (corresponding to step S11 and step S31) for causing the display means to display reduced information obtained by reducing the content information included in the undisplayed portion based on the feature elements extracted from But you can.
  • the information providing server 10 extracts a feature element from the gaze portion, a feature element extraction step, and a contracted information generation step in which the contract information of the content information included in the undisplayed portion is generated based on the feature element. Execute.
  • the present invention is not limited to the above embodiments.
  • Each of the embodiments described above is an exemplification, and any configuration that has substantially the same configuration as the technical idea described in the claims of the present invention and has the same operational effects can be used. It is included in the technical scope of the present invention.
  • Information display system 3 Network 10: Information providing server (information providing apparatus) 12a: Content DB 12b: Reduction information DB 20: Terminal (information display device) 23: Display section (display means) 24: Operation unit 30, 50, 60: Content information 31: Display area (display part) 33: Undisplayed area (undisplayed part) 34, 34a, 80, 80a, 81, 81a, 82, 82a: gaze area (gaze portion) 35: Reduction information 52: Web page (display part) 53, 54, 55, 63: Web page (undisplayed part) 61: Display part 63: Undisplayed part 64: Gaze part

Abstract

 端末20の表示部23に表示させるコンテンツ情報のうち、表示部に表示されているコンテンツ情報の表示エリア31を特定するための表示位置情報を端末から受信し(S5)、表示エリアにおいてユーザにより画面操作された操作位置に関する操作位置情報を端末から受信し(S5)、操作位置情報に基づき、表示部分においてユーザによる注視され注視エリア34を特定し(S6)、注視エリアから特徴要素を抽出し(S7)、表示部に未だ表示されていないコンテンツ情報の未表示エリアを、表示位置情報から特定し(S8)、未表示エリアに含まれるコンテンツ情報の縮約情報を、特徴要素に基づき生成し(S9)、縮約情報を端末へ送信する(S10)。

Description

情報表示システム、情報表示装置、情報表示方法、情報表示プログラム、情報提供装置、および、記録媒体
 本発明は、Webページ等を縮約した情報を提供する情報表示システム、情報表示装置、情報表示方法、情報表示プログラム、情報提供装置、および、記録媒体の技術分野に関する。
 端末の表示画面上で一度に表示ができないサイズを有するWebページの場合、キーボードやマウス等の操作部によりスクロールして、Webページを見る必要がある。このような場合、ユーザの利便性を高めるために、自動スクロール等の技術が開発されている。例えば、特許文献1には、データの自動スクロールに連動して、カーソルポインタを自動スクロールによって更新された画面内のデータ上に自動的に移動させるカーソルポインタ処理プログラムが開示されている。
特開2004-326687号公報
 しかしながら、上記技術では、Webページ上で見ている箇所と同じ内容や、関連した内容を探したい場合、次々にスクロールをして探して、内容を逐次確認していく必要があった。
 本発明は、このような問題に鑑みてなされたものであり、その課題の一例は、画面内に収まらない分量のコンテンツ情報がある場合、画面内に表示されていない部分において、表示されている部分と関連した内容の箇所を容易に確認できる情報表示システム、情報表示装置、情報表示方法、情報表示プログラム、情報提供装置、および、記録媒体を提供することを目的とする。
 上記課題を解決するために、請求項1に記載の発明は、コンテンツ情報を表示可能な表示手段と、前記表示手段に表示させるコンテンツ情報のうち、前記表示手段に表示されている前記コンテンツ情報の表示部分を特定するための表示位置情報を取得する表示位置情報取得手段と、前記表示部分において、ユーザにより画面操作された操作位置に関する操作位置情報を取得する操作位置情報取得手段と、前記操作位置情報に基づき、前記表示部分においてユーザによって注視された注視部分を特定する注視部分特定手段と、前記注視部分から特徴要素を抽出する特徴要素抽出手段と、前記表示手段に未だ表示されていない前記コンテンツ情報の未表示部分を、前記表示位置情報から特定する未表示部分特定手段と、前記未表示部分に含まれるコンテンツ情報を縮約した縮約情報を、前記特徴要素に基づき生成する縮約情報生成手段と、前記縮約情報を前記表示手段に表示させる縮約情報表示手段と、を備える。
 請求項2に記載の発明は、請求項1に記載の情報表示システムにおいて、前記未表示部分特定手段が、前記表示位置情報と、前記表示手段における前記コンテンツ情報の初期の表示部分を示す初期表示位置情報と、に基づき、前記未表示部分を特定することを特徴とする。
 請求項3に記載の発明は、請求項1または請求項2に記載の情報表示システムにおいて、入力を受け付ける入力手段と、前記入力手段の入力情報に基づき、一定時間入力が無く、再度入力がなされた場合の入力判定情報を取得する入力判定情報取得手段と、を更に備え、前記縮約情報表示手段が、前記入力判定情報を取得した場合に、前記表示手段に表示させることを特徴とする。
 請求項4に記載の発明は、請求項1から請求項3のいずれか1項に記載の情報表示システムにおいて、前記操作位置情報に基づき、前記表示部分または前記注視部分が変更されたか否かを判定する判定手段を更に備え、前記表示部分または前記注視部分が変更された場合に、前記縮約情報生成手段が前記縮約情報を生成し、前記縮約情報表示手段が、前記縮約情報を表示させることを特徴とする。
 請求項5に記載の発明は、情報を表示する情報表示方法において、表示手段に表示させるコンテンツ情報のうち、前記表示手段に表示されている前記コンテンツ情報の表示部分を特定するための表示位置情報を取得する表示位置情報取得ステップと、前記表示部分において、ユーザにより画面操作された操作位置に関する操作位置情報を取得する操作位置情報取得ステップと、前記操作位置情報に基づき、前記表示部分においてユーザによって注視された注視部分を特定する注視部分特定ステップと、前記注視部分から特徴要素を抽出する特徴要素抽出ステップと、前記表示手段に未だ表示されていない前記コンテンツ情報の未表示部分を、前記表示位置情報から特定する未表示部分特定ステップと、前記未表示部分に含まれるコンテンツ情報の縮約情報を、前記特徴要素に基づき生成する情報縮約生成ステップと、前記縮約情報を前記表示手段に表示させる縮約情報表示ステップと、を有する。
 請求項6に記載の発明は、コンピュータに、表示手段に表示させるコンテンツ情報のうち、前記表示手段に表示されている前記コンテンツ情報の表示部分を特定するための表示位置情報を取得する表示位置情報取得ステップと、前記表示部分において、ユーザにより画面操作された操作位置に関する操作位置情報を取得する操作位置情報取得ステップと、前記操作位置情報に基づき、前記表示部分においてユーザによって注視された注視部分を特定する注視部分特定ステップと、前記表示手段に未だ表示されていない前記コンテンツ情報の未表示部分を、前記表示位置情報から特定する未表示部分特定ステップと、前記注視部分から抽出した特徴要素に基づいて前記未表示部分に含まれるコンテンツ情報を縮約した縮約情報を、前記表示手段に表示させる縮約情報表示ステップと、を実行させる。
 請求項7に記載の発明は、コンピュータに、表示手段に表示させるコンテンツ情報のうち、前記表示手段に表示されている前記コンテンツ情報の表示部分を特定するための表示位置情報を取得する表示位置情報取得ステップと、前記表示部分において、ユーザにより画面操作された操作位置に関する操作位置情報を取得する操作位置情報取得ステップと、前記操作位置情報に基づき、前記表示部分においてユーザによって注視された注視部分を特定する注視部分特定ステップと、前記表示手段に未だ表示されていない前記コンテンツ情報の未表示部分を、前記表示位置情報から特定する未表示部分特定ステップと、前記注視部分から抽出した特徴要素に基づいて前記未表示部分に含まれるコンテンツ情報を縮約した縮約情報を、前記表示手段に表示させる縮約情報表示ステップと、を実行させる情報表示プログラムであって、前記情報表示プログラムがコンピュータ読み取り可能に記録されている。
 請求項8に記載の発明は、端末の表示部に表示させるコンテンツ情報のうち、前記表示部に表示されている前記コンテンツ情報の表示部分を特定するための表示位置情報を前記端末から受信する表示位置情報受信手段と、前記表示部分において、ユーザにより画面操作された操作位置に関する操作位置情報を前記端末から受信する操作位置情報受信手段と、前記操作位置情報に基づき、前記表示部分においてユーザによって注視された注視部分を特定する注視部分特定手段と、前記注視部分から特徴要素を抽出する特徴要素抽出手段と、前記表示部に未だ表示されていない前記コンテンツ情報の未表示部分を、前記表示位置情報から特定する未表示部分特定手段と、前記未表示部分に含まれるコンテンツ情報を縮約した縮約情報を、前記特徴要素に基づき生成する縮約情報生成手段と、前記縮約情報を前記端末へ送信する縮約情報送信手段と、を備える。
 請求項9に記載の発明は、表示部に表示させるコンテンツ情報のうち、前記表示部に表示されている前記コンテンツ情報の表示部分を特定するための表示位置情報を取得する表示位置情報取得手段と、前記表示部分において、ユーザにより画面操作された操作位置に関する操作位置情報を、操作部から取得する操作位置情報取得手段と、前記操作位置情報に基づき、前記表示部分においてユーザによって注視された注視部分を特定する注視部分特定手段と、前記注視部分から特徴要素を抽出する特徴要素抽出手段と、前記表示部に未だ表示されていない前記コンテンツ情報の未表示部分を、前記表示位置情報から特定する未表示部分特定手段と、前記未表示部分に含まれるコンテンツ情報を縮約した縮約情報を、前記特徴要素に基づき生成する縮約情報生成手段と、前記縮約情報を前記表示部に表示させる縮約情報表示手段と、を備える。
 本発明によれば、表示手段に表示されているコンテンツ情報の表示部分を特定するための表示位置情報、および、表示部分においてユーザにより画面操作された操作位置に関する操作位置情報を取得し、操作位置情報に基づき、表示部分においてユーザによって注視された注視部分を特定し、注視部分から特徴要素を抽出し、表示手段に未だ表示されていないコンテンツ情報の未表示部分を、表示位置情報から特定し、未表示部分に含まれるコンテンツ情報の縮約情報を、特徴要素に基づき生成することにより、画面内に収まらない分量のコンテンツ情報がある場合、画面内に表示されていない部分において、ユーザによって注視された部分と関連した内容を容易に確認できる。
本発明の一実施形態に係る情報表示システムの概要構成例を示す模式図である。 図1の情報提供サーバの概要構成の一例を示すブロック図である。 図1の端末の概要構成の一例を示すブロック図である。 図1の情報提供サーバが提供するコンテンツ情報の一例を示す模式図である。 図1の情報表示システムにおいて縮約情報を表示する動作例を示すシーケンス図である。 図1の端末に表示されているコンテンツ情報の一例を示す模式図である。 図1の端末に縮約情報を表示するための画面の一例を示す模式図である。 図1の端末に表示された縮約情報の一例を示す模式図である。 図1の端末に表示された縮約情報の変形例を示す模式図である。 図1の端末に表示された縮約情報の変形例を示す模式図である。 図1の情報提供サーバが提供するコンテンツ情報の変形例を示す模式図である。 図1の情報提供サーバが提供するコンテンツ情報の変形例を示す模式図である。 図1の情報表示システムにおいて縮約情報を表示する動作の変形例を示すシーケンス図である。 図6のコンテンツ情報における注視エリアの変形例を示す模式図である。
 以下、図面を参照して本発明の実施形態について説明する。
[1.情報表示システムの構成および機能概要]
 まず、本発明の一実施形態に係る情報表示システムの構成および概要機能について、図1を用いて説明する。
 図1は、本実施形態に係る情報表示システムの概要構成例を示す模式図である。
 図1に示すように、情報表示システム1は、例えば、Webページ等のコンテンツの配信やWebページを縮約した情報(例えば、要約等)を提供する情報提供サーバ(情報提供装置の一例)10と、インターネット上のWebページを閲覧するユーザの端末20(情報表示装置の一例)と、を備えている。
 情報提供サーバ10と、端末20とは、ネットワーク3により接続され、通信プロトコル(例えば、TCP/IP)により、データの送受信が可能になっている。なお、ネットワーク3は、例えば、インターネット、専用通信回線(例えば、CATV(Community Antenna Television)回線)、移動体通信網(基地局等を含む)、および、ゲートウェイ等により構築されている。
 情報提供サーバ10は、端末20に送信したコンテンツ情報のうち、端末20の表示部に表示されているコンテンツ情報の表示部分を特定するための表示位置情報を端末20から受信する。そして、情報提供サーバ10は、表示位置情報に基づき、表示部分に表示されていないコンテンツ情報の要約情報等の縮約情報を生成し、端末20に送信する。
[2.サーバ等の構成および機能]
(2.1 情報提供サーバ10の構成および機能)
 次に、情報提供サーバ10の構成および機能について、図2を用いて説明する。
 図2は、情報提供サーバ10の概要構成の一例を示すブロック図である。
 図2に示すように、コンピュータとして機能する情報提供サーバ10は、通信部11と、記憶部12と、入出力インターフェース部13と、システム制御部14を備えている。そして、システム制御部14と入出力インターフェース部13とは、システムバス15を介して接続されている。
 通信部11は、ネットワーク3に接続して端末20等との通信状態を制御し、さらに、ローカルエリアネットワークに接続して、ローカルエリアネットワーク上のサーバとデータの送受信を行う。
 記憶部12は、例えば、ハードディスクドライブ等により構成されており、オペレーティングシステムおよびサーバプログラムや、端末20等にダウンロードして実行させるプログラム等の各種プログラムや、データ等を記憶する。なお、各種プログラムは、例えば、他のサーバ装置等からネットワーク3を介して取得されるようにしてもよいし、記録媒体に記録されてドライブ装置を介して読み込まれるようにしてもよい。
 また、記憶部12は、コンテンツデータベース(以下「コンテンツDB」とする。)12aや、縮約情報データベース(以下「縮約情報DB」とする。)12b等を有している。
 コンテンツDB12aには、HTML(HyperText Markup Language)、XML(Extensible Markup Language)等のマークアップ言語等により記述されたWebページのファイル等が記憶されている。また、コンテンツDB12aには、Webページに関する情報として、テキストデータや、画像データや、動画データ等が記憶されている。
 縮約情報DB12bには、Webページに関する情報を要約した要約情報等の縮約情報が記憶される。ここで、Webページに関する情報の縮約情報として、要約情報の他に、Webページから抜粋した部分や、Webページを縮小した表示等が挙げられる。
 なお、記憶部12に記憶されたWebページの一部には、情報表示プログラムの一例として、端末20におけるWebページの操作情報を情報提供サーバ10に送信したり、情報提供サーバ10から縮約情報を取得して表示させたりするスクリプト等が埋め込まれている。
 このスクリプトは、例えば公知のJavaScript等によって記述されているがこれに限定されることはなく、任意に選択することができる。また、これらのスクリプトの詳細については、公知技術であるため詳しい説明は省略する。
 次に、入出力インターフェース部13は、通信部11および記憶部12とシステム制御部14との間のインターフェース処理を行う。
 システム制御部14は、CPU(Central Processing Unit)14a、ROM(Read Only Memory)14b、RAM(Random Access Memory)14c等により構成されている。システム制御部14は、CPU14aがROM14bや記憶部12に記憶された各種プログラムを読み出し実行することにより、端末20等からの要求に基づき、Webページの送信処理等を行う。
(2.2 端末20の構成および機能)
 次に、端末20の構成および機能について、図3を用いて説明する。
 図3は、端末20の概要構成の一例を示すブロック図である。
 図3に示すように、コンピュータとして機能する端末20は、例えば、パーソナルコンピュータや携帯型無線電話機やPDA等の携帯端末であり、通信部21と、記憶部22と、表示部23と、操作部24と、入出力インターフェース部25と、システム制御部26とを備えている。そして、システム制御部26と入出力インターフェース部25とは、システムバス27を介して接続されている。
 通信部21は、ネットワーク3を通して、情報提供サーバ10等と通信を制御する。なお、端末20が携帯型無線電話機の場合、ネットワーク3の移動体通信網に接続するために、通信部21は、無線通信機能を有する。
 記憶部22は、例えば、ハードディスクドライブ等からなり、オペレーティングシステム、Webブラウザプログラム等を記憶する。また、記憶部22には、操作部24によるスクロールの動きや、表示部23上を移動するポインタの動きが記憶される。なお、各種プログラムは、例えば、ネットワーク3を介して取得されるようにしてもよいし、記録媒体に記録されてドライブ装置を介して読み込まれるようにしてもよい。
 表示部23(表示手段の一例)は、例えば、液晶表示素子またはEL(Electro Luminescence)素子等によって構成されている。表示部23には、マウスの操作により移動するポインタや、情報提供サーバ10から取得したWebページ等が表示される。
 操作部24(入力手段の一例)は、例えば、キーボードおよびマウス等によって構成されている。なお、表示部23がタッチパネルのようなタッチスイッチ方式の表示パネルの場合、操作部24は、表示部23の画面が押された箇所の位置情報を取得する。なお、入力手段の一例として、カメラ等の撮像手段やセンサあってもよい。
 入出力インターフェース部25は、通信部21および記憶部22とシステム制御部26とのインターフェースである。
 システム制御部26は、例えば、CPU26aと、ROM26bと、RAM26cとを有する。システム制御部26は、CPU26aが、ROM26bや、RAM26cや、記憶部22に記憶された各種プログラムを読み出して実行する場合や、Webページのスクリプトを実行することにより、要約情報等の縮約情報を表示部23に表示させる。また、RAM26c等には、コンテンツ情報を表示部23に表示させるためのグラフィック領域が形成される。
[3.情報表示システム1の動作]
 次に、本発明の一実施形態に係る情報表示システム1の動作について図4~図8に基づき説明する。
 図4は、情報提供サーバ10が提供するコンテンツ情報の一例を示す模式図である。図5は、情報表示システム1において縮約情報を表示する動作例を示すシーケンス図である。図6は、端末20に表示されているコンテンツ情報の一例を示す模式図である。図7は、端末20に縮約情報を表示するための画面の一例を示す模式図である。図8は、端末20に表示された縮約情報の一例を示す模式図である。
 まず、端末20は、情報提供サーバ10からコンテンツ情報を受信する。図4に示すように、このコンテンツ情報30(表示部23に表示させるコンテンツ情報の一例)は、端末20の表示部23の画面内に収まらない分量の情報量を有する。コンテンツ情報30は、Webブラウザ40の画面内に表示される表示エリア31(表示部分の一例)と、既表示エリア32(非表示部分の一例)と、未表示エリア33(非表示部分の一例)とに分かれる。
 表示エリア31は、Yの座標が、Y1~Y2のエリアである。既表示エリア32は、Yの座標が、0~Y1のエリアであり、Webブラウザ40の画面内に既に表示されたエリアで、ユーザのスクロール等の操作により、Webブラウザ40の画面内に現在表示されていないエリアである。未表示エリア33は、Yの座標が、Y2~Ymaxのエリアであり、Webブラウザ40の画面内に未だ表示されていないエリアである。また、既表示エリア32および未表示エリア33は、Webブラウザ40の画面内に現在表示されていない非表示エリア(非表示部分の一例)である。
 なお、図4に示す状態は、ユーザが操作部24によりY方向にスクロールして、コンテンツ情報30の一部を、表示部23に表示されたWebブラウザ40の画面内に表示させている状態を示している。すなわち、図4に示す状態は、コンテンツ情報30におけるY=0の状態からY=Y1の状態まで、画面をスクロールさせた状態である。また、コンテンツ情報が表示部23においてX方向にスクロールされる場合は、X方向の位置座標が、表示位置情報となる。
 図5に示すように、端末20は、注視エリア(表示部分においてユーザによって注視された注視部分の一例)を特定するための操作位置情報の測定・記憶を行う(ステップS1)。具体的に、端末20のシステム制御部26は、図6に示すように、ユーザの操作部24によるWebブラウザ40の表示エリア31におけるスクロールの動きや、表示部23上を移動するポインタ45の軌跡45a等の操作位置情報を測定し、記憶部22に記憶する。このように、端末20のシステム制御部26は、表示部分(表示エリア31)において、ユーザにより画面操作(スクロール、ポインタの移動、クリック、ピンチイン、ピンチアウト等)された操作位置に関する操作位置情報を取得する操作位置情報取得手段の一例として機能する。
 次に、端末20は、縮約表示のトリガを取得する(ステップS2)。具体的に、端末20のシステム制御部26は、操作部24のマウスの右クリック等の信号を受信し、図7に示すように、Webブラウザ40に、表示エリア31のコンテンツ上にメニュー表示枠46を表示させる。メニュー表示枠46の中には、縮約情報を表示させるための”要約を表示”、”抜粋を表示”、および、”縮小の表示”が表示される。メニュー表示枠46の”要約を表示”が選択されと、端末20のシステム制御部26は、縮約表示のトリガの一例として、要約表示のトリガを取得する。なお、端末20のシステム制御部26は、”抜粋を表示”が選択されると、抜粋表示のトリガを取得し、”縮小の表示”が選択されると、縮小表示のトリガを取得する。
 次に、端末20は、表示エリア情報を取得する(ステップS3)。具体的に、端末20のシステム制御部26は、コンテンツ情報30の表示エリア情報を取得するため、コンテンツ情報30がWebブラウザ40に表示されている表示エリア31のY方向の位置座標(Y1、Y2)を取得する。さらに具体的には、端末20のシステム制御部26は、RAM26cのグラフィック領域の情報等から、コンテンツ情報30の表示エリア31の位置座標を表示位置情報の一例として取得する。このように、端末20のシステム制御部26は、コンテンツ情報30のうち、表示部23に表示されている表示エリア31を特定するための表示位置情報を取得する。ここで、図4に示すように、Y2-Y1は、表示部23上に開かれているWebブラウザ40のY方向の表示幅Ywである。
 次に、端末20のシステム制御部26は、ユーザにより画面操作された操作位置に関する操作位置情報を決定する。例えば、記憶部22に記憶されていた、Webブラウザ40におけるスクロールの動きの情報や、ポインタ45の動きの軌跡45aの情報から、表示エリア31において注視された注視エリア34を特定するための操作位置情報を決定する。端末20のシステム制御部26は、例えば、スクロールが止まったところや、スクロールの方向が変わったところ等でのYの値(例えば、Y=Ya、Y=Yb)や、ポインタ45の位置の情報等を、操作位置情報とする。なお、ポインタ45の位置の情報として、例えば、ポインタ45の軌跡45aのX-Y方向の最大値、最小値や、軌跡45aの折り返した位置や、ポインタ45の滞在時間が長い点等の軌跡45aの特徴点が挙げられる。また、ステップS1において、スクロールが止まったときや、スクロールの方向が変わったとき等に、Yの値やポインタ45の位置の情報を記憶部22に記憶してもよい。また、図4に示すように、注視エリアが、表示部分として、既に表示された既表示エリア32において注視された注視エリア34Bの場合もある。
 次に、端末20は、表示エリア・注視エリアの情報を送信する(ステップS4)。具体的に、端末20のシステム制御部26は、通信部21を通して、コンテンツ情報30の表示エリア31のY方向の位置座標(Y1、Y2)や、注視エリア34のY方向の位置座標(Ya、Yb)等の注視エリアを特定するための操作位置情報を情報提供サーバ10に送信する。
 次に、情報提供サーバ10は、表示エリア・注視エリアの情報を受信する(ステップS5)。具体的に、情報提供サーバ10のシステム制御部14は、端末20の表示部23に表示されているコンテンツ情報30の表示エリア31を特定するための表示位置情報や、表示エリア31においてユーザにより画面操作された操作位置に関する操作位置情報の一例として、表示エリア31のY方向の位置座標(Y1、Y2)や注視エリア34のY方向の位置座標(Ya、Yb)等を端末20から受信する。
 次に、情報提供サーバ10は、注視エリアを特定する(ステップS6)。具体的に、情報提供サーバ10のシステム制御部14は、Y方向の位置座標(Ya、Yb)のような操作位置情報から、注視エリア34を特定する。さらに、情報提供サーバ10のシステム制御部14は、図6に示すように、ポインタ45の軌跡45aのX-Y方向の最大値や最小値等に基づき、注視エリア34aを特定してもよい。
 次に、情報提供サーバ10は、注視エリアから特徴要素を抽出する(ステップS7)。具体的に、情報提供サーバ10のシステム制御部14は、注視エリア34や注視エリア34aのコンテンツから、特徴要素(注視部分内のコンテンツの特徴的な要素)の一例として、文章や語句等のテキスト情報や画像情報等を抽出する。このとき、情報提供サーバ10のシステム制御部14は、コンテンツ情報30に既存の自動要約生成の手法を適用して、特徴要素を抽出したり、注視エリア34のコンテンツにおける単語の出現頻度と逆出現頻度等のように、特徴要素を抽出するための所定のアルゴリズムにより特徴要素を抽出したりする。また、情報提供サーバ10のシステム制御部14は操作位置情報に基づき、ポインタ45の滞在時間が長かった付近の語句や画像等を、特徴要素としてもよい。
 次に、情報提供サーバ10は、未表示エリア(未表示部分の一例)を特定する(ステップS8)。具体的に、情報提供サーバ10のシステム制御部14は、表示部23に表示されていないコンテンツ情報30の既表示エリア32および未表示エリア33(非表示エリア32、33)を、表示エリア31の位置座標(Y1、Y2)と、コンテンツ情報30の位置座標(0、Ymax)から特定する。さらに具体的には、情報提供サーバ10のシステム制御部14は、既表示エリア32の位置情報として位置座標(0、Y1)、未表示エリア33の位置情報として位置座標(Y2、Ymax)を特定する。
 そして、情報提供サーバ10のシステム制御部14は、表示部23に未だ表示されていないコンテンツ情報の未表示エリアとして、未表示エリア33を特定する。これは、ユーザがY=0から順にスクロールして行く場合が通常であり、コンテンツ情報の未表示エリア33が、未だ表示されていないと想定されるからである。
 ここで、情報提供サーバ10のシステム制御部14は、未表示エリア33の位置座標(Y2、Ymax)に関しては、表示エリア31の位置座標(Y1、Y2)と、表示部23におけるコンテンツ情報30の初期の表示エリアを示す初期表示位置情報の一例の初期位置座標(0、Yw)と、に基づき、未表示エリア33を特定する。
 次に、情報提供サーバ10は、特徴要素に基づき、未表示エリアのコンテンツを要約する(ステップS9)。具体的に、情報提供サーバ10のシステム制御部14は、未表示エリア33において、特徴要素が含まれるテキスト情報や画像情報の部分を抽出して、その部分を要約して要約情報を生成したり、特徴要素が含まれるテキスト情報や画像情報の所定量を抽出し、抜粋を生成したり、未表示エリア33において特徴要素が存在する付近の縮小画像を生成したりする。このように、情報提供サーバ10のシステム制御部14は、要約情報、抜粋、縮小画像のような縮約情報を生成するための所定のアルゴリズムにより、未表示エリアのコンテンツの縮約情報を生成する。なお、情報提供サーバ10のシステム制御部14は、未表示エリア33において、特徴要素に類似のテキスト情報や画像情報を特定し、要約情報、縮小画像等の縮約情報を生成してもよい。
 または、情報提供サーバ10のシステム制御部14は、未表示エリアのコンテンツ情報30を所定の単位に分割して、各単位の要約情報、縮小表示等の縮約情報を求め、特徴要素に最も近い内容の要約情報等の縮約情報を、端末20に表示させる縮約情報としてもよい。また、情報提供サーバ10のシステム制御部14は、特徴要素が画像の場合、例えば、画像の注釈(ALTタグの情報)に記述されたテキストを特徴要素とし、この特徴要素に基づき未表示エリアから要約情報等の縮約情報を生成する。また、画像そのものを特徴要素とした場合には、情報提供サーバ10のシステム制御部14は、特徴要素の画像のサイズ、色等の画像の特徴と、類似の特徴を有する画像を未表示エリアのコンテンツから抽出し、縮約情報としてもよい。
 次に、情報提供サーバ10は、縮約情報を送信する(ステップS10)。具体的に、情報提供サーバ10のシステム制御部14は、通信部11を通して、要約情報等の縮約情報を端末20に送信する。そして、端末20のシステム制御部26は、通信部21を通して、要約情報等の縮約情報を情報提供サーバ10から受信する。
 次に、端末20は、縮約情報を表示する(ステップS11)。具体的に、図8に示すように、端末20のシステム制御部26は、Webブラウザ40の画面に、表示エリア31のコンテンツ上に開かれた要約表示枠41に、縮約情報の一例の要約情報35を表示する。なお、要約情報35にはリンクが張られていて、操作部24のマウス等によりクリックされると、端末20のシステム制御部26は、Webブラウザ40の画面をスクロールし、要約情報35に対応したコンテンツ情報30が記載されている箇所に移動させる。また、メニュー表示枠46で、”抜粋を表示”が指定された場合、Webページにおいて、特徴要素を含む部分の抜粋が表示される。また、メニュー表示枠46で、”縮小の表示”が指定された場合、Webページの画面情報を縮小した縮小表示が表示される。
 以上、本実施形態によれば、コンテンツ情報30の表示エリア31を特定するための表示位置情報、および、表示エリア31において注視された注視エリア34や、既表示エリア32において注視された注視エリア34Bを特定するための操作位置情報を端末20から受信し、操作位置情報に基づき、注視エリア34、34Bを特定し、注視エリア34、34Bから特徴要素を抽出し、表示部23に未だ表示されていないコンテンツ情報の未表示エリア33を表示位置情報から特定し、未表示エリア33に含まれるコンテンツ情報の要約情報等の縮約情報を、特徴要素に基づき生成し、要約情報等の縮約情報を端末20へ送信することにより、画面内に収まらない分量のコンテンツ情報がある場合、画面内に表示されていない部分において、表示されている部分と関連した内容の箇所を容易に確認できる。また、本実施形態によれば、未表示エリア33のように表示されていない部分の情報を確認できる。
 また、本実施形態によれば、単に見ていない部分(未表示エリア33)を全て要約したり、全てを縮小等したりするのではなく、見た部分(注視エリア34、34a、34B)と関連のある部分を要約したり、縮小等したりして表示させることができ、ユーザが関心を示すであろう箇所にユーザをより効率的に導くことができ、ユーザの利便性を高めることができる。
 また、表示位置情報(例えば、位置座標(Y1、Y2))と、表示部23におけるコンテンツ情報の初期の表示エリアを示す初期表示位置情報(例えば、初期表示位置情報(0、Yw))と、に基づき、未表示エリア33を特定する場合、情報提供サーバ10のシステム制御部14は、ユーザが、読んでない部分を容易に特定し、未だ読んでいない部分のみを要約したり縮小等したりすることで、ユーザに先のページ等のコンテンツ情報の見通しを与えることができ、ユーザが関心を示すであろう箇所にユーザをより効率的に導くことができ、ユーザの利便性を高めることができる。
 なお、端末20のシステム制御部26は、注視エリアとして、矩形選択された領域や、ユーザのフリーハンドによりポインタ45や画面に対するタッチ等の軌跡で囲まれた領域でもよい。軌跡で囲まれた領域の場合、注視エリアは、この領域を含む矩形領域でもよい。また、端末20のシステム制御部26は、Webブラウザ40の画面内において、所定時間以上、ポインタが滞在した位置(滞在点)の近傍や、マウスのクリックのボタンが押された位置の近傍を、注視エリアとしてもよい。特に、タッチパネルの場合、端末20のシステム制御部26は、タッチパネルにおいて入力があった位置、例えば、タッチされた位置、ピンチインまたはピンチインされた部分の近傍を注視エリアとしてもよい。
 操作位置情報は、矩形選択された領域の場合、四隅の座標、フリーハンドにより囲まれた領域の場合、この領域を含む矩形の四隅の座標でもよい。また、操作位置情報は、ポインタが滞在した位置の座標や、クリックのボタンが押された位置の座標、タッチパネルにおいて入力があった位置の座標でもよい。さらに、操作位置情報は、軌跡のデータ自体でもよい。
 次に、端末20の表示部23に表示される縮約情報の変形例について、図9および図10を用いて説明する。
 図9は、端末20に表示された縮約情報の変形例を示す模式図である。図10は、端末20に表示された縮約情報の変形例を示す模式図である。
 図9に示すように、Webブラウザ40の要約表示枠41に画像データ36aを含む要約情報36を表示してもよい。図10に示すように、Webブラウザ40のタイトルバー42に、要約情報37を表示してもよい。
 次に、図10に示すように、Webブラウザ40の要約表示枠41に、第1の要約情報35と、第2の要約情報38とを示してもよい。第1の要約情報35と、第2の要約情報38との順は、コンテンツ情報30に記載されている順であるとすると、未表示エリア33における、コンテンツ情報30の内容をより把握しやすくなる。
 次に、コンテンツ情報の変形例について、図11を用いて説明する。
 図11は、情報提供サーバ10が提供するコンテンツ情報の変形例を示す模式図である。
 図11に示すように、WebページがWebページ51、Webページ52と遷移してきたとき、Webページ52から遷移可能なWebページ53、54、55を含めたWebページ51~55のコンテンツ情報50を、画面内に収まらない分量のコンテンツ情報としてもよい。Webページ52が表示エリアに対応し、マウスのクリック等によって表示されなくなった部分の情報のWebページ51が、既表示エリアに対応し、Webページ53、54、55が未表示エリアに対応する。この場合、情報提供サーバ10のシステム制御部14は、例えば、コンテンツDB12aを参照して、表示部23に未だ表示されていないコンテンツ情報の未表示エリアを特定する。なお、表示エリアや、既表示エリアおよび未表示エリア等の非表示エリアを特定するに際し、情報提供サーバ10のシステム制御部14は、クッキー(Cookie)等から取得した閲覧履歴を用いてもよいし、情報提供サーバ10が備える図示しない閲覧履歴DBから抽出した閲覧履歴を用いてもよい。
 なお、コンテンツ情報の一例として、ワードプロセッサーや表計算等のアプリケーションで閲覧できる電子データのコンテンツでもよい。例えば、図12に示すように、ドキュメント60(コンテンツ情報の一例)が3ページに渡る場合であって、アプリケーションの画面70に既に、表示済みである1ページ目の既表示部分62や、アプリケーションの画面70に表示されている2ページ目の表示部分61から、端末20のシステム制御部26は、ステップS6のように、ポインタ45等の軌跡等から注視部分64を特定する。そして、端末20のシステム制御部26は、ステップS7のように、注視部分64から特徴要素を抽出し、ステップS9のように、特徴要素に基づき、未表示部分63の3ページ目のコンテンツを要約する(ステップS9)。なお、端末20のシステム制御部26は、操作部24のマウスによるスクロールや、次ページや前ページのコンテンツを表示させるページ操作ボタン47の操作の履歴等により、ページが表示済みであるか否かを判定する。
 また、ステップS2において、端末20の操作部24や、情報提供サーバ10のシステム制御部14は、要約表示等の縮約表示のトリガの取得として、端末20の操作部24の操作情報等の入力情報に基づき、一定時間操作等の入力が無く、再度操作等の入力がなされた場合の入力判定情報を取得してもよい。
 具体的には、操作部24からの入力の有無を判定するため、端末20のシステム制御部26は、マウスやキーボード等の操作部24により、Webブラウザ40が操作されているか否かを判定する。そして、端末20のシステム制御部26は、操作部24からの入力がある場合、操作部24からの入力が無しの状態になるまで待ちの状態になる。
 次に、操作部24からの入力が無しの状態で、端末20は、位置座標を取得するため、端末20のシステム制御部26は、ステップS3のように、コンテンツ情報30がWebブラウザ40に表示されている表示エリア31のY方向の位置座標(Y1、Y2)等を取得する。例えば、端末20のシステム制御部26は、RAM26cのグラフィック領域の情報等から、コンテンツ情報30の表示エリア31等の位置座標を表示位置情報の一例として取得する。
 次に、操作部24からの入力無しの状態が所定時間以上経過したか否かを判定するため、端末20のシステム制御部26は、所定時間以上経過していない場合、操作部24の入力の有無を判定して新しい表示位置情報等を取得する。これは、ユーザが端末20のアプリケーション等を、離席等せず現在実際に使用しているか等の使用状況をチェックするためである。特に、端末20のシステム制御部26は、Webブラウザ40に対する操作の有無をチェックする。例えば、端末20のシステム制御部26はWebブラウザ40を開いた状態で、他のウィンドウ画面等で作業していて、Webブラウザ40に対する操作の有無を判定する。
 また、入力手段がカメラのように人の動きを捉えたり、赤外線センサのように人を感知したりする場合、端末20のシステム制御部26が、カメラが捉えた画像を解析したり、センサからの情報を判断して、ユーザの使用状況をチェックして、一定時間入力が無く、再度入力がなされたと判断してもよい。
 次に、所定時間以上経過した場合、端末20のシステム制御部26は、ステップS4のように、通信部21を通して、コンテンツ情報30の表示エリア31のY方向の位置座標(Y1、Y2)や、注視エリア34のY方向の位置座標(Ya、Yb)等を情報提供サーバ10に送信し、情報提供サーバ10において、ステップS5~ステップS10の処理がされる。
 このように、端末20の操作部24の操作情報に基づき、一定時間操作が無く、再度操作がなされた場合の操作判定情報を取得し、操作判定情報を取得した場合に、要約情報等の縮約情報を端末へ送信すると、一定時間、マウス等の操作が無ければ、放置していて既に見た内容を忘れていると推定でき、より適切なタイミングに、自動的に要約等の縮約情報を提示することが可能である。
 また、端末20の表示部23に縮約情報を表示させる情報表示用のプログラムを、Webブラウザ等のエージェントにより端末20のシステム制御部26が実行してもよい。この場合、端末20のシステム制御部26が、表示部23に表示させるコンテンツ情報30のうち、表示部23に表示されている表示エリア31を特定するための表示位置情報や、表示エリア31において注視されている注視エリア34、34aを特定するための操作位置情報を操作部24から取得し、コンテンツ情報のうち、表示部23に表示されていない未表示エリア33を、表示位置情報から特定し、操作位置情報に基づき、注視エリア34、34aを特定し、注視エリア34、34aから特徴要素を抽出し、表示部23に未だ表示されていないコンテンツ情報の未表示エリア33を、表示位置情報から特定し、未表示エリア33に含まれるコンテンツ情報の要約情報等の縮約情報を、特徴要素に基づき生成を生成し、要約情報等の縮約情報を表示部23に表示させる。特に、これは、コンテンツ情報30として、ワードプロセッサーに入力している情報等に適用される。また、縮約情報を表示させる等の機能が、Webブラウザ等にアドオンにより追加されてもよい。
 また、情報提供サーバ10のシステム制御部14は、Webブラウザ40の画面に、表示エリア31のコンテンツ上に開かれた要約表示枠41を表示させ、要約表示枠41に要約情報35を表示させるWebページやプログラムを生成したり、要約情報等の縮約情報を端末20に送信したりすることにより、要約情報等の縮約情報を表示部23に表示させる。
 また、情報提供サーバ10のシステム制御部14が、端末20の操作部24の操作情報を端末20から受信し、操作情報に基づき、一定時間操作が無く、再度操作がなされた否かを判定し、判定結果として再度操作がなされた場合の操作判定情報を取得し、操作判定情報を取得した場合に、要約情報等の縮約情報を端末20へ送信してもよい。
 また、情報提供サーバ10のシステム制御部14が、端末20において測定された、操作部24によるWebブラウザ40におけるスクロールの動きの情報や、表示部23上を移動するポインタ45の軌跡45aの情報を、端末20から受信し、ステップS1~ステップS4の動作を行ってもよい。
 また、情報提供サーバ10のシステム制御部14は、ステップS8で、未表示エリア33を特定する際に、特徴要素に基づき、特徴要素に関連する部分にエリア(未表示エリア33よりも狭いエリア)を限定しておいてもよい。この場合、情報提供サーバ10のシステム制御部14は、要約する部分(縮約する部分)が狭くなり、処理速度が速くなる。
 次に、端末20の表示部23に表示される縮約情報の変形例について、図13および図14を用いて説明する。
 図13は、情報表示システム1において縮約情報を表示する動作の変形例を示すシーケンス図である。図14は、図6のコンテンツ情報における注視エリアの変形例を示す模式図である。
 まず、図13に示すように、端末20は、ステップS1のように、注視エリア特定のための操作位置情報の測定・記憶を行う(ステップS21)。
 次に、端末20は、表示エリア情報を取得し、記憶する(ステップS22)。端末20のシステム制御部26は、ステップS3のように表示エリア情報を取得し、記憶部22に記憶する。例えば、図14に示すように、表示エリア31のY方向の位置座標(Y3、Y4)を取得して、記憶部22に記憶する。
 次に、端末20は、表示エリアまたは注視エリアが変更されたか否かを判定する(ステップS23)。端末20のシステム制御部26は、図14に示すように、操作部24によるWebブラウザ40におけるスクロール等の動きによる表示エリア31の変動や、ポインタ85の動きや軌跡等による注視エリアの変動を検出する。
 表示エリアに関して、例えば、端末20のシステム制御部26は、記憶部22に記憶されているスクロールされる前の表示エリアのY方向の位置座標(Y1、Y2)と、取得した位置座標(Y3、Y4)とを比較し、所定値以上の位置座標が移動している場合に、表示エリア31は変更されたと判定する。また、表示幅Yw(=Y2-Y1)に対して、表示幅Yw’(=Y4-Y3)が所定値以上、変動している場合、端末20のシステム制御部26は、表示エリア31は変更されたと判定してもよい。なお、端末20のシステム制御部26は、Webブラウザ40に対するスクロールがされ始め、所定時間スクロールが止まったと判定した場合、例えば、スクロール信号を操作部24から受信した後、所定時間スクロール信号が来ない場合に、表示エリア31が変更されたと判定もよい。
 次に注視エリアに関して、例えば、端末20のシステム制御部26は、スクロールする前の注視エリア80を、ポインタの軌跡85aの始点(Y=Yc)と終点(Y=Yd)とから特定し、スクロール後の注視エリア81を、ポインタの軌跡85aの折り返し点(Y=Ye)と終点(Y=Yf)とから特定する。そして、端末20のシステム制御部26は、注視エリア80のY方向の位置座標(Yc、Yd)と、注視エリア81のY方向の位置座標(Ye、Yf)とを比較し、所定値以上の位置座標が移動している場合に、注視エリアは変更されたと判定する。
 なお、図14において、ポインタ85から、ポインタ86へは、マウス等によるスクロールにより、画面が移動したことによる、ポインタの移動で、ポインタ86から、軌跡86aおよび軌跡87aを経てポインタ87の位置に移動し、さらに、軌跡88aを経てポインタ88の位置に移動したとする。
 また、端末20のシステム制御部26は、ポインタ等の滞在点が変動した場合や、ポインタが移動した場合や、マウス委のクリックのボタンが新たに押された場合に、注視エリアが変更されたと判定してもよい。また、端末20のシステム制御部26は、注視エリアが矩形の場合、矩形の四隅の座標が変動した場合に、注視エリアが変更されたと判定してもよい。また、端末20のシステム制御部26は、タッチパネルにおいて入力された位置が、所定時間前と異なる場合に、端末20のシステム制御部26は、注視エリアが変更されたと判定してもよい。
 ここで、注視エリアの変動の例として、注視エリアの拡大や縮小、注視エリアの移動が挙げられる。注視エリアの拡大の例として、注視エリア80のY方向の位置座標(Yc、Yd)のYdが増加する場合や、Ycが減少する場合が挙げられる。また、注視エリアの移動の例として、注視エリア80から注視エリア81への移動が挙げられる。図14では、注視エリア80から注視エリア81の場合、重なるエリアが無いが、重なるエリアがあってもよい。
 次に、端末20は、表示エリア・注視エリアの位置情報を送信する(ステップS24)。端末20のシステム制御部26は、ステップS4のように、
コンテンツ情報30の表示エリア31のY方向の位置座標(Y3、Y4)や、注視エリア81のY方向の位置座標(Ye、Yf)等の操作位置情報を情報提供サーバ10に送信する。さらに、端末20のシステム制御部26は、ポインタ86、87、88が示す位置のX座標値およびY座標値の座標情報や、軌跡86a、87a、88aの始点、終点、軌跡の折り返し点のような曲率半径が所定値以下の位置のX座標値およびY座標値の座標情報や、軌跡86a、87a、88a自体の座標情報を送信してもよい。また、端末20のシステム制御部26は、スクロール後の注視エリア81の操作位置情報と共に、スクロール前の注視エリア80のY方向のY方向の位置座標(Yc、Yd)の操作位置情報も送信してもよい。
 なお、端末20のシステム制御部26は、表示エリアの差分情報や、注視エリアの差分情報を送信してもよい。例えば、端末20のシステム制御部26は、表示エリア31のY方向の差分位置座標(Y3-Y1、Y4-Y2)や、注視エリアのY方向の差分位置座標(Ye-Yc、Yf-Yd)等の差分情報を送信する。さらに、端末20のシステム制御部26は、表示エリア31に対する注視エリア81の差分情報を送信してもよい。例えば、表示エリア31のY方向の始点Y3を基準にした差分位置座標(Ye-Y3、Yf-Y3)の差分情報を送信してもよい。
 次に、情報提供サーバ10は、ステップS5のように、表示エリア・注視エリアの位置情報を受信する(ステップS25)。
 次に、情報提供サーバ10は、注視エリアを特定する(ステップS26)。具体的に、情報提供サーバ10のシステム制御部14は、Y方向の位置座標(Ye、Yf)のような操作位置情報から、注視エリア81を特定する。さらに、情報提供サーバ10のシステム制御部14は、図14に示すように、ポインタ86、87の軌跡86a、87aから、注視エリア81aを特定してもよい。例えば、情報提供サーバ10のシステム制御部14は、ポインタが所定時間滞在していた位置の一例である軌跡87aの終点(ポインタ87が示す位置)から上方(Y方向)または近傍にあるテキスト領域または画像領域等の空白でない領域を囲う矩形エリア(注視エリア81a)を、軌跡87aの終点の座標情報に基づき、画像処理等してコンテンツ情報30から特定してもよい。また、情報提供サーバ10のシステム制御部14は、ポインタ88が示していた位置から下方(-Y方向)または近傍にあるテキスト領域等を囲う矩形エリアから、注視エリア82aを特定してもよい。そして、情報提供サーバ10のシステム制御部14は、特定された注視エリア82aから、注視エリア82を求めてもよい。なお、情報提供サーバ10のシステム制御部14は、Yポインタ85が示していた位置から上方または近傍にあるテキスト領域等を囲う矩形エリアから、注視エリア80aを特定してもよい。
 次に、情報提供サーバ10は、ステップS7のように、注視エリア81、82(注視エリア81a、82a)から特徴要素を抽出する(ステップS27)。なお、情報提供サーバ10のシステム制御部14は、注視エリア81(81a)と注視エリア82(82a)の両方の注視エリアから、特徴要素を抽出してもよいし、一方の注視エリアを優先して特徴要素を抽出してもよい。例えば、情報提供サーバ10のシステム制御部14は、注視エリア81(81a)よりも後から注視された注視エリア82(82a)のみから、特徴要素を抽出する。図14と異なるが、注視エリア81(81a)と注視エリア82(82a)とに重なりがある場合、注視エリア81(81a)と注視エリア82(82a)とが重なったエリアを、特徴要素を抽出する注視エリアとしてもよい。これらのように、特徴要素を抽出する注視エリアを狭めることで、情報量を絞ることができ、よりユーザの好みを反映させた情報を表示させることができる。
 次に、情報提供サーバ10は、ステップS8のように、未表示エリアを特定する(ステップS28)。
 次に、情報提供サーバ10は、ステップS9のように、特徴要素に基づき未表示エリアのコンテンツを縮約する(ステップS29)。
 次に、情報提供サーバ10は、ステップS10ように、縮約情報を送信する(ステップS30)。
 次に、端末20は、ステップS11のように、縮約情報を表示する(ステップS31)。
 以上、情報表示システム1が、操作位置情報に基づき、表示部分または注視部分が変更されたか否かを判定し、表示部分(表示エリア31)または注視部分(注視エリア80)が変更された場合に、縮約情報を生成し、縮約情報を表示させる場合、ユーザが縮約情報の表示の指定をしなくても、自動的に、画面内に表示されていない部分において、表示されている部分と関連した内容の箇所を容易に確認できる。
 なお、以上の実施形態および変形例は、端末20単独でも実施されてもよい。例えば、端末20のシステム制御部26が、ステップS6(S26)の注視エリアの特定し(注視部分特定手段)、ステップS7(S27)の注視エリアから特徴要素を抽出し(特徴要素抽出手段)、ステップS8(S28)の未表示エリアを特定し(未表示部分特定手段)、ステップS9(S29)特徴要素に基づき未表示エリアのコンテンツを縮約して(縮約情報生成手段)もよい。
 また、以上のような実施形態および変形例は、端末20のWebブラウザにプログラムをアドオンすることにより実現されもよい。例えば、アドオンプログラムは、表示手段に表示させるコンテンツ情報のうち、表示手段に表示されているコンテンツ情報の表示部分を特定するための表示位置情報を取得する表示位置情報取得ステップ(ステップS3、ステップS23に対応)と、表示部分において、ユーザにより画面操作された操作位置に関する操作位置情報を取得する操作位置情報取得ステップ(ステップS1、ステップS21に対応)と、操作位置情報に基づき、表示部分においてユーザによって注視された注視部分を特定する注視部分特定ステップ(ステップS6、ステップS23に対応)と、表示手段に未だ表示されていないコンテンツ情報の未表示部分を、表示位置情報から特定する未表示部分特定ステップ(ステップS8、ステップS8に対応)と、注視部分から抽出した特徴要素に基づいて未表示部分に含まれるコンテンツ情報を縮約した縮約情報を、表示手段に表示させる縮約情報表示ステップ(ステップS11、ステップS31に対応)と、を実行させるプログラムでもよい。この場合、例えば、情報提供サーバ10が、注視部分から特徴要素を抽出する特徴要素抽出ステップと、未表示部分に含まれるコンテンツ情報の縮約情報を特徴要素に基づき生成する縮約情報生成ステップとを実行する。
 さらに、本発明は、上記各実施形態に限定されるものではない。上記各実施形態は、例示であり、本発明の特許請求の範囲に記載された技術的思想と実質的に同一な構成を有し、同様な作用効果を奏するものは、いかなるものであっても本発明の技術的範囲に包含される。
 1:情報表示システム
 3:ネットワーク
 10:情報提供サーバ(情報提供装置)
 12a:コンテンツDB
 12b:縮約情報DB
 20:端末(情報表示装置)
 23:表示部(表示手段)
 24:操作部
 30、50、60:コンテンツ情報
 31:表示エリア(表示部分)
 33:未表示エリア(未表示部分)
 34、34a、80、80a、81、81a、82、82a:注視エリア(注視部分)
 35:縮約情報
 52:Webページ(表示部分)
 53、54、55、63:Webページ(未表示部分)
 61:表示部分
 63:未表示部分
 64:注視部分

Claims (9)

  1.  コンテンツ情報を表示可能な表示手段と、
     前記表示手段に表示させるコンテンツ情報のうち、前記表示手段に表示されている前記コンテンツ情報の表示部分を特定するための表示位置情報を取得する表示位置情報取得手段と、
     前記表示部分において、ユーザにより画面操作された操作位置に関する操作位置情報を取得する操作位置情報取得手段と、
     前記操作位置情報に基づき、前記表示部分においてユーザによって注視された注視部分を特定する注視部分特定手段と、
     前記注視部分から特徴要素を抽出する特徴要素抽出手段と、
     前記表示手段に未だ表示されていない前記コンテンツ情報の未表示部分を、前記表示位置情報から特定する未表示部分特定手段と、
     前記未表示部分に含まれるコンテンツ情報を縮約した縮約情報を、前記特徴要素に基づき生成する縮約情報生成手段と、
     前記縮約情報を前記表示手段に表示させる縮約情報表示手段と、
     を備えた情報表示システム。
  2.  請求項1に記載の情報表示システムにおいて、
     前記未表示部分特定手段が、前記表示位置情報と、前記表示手段における前記コンテンツ情報の初期の表示部分を示す初期表示位置情報と、に基づき、前記未表示部分を特定することを特徴とする情報表示システム。
  3.  請求項1または請求項2に記載の情報表示システムにおいて、
     入力を受け付ける入力手段と、
     前記入力手段の入力情報に基づき、一定時間入力が無く、再度入力がなされた場合の入力判定情報を取得する入力判定情報取得手段と、を更に備え、
     前記縮約情報表示手段が、前記入力判定情報を取得した場合に、前記表示手段に表示させることを特徴とする情報表示システム。
  4.  請求項1から請求項3のいずれか1項に記載の情報表示システムにおいて、
     前記操作位置情報に基づき、前記表示部分または前記注視部分が変更されたか否かを判定する判定手段を更に備え、
     前記表示部分または前記注視部分が変更された場合に、前記縮約情報生成手段が前記縮約情報を生成し、前記縮約情報表示手段が、前記縮約情報を表示させることを特徴とする情報表示システム。
  5.  情報を表示する情報表示方法において、
     表示手段に表示させるコンテンツ情報のうち、前記表示手段に表示されている前記コンテンツ情報の表示部分を特定するための表示位置情報を取得する表示位置情報取得ステップと、
     前記表示部分において、ユーザにより画面操作された操作位置に関する操作位置情報を取得する操作位置情報取得ステップと、
     前記操作位置情報に基づき、前記表示部分においてユーザによって注視された注視部分を特定する注視部分特定ステップと、
     前記注視部分から特徴要素を抽出する特徴要素抽出ステップと、
     前記表示手段に未だ表示されていない前記コンテンツ情報の未表示部分を、前記表示位置情報から特定する未表示部分特定ステップと、
     前記未表示部分に含まれるコンテンツ情報の縮約情報を、前記特徴要素に基づき生成する縮約情報生成ステップと、
     前記情報縮約を前記表示手段に表示させる縮約情報表示ステップと、
     を有する情報表示方法。
  6.  コンピュータに、
     表示手段に表示させるコンテンツ情報のうち、前記表示手段に表示されている前記コンテンツ情報の表示部分を特定するための表示位置情報を取得する表示位置情報取得ステップと、
     前記表示部分において、ユーザにより画面操作された操作位置に関する操作位置情報を取得する操作位置情報取得ステップと、
     前記操作位置情報に基づき、前記表示部分においてユーザによって注視された注視部分を特定する注視部分特定ステップと、
     前記表示手段に未だ表示されていない前記コンテンツ情報の未表示部分を、前記表示位置情報から特定する未表示部分特定ステップと、
     前記注視部分から抽出した特徴要素に基づいて前記未表示部分に含まれるコンテンツ情報を縮約した縮約情報を、前記表示手段に表示させる縮約情報表示ステップと、
     を実行させる情報表示プログラム。
  7.  コンピュータに、
     表示手段に表示させるコンテンツ情報のうち、前記表示手段に表示されている前記コンテンツ情報の表示部分を特定するための表示位置情報を取得する表示位置情報取得ステップと、
     前記表示部分において、ユーザにより画面操作された操作位置に関する操作位置情報を取得する操作位置情報取得ステップと、
     前記操作位置情報に基づき、前記表示部分においてユーザによって注視された注視部分を特定する注視部分特定ステップと、
     前記表示手段に未だ表示されていない前記コンテンツ情報の未表示部分を、前記表示位置情報から特定する未表示部分特定ステップと、
     前記注視部分から抽出した特徴要素に基づいて前記未表示部分に含まれるコンテンツ情報を縮約した縮約情報を、前記表示手段に表示させる縮約情報表示ステップと、
     を実行させる情報表示プログラムであって、
     前記情報表示プログラムがコンピュータ読み取り可能に記録されている記録媒体。
  8.  端末の表示部に表示させるコンテンツ情報のうち、前記表示部に表示されている前記コンテンツ情報の表示部分を特定するための表示位置情報を前記端末から受信する表示位置情報受信手段と、
     前記表示部分において、ユーザにより画面操作された操作位置に関する操作位置情報を前記端末から受信する操作位置情報受信手段と、
     前記操作位置情報に基づき、前記表示部分においてユーザによって注視された注視部分を特定する注視部分特定手段と、
     前記注視部分から特徴要素を抽出する特徴要素抽出手段と、
     前記表示部に未だ表示されていない前記コンテンツ情報の未表示部分を、前記表示位置情報から特定する未表示部分特定手段と、
     前記未表示部分に含まれるコンテンツ情報を縮約した縮約情報を、前記特徴要素に基づき生成する縮約情報生成手段と、
     前記縮約情報を前記端末へ送信する縮約情報送信手段と、
     を備えた情報提供装置。
  9.  表示部に表示させるコンテンツ情報のうち、前記表示部に表示されている前記コンテンツ情報の表示部分を特定するための表示位置情報を取得する表示位置情報取得手段と、
     前記表示部分において、ユーザにより画面操作された操作位置に関する操作位置情報を、操作部から取得する操作位置情報取得手段と、
     前記操作位置情報に基づき、前記表示部分においてユーザによって注視された注視部分を特定する注視部分特定手段と、
     前記注視部分から特徴要素を抽出する特徴要素抽出手段と、
     前記表示部に未だ表示されていない前記コンテンツ情報の未表示部分を、前記表示位置情報から特定する未表示部分特定手段と、
     前記未表示部分に含まれるコンテンツ情報を縮約した縮約情報を、前記特徴要素に基づき生成する縮約情報生成手段と、
     前記縮約情報を前記表示部に表示させる縮約情報表示手段と、
     を備えた情報表示装置。
PCT/JP2011/064237 2010-06-28 2011-06-22 情報表示システム、情報表示装置、情報表示方法、情報表示プログラム、情報提供装置、および、記録媒体 WO2012002209A1 (ja)

Priority Applications (7)

Application Number Priority Date Filing Date Title
BR112012018903-4A BR112012018903B1 (pt) 2010-06-28 2011-06-22 sistema, método e aparelho de exibição de informação, mídia, e, aparelho de fornecimento de informação
KR1020127021060A KR101400480B1 (ko) 2010-06-28 2011-06-22 정보 표시 시스템, 정보 표시 장치, 정보 표시 방법, 정보 제공 장치, 및, 기록 매체
ES11800674.1T ES2533435T3 (es) 2010-06-28 2011-06-22 Sistema de presentación de información, aparato de presentación de información, procedimiento de presentación de información, programa de presentación de información, aparato de suministro de información y medio de grabación
CN201180014107.6A CN102804122B (zh) 2010-06-28 2011-06-22 信息显示系统、信息显示装置、信息显示方法、信息显示程序、信息提供装置及记录介质
JP2012521904A JP5124702B2 (ja) 2010-06-28 2011-06-22 情報表示システム、情報表示装置、情報表示方法、情報表示プログラム、情報提供装置、および、記録媒体
US13/520,604 US9396165B2 (en) 2010-06-28 2011-06-22 Information display system, information display apparatus, information display method, information display program, information providing apparatus, and recording medium
EP11800674.1A EP2515221B1 (en) 2010-06-28 2011-06-22 Information display system, information display apparatus, information display method, information display program, information providing apparatus, and recording medium

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2010146861 2010-06-28
JP2010-146861 2010-06-28

Publications (1)

Publication Number Publication Date
WO2012002209A1 true WO2012002209A1 (ja) 2012-01-05

Family

ID=45401929

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2011/064237 WO2012002209A1 (ja) 2010-06-28 2011-06-22 情報表示システム、情報表示装置、情報表示方法、情報表示プログラム、情報提供装置、および、記録媒体

Country Status (8)

Country Link
US (1) US9396165B2 (ja)
EP (1) EP2515221B1 (ja)
JP (1) JP5124702B2 (ja)
KR (1) KR101400480B1 (ja)
CN (1) CN102804122B (ja)
BR (1) BR112012018903B1 (ja)
ES (1) ES2533435T3 (ja)
WO (1) WO2012002209A1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2019536181A (ja) * 2016-11-07 2019-12-12 アリババ・グループ・ホールディング・リミテッドAlibaba Group Holding Limited 情報をプッシュするための方法および装置

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103294814A (zh) * 2013-06-07 2013-09-11 百度在线网络技术(北京)有限公司 搜索结果推荐方法、系统和搜索引擎
KR20140143623A (ko) * 2013-06-07 2014-12-17 삼성전자주식회사 휴대 단말기에서 컨텐츠를 표시하는 장치 및 방법
CN106464959B (zh) * 2014-06-10 2019-07-26 株式会社索思未来 半导体集成电路和具备该半导体集成电路的显示装置及控制方法
CN106469036B (zh) * 2015-08-14 2021-02-05 腾讯科技(深圳)有限公司 信息显示方法及客户端
JP6828383B2 (ja) * 2016-11-02 2021-02-10 富士通株式会社 表示制御プログラム、表示制御方法および情報処理装置
JP6934523B2 (ja) * 2018-09-11 2021-09-15 楽天グループ株式会社 送信装置、送信方法、及び送信プログラム
US10824306B2 (en) * 2018-10-16 2020-11-03 Lenovo (Singapore) Pte. Ltd. Presenting captured data

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH11250077A (ja) * 1998-02-27 1999-09-17 Minolta Co Ltd 情報処理装置、情報処理方法及び記録媒体
JP2002140321A (ja) * 2000-11-02 2002-05-17 Kenwood Corp テキスト表示装置及び方法
JP2004326687A (ja) 2003-04-28 2004-11-18 Sony Corp 電子機器装置、自動スクロール方法、およびプログラム
JP2006190298A (ja) * 2005-01-07 2006-07-20 Palo Alto Research Center Inc 電子テキストに概念的強調を自動的に施す方法
JP2008146177A (ja) * 2006-12-06 2008-06-26 Canon Inc 情報検索方法及び情報検索装置

Family Cites Families (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6330576B1 (en) 1998-02-27 2001-12-11 Minolta Co., Ltd. User-friendly information processing device and method and computer program product for retrieving and displaying objects
US20020116420A1 (en) * 2000-09-28 2002-08-22 Allam Scott Gerald Method and apparatus for displaying and viewing electronic information
EP1396799B1 (en) * 2001-06-11 2008-04-23 Matsushita Electric Industrial Co., Ltd. Content management system
US20050047629A1 (en) * 2003-08-25 2005-03-03 International Business Machines Corporation System and method for selectively expanding or contracting a portion of a display using eye-gaze tracking
US20060069618A1 (en) * 2004-09-27 2006-03-30 Scott Milener Method and apparatus for enhanced browsing
US20060104276A1 (en) 2004-11-18 2006-05-18 International Business Machines Corporation Dynamic hover text for HTML table cells
KR101364745B1 (ko) * 2005-12-29 2014-02-21 오즈미즈 피티와이. 엘티디. 데이터를 이동 단말기에 표시하기 위한 방법 및 시스템
JP2008070831A (ja) * 2006-09-15 2008-03-27 Ricoh Co Ltd 文書表示装置及び文書表示プログラム
US8065603B2 (en) * 2007-04-30 2011-11-22 Google Inc. Hiding portions of display content
US8001108B2 (en) * 2007-10-24 2011-08-16 The Invention Science Fund I, Llc Returning a new content based on a person's reaction to at least two instances of previously displayed content
US8234262B2 (en) * 2007-10-24 2012-07-31 The Invention Science Fund I, Llc Method of selecting a second content based on a user's reaction to a first content of at least two instances of displayed content
US20090112849A1 (en) * 2007-10-24 2009-04-30 Searete Llc Selecting a second content based on a user's reaction to a first content of at least two instances of displayed content
US8577875B2 (en) * 2009-03-20 2013-11-05 Microsoft Corporation Presenting search results ordered using user preferences
JP4852119B2 (ja) * 2009-03-25 2012-01-11 株式会社東芝 データ表示装置、データ表示方法、データ表示プログラム
JP5185240B2 (ja) * 2009-11-26 2013-04-17 楽天株式会社 サーバ装置、ユーザ関心度算出方法、ユーザ関心度算出プログラム、及び情報提供システム
US8490009B2 (en) * 2009-11-26 2013-07-16 Rakuten, Inc. Information processing apparatus, terminal apparatus, content of interest determination method, content of interest determination program, terminal program , recording medium on which program is recorded, and information provision system
BR112012030176B1 (pt) * 2010-05-28 2020-10-27 Rakuten, Inc aparelho e método de controle de exibição, e, mídia de gravação
JP5451684B2 (ja) * 2011-05-31 2014-03-26 楽天株式会社 情報処理装置、情報処理方法、及び情報処理プログラム
JP5706236B2 (ja) * 2011-05-31 2015-04-22 楽天株式会社 情報処理装置、情報処理方法、及び情報処理プログラム

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH11250077A (ja) * 1998-02-27 1999-09-17 Minolta Co Ltd 情報処理装置、情報処理方法及び記録媒体
JP2002140321A (ja) * 2000-11-02 2002-05-17 Kenwood Corp テキスト表示装置及び方法
JP2004326687A (ja) 2003-04-28 2004-11-18 Sony Corp 電子機器装置、自動スクロール方法、およびプログラム
JP2006190298A (ja) * 2005-01-07 2006-07-20 Palo Alto Research Center Inc 電子テキストに概念的強調を自動的に施す方法
JP2008146177A (ja) * 2006-12-06 2008-06-26 Canon Inc 情報検索方法及び情報検索装置

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
See also references of EP2515221A4 *

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2019536181A (ja) * 2016-11-07 2019-12-12 アリババ・グループ・ホールディング・リミテッドAlibaba Group Holding Limited 情報をプッシュするための方法および装置
US11182065B2 (en) 2016-11-07 2021-11-23 Advanced New Technologies Co., Ltd. Method and apparatus for pushing information

Also Published As

Publication number Publication date
KR20120115387A (ko) 2012-10-17
CN102804122B (zh) 2016-04-20
BR112012018903B1 (pt) 2019-01-22
KR101400480B1 (ko) 2014-05-28
US20120274552A1 (en) 2012-11-01
JP5124702B2 (ja) 2013-01-23
US9396165B2 (en) 2016-07-19
EP2515221A1 (en) 2012-10-24
EP2515221A4 (en) 2014-03-19
JPWO2012002209A1 (ja) 2013-08-22
EP2515221B1 (en) 2015-01-07
CN102804122A (zh) 2012-11-28
ES2533435T3 (es) 2015-04-10
BR112012018903A2 (ja) 2018-01-23

Similar Documents

Publication Publication Date Title
JP5124702B2 (ja) 情報表示システム、情報表示装置、情報表示方法、情報表示プログラム、情報提供装置、および、記録媒体
KR101517618B1 (ko) 웹 컨텐츠를 효율적으로 디스플레이하기 위한 장치 및 방법
US7594194B2 (en) Portrayal of navigation objects
JP3773770B2 (ja) ハイパーテキスト表示装置
US7506261B2 (en) Remote operation system, communication apparatus remote control system and document inspection apparatus
US8913082B2 (en) Information display device, information display method, information display program, recording medium and information display system
JP5235671B2 (ja) 端末装置、コンテンツ表示方法、およびコンテンツ表示プログラム
US20120047234A1 (en) Web page browsing system and relay server
KR20130004857A (ko) 인터넷 서비스를 위한 사용자 인터페이스 제공 방법 및 장치
JPWO2008013128A1 (ja) 端末装置、コンテンツ表示方法、およびコンテンツ表示プログラム
JP2014160415A (ja) 閲覧装置、閲覧システム、情報処理装置及びプログラム
JP2010237777A (ja) 情報閲覧装置
KR100976042B1 (ko) 터치스크린이 구비된 웹 브라우징 장치 및 그 제어방법
JP2012008970A (ja) 要約情報表示装置、要約情報表示方法、要約情報表示プログラム、要約情報提供装置、要約情報提供プログラム、および、記録媒体
JP4750128B2 (ja) ナンバリング付与機能付きブラウザ
JP2012181693A (ja) ウェブページ表示制御装置およびスクロール制御方法
JP2015106397A (ja) ウェブコンテンツ表示装置、ウェブコンテンツ表示装置の動作方法およびコンピュータプログラム
JP4926125B2 (ja) ウェブページ情報表示装置および方法
JP4940265B2 (ja) ウェブページ情報表示制御装置および方法
WO2012164672A1 (ja) コンテンツ表示装置及びプログラム
JP4120754B2 (ja) 文書処理装置、文書処理プログラム
KR20120003665A (ko) 복수의 객체들에 대한 탭 입력의 처리 방법, 상기 처리 방법이 실행되는 휴대용 통신 단말기 및 컴퓨터에서 독출가능한 저장 미디어
JP2004021838A (ja) ウエブページ作成方法、ウエブページ表示システム、およびウエブページ表示方法
KR20140024751A (ko) 터치스크린을 구비한 단말 및 그 터치스크린 조작방법

Legal Events

Date Code Title Description
WWE Wipo information: entry into national phase

Ref document number: 201180014107.6

Country of ref document: CN

121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 11800674

Country of ref document: EP

Kind code of ref document: A1

WWE Wipo information: entry into national phase

Ref document number: 2012521904

Country of ref document: JP

WWE Wipo information: entry into national phase

Ref document number: 13520604

Country of ref document: US

WWE Wipo information: entry into national phase

Ref document number: 2011800674

Country of ref document: EP

ENP Entry into the national phase

Ref document number: 20127021060

Country of ref document: KR

Kind code of ref document: A

NENP Non-entry into the national phase

Ref country code: DE

WWE Wipo information: entry into national phase

Ref document number: 1201004395

Country of ref document: TH

REG Reference to national code

Ref country code: BR

Ref legal event code: B01A

Ref document number: 112012018903

Country of ref document: BR

ENP Entry into the national phase

Ref document number: 112012018903

Country of ref document: BR

Kind code of ref document: A2

Effective date: 20120727