WO2015166630A1 - Information presentation system, device, method, and computer program - Google Patents

Information presentation system, device, method, and computer program Download PDF

Info

Publication number
WO2015166630A1
WO2015166630A1 PCT/JP2015/001881 JP2015001881W WO2015166630A1 WO 2015166630 A1 WO2015166630 A1 WO 2015166630A1 JP 2015001881 W JP2015001881 W JP 2015001881W WO 2015166630 A1 WO2015166630 A1 WO 2015166630A1
Authority
WO
WIPO (PCT)
Prior art keywords
user
information
widget
data
output data
Prior art date
Application number
PCT/JP2015/001881
Other languages
French (fr)
Japanese (ja)
Inventor
友昭 天野
Original Assignee
株式会社ランディード
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 株式会社ランディード filed Critical 株式会社ランディード
Publication of WO2015166630A1 publication Critical patent/WO2015166630A1/en

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/02—Marketing; Price estimation or determination; Fundraising
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor

Definitions

  • the present invention relates to a system, an apparatus, a method, and a computer program for determining and providing information to be presented and its display format based on a user's purpose inferred from input information.
  • Patent Document 1 displays POI information that matches a user's preference based on a user's current situation and past POI selection history in a navigation system that includes a large number of POI (Point of Interest) information in advance. Techniques to do this are disclosed.
  • Patent Document 2 discloses a technique for providing a user with optimal recommendation information by accepting a situation correction operation by the user.
  • the information displayed to the user is the information selected from the POI information prepared in advance and displayed in a predetermined format.
  • the degree of freedom was low, and it was difficult to adequately meet the diverse needs of users.
  • the result presented to the user as a result It is information on an existing application that has been determined to have a high degree of fitness, and information that the user wants cannot always be displayed directly.
  • the information requested by the user is detailed information of a store that is a topic in SNS or the like
  • the user first specifies a store that is a topic using an application for browsing SNS, and then It has been difficult to obtain necessary information without going through a stage of searching for store information using an application that provides detailed store information.
  • the information displayed to the user is provided to the user via a user interface provided in each application, the degree of freedom of display contents and display format is low.
  • the present invention has been made in view of such a situation, and provides an information presentation system that estimates information requested by a user and provides the information to the user in display content and display format with a high degree of freedom. Objective.
  • an information presentation system includes an object estimation unit that accepts an input and estimates an object of a user based on information obtained by the input, and output data of a plurality of applications, Data storage means for linking and storing a plurality of predetermined first labels corresponding to the user's purpose and a plurality of widgets to a plurality of predetermined second labels corresponding to the user's purpose Data selection for selecting output data related to the estimated purpose from the stored output data based on the widget registration means for registering and registering, and the first label associated with the estimated purpose And the widget associated with the estimated purpose is registered based on the means and the second label associated with the estimated purpose.
  • Widget selection means for selecting from a widget, and user interface providing means for generating and providing a user display screen by using the selected output data as data to be displayed by the selected widget.
  • An application used in an embodiment of the information presentation system includes a data structure part (Model, M) including a database definition, a data control processing part (Controller, C), an input / output control part (View, V), and the like.
  • Model, M a data structure part
  • Controller, C a data control processing part
  • View, V an input / output control part
  • M a data structure part including output data of each application is stored in a common data format on a single database.
  • Each application does not have a dedicated user interface, and all output display to the user is performed using a widget registered in the system.
  • examples of applications created by such a framework include a text editor, an image editing / management application, a web browser, various information providing applications such as map information, store information, a schedule management application, Social networking service (SNS) browsing / editing / posting applications, applications that provide information obtained from various sensor devices, and the like are assumed, but the present invention is not limited to these, It is possible to create various applications that provide specific information and functions.
  • the system includes data conversion means, so that the output data of an application having a different data format can be converted into a data format suitable for the data storage means of the system. is there.
  • the term “widget” means an interface element constituting a graphical user interface.
  • any number of widgets can be displayed in any arrangement on the screen displayed to the user.
  • the widget is configured to be able to provide the user with any information selected in the system.
  • the widget may include a text box, an input element for accepting user input such as a button or a slider, a display element used to display data such as a scroll bar or tab, and the like. May be provided in a single widget, or these functions may be provided to the user by a plurality of widgets. It is also possible to use a widget specialized for data display or function use of a specific application.
  • the information presentation system receives a user operation on the plurality of selected widgets displayed on the generated user display screen, and displays the displayed information. It is possible to provide the user with new information by using the information displayed in the plurality of widgets as the input.
  • the user operation on the selected widget is a drag-and-drop operation between a plurality of widgets displayed on the user display screen by a user.
  • the purpose inference means is based on user selection history information, current environment information, user profile information, and / or user input information. It is characterized by guessing the purpose.
  • the purpose estimation means when the purpose estimation means does not include the user input information, the user selection history information, the current environment information, and / or Alternatively, the user's purpose is estimated based on the user profile information.
  • the information presentation system is configured such that the current environment information is acquired via a server, GPS, or sensor on a network, date, time, weather, temperature, current Includes information regarding location, traffic, stores, merchandise, language, and / or population density.
  • the user input information includes input information via a touch panel, and information on a user operation speed, frequency, and strength related to the input. It is characterized by.
  • the information presentation system is characterized in that the purpose estimating means includes a learning function based on the user selection history.
  • the first output data when the user interface providing means includes a plurality of the selected output data, includes the first output data.
  • the user display screen is generated by highlighting output data associated with one or more labels having a high priority among the labels.
  • the second label is included in the plurality of widgets.
  • a widget associated with a label having the highest priority is used as a base widget, and the other selected widgets are floatingly displayed on the base widget to generate the user display screen.
  • the information presentation system is characterized in that the data storage means is on a user terminal or a server connected to a network.
  • the information presentation system further comprises data conversion means for converting application output data of different data formats into a data format suitable for storage in the data storage means,
  • the data storage means stores output data of the plurality of applications in a data format suitable for the storage.
  • an information presentation apparatus receives an input and estimates a user's purpose based on information obtained by the input, and output data of a plurality of applications.
  • a plurality of predetermined second labels corresponding to the user's purpose, and a data storage unit that stores the data in association with a plurality of predetermined first labels corresponding to the user's purpose Data that selects output data related to the estimated purpose from the stored output data based on the widget registration unit that is registered in association with and the first label that is associated with the estimated purpose
  • the registered widget includes a widget related to the inferred purpose.
  • a user interface providing unit that generates and provides a user display screen using the selected output data as data to be displayed by the selected widget.
  • an information presentation method includes an object estimation process for receiving an input and estimating a user's purpose based on information obtained by the input, and output data of a plurality of applications.
  • a data storage step of storing a plurality of predetermined first labels corresponding to the user's purpose and a plurality of predetermined second labels corresponding to the user's purpose Data for selecting output data related to the estimated purpose from the stored output data based on the widget registration step of registering in association with the estimated purpose and the first label associated with the estimated purpose
  • a widget associated with the inferred purpose is added to the registered widget.
  • a computer program according to the present invention causes the information presentation method according to the present invention to be executed by a computer.
  • output data of a plurality of applications are not necessarily selected and displayed for each application, but are selected and displayed based on labels associated with various purposes of the user.
  • the necessary information can be directly presented to the user without being caught by the display content of the application.
  • the data to be displayed is not displayed using the user interface prepared by each application, but the display screen is configured by selecting and combining appropriate widgets from various widgets. It is possible to provide a user with a display screen with a high degree of freedom that is not caught by the display format of the application.
  • new information can be created and provided to the user by performing a simple and intuitive operation on the provided information.
  • the provided information is displayed using a widget independent from each application, it is possible to provide the same data with different user interfaces by adding / changing the widget.
  • Example 1 Hereinafter, embodiments of an information presentation system of the present invention will be described with reference to the drawings.
  • a portable terminal and a car navigation device that implement the system according to the present invention will be described.
  • these embodiments are merely preferred specific examples of the information presentation system of the present invention, and The invention can also be implemented in other appropriate devices such as tablet terminals and personal computers.
  • the constituent elements in the embodiments described below can be appropriately replaced with existing constituent elements, and various variations including combinations with other existing constituent elements are possible. Therefore, the description of the embodiment described below does not limit the contents of the invention described in the claims.
  • FIG. 1 is a schematic diagram showing an outline of a user's purpose estimation in an embodiment of the information presentation system.
  • the inference engine receives user input such as text, voice, and gestures. Further, the estimation engine receives selection history information of the user's operation and performs optimization by learning. The guess engine also receives user profile information such as age, gender, occupation, hobbies, preferences, tweets, etc.
  • the guess engine receives environmental information, such as date, time, weather, temperature, location, traffic, and other information. In addition to the above, the environmental information can include information obtained from various sensors connected to the system. The estimation engine views these pieces of information as a part of input information for starting estimation. In addition, even when there is no direct input operation by a user, this information presentation system can presume a user's purpose at that time based on other information and can present information to the user.
  • FIG. 2 is a diagram illustrating an example of the configuration of a mobile terminal that implements the information presentation system according to the present embodiment.
  • the mobile terminal 2 includes a main board 200, an LCD 201, a touch panel 202, and a button device 203.
  • the LCD 201 and the touch panel 202 are collectively referred to as a touch UI 204.
  • the main board 200 includes a CPU 205, a wireless LAN module 206, a power supply controller 207, a display controller (DISP C) 208, a panel controller (PANEL C) 209, a ROM 210, a RAM 211, and a secondary battery 212.
  • the modules 205 to 212 are connected by a bus (not shown).
  • CPU is an abbreviation for Central Processing Unit.
  • RAM is an abbreviation for Random Access Memory.
  • ROM is an abbreviation for Read Only Memory.
  • the portable terminal 2 is connected to a bus with a geomagnetic sensor and an acceleration sensor (not shown).
  • the CPU 205 is a processor that controls each device connected to the bus and develops each software module, which will be described later with reference to FIG.
  • the RAM 211 functions as a main memory of the CPU 205, a work area, and an area for video images displayed on the LCD 201.
  • the display controller (DISP C) 208 switches the video image output developed in the RAM 211 at a high speed and outputs a synchronization signal to the LCD 201 in response to a request from the CPU 205.
  • the video image in the RAM 211 is output to the LCD 201 in synchronization with the synchronization signal from the DISPC 208, and the image is displayed on the LCD 201.
  • a panel controller (PANEL C) 209 controls the touch panel 202 and the button device 203 in response to a request from the CPU 205. With this control, the CPU 205 is notified of the pressing position of an indicator such as a finger or a stylus pen on the touch panel 202 and the pressed key code on the button device 203.
  • the touch panel 202 can detect pressing of a plurality of points, and in this case, the CPU 205 is notified of pressing position information for the number of pressing points.
  • the power controller 207 is connected to an external power source (not shown) and receives power supply. As a result, the secondary battery 212 connected to the power supply controller 207 is charged and power is supplied to the entire mobile terminal 2. When power is not supplied from the external power source, the secondary battery 212 supplies power to the entire mobile terminal 2.
  • the wireless LAN module 206 Based on the control of the CPU 205, the wireless LAN module 206 establishes wireless communication with a wireless LAN module on a wireless access point (not shown) connected to the LAN (not shown), and communicates with the mobile terminal 2 and other devices. Mediate communications.
  • An example of the wireless LAN module is IEEE802.11b.
  • FIG. 3 is a functional block diagram of the information presentation system according to the present embodiment. Each component shown in FIG. 3 is realized by the CPU 205 of the mobile terminal 2 shown in FIG. 2 loading a program stored in the ROM 210 into the RAM 211 and the CPU 205 executing the loaded program.
  • the input information collection unit 301 collects input information to this system.
  • This input information includes, for example, input information by user operation, user selection history information, current environment information, and user profile information.
  • the user input information is input by a touch panel operation or a button device operation by the user.
  • the user input information may be a mouse operation or voice input by the user.
  • user input information is used to infer user's emotions and judgments such as various information related to the touch panel operation or button device operation itself by the user, such as the frequency and intensity of touch in a series of touch operations, the speed of scroll operation, etc. Possible information may be included.
  • the user selection history information may include information regarding selections made by the user in the past and the situation when the selections are made.
  • Current environmental information includes information obtained from various sensors provided in or connected to the system and information obtained via a network, for example, current date, time, weather, temperature, current position, Information about traffic, stores, merchandise, languages, and / or population density, etc. may be included.
  • the estimation engine 302 estimates the purpose of the user or information to be presented to the user based on the input information.
  • the estimation engine 302 may perform estimation based on any known prediction model.
  • the estimation engine 302 has a learning function based on user selection history information, and is configured to improve the accuracy of estimation using the accumulated user selection history information.
  • the database 303 stores output data of the application 305 in a unified data format according to a label associated with a user's purpose that can be estimated. This label includes display information such as “text” and “image”, attribute information such as “facility information” and “personal information”, and functional information such as “generation application” and “possible operation”. sell.
  • the inference engine 302 selects output data having a first label associated with the inferred purpose or information to be presented from the output data of the application stored in the database 303, and displays it in the user interface 304. From among the plurality of registered widgets, a widget having a second label associated with the inferred purpose or information to be presented is selected. The second label may be the same as the first label or may be different from the first label.
  • the user interface 304 uses the selected output data as data to be displayed by the selected widget, and generates a display screen to be provided to the user.
  • the database 303 is placed on the user's mobile terminal.
  • the database 303 may be placed on an external server, and the system transmits necessary data through the network. get.
  • FIG. 4 is a flowchart showing the flow of processing in this embodiment.
  • the system enters a standby state for accepting input information after activation (step 400).
  • estimation of the user's purpose by the estimation engine 302 is started in step 404.
  • the outline of this estimation is as described in the description of FIG.
  • the estimation engine 302 starts the following two processes asynchronously. That is, in step 406, output data having a label associated with the estimated purpose is selected from the output data of the application stored in the database 303. In step 408, a widget having a label associated with the estimated purpose is selected from the widgets registered in the user interface 304.
  • One or more widgets may be selected depending on the inferred purpose.
  • the selected output data is used as data displayed by the selected widget.
  • settings for layer display between widgets, settings for highlighting data, and the like are applied, and a user display screen is generated.
  • FIG. 5 is a flowchart showing the flow of processing in another embodiment of the present invention.
  • This embodiment includes a step of receiving a user input to the generated display screen following the display screen generation flow in FIG.
  • the processing from step 500 to step 512 is the same as the processing from step 400 to step 412 in FIG.
  • step 514 it is determined whether the user has performed an operation on the widget on the display screen.
  • this operation is an operation in which the user drags and drops a widget onto another widget via the touch panel. This operation is referred to as “widget composition operation”.
  • new information may be presented by accepting a user operation other than the widget composition operation, or a user instruction for how to combine information on each widget may be accepted.
  • the system may display new information based on the instruction.
  • step 504 the system returns to step 504 again, and starts guessing the user's purpose using the operation as input information.
  • the process proceeds to step 516, and the reception state of the widget composition operation by the user is maintained.
  • the determination in step 514 is performed at any time.
  • FIG. 6 shows an example of widget composition operation by a user and information displayed thereby.
  • a widget displaying “restaurant guide information” and “clock” is displayed to the user.
  • the user drags and drops the “clock” widget onto the “restaurant guide information” widget.
  • the system returns to Step 504 and starts estimating the user's purpose again.
  • This system assumes that the user's purpose is to filter the data displayed as “restaurant guide information” as “current time”, and displays the data to be displayed among a large number of restaurant information. It narrows down to the data of the store that is open at 12:00 noon, which is the time at that time, selects an appropriate widget and displays it to the user.
  • widget composition operations on the widget that displays the newly displayed “list of stores where lunch is possible” in this way. For example, if you drag and drop a widget that displays a message such as “tweet” posted on the SNS onto the “List of stores where you can have lunch” widget, the information on “List of stores where you can have lunch” will be displayed. It is narrowed down to the information of “the list of stores where lunch is possible” and displayed to the user.
  • new information is provided to the user by filtering the presented information.
  • the present invention is not limited to this and depends on the estimated purpose of the user.
  • newly present information of a different type from information that has already been presented. For example, it is assumed that store information of a nearby gas station is presented by combining a widget that displays monitoring information of the remaining amount of gasoline in a car being driven and a clock widget.
  • FIG. 7 is an example of a user display screen in the present embodiment.
  • the display screen of FIG. 7 is an example of a user display screen when information on “schedule”, “weather”, “temperature”, “map”, “store information”, and “SNS” is selected as information to be presented to the user.
  • a widget for displaying a user's schedule is displayed as a base of the screen, and a widget for displaying other information is displayed on the screen as a floating display.
  • this system 7 may be automatically generated and displayed when the user activates the system for the first time on the day, for example. As described above, this system actively starts guessing based on user selection history information, user profile information, current environment information, and the like even when there is no direct instruction operation by the user. It is possible to present information to the user.
  • FIG. 8 is a diagram illustrating an example of a configuration of a car navigation device that implements the information presentation system according to the present embodiment.
  • the car navigation apparatus 8 in this embodiment includes a CPU 801, a RAM 802, a ROM 803, an input unit I / F 804, an output unit I / F 805, an external memory I / F 806, and a communication I / F 807.
  • the car navigation device 8 includes a touch panel 811, a microphone 812, a sensor 813, a display 814, a speaker 815, an external memory 816, a NIC 817, and an NFC 818.
  • NIC is an abbreviation for Network Interface Card.
  • the CPU 801 generally controls each device connected to the system bus 821 according to a program stored in the ROM 803 serving as a storage unit.
  • the RAM 802 functions as a main memory and work area of the CPU 801, and is also used as an input information expansion area and an environment data storage area.
  • the ROM 803 stores various programs and data.
  • the input unit I / F 804 controls input from the touch panel 811, the microphone 812, and the sensor 813.
  • the touch panel 811 and the microphone 812 are input devices for user operations.
  • a keyboard or a remote controller may be provided.
  • the sensor 813 can be a GPS transceiver. GPS is an abbreviation for Global Positioning System.
  • the output unit I / F 805 controls screen display on the display 814 and sound output to the speaker 815.
  • the external memory I / F 806 controls access to an external memory 816 such as a flash memory or an SSD (Solid State Disk).
  • the external memory 816 functions as a storage medium that can be saved or read, and stores an operating system (OS), a Web browser, and an application.
  • OS operating system
  • Web browser a Web browser
  • the communication I / F 807 controls communication of the NIC 817 and the NFC 818.
  • the NIC 817 is a connection I / F with a network.
  • the NIC 817 enables the car navigation apparatus 8 to be connected to the network.
  • the present invention is not limited to the configuration shown in FIG. 8 and may be connectable to a network with a radio base station by controlling communication with a mobile network or the like.
  • the NFC 818 is a connection I / F that functions as a non-contact near field communication unit.
  • the NFC 818 enables connection with a smartphone and controls data transmission / reception through wireless communication.
  • the processing described in the present embodiment is realized by loading a program recorded in the external memory 816 into the RAM 802 and executing it by the CPU 801. Note that the program may be stored in the RAM 802 or the ROM 803 in addition to the external memory 816.
  • the software configuration in this embodiment is the same as that described in FIG.
  • map information 901 is displayed by a base widget with the highest priority, and weather / temperature 902, time 903, schedule 904 are displayed thereon.
  • Each widget displaying the store information 905 and SNS 906 information is displayed in a floating manner.
  • a small widget 907 for the operation is prepared on the upper left of the screen.
  • FIG. 10 is an example of screen transition when the user performs an operation of synthesizing the store information widget 905 and the time widget 903 with respect to the compositing operation map widget 907 in the screen example of FIG.
  • the system estimates that the user's purpose is to display store information opened at the current time on a map.
  • the store information widget 1001 is displayed on the map widget 901 in a state having a link with the coordinates of the map.
  • FIG. 11 is an example of screen transition when the user performs an operation of further synthesizing the SNS widget 906 with respect to the composition operation map widget 907 in the screen example of FIG.
  • the system estimates that the user's purpose is to display information on stores that are talked about in SNS among the store information that is open at the current time.
  • the widget 1001 is deleted from the map, and the narrowed-down store information widget 1101 is a widget larger than the widget 1001 and displayed in more detail and more emphasized.
  • the user's purpose is estimated from the input information, and the information requested by the user is provided by providing the user display screen using the output data and the widget of the application selected according to the purpose. Can be presented to the user more directly without being restricted by the display content and display format of the application. In addition, the user can quickly access the desired information by a simple and intuitive operation.
  • a characteristic configuration has been described by taking a portable terminal and a car navigation device as examples.
  • the present invention can be implemented on various architectures such as a tablet terminal, a personal computer, or an embedded device having another user interface, as well as a portable terminal and a car navigation device.
  • Another object of the present invention is to supply a storage medium storing a program code (computer program) for realizing the functions of the above-described embodiments to the system or apparatus, and the computer of the supplied system or apparatus stores the storage medium in the storage medium. It is also achieved by reading and executing the programmed program code.
  • the program code itself read from the storage medium realizes the functions of the above-described embodiments, and the storage medium storing the program code constitutes the present invention.
  • the computer functions as each processing unit by executing a program.
  • part or all of the processing may be configured by a dedicated electronic circuit (hardware). I do not care.
  • the present invention is not limited to the specific embodiments described, and various modifications and changes are possible within the scope of the gist of the present invention described in the claims.
  • 2 ... mobile terminal, 200 ... main board, 201 ... LCD, 202 ... touch panel, 203 ... button device, 204 ... touch UI, 205 ... CPU, 206 ... wireless LAN module, 207 ... power controller, 208 ... display controller, 209 ... Panel controller, 210 ... ROM, 211 ... RAM, 212 ... secondary battery, 301 ... input information collection unit, 302 ... estimation engine, 303 ... database, 304 ... user interface, 305 ... application, 8 ... car navigation device, 801 ... CPU, 802 ... RAM, 803 ... ROM, 804 ... input I / F, 805 ... output I / F, 806 ... external memory I / F, 807 ...

Abstract

An information presentation system is provided with: a purpose estimation means; a data storage means that stores application output data in association with a first label corresponding to a user's purpose; a widget registration means that registers a widget in association with a second label corresponding to the user's purpose; a data selection means that selects the output data related to the estimated purpose on the basis of the first label; a widget selection means that selects a widget related to the estimated purpose on the basis of the second label; and a user interface providing means that generates a user display screen by using the selected output data as the data to be displayed by the selected widget.

Description

情報提示システム、装置、方法、およびコンピュータプログラムInformation presentation system, apparatus, method, and computer program
　本発明は、入力された情報から推測されたユーザの目的に基づき、提示すべき情報およびその表示形式を決定し提供するシステム、装置、方法、およびコンピュータプログラムに関する。 The present invention relates to a system, an apparatus, a method, and a computer program for determining and providing information to be presented and its display format based on a user's purpose inferred from input information.
　従来、ユーザの利用履歴やセンサー情報に基づき、ユーザが現在必要としている情報を表示したり、ユーザの好みに合ったコンテンツまたはアプリケーションをレコメンドする技術が提案されている。 Conventionally, a technique for displaying information currently required by the user based on the user's usage history or sensor information, or recommending content or an application suitable for the user's preference has been proposed.
　例えば、特許文献１には、予め多数のＰＯＩ（Ｐｏｉｎｔ　ｏｆ　Ｉｎｔｅｒｅｓｔ）情報を備えたナビゲーション・システムにおいて、ユーザの現在の状況と過去のＰＯＩ選択履歴に基づき、ユーザの嗜好に合ったＰＯＩ情報を表示する技術が開示されている。 For example, Patent Document 1 displays POI information that matches a user's preference based on a user's current situation and past POI selection history in a navigation system that includes a large number of POI (Point of Interest) information in advance. Techniques to do this are disclosed.
　また、特許文献２には、ユーザによる状況修正操作を受け付けることにより、最適なレコメンド情報をユーザに提供する技術が開示されている。 Further, Patent Document 2 discloses a technique for providing a user with optimal recommendation information by accepting a situation correction operation by the user.
特開２００４－３５５０７５号公報JP 2004-355075 A 特開２０１３－１７８７０７号公報JP 2013-178707 A
　しかしながら、特許文献１の技術において、ユーザに表示される情報は、あくまでも予め用意されたＰＯＩ情報の中から選択されたものが所定の形式で表示されたものであり、その表示内容および表示形式の自由度は低く、ユーザの多様なニーズに十分に対応することは難しいものであった。 However, in the technique of Patent Document 1, the information displayed to the user is the information selected from the POI information prepared in advance and displayed in a predetermined format. The degree of freedom was low, and it was difficult to adequately meet the diverse needs of users.
　また、特許文献２の技術においては、多種の情報源から得られた情報を用いてユーザのニーズを高い精度で把握できたとしても、その結果としてユーザに提示されるのは、そのニーズへの適合度が高いと判断された既存のアプリケーションの情報であり、必ずしもユーザが求める情報を直接的に表示できるものではなかった。例えば、ユーザが求める情報が、ＳＮＳ等で話題となっている店舗の詳細情報であるような場合、ユーザはまずＳＮＳ閲覧用のアプリケーションを利用して話題になっている店舗を特定し、その後、店舗の詳細情報を提供するアプリケーションを使用して当該店舗の情報を検索するというような段階を経なければ、必要とする情報を取得することが難しかった。また、ユーザに表示される情報は、それぞれのアプリケーションが備えるユーザインターフェースを介してユーザに提供されるため、表示内容および表示形式の自由度は低いものであった。 Further, in the technology of Patent Document 2, even if the user's needs can be grasped with high accuracy using information obtained from various information sources, the result presented to the user as a result It is information on an existing application that has been determined to have a high degree of fitness, and information that the user wants cannot always be displayed directly. For example, when the information requested by the user is detailed information of a store that is a topic in SNS or the like, the user first specifies a store that is a topic using an application for browsing SNS, and then It has been difficult to obtain necessary information without going through a stage of searching for store information using an application that provides detailed store information. Further, since the information displayed to the user is provided to the user via a user interface provided in each application, the degree of freedom of display contents and display format is low.
　本発明は、このような状況を鑑みてなされたものであり、ユーザが求める情報を推測し、その情報を自由度の高い表示内容および表示形式でユーザに提供する情報提示システムを提供することを目的とする。 The present invention has been made in view of such a situation, and provides an information presentation system that estimates information requested by a user and provides the information to the user in display content and display format with a high degree of freedom. Objective.
　上記課題を解決するために、本発明に係る情報提示システムは、入力を受け付けて該入力によって得られた情報に基づきユーザの目的を推測する目的推測手段と、複数のアプリケーションの出力データを、前記ユーザの目的に対応する予め定められた複数の第１のラベルに紐づけて記憶するデータ記憶手段と、複数のウィジェットを、前記ユーザの目的に対応する予め定められた複数の第２のラベルに紐づけて登録するウィジェット登録手段と、前記推測された目的と紐づけられた前記第１のラベルに基づき、前記推測された目的に関連する出力データを前記記憶された出力データから選択するデータ選択手段と、前記推測された目的と紐づけられた前記第２のラベルに基づき、前記推測された目的に関連するウィジェットを前記登録されたウィジェットから選択するウィジェット選択手段と、前記選択された出力データを前記選択されたウィジェットが表示するデータとして使用し、ユーザ表示画面を生成して提供するユーザインターフェース提供手段と、を備えることを特徴とする。 In order to solve the above-described problem, an information presentation system according to the present invention includes an object estimation unit that accepts an input and estimates an object of a user based on information obtained by the input, and output data of a plurality of applications, Data storage means for linking and storing a plurality of predetermined first labels corresponding to the user's purpose and a plurality of widgets to a plurality of predetermined second labels corresponding to the user's purpose Data selection for selecting output data related to the estimated purpose from the stored output data based on the widget registration means for registering and registering, and the first label associated with the estimated purpose And the widget associated with the estimated purpose is registered based on the means and the second label associated with the estimated purpose. Widget selection means for selecting from a widget, and user interface providing means for generating and providing a user display screen by using the selected output data as data to be displayed by the selected widget. To do.
　本情報提示システムの一実施形態において使用されるアプリケーションは、データベース定義を含むデータ構造部（Ｍｏｄｅｌ，Ｍ）と、データ制御処理部（Ｃｏｎｔｒｏｌｌｅｒ，Ｃ）と、入出力制御部（Ｖｉｅｗ，Ｖ）と、を分離してアプリケーションを作成するＭＶＣフレームワークを改良したフレームワークを用いて作成されるものである。この改良フレームワークにおいては、各アプリケーションの出力データを含むデータ構造部は、単一のデータベース上に、共通のデータ形式で格納される。各アプリケーションは専用のユーザインターフェースを備えず、ユーザへの出力表示は全て、システムに登録されたウィジェットを用いて行われることを特徴とする。一実施形態において、このようなフレームワークによって作成されるアプリケーションの例として、テキストエディタや画像編集・管理用アプリケーション、ウェブブラウザ、地図情報、店舗情報などの各種情報提供用アプリケーション、スケジュール管理用アプリケーション、ソーシャル・ネットワーキング・サービス（ＳＮＳ）閲覧・編集・投稿用アプリケーション、各種センサー機器から得られた情報を提供するアプリケーションなどが想定されているが、本発明がこれらに限定されるものではなく、ユーザに特定の情報・機能を提供する様々なアプリケーションを作成することが可能である。また、別の実施形態においては、本システムがデータ変換手段を備えることにより、異なるデータ形式のアプリケーションの出力データを、本システムのデータ記憶手段に適したデータ形式に変換して用いることも可能である。 An application used in an embodiment of the information presentation system includes a data structure part (Model, M) including a database definition, a data control processing part (Controller, C), an input / output control part (View, V), and the like. Are created using a framework improved from the MVC framework that creates an application by separating. In this improved framework, a data structure including output data of each application is stored in a common data format on a single database. Each application does not have a dedicated user interface, and all output display to the user is performed using a widget registered in the system. In one embodiment, examples of applications created by such a framework include a text editor, an image editing / management application, a web browser, various information providing applications such as map information, store information, a schedule management application, Social networking service (SNS) browsing / editing / posting applications, applications that provide information obtained from various sensor devices, and the like are assumed, but the present invention is not limited to these, It is possible to create various applications that provide specific information and functions. In another embodiment, the system includes data conversion means, so that the output data of an application having a different data format can be converted into a data format suitable for the data storage means of the system. is there.
　本明細書で用いられる「ウィジェット」という語は、グラフィカルユーザインターフェースを構成するインターフェース要素を意味する。一実施形態において、ユーザに表示される画面には、任意の数のウィジェットが任意の配置で表示されることが可能である。ウィジェットは、本システムにおいて選択された任意の情報をユーザに提供することが可能であるように構成される。また、ウィジェットは、テキストボックス、あるいはボタンやスライダーなどのユーザ入力を受け付けるための入力要素、スクロールバーやタブなどのデータの表示に使われる表示要素などを備えていてもよく、また、これらの機能を単一のウィジェットが備えていてもよいし、これらの機能を複数のウィジェットによってユーザに提供してもよい。また、特定のアプリケーションのデータ表示または機能の使用に特化したウィジェットを用いることも可能である。 As used in this specification, the term “widget” means an interface element constituting a graphical user interface. In one embodiment, any number of widgets can be displayed in any arrangement on the screen displayed to the user. The widget is configured to be able to provide the user with any information selected in the system. In addition, the widget may include a text box, an input element for accepting user input such as a button or a slider, a display element used to display data such as a scroll bar or tab, and the like. May be provided in a single widget, or these functions may be provided to the user by a plurality of widgets. It is also possible to use a widget specialized for data display or function use of a specific application.
　本発明の一実施形態によれば、本発明に係る情報提示システムは、前記生成されたユーザ表示画面上に表示されている複数の前記選択されたウィジェットに対するユーザの操作を受け付けて、前記表示されている複数のウィジェットに表示されている情報を前記入力として用いることによる新たな情報をユーザに提供することが可能である。 According to an embodiment of the present invention, the information presentation system according to the present invention receives a user operation on the plurality of selected widgets displayed on the generated user display screen, and displays the displayed information. It is possible to provide the user with new information by using the information displayed in the plurality of widgets as the input.
　本発明の一実施形態において、前記選択されたウィジェットに対する前記ユーザ操作は、ユーザによる前記ユーザ表示画面に表示された複数ウィジェット間のドラッグアンドドロップ操作であることを特徴とする。 In one embodiment of the present invention, the user operation on the selected widget is a drag-and-drop operation between a plurality of widgets displayed on the user display screen by a user.
　本発明の一実施形態によれば、本発明に係る情報提示システムは、前記目的推測手段が、ユーザの選択履歴情報、現在の環境情報、ユーザプロフィール情報、および／またはユーザ入力情報に基づきユーザの目的を推測することを特徴とする。 According to an embodiment of the present invention, in the information presentation system according to the present invention, the purpose inference means is based on user selection history information, current environment information, user profile information, and / or user input information. It is characterized by guessing the purpose.
　本発明の一実施形態によれば、本発明に係る情報提示システムは、前記目的推測手段が、前記ユーザ入力情報が存在しない場合に、前記ユーザの選択履歴情報、前記現在の環境情報、および／または前記ユーザプロフィール情報に基づきユーザの目的を推測することを特徴とする。 According to an embodiment of the present invention, in the information presentation system according to the present invention, when the purpose estimation means does not include the user input information, the user selection history information, the current environment information, and / or Alternatively, the user's purpose is estimated based on the user profile information.
　本発明の一実施形態によれば、本発明に係る情報提示システムは、前記現在の環境情報が、ネットワーク上のサーバ、ＧＰＳ、またはセンサーを介して取得された日付、時刻、天気、温度、現在位置、交通、店舗、商品、言語、および／または人口密度に関する情報を含むことを特徴とする。 According to an embodiment of the present invention, the information presentation system according to the present invention is configured such that the current environment information is acquired via a server, GPS, or sensor on a network, date, time, weather, temperature, current Includes information regarding location, traffic, stores, merchandise, language, and / or population density.
　本発明の一実施形態によれば、本発明に係る情報提示システムは、前記ユーザ入力情報が、タッチパネルを介した入力情報、ならびに該入力に関するユーザ操作の速度、頻度、および強度に関する情報を含むことを特徴とする。 According to an embodiment of the present invention, in the information presentation system according to the present invention, the user input information includes input information via a touch panel, and information on a user operation speed, frequency, and strength related to the input. It is characterized by.
　本発明の一実施形態によれば、本発明に係る情報提示システムは、前記目的推測手段が、前記ユーザ選択履歴に基づく学習機能を備えることを特徴とする。 According to an embodiment of the present invention, the information presentation system according to the present invention is characterized in that the purpose estimating means includes a learning function based on the user selection history.
　本発明の一実施形態によれば、本発明に係る情報提示システムは、前記ユーザインターフェース提供手段が、前記選択された出力データが複数ある場合に、該複数の出力データの中で、前記第１のラベルのうち優先度の高い１または複数のラベルに紐づけられた出力データを強調表示して前記ユーザ表示画面を生成することを特徴とする。 According to an embodiment of the present invention, in the information presentation system according to the present invention, when the user interface providing means includes a plurality of the selected output data, the first output data includes the first output data. The user display screen is generated by highlighting output data associated with one or more labels having a high priority among the labels.
　本発明の一実施形態によれば、本発明に係る情報提示システムは、前記ユーザインターフェース提供手段が、前記選択されたウィジェットが複数ある場合に、該複数のウィジェット中で、前記第２のラベルのうち最も優先度の高いラベルに紐づけられたウィジェットを基盤ウィジェットとして、その他の前記選択されたウィジェットを前記基盤ウィジェット上にフローティング表示して前記ユーザ表示画面を生成することを特徴とする。 According to an embodiment of the present invention, in the information presentation system according to the present invention, when the user interface providing unit includes a plurality of the selected widgets, the second label is included in the plurality of widgets. A widget associated with a label having the highest priority is used as a base widget, and the other selected widgets are floatingly displayed on the base widget to generate the user display screen.
　本発明の一実施形態によれば、本発明に係る情報提示システムは、前記データ記憶手段が、ユーザ端末上またはネットワークに接続されたサーバ上にあることを特徴とする。 According to an embodiment of the present invention, the information presentation system according to the present invention is characterized in that the data storage means is on a user terminal or a server connected to a network.
　本発明の一実施形態によれば、本発明に係る情報提示システムは、異なるデータ形式のアプリケーション出力データを、前記データ記憶手段における記憶に適したデータ形式へと変換するデータ変換手段をさらに備え、前記データ記憶手段は前記記憶に適したデータ形式で前記複数のアプリケーションの出力データを記憶することを特徴とする。 According to one embodiment of the present invention, the information presentation system according to the present invention further comprises data conversion means for converting application output data of different data formats into a data format suitable for storage in the data storage means, The data storage means stores output data of the plurality of applications in a data format suitable for the storage.
　本発明の一態様によれば、本発明に係る情報提示装置は、入力を受け付けて該入力によって得られた情報に基づきユーザの目的を推測する目的推測部と、複数のアプリケーションの出力データを、前記ユーザの目的に対応する予め定められた複数の第１のラベルに紐づけて記憶するデータ記憶部と、複数のウィジェットを、前記ユーザの目的に対応する予め定められた複数の第２のラベルに紐づけて登録するウィジェット登録部と、前記推測された目的と紐づけられた前記第１のラベルに基づき、前記推測された目的に関連する出力データを前記記憶された出力データから選択するデータ選択部と、前記推測された目的と紐づけられた前記第２のラベルに基づき、前記推測された目的に関連するウィジェットを前記登録されたウィジェットから選択するウィジェット選択部と、前記選択された出力データを前記選択されたウィジェットが表示するデータとして使用し、ユーザ表示画面を生成して提供するユーザインターフェース提供部と、を備えることを特徴とする。 According to one aspect of the present invention, an information presentation apparatus according to the present invention receives an input and estimates a user's purpose based on information obtained by the input, and output data of a plurality of applications. A plurality of predetermined second labels corresponding to the user's purpose, and a data storage unit that stores the data in association with a plurality of predetermined first labels corresponding to the user's purpose Data that selects output data related to the estimated purpose from the stored output data based on the widget registration unit that is registered in association with and the first label that is associated with the estimated purpose Based on the selection unit and the second label associated with the inferred purpose, the registered widget includes a widget related to the inferred purpose. And a user interface providing unit that generates and provides a user display screen using the selected output data as data to be displayed by the selected widget. .
　本発明の一態様によれば、本発明に係る情報提示方法は、入力を受け付けて該入力によって得られた情報に基づきユーザの目的を推測する目的推測工程と、複数のアプリケーションの出力データを、前記ユーザの目的に対応する予め定められた複数の第１のラベルに紐づけて記憶するデータ記憶工程と、複数のウィジェットを、前記ユーザの目的に対応する予め定められた複数の第２のラベルに紐づけて登録するウィジェット登録工程と、前記推測された目的と紐づけられた前記第１のラベルに基づき、前記推測された目的に関連する出力データを前記記憶された出力データから選択するデータ選択工程と、前記推測された目的と紐づけられた前記第２のラベルに基づき、前記推測された目的に関連するウィジェットを前記登録されたウィジェットから選択するウィジェット選択工程と、前記選択された出力データを前記選択されたウィジェットが表示するデータとして使用し、ユーザ表示画面を生成して提供するユーザインターフェース提供工程と、を含むことを特徴とする。 According to one aspect of the present invention, an information presentation method according to the present invention includes an object estimation process for receiving an input and estimating a user's purpose based on information obtained by the input, and output data of a plurality of applications. A data storage step of storing a plurality of predetermined first labels corresponding to the user's purpose and a plurality of predetermined second labels corresponding to the user's purpose Data for selecting output data related to the estimated purpose from the stored output data based on the widget registration step of registering in association with the estimated purpose and the first label associated with the estimated purpose Based on the selection step and the second label associated with the inferred purpose, a widget associated with the inferred purpose is added to the registered widget. A widget selecting step for selecting from a widget, and a user interface providing step for generating and providing a user display screen by using the selected output data as data to be displayed by the selected widget. To do.
　本発明の一態様によれば、本発明に係るコンピュータプログラムは、本発明に係る情報提示方法をコンピュータにより実行させることを特徴とする。 According to one aspect of the present invention, a computer program according to the present invention causes the information presentation method according to the present invention to be executed by a computer.
　本発明によれば、複数のアプリケーションの出力データは必ずしもアプリケーションごとに選択されて表示されるのではなく、ユーザの様々な目的に紐づけられたラベルに基づいて選択されて表示されるため、既存のアプリケーションの表示内容に捕らわれずに、ユーザに必要な情報を直接的に提示することができる。 According to the present invention, output data of a plurality of applications are not necessarily selected and displayed for each application, but are selected and displayed based on labels associated with various purposes of the user. The necessary information can be directly presented to the user without being caught by the display content of the application.
　また、表示すべきデータは、各アプリケーションによって用意されたユーザインターフェースを用いて表示されるのではなく、様々なウィジェットの中から適切なものが選択され組み合わされて表示画面が構成されるため、既存のアプリケーションの表示形式に捕らわれない、自由度の高い表示画面をユーザに提供することができる。 In addition, the data to be displayed is not displayed using the user interface prepared by each application, but the display screen is configured by selecting and combining appropriate widgets from various widgets. It is possible to provide a user with a display screen with a high degree of freedom that is not caught by the display format of the application.
　上記の利点の結果、ユーザにアプリケーション間の垣根を越えた利便性の高い情報を提供することが可能であり、ユーザは直観的な操作によってこうした情報にアクセスすることが可能であると共に、本発明のシステムまたは装置が能動的にユーザが必要とする情報を推測し、提供することも可能となる。 As a result of the above-described advantages, it is possible to provide users with highly convenient information that crosses the boundaries between applications, and the user can access such information through intuitive operations. This system or apparatus can actively infer and provide information required by the user.
　加えて、本発明によれば、提供された情報に対してユーザが簡易かつ直観的な操作を行うことにより、さらに新たな情報を作り出し、ユーザに提供することが可能である。 In addition, according to the present invention, new information can be created and provided to the user by performing a simple and intuitive operation on the provided information.
　さらに、提供される情報は、各アプリケーションから独立したウィジェットを用いて表示されるため、ウィジェットの追加・変更により、同一のデータを異なるユーザインターフェースで提供することも可能である。また、異なる複数のアプリケーションのデータを、統一感のあるウィジェットを使用して同一画面上に表示させることが可能であり、ユーザの好みや本システムを実装する装置等の雰囲気に合わせたユーザインターフェースを提供することが可能である。 Furthermore, since the provided information is displayed using a widget independent from each application, it is possible to provide the same data with different user interfaces by adding / changing the widget. In addition, it is possible to display data of multiple different applications on the same screen using a unified widget, and a user interface that matches the user's preference and the atmosphere of the device that implements this system, etc. It is possible to provide.
本発明に係る情報提示システムにおけるユーザの目的の推測の概略を示す模式図である。It is a schematic diagram which shows the outline of estimation of the objective of the user in the information presentation system which concerns on this invention. 本発明に係る情報提示システムを実装する携帯端末のハードウェア構成を示す図である。It is a figure which shows the hardware constitutions of the portable terminal which mounts the information presentation system which concerns on this invention. 本発明に係る情報提示システムのソフトウェア構成を示す図である。It is a figure which shows the software structure of the information presentation system which concerns on this invention. 本発明の一実施形態における処理の流れを示すフローチャートである。It is a flowchart which shows the flow of the process in one Embodiment of this invention. 本発明の別の実施形態における処理の流れを示すフローチャートである。It is a flowchart which shows the flow of the process in another embodiment of this invention. 本発明の一実施形態におけるユーザ操作の一例を示す図である。It is a figure which shows an example of user operation in one Embodiment of this invention. 本発明の一実施形態におけるユーザ表示画面の一例を示す図である。It is a figure which shows an example of the user display screen in one Embodiment of this invention. 本発明に係る情報提示システムを実装するカーナビゲーション装置のハードウェア構成を示す図である。It is a figure which shows the hardware constitutions of the car navigation apparatus which mounts the information presentation system which concerns on this invention. 本発明の一実施形態におけるユーザ表示画面の一例を示す図である。It is a figure which shows an example of the user display screen in one Embodiment of this invention. 本発明の一実施形態におけるユーザ表示画面の一例を示す図である。It is a figure which shows an example of the user display screen in one Embodiment of this invention. 本発明の一実施形態におけるユーザ表示画面の一例を示す図である。It is a figure which shows an example of the user display screen in one Embodiment of this invention.
（実施例１）
　以下、本発明の情報提示システムの実施形態について、図面を参照して説明する。なお、以下に示す実施例においては、本発明に係るシステムを実装する携帯端末およびカーナビゲーション装置について説明するが、これらの実施例は本発明の情報提示システムの好適な具体例に過ぎず、本発明は、タブレット型端末、パーソナルコンピュータなどの他の適切な機器においても実施が可能である。また、以下に示す実施形態における構成要素は適宜、既存の構成要素等との置き換えが可能であり、また、他の既存の構成要素との組み合わせを含む様々なバリエーションが可能である。したがって、以下に示す実施形態の記載をもって、特許請求の範囲に記載された発明の内容を限定するものではない。 Example 1
Hereinafter, embodiments of an information presentation system of the present invention will be described with reference to the drawings. In the following embodiments, a portable terminal and a car navigation device that implement the system according to the present invention will be described. However, these embodiments are merely preferred specific examples of the information presentation system of the present invention, and The invention can also be implemented in other appropriate devices such as tablet terminals and personal computers. In addition, the constituent elements in the embodiments described below can be appropriately replaced with existing constituent elements, and various variations including combinations with other existing constituent elements are possible. Therefore, the description of the embodiment described below does not limit the contents of the invention described in the claims.
　図１は、本情報提示システムの一実施形態における、ユーザの目的の推測の概略を示す模式図である。本情報提示システムにおいて、推測エンジンは、ユーザの入力、例えば、テキスト、音声、ジェスチャーを受け取る。また、推測エンジンは、ユーザの操作の選択履歴情報を受け取り、学習による最適化を行う。また、推測エンジンは、ユーザプロフィール情報、例えば、年齢、性別、職業、趣味、好み、つぶやき等の情報を受け取る。さらに、推測エンジンは、環境情報、例えば、日付、時刻、天気、気温、位置、交通等の情報を受け取る。また、環境情報には、上記のもの以外にも、本システムに接続された種々のセンサーから得られた情報が含まれうる。推測エンジンは、これらの情報を、推測を開始するための入力情報の一部として捉える。なお、本情報提示システムは、ユーザによる直接の入力操作がない場合にも、他の情報に基づき、その時点におけるユーザの目的を推測し、ユーザに情報を提示することができる。 FIG. 1 is a schematic diagram showing an outline of a user's purpose estimation in an embodiment of the information presentation system. In this information presentation system, the inference engine receives user input such as text, voice, and gestures. Further, the estimation engine receives selection history information of the user's operation and performs optimization by learning. The guess engine also receives user profile information such as age, gender, occupation, hobbies, preferences, tweets, etc. In addition, the guess engine receives environmental information, such as date, time, weather, temperature, location, traffic, and other information. In addition to the above, the environmental information can include information obtained from various sensors connected to the system. The estimation engine views these pieces of information as a part of input information for starting estimation. In addition, even when there is no direct input operation by a user, this information presentation system can presume a user's purpose at that time based on other information and can present information to the user.
（実施例１のハードウェア構成）
　図２は、本実施形態に係る情報提示システムを実装する携帯端末の構成の一例を示す図である。携帯端末２は、メインボード２００、ＬＣＤ２０１、タッチパネル２０２、ボタンデバイス２０３から構成される。また、ＬＣＤ２０１とタッチパネル２０２をまとめてタッチＵＩ２０４と呼ぶこととする。 (Hardware configuration of Example 1)
FIG. 2 is a diagram illustrating an example of the configuration of a mobile terminal that implements the information presentation system according to the present embodiment. The mobile terminal 2 includes a main board 200, an LCD 201, a touch panel 202, and a button device 203. The LCD 201 and the touch panel 202 are collectively referred to as a touch UI 204.
　メインボード２００は、ＣＰＵ２０５、無線ＬＡＮモジュール２０６、電源コントローラ２０７、ディスプレイコントローラ（ＤＩＳＰ　Ｃ）２０８、パネルコントローラ（ＰＡＮＥＬ　Ｃ）２０９、ＲＯＭ２１０、ＲＡＭ２１１、二次電池２１２から構成される。それぞれのモジュール２０５～２１２は、バス（不図示）によって接続されている。ＣＰＵは、Ｃｅｎｔｒａｌ　Ｐｒｏｃｅｓｓｉｎｇ　Ｕｎｉｔの略称である。ＲＡＭは、Ｒａｎｄｏｍ　Ａｃｃｅｓｓ　Ｍｅｍｏｒｙの略称である。ＲＯＭは、Ｒｅａｄ　Ｏｎｌｙ　Ｍｅｍｏｒｙの略称である。また、携帯端末２には不図示の地磁気センサーや加速度センサーがバスに接続されている。 The main board 200 includes a CPU 205, a wireless LAN module 206, a power supply controller 207, a display controller (DISP C) 208, a panel controller (PANEL C) 209, a ROM 210, a RAM 211, and a secondary battery 212. The modules 205 to 212 are connected by a bus (not shown). CPU is an abbreviation for Central Processing Unit. RAM is an abbreviation for Random Access Memory. ROM is an abbreviation for Read Only Memory. The portable terminal 2 is connected to a bus with a geomagnetic sensor and an acceleration sensor (not shown).
　ＣＰＵ２０５は、バスに接続される各デバイスを制御すると共に、ＲＯＭ２１０に記憶された図３を用いて後述する各ソフトウェアモジュールを、ＲＡＭ２１１に展開して実行するプロセッサである。ＲＡＭ２１１は、ＣＰＵ２０５のメインメモリ、ワークエリアおよびＬＣＤ２０１に表示するビデオイメージ用エリアとして機能する。 The CPU 205 is a processor that controls each device connected to the bus and develops each software module, which will be described later with reference to FIG. The RAM 211 functions as a main memory of the CPU 205, a work area, and an area for video images displayed on the LCD 201.
　ディスプレイコントローラ（ＤＩＳＰ　Ｃ）２０８は、ＣＰＵ２０５の要求に応じて、ＲＡＭ２１１に展開されたビデオイメージ出力を高速に切り替えると共に、ＬＣＤ２０１に同期信号を出力する。結果として、ＲＡＭ２１１のビデオイメージが、ＤＩＳＰＣ２０８の同期信号に同期してＬＣＤ２０１に出力され、ＬＣＤ２０１上にイメージが表示される。 The display controller (DISP C) 208 switches the video image output developed in the RAM 211 at a high speed and outputs a synchronization signal to the LCD 201 in response to a request from the CPU 205. As a result, the video image in the RAM 211 is output to the LCD 201 in synchronization with the synchronization signal from the DISPC 208, and the image is displayed on the LCD 201.
　パネルコントローラ（ＰＡＮＥＬ　Ｃ）２０９は、ＣＰＵ２０５の要求に応じて、タッチパネル２０２およびボタンデバイス２０３を制御する。その制御によって、タッチパネル２０２上の指またはスタイラスペンなどの指示物の押下位置や、ボタンデバイス２０３上の押下されたキーコードなどが、ＣＰＵ２０５に通知される。タッチパネル２０２は複数ポイントの押下を検知することが可能で、その場合、ＣＰＵ２０５には押下点数分の押下位置情報が通知される。 A panel controller (PANEL C) 209 controls the touch panel 202 and the button device 203 in response to a request from the CPU 205. With this control, the CPU 205 is notified of the pressing position of an indicator such as a finger or a stylus pen on the touch panel 202 and the pressed key code on the button device 203. The touch panel 202 can detect pressing of a plurality of points, and in this case, the CPU 205 is notified of pressing position information for the number of pressing points.
　電源コントローラ２０７は、外部電源（不図示）と接続され電力の供給を受ける。これによって、電源コントローラ２０７に接続された二次電池２１２を充電しながら、かつ、携帯端末２全体に電力を供給する。外部電源から電力が供給されないときは、二次電池２１２が携帯端末２全体に電力を供給する。 The power controller 207 is connected to an external power source (not shown) and receives power supply. As a result, the secondary battery 212 connected to the power supply controller 207 is charged and power is supplied to the entire mobile terminal 2. When power is not supplied from the external power source, the secondary battery 212 supplies power to the entire mobile terminal 2.
　無線ＬＡＮモジュール２０６は、ＣＰＵ２０５の制御に基づいて、ＬＡＮ（不図示）に接続された無線アクセスポイント（不図示）上の無線ＬＡＮモジュールとの無線通信を確立し、携帯端末２と他の装置との通信を仲介する。無線ＬＡＮモジュールには、例えばＩＥＥＥ８０２．１１ｂなどがある。 Based on the control of the CPU 205, the wireless LAN module 206 establishes wireless communication with a wireless LAN module on a wireless access point (not shown) connected to the LAN (not shown), and communicates with the mobile terminal 2 and other devices. Mediate communications. An example of the wireless LAN module is IEEE802.11b.
（実施例１のソフトウェア構成）
　図３は、本実施形態に係る情報提示システムの機能ブロック図である。図３に示す各構成部は、図２に示した携帯端末２のＣＰＵ２０５がＲＯＭ２１０に記憶されているプログラムをＲＡＭ２１１にロードし、ロードされたプログラムをＣＰＵ２０５が実行することで実現される。 (Software configuration of Example 1)
FIG. 3 is a functional block diagram of the information presentation system according to the present embodiment. Each component shown in FIG. 3 is realized by the CPU 205 of the mobile terminal 2 shown in FIG. 2 loading a program stored in the ROM 210 into the RAM 211 and the CPU 205 executing the loaded program.
　入力情報収集部３０１は本システムへの入力情報を収集する。この入力情報には、例えばユーザ操作による入力情報、ユーザ選択履歴情報、現在の環境情報、およびユーザプロフィール情報などが含まれる。本実施例において、ユーザ入力情報は、ユーザによるタッチパネル操作またはボタンデバイス操作による入力であるが、別の実施例においては、ユーザ入力情報は、ユーザによるマウスの操作や音声による入力であってもよい。また、ユーザ入力情報には、ユーザによるタッチパネル操作またはボタンデバイス操作自体に関する諸情報、例えば、一連のタッチ操作におけるタッチの頻度や強度、スクロール操作の速度などの、ユーザの感情や判断の推測材料となりうる情報が含まれうる。ユーザ選択履歴情報は、ユーザが過去に行った選択およびその選択が行われたときの状況に関する情報などが含まれうる。現在の環境情報は、本システムに備えられ、または接続された各種センサーから得られた情報およびネットワークを介して入手された情報を含み、例えば、現在の日付、時刻、天気、温度、現在位置、交通、店舗、商品、言語、および／または人口密度に関する情報などが含まれうる。 The input information collection unit 301 collects input information to this system. This input information includes, for example, input information by user operation, user selection history information, current environment information, and user profile information. In this embodiment, the user input information is input by a touch panel operation or a button device operation by the user. However, in another embodiment, the user input information may be a mouse operation or voice input by the user. . In addition, user input information is used to infer user's emotions and judgments such as various information related to the touch panel operation or button device operation itself by the user, such as the frequency and intensity of touch in a series of touch operations, the speed of scroll operation, etc. Possible information may be included. The user selection history information may include information regarding selections made by the user in the past and the situation when the selections are made. Current environmental information includes information obtained from various sensors provided in or connected to the system and information obtained via a network, for example, current date, time, weather, temperature, current position, Information about traffic, stores, merchandise, languages, and / or population density, etc. may be included.
　推測エンジン３０２は、入力された情報に基づき、ユーザの目的、またはユーザに提示すべき情報を推測する。推測エンジン３０２は、任意の公知の予測モデルに基づき推測を行うものであってよい。また、推測エンジン３０２は、ユーザ選択履歴情報に基づく学習機能を備えており、蓄積されたユーザ選択履歴情報を利用して推測の精度を向上させるように構成されている。データベース３０３は、アプリケーション３０５の出力データを、推測されうるユーザの目的に紐づけられたラベルに従い、統一されたデータ形式で格納する。このラベルには、「テキスト」や「画像」などといった表示情報、「施設情報」や「パーソナル情報」などといった属性情報、「生成元アプリケーション」や「可能な操作」などといった機能情報などが含まれうる。推測エンジン３０２は、データベース３０３に格納されたアプリケーションの出力データの中から、推測された目的または提示すべき情報に紐づけられた第１のラベルを有する出力データを選択すると共に、ユーザインターフェース３０４に登録されている複数のウィジェットの中から、推測された目的または提示すべき情報に紐づけられた第２のラベルを有するウィジェットを選択する。第２のラベルは、第１のラベルと同様のものであってもよいし、第１のラベルとは異なるものであってもよい。ユーザインターフェース３０４は、選択された出力データを選択されたウィジェットが表示するデータとして使用し、ユーザに提供する表示画面を生成する。 The estimation engine 302 estimates the purpose of the user or information to be presented to the user based on the input information. The estimation engine 302 may perform estimation based on any known prediction model. The estimation engine 302 has a learning function based on user selection history information, and is configured to improve the accuracy of estimation using the accumulated user selection history information. The database 303 stores output data of the application 305 in a unified data format according to a label associated with a user's purpose that can be estimated. This label includes display information such as “text” and “image”, attribute information such as “facility information” and “personal information”, and functional information such as “generation application” and “possible operation”. sell. The inference engine 302 selects output data having a first label associated with the inferred purpose or information to be presented from the output data of the application stored in the database 303, and displays it in the user interface 304. From among the plurality of registered widgets, a widget having a second label associated with the inferred purpose or information to be presented is selected. The second label may be the same as the first label or may be different from the first label. The user interface 304 uses the selected output data as data to be displayed by the selected widget, and generates a display screen to be provided to the user.
　本実施形態においては、データベース３０３はユーザの携帯端末上に置かれているが、別の実施形態においては、データベース３０３は外部サーバ上に置かれていてもよく、システムはネットワークを通じて必要なデータを取得する。 In the present embodiment, the database 303 is placed on the user's mobile terminal. However, in another embodiment, the database 303 may be placed on an external server, and the system transmits necessary data through the network. get.
（ユーザ表示画面生成のフローチャート）
　図４は、本実施形態における処理の流れを示すフローチャートである。本実施例に係る携帯端末２において、本システムは、起動後、入力情報を受け付ける待機状態に入る（ステップ４００）。ステップ４０２において入力情報が検知されると、ステップ４０４で推測エンジン３０２によるユーザの目的の推測が開始される。この推測の概略は、図１についての説明において述べたとおりである。目的が推測されると、推測エンジン３０２は、以下の２つの処理を非同期で開始する。すなわち、ステップ４０６において、データベース３０３に格納されたアプリケーションの出力データの中から、推測された目的に紐づけられたラベルを有する出力データが選択される。また、ステップ４０８において、ユーザインターフェース３０４に登録されているウィジェットの中から、推測された目的に紐づけられたラベルを有するウィジェットが選択される。ウィジェットは、推測された目的に応じて、１つまたは複数が選択されうる。出力データおよびウィジェットが選択されると、ステップ４１０において、選択された出力データは、選択されたウィジェットが表示するデータとして使用される。その後、ステップ４１２において、ウィジェット間のレイヤー表示の設定、データの強調表示の設定などが適用され、ユーザ表示画面が生成される。 (User display screen generation flowchart)
FIG. 4 is a flowchart showing the flow of processing in this embodiment. In the portable terminal 2 according to the present embodiment, the system enters a standby state for accepting input information after activation (step 400). When the input information is detected in step 402, estimation of the user's purpose by the estimation engine 302 is started in step 404. The outline of this estimation is as described in the description of FIG. When the purpose is estimated, the estimation engine 302 starts the following two processes asynchronously. That is, in step 406, output data having a label associated with the estimated purpose is selected from the output data of the application stored in the database 303. In step 408, a widget having a label associated with the estimated purpose is selected from the widgets registered in the user interface 304. One or more widgets may be selected depending on the inferred purpose. When output data and a widget are selected, in step 410, the selected output data is used as data displayed by the selected widget. Thereafter, in step 412, settings for layer display between widgets, settings for highlighting data, and the like are applied, and a user display screen is generated.
　図５は、本発明の別の実施形態における処理の流れを示すフローチャートである。本実施形態は、図４における表示画面生成フローに続き、生成された表示画面に対するユーザの入力を受け付けるステップを含む。ステップ５００からステップ５１２までの処理は、図４におけるステップ４００からステップ４１２までの処理と同一である。ステップ５１４では、ユーザによる、表示画面上のウィジェットに対する操作の有無が判定される。本実施形態において、この操作とは、ユーザが、タッチパネルを介して、あるウィジェットを他のウィジェット上にドラッグ＆ドロップするという操作である。この操作を、「ウィジェット合成操作」と呼ぶこととする。なお、別の実施形態において、ウィジェット合成操作以外のユーザ操作を受け付けることにより新たな情報を提示するようにしてもよく、あるいは、各ウィジェット上の情報の組み合わせ方に対するユーザの指示を受け付けるようにして、システムが当該指示に基づき新たな情報を表示するようにしてもよい。 FIG. 5 is a flowchart showing the flow of processing in another embodiment of the present invention. This embodiment includes a step of receiving a user input to the generated display screen following the display screen generation flow in FIG. The processing from step 500 to step 512 is the same as the processing from step 400 to step 412 in FIG. In step 514, it is determined whether the user has performed an operation on the widget on the display screen. In the present embodiment, this operation is an operation in which the user drags and drops a widget onto another widget via the touch panel. This operation is referred to as “widget composition operation”. In another embodiment, new information may be presented by accepting a user operation other than the widget composition operation, or a user instruction for how to combine information on each widget may be accepted. The system may display new information based on the instruction.
　ウィジェット合成操作が検知されると、本システムは、再びステップ５０４へと戻り、当該操作を入力情報としてユーザの目的の推測を開始する。ユーザによる当該操作が検知されない場合はステップ５１６へと進み、ユーザによるウィジェット合成操作の受付状態が維持される。この操作受付状態の間は、ステップ５１４の判定が随時行われることになる。 When the widget composition operation is detected, the system returns to step 504 again, and starts guessing the user's purpose using the operation as input information. When the operation by the user is not detected, the process proceeds to step 516, and the reception state of the widget composition operation by the user is maintained. During the operation acceptance state, the determination in step 514 is performed at any time.
（ユーザによるウィジェット合成操作の例）
　図６は、ユーザによるウィジェット合成操作と、それにより表示される情報の例を示したものである。この例においては、ステップ５１２において、「飲食店ガイド情報」と「時計」を表示するウィジェットがユーザに表示される。ステップ５１４において、ユーザは、「時計」のウィジェットを「飲食店ガイド情報」のウィジェット上にドラッグ＆ドロップする。当該操作を受けて、本システムはステップ５０４へと戻り、再びユーザの目的の推測を開始する。本システムは、「飲食店ガイド情報」として表示されているデータを「現在の時刻」というフィルターにかけることがユーザの目的であると推測し、表示するデータを、多数の飲食店情報のうち、そのときの時刻である昼の十二時にオープンしている店舗のデータに絞り込み、適切なウィジェットを選択してユーザに表示する。 (Example of widget composition operation by the user)
FIG. 6 shows an example of widget composition operation by a user and information displayed thereby. In this example, in step 512, a widget displaying “restaurant guide information” and “clock” is displayed to the user. In step 514, the user drags and drops the “clock” widget onto the “restaurant guide information” widget. In response to the operation, the system returns to Step 504 and starts estimating the user's purpose again. This system assumes that the user's purpose is to filter the data displayed as “restaurant guide information” as “current time”, and displays the data to be displayed among a large number of restaurant information. It narrows down to the data of the store that is open at 12:00 noon, which is the time at that time, selects an appropriate widget and displays it to the user.
　このようにして新たに表示された「ランチができる店舗のリスト」を表示するウィジェットに対して、ユーザがさらなるウィジェット合成操作を行うことも可能である。例えば、ＳＮＳに投稿された「つぶやき」などのメッセージを表示するウィジェットを「ランチができる店舗のリスト」ウィジェット上にドラッグ＆ドロップすると、「ランチができる店舗のリスト」の情報が、「ＳＮＳで話題となっている、ランチができる店舗のリスト」の情報へと絞り込まれ、ユーザに表示される。あるいは、例えばユーザの食べ物の好みについての情報を含むユーザプロフィールを表示するウィジェットを「ランチができる店舗のリスト」ウィジェット上にドラッグ＆ドロップする操作を行うと、「ランチができる店舗のリスト」の情報が、「ユーザの好みの料理がメニューに含まれる、ランチができる店舗のリスト」の情報へと絞り込まれ、ユーザに表示される。 It is also possible for the user to perform further widget composition operations on the widget that displays the newly displayed “list of stores where lunch is possible” in this way. For example, if you drag and drop a widget that displays a message such as “tweet” posted on the SNS onto the “List of stores where you can have lunch” widget, the information on “List of stores where you can have lunch” will be displayed. It is narrowed down to the information of “the list of stores where lunch is possible” and displayed to the user. Or, for example, if you drag and drop a widget that displays a user profile that includes information about the user's food preferences onto the “List of stores where lunch is available” widget, the “List of stores where lunch is available” information However, the information is narrowed down to the information of “a list of stores where lunch is available, where the user's favorite dishes are included in the menu” and displayed to the user.
　上述のウィジェット合成操作の例においては、提示されていた情報をフィルタリングすることにより新たな情報をユーザに提供するが、本発明がこれに限定されることはなく、推測されたユーザの目的に応じて、既に提示されていた情報とは別種の情報を新たに提示することも可能である。例えば、運転中の車のガソリン残量のモニタリング情報を表示するウィジェットと時計のウィジェットを合成することにより、近隣のガソリンスタンドの店舗情報が提示される場合も想定される。 In the example of the widget composition operation described above, new information is provided to the user by filtering the presented information. However, the present invention is not limited to this and depends on the estimated purpose of the user. Thus, it is also possible to newly present information of a different type from information that has already been presented. For example, it is assumed that store information of a nearby gas station is presented by combining a widget that displays monitoring information of the remaining amount of gasoline in a car being driven and a clock widget.
　図７は、本実施例におけるユーザ表示画面の一例である。図７の表示画面は、「スケジュール」「天気」「気温」「地図」「店舗情報」「ＳＮＳ」についての情報がユーザに提示する情報として選択された場合のユーザ表示画面の例である。この画面においては、ユーザのスケジュールを表示するウィジェットが画面の基盤として表示され、その上に、他の情報を表示するウィジェットがフローティング表示されている。このように本実施例においては、推測されたユーザの目的に応じて、表示する情報に優先度を設定することも可能である。 FIG. 7 is an example of a user display screen in the present embodiment. The display screen of FIG. 7 is an example of a user display screen when information on “schedule”, “weather”, “temperature”, “map”, “store information”, and “SNS” is selected as information to be presented to the user. On this screen, a widget for displaying a user's schedule is displayed as a base of the screen, and a widget for displaying other information is displayed on the screen as a floating display. As described above, according to the present exemplary embodiment, it is possible to set the priority for the information to be displayed according to the estimated purpose of the user.
　図７のユーザ表示画面は、例えば、その日はじめてユーザが本システムを起動した際に、自動的に生成され表示されるものであってもよい。このように、本システムは、ユーザによる直接的な指示の操作がない場合であっても、ユーザの選択履歴情報、ユーザのプロフィール情報、および現在の環境情報などに基づき、能動的に推測を開始し、ユーザに情報を提示することが可能である。 7 may be automatically generated and displayed when the user activates the system for the first time on the day, for example. As described above, this system actively starts guessing based on user selection history information, user profile information, current environment information, and the like even when there is no direct instruction operation by the user. It is possible to present information to the user.
（実施例２）
　続いて、本実施形態に係る情報提示システムを実装するカーナビゲーション装置について説明する。図８は、本実施形態に係る情報提示システムを実装するカーナビゲーション装置の構成の一例を示す図である。本実施例におけるカーナビゲーション装置８は、ＣＰＵ８０１、ＲＡＭ８０２、ＲＯＭ８０３、入力部Ｉ／Ｆ８０４、出力部Ｉ／Ｆ８０５、外部メモリＩ／Ｆ８０６、通信Ｉ／Ｆ８０７を備える。また、カーナビゲーション装置８は、タッチパネル８１１、マイク８１２、センサー８１３、ディスプレイ８１４、スピーカ８１５、外部メモリ８１６、ＮＩＣ８１７、ＮＦＣ８１８を備える。ＮＩＣは、Ｎｅｒｗｏｒｋ　Ｉｎｔｅｒｆａｃｅ　Ｃａｒｄの略称である。 (Example 2)
Next, a car navigation device that implements the information presentation system according to the present embodiment will be described. FIG. 8 is a diagram illustrating an example of a configuration of a car navigation device that implements the information presentation system according to the present embodiment. The car navigation apparatus 8 in this embodiment includes a CPU 801, a RAM 802, a ROM 803, an input unit I / F 804, an output unit I / F 805, an external memory I / F 806, and a communication I / F 807. In addition, the car navigation device 8 includes a touch panel 811, a microphone 812, a sensor 813, a display 814, a speaker 815, an external memory 816, a NIC 817, and an NFC 818. NIC is an abbreviation for Network Interface Card.
　ＣＰＵ８０１は、記憶部であるＲＯＭ８０３に記憶されているプログラムに従って、システムバス８２１に接続される各デバイスを総括的に制御する。ＲＡＭ８０２は、ＣＰＵ８０１の主メモリ、ワークエリア等として機能すると共に、入力情報展開領域、環境データ格納領域としても用いられる。ＲＯＭ８０３は、各種プログラムおよびデータを格納している。 The CPU 801 generally controls each device connected to the system bus 821 according to a program stored in the ROM 803 serving as a storage unit. The RAM 802 functions as a main memory and work area of the CPU 801, and is also used as an input information expansion area and an environment data storage area. The ROM 803 stores various programs and data.
　入力部Ｉ／Ｆ８０４は、タッチパネル８１１、マイク８１２、センサー８１３からの入力を制御する。タッチパネル８１１およびマイク８１２は、ユーザ操作における入力装置である。その他の入力装置として、キーボードやリモコンを備えていてもよい。センサー８１３は、ＧＰＳ送受信機などでありうる。ＧＰＳは、Ｇｌｏｂａｌ　Ｐｏｓｉｔｉｏｎｉｎｇ　Ｓｙｓｔｅｍの略称である。出力部Ｉ／Ｆ８０５は、ディスプレイ８１４への画面表示、およびスピーカ８１５への音声出力を制御する。外部メモリＩ／Ｆ８０６は、例えばフラッシュメモリ、ＳＳＤ（Ｓｏｌｉｄ　Ｓｔａｔｅ　Ｄｉｓｋ）等の外部メモリ８１６とのアクセスを制御する。外部メモリ８１６は、保存または読み取り可能な記憶媒体として機能し、オペレーティングシステム（ＯＳ）、Ｗｅｂブラウザ、およびアプリケーションが記憶されている。アプリケーション、および各モジュール（ソフトウェア）のプログラムは外部メモリ８１６に記憶され、必要に応じてＲＡＭ８０２に読み出されてＣＰＵ８０１により実行される。これにより、アプリケーションまたは各モジュール（ソフトウェア）の機能を実現する。 The input unit I / F 804 controls input from the touch panel 811, the microphone 812, and the sensor 813. The touch panel 811 and the microphone 812 are input devices for user operations. As another input device, a keyboard or a remote controller may be provided. The sensor 813 can be a GPS transceiver. GPS is an abbreviation for Global Positioning System. The output unit I / F 805 controls screen display on the display 814 and sound output to the speaker 815. The external memory I / F 806 controls access to an external memory 816 such as a flash memory or an SSD (Solid State Disk). The external memory 816 functions as a storage medium that can be saved or read, and stores an operating system (OS), a Web browser, and an application. The application and the program of each module (software) are stored in the external memory 816, read out to the RAM 802 as necessary, and executed by the CPU 801. Thereby, the function of the application or each module (software) is realized.
　通信Ｉ／Ｆ８０７は、ＮＩＣ８１７やＮＦＣ８１８の通信を制御している。ＮＩＣ８１７はネットワークとの接続Ｉ／Ｆである。ＮＩＣ８１７は、カーナビゲーション装置８のネットワークへの接続を可能とする。なお、図８に示す構成に限定されるものではなく、携帯網などへの通信を制御して無線基地局とのネットワークに接続可能であってもよい。ＮＦＣ８１８は、非接触型の近距離通信ユニットとして機能する接続Ｉ／Ｆである。例えばＮＦＣ８１８は、スマートフォンとの接続を可能とし、ワイヤレス通信によるデータの送受信を制御する。本実施例で説明する処理は、外部メモリ８１６に記録されたプログラムをＲＡＭ８０２にロードし、ＣＰＵ８０１が実行することによって実現される。なお、プログラムは、外部メモリ８１６以外にもＲＡＭ８０２やＲＯＭ８０３において記憶されてもよい。 The communication I / F 807 controls communication of the NIC 817 and the NFC 818. The NIC 817 is a connection I / F with a network. The NIC 817 enables the car navigation apparatus 8 to be connected to the network. Note that the present invention is not limited to the configuration shown in FIG. 8 and may be connectable to a network with a radio base station by controlling communication with a mobile network or the like. The NFC 818 is a connection I / F that functions as a non-contact near field communication unit. For example, the NFC 818 enables connection with a smartphone and controls data transmission / reception through wireless communication. The processing described in the present embodiment is realized by loading a program recorded in the external memory 816 into the RAM 802 and executing it by the CPU 801. Note that the program may be stored in the RAM 802 or the ROM 803 in addition to the external memory 816.
　本実施例におけるソフトウェア構成は、図３で説明したものと同様であるため、説明を省略する。 The software configuration in this embodiment is the same as that described in FIG.
　図９～図１１は、本実施例におけるユーザ表示画面の例である。図９を参照すると、本実施例においては、カーナビゲーション装置であることが考慮され、地図情報９０１が最も優先度の高い基盤ウィジェットによって表示され、その上に天気・気温９０２、時刻９０３、スケジュール９０４、店舗情報９０５、ＳＮＳ９０６の情報を表示する各ウィジェットがフローティング表示されている。また、基盤ウィジェットに表示されている地図情報に対する図５のステップ５１４のウィジェット合成操作を可能とするために、当該操作用の小さなウィジェット９０７が、画面左上に用意されている。 9 to 11 are examples of user display screens in this embodiment. Referring to FIG. 9, in the present embodiment, considering that it is a car navigation device, map information 901 is displayed by a base widget with the highest priority, and weather / temperature 902, time 903, schedule 904 are displayed thereon. Each widget displaying the store information 905 and SNS 906 information is displayed in a floating manner. Further, in order to enable the widget composition operation in step 514 of FIG. 5 on the map information displayed on the base widget, a small widget 907 for the operation is prepared on the upper left of the screen.
　図１０は、図９の画面例において、ユーザが、合成操作用地図ウィジェット９０７に対して店舗情報ウィジェット９０５および時刻ウィジェット９０３を合成する操作を行ったことによる画面遷移の例である。本システムは、上記の操作を受けて、ユーザの目的が、地図上に現在の時刻にオープンしている店舗情報を表示させることであると推測する。この例において、当該店舗情報のウィジェット１００１は、地図ウィジェット９０１上に、地図の座標とのリンクを有する状態で表示される。 FIG. 10 is an example of screen transition when the user performs an operation of synthesizing the store information widget 905 and the time widget 903 with respect to the compositing operation map widget 907 in the screen example of FIG. In response to the above operation, the system estimates that the user's purpose is to display store information opened at the current time on a map. In this example, the store information widget 1001 is displayed on the map widget 901 in a state having a link with the coordinates of the map.
　図１１は、図１０の画面例において、ユーザが、合成操作用地図ウィジェット９０７に対してＳＮＳウィジェット９０６をさらに合成する操作を行ったことによる画面遷移の例である。本システムは、上記の操作を受けて、ユーザの目的が、現在の時刻にオープンしている店舗情報のうち、ＳＮＳで話題に上がっている店舗の情報を表示させることであると推測する。この例において、ウィジェット１００１が地図上から消去され、絞り込まれた店舗情報のウィジェット１１０１が、ウィジェット１００１よりも大きなウィジェットで、より詳細に、より強調されて表示される。 FIG. 11 is an example of screen transition when the user performs an operation of further synthesizing the SNS widget 906 with respect to the composition operation map widget 907 in the screen example of FIG. In response to the above operation, the system estimates that the user's purpose is to display information on stores that are talked about in SNS among the store information that is open at the current time. In this example, the widget 1001 is deleted from the map, and the narrowed-down store information widget 1101 is a widget larger than the widget 1001 and displayed in more detail and more emphasized.
　以上、本実施形態によれば、入力された情報からユーザの目的を推測し、目的に沿って選択されたアプリケーションの出力データおよびウィジェットを用いてユーザ表示画面を提供することで、ユーザが求める情報を、アプリケーションの表示内容および表示形式に拘束されることなく、より直接的にユーザに提示することが可能となる。また、ユーザは、簡単で直観的な操作により、求める情報に素早くアクセスすることができる。 As described above, according to the present embodiment, the user's purpose is estimated from the input information, and the information requested by the user is provided by providing the user display screen using the output data and the widget of the application selected according to the purpose. Can be presented to the user more directly without being restricted by the display content and display format of the application. In addition, the user can quickly access the desired information by a simple and intuitive operation.
（その他の実施形態）
　本発明の実施例として、携帯端末およびカーナビゲーション装置を例に特徴的な構成を説明した。しかしながら、携帯端末およびカーナビゲーション装置に限らず、タブレット型端末、パーソナルコンピュータ、または他のユーザインターフェースを有する組み込み機器などの様々なアーキテクチャ上で本発明を実施することが可能である。また、本発明の目的は、上述の実施例の機能を実現するプログラムコード（コンピュータプログラム）を格納した記憶媒体を、システムあるいは装置に供給し、供給されたシステムあるいは装置のコンピュータが記憶媒体に格納されたプログラムコードを読み出し実行することによっても達成される。この場合、記憶媒体から読み出されたプログラムコード自体が上述した実施例の機能を実現することになり、そのプログラムコードを記憶した記憶媒体は本発明を構成することになる。また、上述した実施形態では、コンピュータがプログラムを実行することにより、各処理部として機能するものとしたが、処理の一部または全部を専用の電子回路（ハードウェア）で構成するようにしても構わない。本発明は、説明された特定の実施例に限定されるものではなく、特許請求の範囲に記載された本発明の趣旨の範囲内において、種々の変形・変更が可能である。 (Other embodiments)
As an embodiment of the present invention, a characteristic configuration has been described by taking a portable terminal and a car navigation device as examples. However, the present invention can be implemented on various architectures such as a tablet terminal, a personal computer, or an embedded device having another user interface, as well as a portable terminal and a car navigation device. Another object of the present invention is to supply a storage medium storing a program code (computer program) for realizing the functions of the above-described embodiments to the system or apparatus, and the computer of the supplied system or apparatus stores the storage medium in the storage medium. It is also achieved by reading and executing the programmed program code. In this case, the program code itself read from the storage medium realizes the functions of the above-described embodiments, and the storage medium storing the program code constitutes the present invention. In the above-described embodiment, the computer functions as each processing unit by executing a program. However, part or all of the processing may be configured by a dedicated electronic circuit (hardware). I do not care. The present invention is not limited to the specific embodiments described, and various modifications and changes are possible within the scope of the gist of the present invention described in the claims.
　２…携帯端末、２００…メインボード、２０１…ＬＣＤ、２０２…タッチパネル、２０３…ボタンデバイス、２０４…タッチＵＩ、２０５…ＣＰＵ、２０６…無線ＬＡＮモジュール、２０７…電源コントローラ、２０８…ディスプレイコントローラ、２０９…パネルコントローラ、２１０…ＲＯＭ、２１１…ＲＡＭ、２１２…二次電池、３０１…入力情報収集部、３０２…推測エンジン、３０３…データベース、３０４…ユーザインターフェース、３０５…アプリケーション、８…カーナビゲーション装置、８０１…ＣＰＵ、８０２…ＲＡＭ、８０３…ＲＯＭ、８０４…入力Ｉ／Ｆ、８０５…出力Ｉ／Ｆ、８０６…外部メモリＩ／Ｆ、８０７…通信Ｉ／Ｆ、８１１…タッチパネル、８１２…マイク、８１３…センサー、８１４…ディスプレイ、８１５…スピーカ、８１６…外部メモリ、８１７…ＮＩＣ、８１８…ＮＦＣ、８２１…システムバス、９０１…地図ウィジェット、９０２…天気・気温ウィジェット、９０３…時刻ウィジェット、９０４…スケジュールウィジェット、９０５…店舗情報ウィジェット、９０６…ＳＮＳウィジェット、９０７…合成操作用地図ウィジェット、１００１…店舗位置情報ウィジェット、１１０１…絞り込まれた店舗位置情報ウィジェット 2 ... mobile terminal, 200 ... main board, 201 ... LCD, 202 ... touch panel, 203 ... button device, 204 ... touch UI, 205 ... CPU, 206 ... wireless LAN module, 207 ... power controller, 208 ... display controller, 209 ... Panel controller, 210 ... ROM, 211 ... RAM, 212 ... secondary battery, 301 ... input information collection unit, 302 ... estimation engine, 303 ... database, 304 ... user interface, 305 ... application, 8 ... car navigation device, 801 ... CPU, 802 ... RAM, 803 ... ROM, 804 ... input I / F, 805 ... output I / F, 806 ... external memory I / F, 807 ... communication I / F, 811 ... touch panel, 812 ... microphone, 813 ... sensor 814 ... Display , 815 ... speaker, 816 ... external memory, 817 ... NIC, 818 ... NFC, 821 ... system bus, 901 ... map widget, 902 ... weather / temperature widget, 903 ... time widget, 904 ... schedule widget, 905 ... store information widget 906 ... SNS widget 907 ... Map widget for composition operation 1001 ... Store location information widget 1101 ... Narrowed store location information widget

Claims (15)

  1. 　入力を受け付けて該入力によって得られた情報に基づきユーザの目的を推測する目的推測手段と、
    　複数のアプリケーションの出力データを、前記ユーザの目的に対応する予め定められた複数の第１のラベルに紐づけて記憶するデータ記憶手段と、
    　複数のウィジェットを、前記ユーザの目的に対応する予め定められた複数の第２のラベルに紐づけて登録するウィジェット登録手段と、
    　前記推測された目的と紐づけられた前記第１のラベルに基づき、前記推測された目的に関連する出力データを前記記憶された出力データから選択するデータ選択手段と、
    　前記推測された目的と紐づけられた前記第２のラベルに基づき、前記推測された目的に関連するウィジェットを前記登録されたウィジェットから選択するウィジェット選択手段と、
    　前記選択された出力データを前記選択されたウィジェットが表示するデータとして使用し、ユーザ表示画面を生成して提供するユーザインターフェース提供手段と、
    を備えることを特徴とする情報提示システム。     Purpose inference means for accepting input and inferring the user's purpose based on information obtained by the input;
    Data storage means for storing output data of a plurality of applications in association with a plurality of predetermined first labels corresponding to the purpose of the user;
    Widget registration means for registering a plurality of widgets in association with a plurality of predetermined second labels corresponding to the user's purpose;
    Data selection means for selecting, from the stored output data, output data related to the estimated purpose based on the first label associated with the estimated purpose;
    Widget selection means for selecting, from the registered widgets, a widget associated with the estimated purpose based on the second label associated with the estimated purpose;
    User interface providing means for generating and providing a user display screen using the selected output data as data to be displayed by the selected widget;
    An information presentation system comprising:
  2. 　前記生成されたユーザ表示画面上に表示されている複数の前記選択されたウィジェットに対するユーザの操作を受け付けて、前記表示されている複数のウィジェットに表示されている情報を前記入力として用いることによる新たな情報をユーザに提供可能な、請求項１に記載のシステム。 A new operation by accepting a user operation on the plurality of selected widgets displayed on the generated user display screen and using information displayed on the plurality of displayed widgets as the input The system according to claim 1, wherein the information can be provided to the user.
  3. 　前記生成されたユーザ表示画面上に表示されている複数の前記選択されたウィジェットに対するユーザの操作を受け付けて、前記表示されている複数のウィジェットに表示されている情報を前記入力として用いることによる新たな情報をユーザに提供可能であり、前記選択されたウィジェットに対する前記ユーザ操作が、ユーザによる前記ユーザ表示画面に表示された複数ウィジェット間のドラッグアンドドロップ操作である、請求項１に記載のシステム。 A new operation by accepting a user operation on the plurality of selected widgets displayed on the generated user display screen and using information displayed on the plurality of displayed widgets as the input The system according to claim 1, wherein the user operation can be provided to a user, and the user operation on the selected widget is a drag-and-drop operation between a plurality of widgets displayed on the user display screen by the user.
  4. 　前記目的推測手段が、ユーザの選択履歴情報、現在の環境情報、ユーザプロフィール情報、および／またはユーザ入力情報に基づきユーザの目的を推測する、請求項１に記載のシステム。 2. The system according to claim 1, wherein the purpose estimating means estimates a user purpose based on user selection history information, current environment information, user profile information, and / or user input information.
  5. 　前記目的推測手段が、ユーザの選択履歴情報、現在の環境情報、ユーザプロフィール情報、および／またはユーザ入力情報に基づきユーザの目的を推測し、前記ユーザ入力情報が存在しない場合に、前記ユーザの選択履歴情報、前記現在の環境情報、および／または前記ユーザプロフィール情報に基づきユーザの目的を推測する、請求項１に記載のシステム。 The purpose estimation means estimates a user purpose based on user selection history information, current environment information, user profile information, and / or user input information, and when the user input information does not exist, the user selection The system of claim 1, inferring a user's purpose based on historical information, the current environmental information, and / or the user profile information.
  6. 　前記目的推測手段が、ユーザの選択履歴情報、現在の環境情報、ユーザプロフィール情報、および／またはユーザ入力情報に基づきユーザの目的を推測し、前記ユーザ入力情報が存在しない場合に、前記ユーザの選択履歴情報、前記現在の環境情報、および／または前記ユーザプロフィール情報に基づきユーザの目的を推測し、
    　前記現在の環境情報が、ネットワーク上のサーバ、ＧＰＳ、またはセンサーを介して取得された日付、時刻、天気、温度、現在位置、交通、店舗、商品、言語、および／または人口密度に関する情報を含む、請求項１に記載のシステム。     The purpose estimation means estimates a user purpose based on user selection history information, current environment information, user profile information, and / or user input information, and when the user input information does not exist, the user selection Inferring the purpose of the user based on historical information, the current environmental information, and / or the user profile information;
    The current environment information includes information on date, time, weather, temperature, current location, traffic, stores, merchandise, language, and / or population density obtained via a server, GPS, or sensor on the network. The system of claim 1.
  7. 　前記目的推測手段が、ユーザの選択履歴情報、現在の環境情報、ユーザプロフィール情報、および／またはユーザ入力情報に基づきユーザの目的を推測し、前記ユーザ入力情報が存在しない場合に、前記ユーザの選択履歴情報、前記現在の環境情報、および／または前記ユーザプロフィール情報に基づきユーザの目的を推測し、
    　前記ユーザ入力情報が、タッチパネルを介した入力情報、ならびに該入力に関するユーザ操作の速度、頻度、および強度に関する情報を含む、請求項１に記載のシステム。     The purpose estimation means estimates a user purpose based on user selection history information, current environment information, user profile information, and / or user input information, and when the user input information does not exist, the user selection Inferring the purpose of the user based on historical information, the current environmental information, and / or the user profile information;
    The system according to claim 1, wherein the user input information includes input information via a touch panel and information related to a speed, frequency, and intensity of a user operation related to the input.
  8. 　前記目的推測手段が、ユーザの選択履歴情報、現在の環境情報、ユーザプロフィール情報、および／またはユーザ入力情報に基づきユーザの目的を推測し、前記ユーザ入力情報が存在しない場合に、前記ユーザの選択履歴情報、前記現在の環境情報、および／または前記ユーザプロフィール情報に基づきユーザの目的を推測し、
    　前記目的推測手段が、前記ユーザ選択履歴に基づく学習機能を備える、請求項１に記載のシステム。     The purpose estimation means estimates a user purpose based on user selection history information, current environment information, user profile information, and / or user input information, and when the user input information does not exist, the user selection Inferring the purpose of the user based on historical information, the current environmental information, and / or the user profile information;
    The system according to claim 1, wherein the purpose estimating means includes a learning function based on the user selection history.
  9. 　前記ユーザインターフェース提供手段が、前記選択された出力データが複数ある場合に、該複数の出力データの中で、前記第１のラベルのうち優先度の高い１または複数のラベルに紐づけられた出力データを強調表示して前記ユーザ表示画面を生成する、請求項１に記載のシステム。 When the user interface providing means has a plurality of the selected output data, an output associated with one or more labels having a higher priority among the first labels among the plurality of output data. The system of claim 1, wherein the user display screen is generated by highlighting data.
  10. 　前記ユーザインターフェース提供手段が、前記選択されたウィジェットが複数ある場合に、該複数のウィジェット中で、前記第２のラベルのうち最も優先度の高いラベルに紐づけられたウィジェットを基盤ウィジェットとして、その他の前記選択されたウィジェットを前記基盤ウィジェット上にフローティング表示して前記ユーザ表示画面を生成する、請求項１に記載のシステム。 When the user interface providing means has a plurality of the selected widgets, the widget associated with the label having the highest priority among the second labels is used as a base widget among the plurality of widgets. The system of claim 1, wherein the selected widget is floatingly displayed on the infrastructure widget to generate the user display screen.
  11. 　前記データ記憶手段が、ユーザ端末上またはネットワークに接続されたサーバ上にある、請求項１に記載のシステム。 The system according to claim 1, wherein the data storage means is on a user terminal or a server connected to a network.
  12. 　異なるデータ形式のアプリケーション出力データを、前記データ記憶手段における記憶に適したデータ形式へと変換するデータ変換手段をさらに備え、前記データ記憶手段は前記記憶に適したデータ形式で前記複数のアプリケーションの出力データを記憶する、請求項１に記載のシステム。 Data conversion means for converting application output data of different data formats into a data format suitable for storage in the data storage means, wherein the data storage means outputs the plurality of applications in a data format suitable for the storage. The system of claim 1, storing data.
  13. 　入力を受け付けて該入力によって得られた情報に基づきユーザの目的を推測する目的推測部と、
    　複数のアプリケーションの出力データを、前記ユーザの目的に対応する予め定められた複数の第１のラベルに紐づけて記憶するデータ記憶部と、
    　複数のウィジェットを、前記ユーザの目的に対応する予め定められた複数の第２のラベルに紐づけて登録するウィジェット登録部と、
    　前記推測された目的と紐づけられた前記第１のラベルに基づき、前記推測された目的に関連する出力データを前記記憶された出力データから選択するデータ選択部と、
    　前記推測された目的と紐づけられた前記第２のラベルに基づき、前記推測された目的に関連するウィジェットを前記登録されたウィジェットから選択するウィジェット選択部と、
    　前記選択された出力データを前記選択されたウィジェットが表示するデータとして使用し、ユーザ表示画面を生成して提供するユーザインターフェース提供部と、
    を備えることを特徴とする情報提示装置。     A purpose inference unit that accepts an input and infers a user's purpose based on the information obtained by the input;
    A data storage unit that stores output data of a plurality of applications in association with a plurality of predetermined first labels corresponding to the purpose of the user;
    A widget registration unit that registers a plurality of widgets in association with a plurality of predetermined second labels corresponding to the user's purpose;
    A data selection unit that selects, based on the first label associated with the estimated purpose, output data related to the estimated purpose from the stored output data;
    A widget selection unit that selects a widget related to the estimated purpose from the registered widgets based on the second label associated with the estimated purpose;
    A user interface providing unit that generates and provides a user display screen using the selected output data as data displayed by the selected widget;
    An information presentation device comprising:
  14. 　入力を受け付けて該入力によって得られた情報に基づきユーザの目的を推測する目的推測工程と、
    　複数のアプリケーションの出力データを、前記ユーザの目的に対応する予め定められた複数の第１のラベルに紐づけて記憶するデータ記憶工程と、
    　複数のウィジェットを、前記ユーザの目的に対応する予め定められた複数の第２のラベルに紐づけて登録するウィジェット登録工程と、
    　前記推測された目的と紐づけられた前記第１のラベルに基づき、前記推測された目的に関連する出力データを前記記憶された出力データから選択するデータ選択工程と、
    　前記推測された目的と紐づけられた前記第２のラベルに基づき、前記推測された目的に関連するウィジェットを前記登録されたウィジェットから選択するウィジェット選択工程と、
    　前記選択された出力データを前記選択されたウィジェットが表示するデータとして使用し、ユーザ表示画面を生成して提供するユーザインターフェース提供工程と、
    を含む情報提示方法。     A purpose inference step of accepting an input and inferring a user's purpose based on information obtained by the input;
    A data storage step of storing output data of a plurality of applications in association with a plurality of predetermined first labels corresponding to the purpose of the user;
    A widget registration step of registering a plurality of widgets in association with a plurality of predetermined second labels corresponding to the user's purpose;
    A data selection step of selecting, from the stored output data, output data related to the estimated purpose based on the first label associated with the estimated purpose;
    A widget selecting step of selecting, from the registered widgets, a widget related to the inferred purpose based on the second label associated with the inferred purpose;
    A user interface providing step of generating and providing a user display screen using the selected output data as data to be displayed by the selected widget;
    Information presentation method.
  15. 　入力を受け付けて該入力によって得られた情報に基づきユーザの目的を推測する目的推測工程と、
    　複数のアプリケーションの出力データを、前記ユーザの目的に対応する予め定められた複数の第１のラベルに紐づけて記憶するデータ記憶工程と、
    　複数のウィジェットを、前記ユーザの目的に対応する予め定められた複数の第２のラベルに紐づけて登録するウィジェット登録工程と、
    　前記推測された目的と紐づけられた前記第１のラベルに基づき、前記推測された目的に関連する出力データを前記記憶された出力データから選択するデータ選択工程と、
    　前記推測された目的と紐づけられた前記第２のラベルに基づき、前記推測された目的に関連するウィジェットを前記登録されたウィジェットから選択するウィジェット選択工程と、
    　前記選択された出力データを前記選択されたウィジェットが表示するデータとして使用し、ユーザ表示画面を生成して提供するユーザインターフェース提供工程と、
    を含む情報提示方法をコンピュータにより実行させることを特徴とするコンピュータプログラムを記憶させた記録媒体。     A purpose inference step of accepting an input and inferring a user's purpose based on information obtained by the input;
    A data storage step of storing output data of a plurality of applications in association with a plurality of predetermined first labels corresponding to the purpose of the user;
    A widget registration step of registering a plurality of widgets in association with a plurality of predetermined second labels corresponding to the user's purpose;
    A data selection step of selecting, from the stored output data, output data related to the estimated purpose based on the first label associated with the estimated purpose;
    A widget selecting step of selecting, from the registered widgets, a widget related to the inferred purpose based on the second label associated with the inferred purpose;
    A user interface providing step of generating and providing a user display screen using the selected output data as data to be displayed by the selected widget;
    A recording medium storing a computer program, characterized in that a computer executes an information presentation method including:
PCT/JP2015/001881 2014-05-02 2015-04-01 Information presentation system, device, method, and computer program WO2015166630A1 (en)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2014095384A JP2015212883A (en) 2014-05-02 2014-05-02 Information presentation system, device, method, and computer program
JP2014-095384 2014-05-02

Publications (1)

Publication Number Publication Date
WO2015166630A1 true WO2015166630A1 (en) 2015-11-05

Family

ID=54358376

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2015/001881 WO2015166630A1 (en) 2014-05-02 2015-04-01 Information presentation system, device, method, and computer program

Country Status (2)

Country Link
JP (1) JP2015212883A (en)
WO (1) WO2015166630A1 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111026967A (en) * 2019-12-09 2020-04-17 腾讯科技（深圳）有限公司 Method, device, equipment and medium for obtaining user interest tag

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007183249A (en) * 2005-12-05 2007-07-19 Matsushita Electric Ind Co Ltd Spot information searching device and method
JP2009139129A (en) * 2007-12-04 2009-06-25 Fujitsu Ten Ltd Content selection candidate extracting device and method, action predicting device and method, and classified item content presuming device and method
JP2010060322A (en) * 2008-09-01 2010-03-18 Denso Corp Information providing system
WO2013100902A1 (en) * 2011-12-27 2013-07-04 Intel Corporation Method, system, and device for to-do-list based navigation
WO2013128645A1 (en) * 2012-03-02 2013-09-06 株式会社日立製作所 User operation detection system and user operation detection method

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007183249A (en) * 2005-12-05 2007-07-19 Matsushita Electric Ind Co Ltd Spot information searching device and method
JP2009139129A (en) * 2007-12-04 2009-06-25 Fujitsu Ten Ltd Content selection candidate extracting device and method, action predicting device and method, and classified item content presuming device and method
JP2010060322A (en) * 2008-09-01 2010-03-18 Denso Corp Information providing system
WO2013100902A1 (en) * 2011-12-27 2013-07-04 Intel Corporation Method, system, and device for to-do-list based navigation
WO2013128645A1 (en) * 2012-03-02 2013-09-06 株式会社日立製作所 User operation detection system and user operation detection method

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
SOHEI IKEDA ET AL.: "Demand-Driven MashUp Framework with AJAX Widget Viewer", COMPUTER SOFTWARE, vol. 26, no. 3, 28 July 2009 (2009-07-28), pages 20 - 33, XP055234368 *

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111026967A (en) * 2019-12-09 2020-04-17 腾讯科技（深圳）有限公司 Method, device, equipment and medium for obtaining user interest tag
CN111026967B (en) * 2019-12-09 2023-08-04 腾讯科技（深圳）有限公司 Method, device, equipment and medium for obtaining user interest labels

Also Published As

Publication number Publication date
JP2015212883A (en) 2015-11-26

Similar Documents

Publication Publication Date Title
US11460983B2 (en) Method of processing content and electronic device thereof
US11099867B2 (en) Virtual assistant focused user interfaces
CN110574057B (en) Suggesting actions based on machine learning
US10095380B2 (en) Method for providing information based on contents and electronic device thereof
US11876770B2 (en) UI and devices for ranking user generated content
US11847302B2 (en) Spatial navigation and creation interface
CN116034385A (en) Animated visual cues indicating availability of associated content
KR102089459B1 (en) Data communication method and apparatus using a wireless communication
CN103929712A (en) Method And Mobile Device For Providing Recommended Items Based On Context Awareness
US11640497B2 (en) Structured activity templates for social media content
KR101943988B1 (en) Method and system for transmitting content, apparatus and computer readable recording medium thereof
US11477143B2 (en) Trending content view count
US20230300286A1 (en) Subtitle presentation based on volume control
US9429447B2 (en) Method of utilizing image based on location information of the image in electronic device and the electronic device thereof
US20170024442A1 (en) Electronic device and method of acquiring user information in electronic device
WO2015166630A1 (en) Information presentation system, device, method, and computer program
US20230186247A1 (en) Method and system for facilitating convergence
US20180188898A1 (en) User interfaces with semantic time anchors
KR102264428B1 (en) Method and appratus for operating of a electronic device
CN117556155A (en) Stroke planning method, device, equipment and storage medium based on large language model
WO2023113907A1 (en) Method and system for facilitating convergence

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 15786738

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 15786738

Country of ref document: EP

Kind code of ref document: A1