WO2012098574A1 - 情報処理システム及び情報処理装置 - Google Patents

情報処理システム及び情報処理装置 Download PDF

Info

Publication number
WO2012098574A1
WO2012098574A1 PCT/JP2011/000225 JP2011000225W WO2012098574A1 WO 2012098574 A1 WO2012098574 A1 WO 2012098574A1 JP 2011000225 W JP2011000225 W JP 2011000225W WO 2012098574 A1 WO2012098574 A1 WO 2012098574A1
Authority
WO
WIPO (PCT)
Prior art keywords
information
interest
user
unit
input
Prior art date
Application number
PCT/JP2011/000225
Other languages
English (en)
French (fr)
Inventor
航 山崎
篤 松本
卓爾 森本
Original Assignee
三菱電機株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 三菱電機株式会社 filed Critical 三菱電機株式会社
Priority to CN2011800647020A priority Critical patent/CN103299611A/zh
Priority to JP2012553453A priority patent/JPWO2012098574A1/ja
Priority to PCT/JP2011/000225 priority patent/WO2012098574A1/ja
Priority to US13/884,000 priority patent/US20130226990A1/en
Priority to DE112011104733T priority patent/DE112011104733T5/de
Publication of WO2012098574A1 publication Critical patent/WO2012098574A1/ja

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/50—Network services
    • H04L67/52—Network services specially adapted for the location of the user terminal
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/414—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance
    • H04N21/41422—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance located in transportation means, e.g. personal vehicle
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90—Details of database functions independent of the retrieved data types
    • G06F16/95—Retrieval from the web
    • G06F16/953—Querying, e.g. by the use of web search engines
    • G06F16/9537—Spatial or temporal dependent retrieval, e.g. spatiotemporal queries
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42202—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS] environmental sensors, e.g. for detecting temperature, luminosity, pressure, earthquakes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/65—Transmission of management data between client and server
    • H04N21/658—Transmission by the client directed to the server
    • H04N21/6582—Data stored in the client, e.g. viewing habits, hardware capabilities, credit card number
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2213/00—Indexing scheme relating to interconnection of, or transfer of information or other signals between, memories, input/output devices or central processing units
    • G06F2213/0038—System on Chip

Definitions

  • the present invention relates to an information processing system capable of registering or providing information related to a point that has passed during movement, and an information processing apparatus used therefor.
  • Patent Document 1 As a conventional technique for registering information according to an explicit operation of a user, for example, there is a system disclosed in Patent Document 1.
  • the environment change detection means provided in the remote controller detects this as an environment change around the remote controller.
  • the imaging device starts imaging and the captured image is recorded in the recording device.
  • Some conventional car navigation systems can register a certain point in advance and set that point as a destination or waypoint later.
  • information relating to points such as facility information (POI (Point Of Interest) information) is only information set in advance at the time of shipment of the system. Therefore, even if the user is interested in a certain object at a certain point while traveling on a vehicle, no information can be obtained unless the information related to this point is in the preset information.
  • POI Point Of Interest
  • the present invention has been made to solve the above-described problems, and it is possible to accurately store an object of interest at a point where the user passes while moving and to appropriately use information at this point. It is an object of the present invention to obtain an information processing system that can be used and an information processing apparatus used therefor.
  • An information processing apparatus is an information processing apparatus that is mounted on or carried by a moving body, and includes a user input unit that receives an input of an object of interest at a point where the moving body has moved, and position information of the moving body.
  • An interest information generation unit that generates interest information including a position detection unit to be detected, an object of interest input by a user input unit, and position information of a point to which the object of interest detected by the position detection unit is input; Communicatively connect with an external device, save the interest information generated by the interest information generation unit in the external device, and acquire the interest information searched according to the request from the interest information stored in the external device
  • an output unit that outputs the interest information generated by the interest information generation unit or the interest information acquired by the communication unit and presents it to the user.
  • Embodiment 1 of this invention It is a block diagram which shows the structure of the information processing system by Embodiment 1 of this invention.
  • 3 is a flowchart showing a flow of processing by the information processing system according to the first embodiment. It is a figure which shows an example of the screen for interest object input. It is a block diagram which shows the structure of the information processing system by Embodiment 2 of this invention.
  • 10 is a flowchart illustrating a flow of editing processing by the information processing system according to the second embodiment. It is a block diagram which shows the structure of the user terminal device by Embodiment 3 of this invention. 10 is a flowchart illustrating a flow of processing by the user terminal device according to the third embodiment.
  • FIG. 1 is a block diagram showing a configuration of an information processing system according to Embodiment 1 of the present invention.
  • the information processing system 1 according to the first embodiment includes a user terminal device 2 and a server device 3 managed by a user A.
  • the user terminal device 2 is an information processing device configured as an in-vehicle device mounted on a moving body such as a vehicle or a device carried by the user A, and at a point where it has passed during movement or walking in a vehicle or the like.
  • Information including a target in which the user A is interested can be stored in the server device 3 via the communication network 4, or desired information can be browsed from the information stored in the server device 3.
  • the configuration includes a user input unit 20, a user information detection unit 21, a position detection unit 21 a, a timing unit 21 b, a device-side interest information storage unit 22, a communication unit 23, and an output unit 24.
  • the user input unit 20 is a component that inputs information to the user terminal device 2, and in particular, key information for inputting information to be stored in the server device 3 or searching for information about a point that the user is interested in. Used when entering. Since these input processes are often performed while the user A is moving by movement or walking in a vehicle or the like, the input processing is associated with a simple input operation using the user input unit 20. That is, the user terminal device 2 of the present invention has a human-machine interface (HMI) for inputting an object of interest for inputting an object of interest (hereinafter referred to as an object of interest) at a point where the user A traveled while moving. )I will provide a.
  • HMI human-machine interface
  • an interest input screen is displayed on the display screen as an HMI for inputting an interest by a touch operation.
  • the interest object input screen is provided with software buttons for each information genre, and when the user A presses the information genre button corresponding to the object he / she is interested in, the contents of the information genre are the objects of interest. Is entered as
  • the user input unit 20 is a voice recognition system
  • an interest input HMI for inputting an interest by a voice input operation.
  • the user A utters an object that he / she is interested in
  • the result of voice recognition of the utterance is input as an object of interest.
  • the interest object input HMI may be configured to simply record the speech of the user A, and the interest object may be input as recorded data.
  • the user input unit 20 is an image recognition system
  • an HMI for inputting an object of interest for inputting an object of interest by an imaging operation.
  • the result of image recognition or line-of-sight recognition of a moving image captured by an imaging device such as a camera by expressing an object that the user A is interested in with a gesture or looking at the object is an interest.
  • Input as a target is an interest.
  • the captured image data may be simply input as an object of interest.
  • the user information detection unit 21 is a configuration unit that detects an object of interest input by the user A from information input in the user terminal device 2 using the user input unit 20.
  • the information input by the above-described HMI for inputting an object of interest is detected as an object of interest. That is, it is identified from other information, for example, by setting a specific extension for the object of interest with the HMI for inputting the object of interest.
  • the user information detection unit 21 sequentially inputs the position information detected by the position detection unit 21a and the time information measured by the time measuring unit 21b, and the position information of the point where the object of interest is input by the user A
  • the interest It functions as an interest information generation unit that generates interest information in which the time when the object is input, the user name extracted from preset user information, the vehicle type, and the like are added to the object of interest.
  • the additional information with respect to the interest object includes at least the position information of the point where the interest object was input.
  • the object of interest includes the captured image of the object that the user is interested in, the viewpoint position of the user who views the object, the residence time, and audio information.
  • a uniform information genre is input as an interest object depending on the HMI for interest object input.
  • the information genre “new Chinese restaurant” is handled in common among a plurality of users. In this way, an interest that is handled in common among a plurality of users can be used as key information for searching for interest information related to the interest, and when performing statistical processing such as classification and use frequency of the interest information. It is valid.
  • the interest information is composed of a column of information (attributes) including the object of interest and the position information of the corresponding point. For example, it is configured as ⁇ time, latitude, longitude, object of interest>, where “time” is the time when the object of interest is input, and “latitude, longitude” is the location information of the point where the object of interest is input. It is.
  • the interest information may be configured by nesting a part of the information such as ⁇ time, ⁇ latitude, longitude>, interest object>.
  • a simple HMI may be used rather than inputting an object of interest.
  • the user input unit 20 is a touch panel using the display screen of the output unit 24, a point input software button is displayed on the display screen as an HMI for inputting key information by a touch operation.
  • the user A simply presses the button for inputting the point, and as described later with reference to FIG. ) Is fed back from the server device 3.
  • the position detector 21a is a component that detects the position of the user terminal device 2, and detects current position information with, for example, a GPS (Global Positioning System) receiver, a vehicle speed sensor, an acceleration sensor, an angular velocity sensor, or the like.
  • the timer unit 21 b is a built-in clock built in the computer that functions as the user terminal device 2.
  • the device-side interest information storage unit 22 is a storage unit for storing interest information in the user terminal device 2, and is acquired from the server device 3 by the interest information generated by the user information detection unit 21 or the communication unit 23. The interest information is stored.
  • the communication unit 23 is a component that performs data communication by being communicably connected to the communication unit 30 of the server device 3 via the communication network 4 such as the Internet.
  • the output unit 24 is a component that outputs and presents interest information to the user A, and functions as a display output unit that displays interest information on at least a display monitor, and a sound output unit that outputs interest information through a speaker or the like. .
  • the user input unit 20, the user information detection unit 21, the position detection unit 21a, the time measurement unit 21b, the communication unit 23, and the output unit 24 function, for example, as an information processing program according to the spirit of the present invention as the user terminal device 2.
  • the apparatus side interest information storage part 22 is constructed
  • the storage device include a hard disk device, a semiconductor memory, a drive device for storage media such as a CD and a DVD, and the like.
  • the server device 3 is an information search server that manages the interest information for each user and searches and returns the interest information requested by the user, and is connected to the user terminal device 2 via the communication network 4 so as to be communicable.
  • the configuration includes a communication unit 30, a user authentication unit 31, a user information search unit 32, and a server-side interest information storage unit 33.
  • the communication unit 30 is a component that performs data communication by being communicably connected to the communication unit 23 of the user terminal device 2 via the communication network 4.
  • the user authentication unit 31 is a configuration unit that performs authentication processing of a user who desires to store and browse (edit) interest information. For example, the user authentication unit 31 manages the user ID given to the user registered in the service provided by the information processing system 1, and collates the user ID included in various requests from the user terminal device 2. User authentication.
  • the user information retrieval unit 32 is a component that retrieves the interest information requested from the user terminal device 2 from the server-side interest information storage unit 33. For example, the user information retrieval unit 32 performs retrieval using the interest object and additional information included in the interest information as keys. Do. Moreover, you may provide the search function which calculates the calculation based on a search result, for example, the frequency in which the same information (attribute) is utilized, and the change of this frequency within a fixed time. When a search for interest information is requested using the location information (latitude, longitude) of a point as a key, the user information search unit 32 interest information regarding a point included in an area within a predetermined range including the point of the search key. Search for.
  • the interest information of a point in a circular area having a radius centered on the point and a predetermined distance is set as a search target.
  • the predetermined range may be a distance range in which the user is expected to have the same interest as the point of the search key, and an area having a distance difference from the position of the point of the search key of about 30 m can be considered.
  • the search for the interest information whose time is included in the key is requested, the interest information corresponding to the time around the predetermined time range from this time is also searched.
  • the predetermined time range may be a time range in which the user is expected to have the same interest as the time of the search key, and a time range in which the time difference from the time of the search key is about 30 minutes can be considered.
  • the server-side interest information storage unit 33 is a storage unit for storing the interest information transmitted from the user terminal device 2, and the interest information is stored in association with the user ID of the generation source user.
  • the interest information stored in the server-side interest information storage unit 33 is composed of a sequence of information (attributes) including the position information of the points of interest and corresponding points, as in the case of the device-side interest information storage unit 22. Is done.
  • the communication unit 30, the user authentication unit 31, and the user information search unit 32 cause a computer functioning as the server device 3 to execute an information processing program according to the gist of the present invention so that hardware and software cooperate. Realized as a concrete means that worked.
  • the server-side interest information storage unit 33 is constructed on a storage area of a storage device mounted on the above-described computer, for example.
  • FIG. 2 is a flowchart showing a flow of processing performed by the information processing system according to the first embodiment.
  • the processing by the information processing system 1 according to the first embodiment includes a process of inputting an interest object by an explicit operation performed by the user, generating interest information including the interest object, and storing it in the server device 3; Can be divided into processes for browsing (using) the interest information about the point where the person passed while moving.
  • FIG. 3 is a diagram illustrating an example of an interest target input screen, and illustrates a case where the user input unit 20 is a touch panel using the display screen of the output unit 24.
  • software buttons 41a to 41d for inputting an object of interest are provided.
  • the traffic genre point button 41a is pressed, and the information genre “traffic jam point” is output to the user information detection unit 21 as an object of interest.
  • the user genre “interesting shop” is selected as an object of interest by pressing the shop button 41b that the user is interested in. Is output.
  • the construction point button 41c when passing a point under construction, by depressing the construction point button 41c, the information genre “construction point” is output to the user information detection unit 21 as an object of interest.
  • the information genre “danger point” is output to the user information detection unit 21 as an object of interest by pressing the danger point button 41d.
  • the information genre of the software button shown in FIG. 3 is an example, and information genres that are further classified may be used, or the information may be set hierarchically from large classifications to detailed information genres. .
  • the software buttons 41a to 41d for inputting the object of interest are displayed on the display screen 24A of the output unit 24 is shown, but the software buttons 41a to 41d may be provided as dedicated buttons provided on the handle.
  • a plurality of input devices may be combined to input an object of interest. For example, by combining an interest target input screen and a speech recognition system and pressing any one of the software buttons 41a to 41d, by uttering the detailed contents of the interest target, the speech recognition result is added to the additional information. To do. Further, when any of the software buttons 41a to 41d is pressed, an image obtained by imaging the outside of the vehicle or a video obtained by photographing the user's gesture may be used as additional information.
  • the input devices that can be used may be limited according to the traveling state of the vehicle. For example, when the software buttons 41a to 41d operated by the touch panel and the dedicated buttons provided on the steering wheel are provided, the touch operation is invalidated while the vehicle is running, and only the special buttons provided on the steering wheel are validated. .
  • the user information detection unit 21 detects information input by the interest input HMI among the information input into the user terminal device 2 using the user input unit 20 as an interest, and at least the interest is Interest information is generated by adding position information of the input point (step ST2).
  • the interest information is composed of a sequence of information (attributes) of ⁇ latitude, longitude,...: Interest object>.
  • the interest information may be configured to refer to external information corresponding to the data indicating the interest object using the file name of the data indicating the interest object. For example, when an object of interest represented by image data or audio data is included, the file name of the data is set.
  • the file name of the audio data is set as ⁇ latitude, longitude, ...: file name> Interest information is generated.
  • the interest information may include a plurality of interest objects. For example, when a file name of data indicating an interest object is used, the interest information may be configured with the audio data itself and the file name as the interest object.
  • the user information detection part 21 preserve
  • the communication unit 23 is communicably connected to the server device 3 via the communication network 4 and transmits a storage request including the user ID of the user A. .
  • a storage request may be transmitted when interest information is generated by the user information detection unit 21.
  • the user authentication unit 31 of the server device 3 authenticates the requesting user A based on the user ID included in the request (step ST4).
  • the communication unit 23 of the user terminal device 2 transmits the interest information generated in step ST ⁇ b> 2 to the server device 3 via the communication network 4.
  • the user authentication unit 31 of the server device 3 stores the interest information received from the user terminal device 2 by the communication unit 30 in the server-side interest information storage unit 33 in association with the user ID of the user A (step ST5). Up to this point corresponds to the process of generating / saving interest information.
  • the user input unit 20 is used to input information serving as a search key for the interest information.
  • the user input unit 20 is a touch panel using the display screen of the output unit 24, a point input software button is displayed on the display screen.
  • the user input unit 20 notifies the user information detection unit 21 that the point input button has been pressed.
  • the position information at that time is displayed. Obtained from the detection unit 21a, a search request including the position information and the user ID is output to the communication unit 23.
  • the communication unit 23 transmits the search request input from the user information detection unit 21 to the server device 3 via the communication network 4.
  • the user authentication unit 31 of the server device 3 authenticates the user A as the search request source based on the user ID included in the search request.
  • searching for other interest information related to the same point as the interest information stored in the server-side interest information storage unit 33 as a series of processes from step ST5 the user authentication has already been completed in step ST4. Authentication processing is omitted.
  • the user information search unit 32 searches the server-side interest information storage unit 33 using the position information extracted from the search request as a key (step ST6).
  • the interest information of the points included in the area of the predetermined range including the point of the position information as the search key is also searched as the interest information requested for the search.
  • the predetermined range regarded as the same as the position information is set, and the interest information of the point included in the area of this range is searched. .
  • the user information search unit 32 When there is interest information requested to be searched in the server-side interest information storage unit 33 (step ST6; YES), the user information search unit 32 reads out the interest information from the server-side interest information storage unit 33 and requests it by the communication unit 30. It transmits to the original user terminal device 2 (step ST7). In step ST7, the user information search unit 32 records the frequency of the search request for the interest information stored in the server-side interest information storage unit 33 or the change of this frequency over a certain period of time. You may make it add to the interest information of a search result, and may be made to transmit to the user terminal device 2 of a search request origin.
  • the interest information transmitted to the search request source user terminal device 2 has a configuration such as ⁇ latitude, longitude, frequency, additional information 1, additional information 2,. By doing so, it is possible to grasp the frequency at which the interest information is requested to be searched, that is, the degree of interest of the point.
  • step ST8 If “save” is set by the user A (step ST8; YES), the communication unit 23 of the user terminal device 2 stores the interest information of the search result received from the server device 3 in the device-side interest information storage unit 22. Save (step ST9). On the other hand, if “save” is not set by the user A (step ST8; NO) or the interest information of the search result is saved in the device-side interest information storage unit 22 in step ST9, the communication unit 23 displays the search result. Interest information is passed to the output unit 24. The output unit 24 presents the interest information of the input search result to the user A (step ST10).
  • step ST5 When other interest information related to the same point as the interest information stored in the server-side interest information storage unit 33 is searched as a series of processes from step ST5, the same point other than the interest information stored in step ST5 is searched.
  • the saved interest information is presented.
  • the server device 3 can be provided by performing an explicit input operation indicating that the user A is a point of interest using the user input unit 20 in a place with good scenery that has passed during the movement. From this, interest information (POI information) regarding this point is fed back.
  • the communication unit 30 of the server device 3 transmits information indicating that there is no interest information to the user terminal device 2 that is the request source.
  • the communication unit 23 of the user terminal device 2 receives the information from the server device 3, the communication unit 23 notifies the output unit 24 that there is no interest information requested for the search.
  • the output unit 24 presents to the user A that there is no interest information requested for search (step ST11).
  • the method for presenting the interest information may be as follows according to the traveling state of the host vehicle.
  • the interest information generated so far for example, the interest information stored in the device-side interest information storage unit 22
  • the interest information is not displayed, and is presented only by voice.
  • C When the host vehicle reaches a point where an object of interest has been previously input, interest information regarding the point is presented. In this case, past interest information stored in the device-side interest information storage unit 22 may be used, or a search request may be made to the server device 3 to present the interest information newly stored for the point.
  • the user input unit 20 that receives an input of an object of interest at the moved point, the position detection unit 21a that detects position information, and the user input unit 20 input the information.
  • a user information detecting unit 21 that generates interest information including the target of interest and the position information of the point where the target of interest detected by the position detecting unit 21a is input, and the server device 3 so as to be communicable with each other.
  • the communication unit 23 that stores the interest information generated by the user information detection unit 21 in the server device 3 and acquires the interest information searched in response to the request among the interest information stored in the server device 3;
  • An output unit 24 that outputs the interest information generated by the information detection unit 21 or the interest information acquired by the communication unit 23 and presents it to the user is provided.
  • the server device 3 may exchange information with the user terminal device 2 mounted on the vehicle via the roadside wireless communication device.
  • the communication unit 23 when there are a plurality of vehicles on which the user terminal device 2 is mounted, by providing the communication unit 23 with a vehicle-to-vehicle communication function, not only with the server device 3 but also with other vehicle-to-vehicle communication ranges. Information may be exchanged with the user terminal device 2 of the vehicle.
  • FIG. FIG. 4 is a block diagram showing the configuration of the information processing system according to the second embodiment of the present invention.
  • the server device 3A is connected to be able to communicate from the user terminal device 2A managed by the user A and the user terminal device 2B managed by the user B. Shows the case.
  • the interest information stored in the server device 3A can be browsed from both the user terminal devices 2A and 2B.
  • the user terminal device 2A includes an editing processing unit 25 in addition to the configuration shown in the first embodiment.
  • the edit processing unit 25 is a configuration unit that edits interest information including an object of interest and its additional information based on information input using the user input unit 20.
  • the user terminal device 2B may have a configuration including the editing processing unit 25 as in the user terminal device 2A, or may have a configuration similar to that of the first embodiment.
  • the server device 3A includes a user notification unit 34 in addition to the configuration shown in the first embodiment.
  • the user notification unit 34 is a configuration unit that performs notification processing on the user terminal devices 2A and 2B using the communication unit 30.
  • the user who edited the interest information generates the server-side interest information. If the user is different from the user stored in the storage unit 33, an edit notification indicating that the interest information has been edited is sent to the user who generated and stored the edited interest information.
  • FIG. 5 is a flowchart showing a flow of editing processing by the information processing system according to the second embodiment. Details of the processing will be described with reference to FIG.
  • the user A uses the user input unit 20 to instruct login to the server device 3A.
  • the communication unit 23 transmits a login request including the user ID of the user A to the server device 3 ⁇ / b> A via the communication network 4.
  • the user authentication unit 31 of the server device 3A authenticates the requesting user A based on the user ID included in the login request (step ST1a). .
  • the edit processing unit 25 provides an HMI for information editing using the user input unit 20 and the output unit 24.
  • the user input unit 20 is a touch panel using the display screen of the output unit 24, an information editing screen is displayed on the display screen.
  • the user A instructs to search the interest information to be edited from the interest information stored in the server device 3A by a touch operation on the information editing screen.
  • the search key is the information constituting the interest information, the interest object, the time when this interest object was input, the name of the user who input this interest object, the position of the point where this interest object was input, and the like.
  • the search request including this search key is transmitted to the server device 3A by the communication unit 23.
  • the user information search unit 32 of the server device 3A searches the server-side interest information storage unit 33 based on the search key included in the search request received by the communication unit 30 (step ST2a). Since the interest information is composed of columns of information (attributes) such as ⁇ latitude, longitude, frequency, additional information 1, additional information 2,...: Interest object>, the data is RDB (relational database) format data. Can handle. Therefore, the user information search unit 32 may be configured to perform a search using an SQL (Structured Query) Language (SQ) sentence or the like. Information of the search result by the user information search unit 32 is transmitted to the user terminal device 2A by the communication unit 30.
  • SQL Structured Query
  • SQL Structured Query
  • the communication unit 23 of the user terminal device 2A displays the interest information of the search result received from the server device 3A on the information editing screen.
  • the editing processing unit 25 edits the interest information of the search result using the editing information input by the user input unit 20 (step ST3a).
  • the interest information of the search result is ⁇ user name, information 1, information 2,..., Information N: object of interest>. Therefore, the information is added in the form following this column. That is, the edited interest information data has a configuration such as ⁇ user name, information 1, information 2,..., Information N, information N + 1: object of interest>.
  • the interest information to which id is assigned is configured as ⁇ id, user name, information 1, information 2,..., Information N: object of interest>, and data to be added to this is ⁇ id, user name, If it is configured as ref, information N + 1,...: interest>, information after information N + 1 is added with reference to id.
  • the interest information edited in this way is transmitted to the server device 3A by the communication unit 23.
  • the user information search unit 32 of the server device 3 ⁇ / b> A stores the edited interest information received by the communication unit 30 in the server-side interest information storage unit 33 in association with the user ID (user B).
  • the user notification unit 34 compares the user ID obtained at the time of the login request from the user terminal device 2A with the user ID associated with the edited interest information, and the editing notification is necessary. (Step ST4a).
  • Step ST4a when both user IDs are the same and it is determined that the user A has edited his / her interest information, it is determined that the editing notification is unnecessary (step ST4a; NO), and the process is terminated.
  • step ST4a YES
  • the user notification unit 34 Specifies the user terminal device corresponding to this user ID based on the user ID associated with the edited interest information.
  • user terminal device 2B is specified from the user ID associated with the edited interest information.
  • the user notification unit 34 sends an edit notification to the user terminal device 2B via the communication unit 30 (step ST5a).
  • This editing notification can be realized by e-mail, instant messenger, SNS (Social Network Service) or the like.
  • the content of the edit notification may be only that the interest information has been edited, but the edited user name, the digest of the edited content, etc. may be notified.
  • the user notification unit 34 may perform editing notification.
  • the position and information genre (new shop) of the point are changed by the input operation via the HMI for inputting the object of interest.
  • the interest information can be edited by the user B using the editing processing unit 25 of the user terminal device 2B in the same manner as described above. For example, it is assumed that user B edits to add comment information “What is the reputation of this store?” As additional information at a later date. Since the interest information stored in the server device 3A can be browsed by registered users, the comment “What is the reputation of this shop?” Can be seen among registered users.
  • the user B uses the editing processing unit 25 of the user terminal device 2A. Edit to add comment information to interest information. For example, when a comment “not so delicious” is added, the user notification unit 34 of the server device 3A notifies the user B of editing. When the user B browses his / her interest information on the user terminal device 2B in response to the editing notification, the user B can see the comment of the user A saying “It was not very delicious” as a reputation regarding the new shop.
  • the editing processing unit 25 that edits the interest information stored in the server device 3A since the editing processing unit 25 that edits the interest information stored in the server device 3A is provided, the object of interest at the point where the user passes while moving and its Even when only the location information of the point is stored in the server device 3A as interest information, the interest information can be edited at a later date, and useful interest information can be shared among a plurality of users.
  • the editing processing unit is provided in the user terminal device.
  • the editing processing unit may be provided on the server device side.
  • the editing processing unit of the server device receives the editing request and editing information from the user terminal device by the communication unit 30 via the communication network 4, and executes the editing processing corresponding thereto.
  • the user notification unit 34 determines the identity of the user of the interest information edited by the editing processing unit, and performs an editing notification according to the determination result.
  • FIG. FIG. 6 is a block diagram showing the configuration of the user terminal apparatus according to Embodiment 3 of the present invention.
  • the user terminal device 2C according to the third embodiment includes a user input unit 20, a user information detection unit 21A, a position detection unit 21a, a time measurement unit 21b, a communication unit 23, an output unit 24, a user state sensor 26, and interest information.
  • An estimation unit 27 and a user information / interest relation data storage unit 28 are provided.
  • the user information detection unit 21A detects an object of interest input by an explicit operation of the user A using the user input unit 20 from information input to the user terminal device 2C using the user input unit 20.
  • the method of detecting an interest object detects information input by an HMI for interest object input as an interest object. For example, it is identified from other information by setting a specific extension for the object of interest using the HMI for inputting the object of interest.
  • the user state sensor 26 is a sensor that detects information indicating the state of the user A, such as biological information indicating the physical state of the user A such as a heart rate, a change in the amount of movement of the line of sight, and a change in the vehicle speed.
  • Information indicating the driving situation of the vehicle in which the mental state of the user A is reflected is detected as information indicating the user state. For example, using a sensor for detecting a pulse, the heart rate for a certain time (usually 1 minute) is detected from the time when the object of interest is input.
  • the amount of movement of the line of sight within a certain time from the time when the object of interest is input is detected. Furthermore, based on the vehicle information acquired from the vehicle control device, a change in the vehicle speed in a certain time is detected from the time when the object of interest is input.
  • the information indicating the user state is not limited to the heart rate, the line-of-sight movement amount, and the vehicle speed change, and may be any information that can identify the user state when the user inputs an object of interest.
  • the interest information estimation unit 27 uses the past user state / interest relationship data stored in the user information / interest relationship data storage unit 28 to determine the tendency of the user state when the user A inputs the object of interest, It is a component that estimates the interest of user A based on the user state data range that indicates this tendency. For example, if the information indicating the user state of the user A sequentially input from the user state sensor 26 is within the range indicating the tendency of the user state when the target of interest is input for the user A obtained in advance, the interest target Is estimated to be the object of interest of user A at that time.
  • the user information / interest relationship data storage unit 28 is a storage unit for storing user information / interest relationship data.
  • the user information / interest relationship data generated by the user information detection unit 21A and the interest information estimation unit 27 The generated user information / interesting relationship data is stored.
  • the interest information is stored in the server-side interest information storage unit 33 as user information / interest relation data. Therefore, the operation of the server device 3 in the third embodiment can be described by replacing “interest information” in the description of the first embodiment with “user information / interesting relationship data”.
  • FIG. 7 is a flowchart showing a flow of processing by the user terminal device according to the third embodiment, and details of the processing will be described with reference to FIG.
  • the processing by the user terminal device 2C according to the third embodiment includes user information / interest relationship data including a combination of interest information including an object of interest input by an explicit operation performed by the user and a user state at the time of input. Can be divided into a process of generating and saving the user A and a process of estimating the object of interest of the user A from the tendency obtained from the past user information / interest relation data.
  • (1) Generation / saving of user information / interesting relationship data The user (interesting object) who is interested at the point where the user A passed while moving is input using the user input unit 20 (step ST1b). Note that the input method of interest is the same as that in the first embodiment.
  • the user information detection unit 21 ⁇ / b> A detects information input by the interest input HMI from the information input in the user terminal device 2 ⁇ / b> C using the user input unit 20 as an interest, and at least this Interest information is generated by adding position information of the point where the object of interest is input (step ST2b).
  • the interest information is composed of a column of information (attributes) of ⁇ latitude, longitude,...: Interest object>.
  • the user information detection unit 21A acquires the user state detected at the time when the object of interest is input in step ST1b from the user state sensor 26 (step ST3b), and the interest information generated in step ST2b. Are combined to generate user information / interesting relationship data and store it in the user information / interesting relationship data storage unit 28 (step ST4b).
  • the user state / interest relation data includes interest information, a column of information indicating the user state, and reference information to the interest information.
  • ⁇ ref (id number), line-of-sight movement consisting of a sequence of interest information ⁇ id number, latitude, longitude,...: Store of interest> and a reference to this interest information and information indicating the user status
  • the user state / interest relationship data is composed of information such as amount (20 cm / sec) and vehicle speed change ( ⁇ 10 km / sec)>.
  • the interest information estimation unit 27 uses the past user state / interest relationship data stored in the user information / interest relationship data storage unit 28, and the user A inputs the interest object.
  • the tendency of the user state when learning is learned (step ST5b).
  • a method of reinforcement learning or functional logic programming is used as an algorithm for learning the tendency of the user state. For example, from the user state / interest relation data in which the information genre “interesting store” is an object of interest, the tendency of the user state when the information genre “interesting store” is input is learned and the tendency is indicated.
  • a user status data range is determined. That is, a user state data range in which the line-of-sight movement amount is 15 cm / second or more and the vehicle speed change is ⁇ 7 km / second is determined.
  • the interest information estimation unit 27 indicates that the information indicating the user state of the user A sequentially input from the user state sensor 26 is within the range indicating the tendency of the user state obtained in step ST5b.
  • the object of interest is estimated to be the user A's current object of interest (step ST6b). For example, since the current user state is within the range indicating the tendency of the user state obtained in step ST5b when the line-of-sight movement amount is 20 cm / second and the vehicle speed change is ⁇ 7 km / second, the current user A It is presumed that the object of interest is “the store you care about”.
  • the interest information estimation unit 27 generates interest information including at least the interest object estimated in step ST6b and the position information of the point at this time, similarly to the user information detection unit 21A.
  • the user state / interest relation data combined with the information indicating the state of the user A at the time may be generated and stored in the user information / interest relation data storage unit 28.
  • the output unit 24 presents the user information / interest relation data including the interest information estimated by the interest information estimation unit 27 to the user A, and provides the HMI that allows the user A to approve whether or not to store it. Thus, only the user information / interesting data approved by the user A is stored.
  • the user information / interesting data that has not been approved is not stored, and the range indicating the tendency of the user state used for the estimation is discarded and newly learned, or the range is set so that it is estimated more strictly. Correct so that it becomes narrower. By doing in this way, the estimation precision of an interested object can be improved.
  • the interest information estimation unit 27 may make a search request to the server device 3 via the communication unit 23 using the estimated interest object and the position information of the point at this time as a search key.
  • the output unit 24 presents the user information / interesting relationship data of the search result transmitted from the server device 3 to the user A.
  • the user A automatically presents the interest information including the object of interest estimated according to the user's own state at the point where the user A traveled while traveling on the vehicle or the like.
  • the user status sensor 26 that detects the user status, the interest information generated by the user information detection unit 21A, and the target of interest included in this information are input.
  • the user information / interest relationship data storage unit 28 stores data that combines the user status detected by the user status sensor 26 and the data stored in the user information / interest relationship data storage unit 28
  • the interest information estimation unit 27 that learns the tendency of the user state when the target of the user is input and estimates the target of interest from the user state detected by the user state sensor 26 based on the learned tendency of the user state. With. With this configuration, it is possible to automatically estimate the user A's interest from the information indicating the user state detected by the user state sensor 26.
  • the information processing apparatus may be applied not only to a vehicle-mounted navigation apparatus but also to a display device of a mobile phone terminal or a personal digital assistant (PDA). Further, the present invention may be applied to a display device such as a PND (Portable Navigation Device) that is carried and used by a person on a moving body such as a vehicle, a railway, a ship, or an aircraft.
  • PND Portable Navigation Device
  • the information processing apparatus can accurately store an object of interest at a point where the user passes while moving, and can appropriately use information at this point, and thus acquires information along the travel route. It is suitable for a navigation device.

Abstract

　移動した地点での興味の対象の入力を受け付けるユーザ入力部２０と、位置情報を検出する位置検出部２１ａと、ユーザ入力部２０で入力された興味の対象及び当該興味の対象が入力された地点の位置情報を含む興味情報を生成するユーザ情報検出部２１と、サーバ装置３と通信可能に接続して、ユーザ情報検出部２１で生成された興味情報をサーバ装置３に保存し、サーバ装置３に保存された興味情報のうち、要求に応じて検索された興味情報を取得する通信部２３と、ユーザ情報検出部２１で生成された興味情報又は通信部２３で取得された興味情報を出力して、ユーザに提示する出力部２４とを備える。

Description

情報処理システム及び情報処理装置
　この発明は、移動中に通りがかった地点に関する情報を登録したり、提供することができる情報処理システム及びこれに用いる情報処理装置に関する。
　ユーザの明示的な操作に応じて情報を登録する従来の技術として、例えば、特許文献１に開示されるシステムがある。このシステムでは、ユーザがリモコンを操作すると、このリモコンに設けた環境変化検出手段が、これをリモコン周辺の環境変化として検出する。環境変化検出手段によってリモコン周辺の環境変化が検出されると、これを契機として、撮像装置が撮像を開始し、撮像画像が記録装置に記録される。これにより、ユーザによる明示的な操作に応じて、ユーザがリモコンの周辺で起こした行動をライフログとして記録することができる。
特開２００８－１６０６１２号公報
　従来のカーナビゲーションシステムには、ある地点を予め登録しておくことで、後からその地点を目的地又は経由地に設定することができるものがある。ただし、施設情報等のような地点に関する情報（ＰＯＩ（Point Of Interest）情報）は、システムの出荷時に予め設定された情報のみである。従って、車両での走行中にある地点でユーザが何らかの対象に興味を持ったとしても、この地点に関する情報が予め設定された情報になければ、何の情報も得ることができない。
　また、近年では通信ネットワークを介した情報検索が普及しているが、検索キーによっては、膨大な量の情報が検索対象となる。例えば、車両での移動中に景色が良い場所に通り掛かり、この場所に関するＰＯＩ情報を利用したい場合に、この場所の名称を検索キーとすると、その名称を含む全ての情報が検索対象となるので、この場所に無関係な情報であっても大量に抽出される。特に、ユーザが移動中に行った検索で大量の情報が抽出されると、これらの情報から直ちに所望の地点に関する情報を得るのは非常に困難である。
　そこで、ユーザの行動を随時記録したライフログから、移動中にユーザが通った地点に関する情報を検索すれば、この地点に無関係な情報を除外できるが、ライフログを随時記録するには大容量の記憶装置が必要である。また、随時記録されてライフログが膨大な量になると、所望の地点に関する情報を見つけるまでに必要な検索時間がかかり、移動中に行う検索としては現実的でない。
　この場合、特許文献１に代表される従来の技術のように、ユーザによる何らかの明示的な操作を契機にライフログを記録すれば、ライフログの肥大化は抑えられる。
　しかしながら、特許文献１は、情報の記録を開始するための契機として、リモコン操作やその周囲環境の変化を用いただけであるので、ユーザが移動中に通り掛かった地点で興味を持った対象を的確に保存することができない。
　この発明は、上記のような課題を解決するためになされたもので、ユーザが移動中に通り掛かった地点で興味を持った対象を的確に保存し、この地点の情報を適宜利用することができる情報処理システム及びこれに用いる情報処理装置を得ることを目的とする。
　この発明に係る情報処理装置は、移動体に搭載又は携帯される情報処理装置であって、移動体が移動した地点での興味の対象の入力を受け付けるユーザ入力部と、移動体の位置情報を検出する位置検出部と、ユーザ入力部で入力された興味の対象と位置検出部で検出された当該興味の対象が入力された地点の位置情報とを含む興味情報を生成する興味情報生成部と、外部装置と通信可能に接続して、興味情報生成部で生成された興味情報を外部装置に保存し、外部装置に保存された興味情報のうち、要求に応じて検索された興味情報を取得する通信部と、興味情報生成部で生成された興味情報又は通信部で取得された興味情報を出力して、ユーザに提示する出力部とを備える。
　この発明によれば、ユーザが移動中に通り掛かった地点で興味を持った対象を的確に保存し、この地点の情報を適宜利用することができるという効果がある。
この発明の実施の形態１による情報処理システムの構成を示すブロック図である。 実施の形態１の情報処理システムによる処理の流れを示すフローチャートである。 興味対象入力用画面の一例を示す図である。 この発明の実施の形態２による情報処理システムの構成を示すブロック図である。 実施の形態２の情報処理システムによる編集処理の流れを示すフローチャートである。 この発明の実施の形態３によるユーザ端末装置の構成を示すブロック図である。 実施の形態３のユーザ端末装置による処理の流れを示すフローチャートである。
　以下、この発明をより詳細に説明するため、この発明を実施するための形態について、添付の図面に従って説明する。
実施の形態１．
　図１は、この発明の実施の形態１による情報処理システムの構成を示すブロック図である。図１において、実施の形態１の情報処理システム１は、ユーザＡによって管理されるユーザ端末装置２及びサーバ装置３を備える。
　ユーザ端末装置２は、車両等の移動体に搭載された車載機器又はユーザＡに携帯される機器として構成される情報処理装置であり、車両等での移動又は歩行の間に通り掛かった地点でユーザＡが興味を持った対象を含む情報を、通信ネットワーク４を経由してサーバ装置３に保存したり、サーバ装置３に保存されている情報から所望の情報を閲覧することができる。その構成としては、ユーザ入力部２０、ユーザ情報検出部２１、位置検出部２１ａ、計時部２１ｂ、装置側興味情報記憶部２２、通信部２３及び出力部２４を備える。
　ユーザ入力部２０は、ユーザ端末装置２へ情報を入力する構成部であり、特に、サーバ装置３に保存する情報を入力したり、ユーザが興味を持った地点に関する情報を検索するためのキー情報を入力する場合に利用される。これらの入力処理は、車両等での移動又は歩行によってユーザＡが移動している間に実施される場合が多いので、ユーザ入力部２０を用いた簡単な入力操作に関連付けられる。
　つまり、本発明のユーザ端末装置２は、ユーザＡが移動中に通り掛かった地点で興味を持った対象（以下、興味対象と呼ぶ）を入力するための興味対象入力用のヒューマンマシンインタフェース（ＨＭＩ）を提供する。
　例えば、ユーザ入力部２０が出力部２４の表示画面を用いたタッチパネルである場合、タッチ操作で興味対象を入力するＨＭＩとして、この表示画面上に興味対象入力用画面を表示する。興味対象入力用画面には、情報ジャンル毎のソフトウェアボタンが設けられており、ユーザＡが、興味を持った対象に対応する情報ジャンルのボタンを押下することにより、この情報ジャンルの内容が興味対象として入力される。
　また、ユーザ入力部２０が音声認識システムである場合は、音声入力操作によって興味対象を入力する興味対象入力用のＨＭＩを提供することができる。このＨＭＩでは、ユーザＡが興味を持った対象を発声することにより、この発声を音声認識した結果が興味対象として入力される。なお、興味対象入力用のＨＭＩを、ユーザＡの発声を単に録音する構成として、興味対象を録音データで入力するようにしてもよい。
　さらに、ユーザ入力部２０が画像認識システムである場合は、撮像操作によって興味対象を入力する興味対象入力用のＨＭＩを提供することができる。このＨＭＩでは、ユーザＡが興味を持った対象をジェスチャで表現したり又はその対象物を見ることにより、これをカメラ等の撮像装置で撮像した動画像を画像認識又は視線認識した結果が、興味対象として入力される。なお、単に撮像画像データを興味対象として入力するようにしてもかまわない。
　ユーザ情報検出部２１は、ユーザ入力部２０を用いてユーザ端末装置２内に入力された情報の中から、ユーザＡによって入力された興味対象を検出する構成部である。例えば、上述の興味対象入力用のＨＭＩで入力された情報を興味対象として検出する。すなわち、興味対象入力用のＨＭＩで興味対象に特定の拡張子を設定する等して、他の情報から識別する。
　また、ユーザ情報検出部２１は、位置検出部２１ａで検出された位置情報及び計時部２１ｂで計時された時刻情報を逐次入力して、ユーザＡによって興味対象が入力された地点の位置情報、興味対象が入力された時刻、予め設定されたユーザ情報から抽出されたユーザ名や車種等を興味対象に付加した興味情報を生成する興味情報生成部として機能する。
　なお、上記興味情報は、興味対象が入力された地点に関するＰＯＩ情報として扱われるため、興味対象に対する付加情報には、少なくとも興味対象が入力された地点の位置情報が含まれる。
　興味対象には、上述したようにユーザが興味を持った対象物の撮像画像や対象物を見るユーザの視点位置やその滞留時間、音声情報が含まれる。
　また、興味対象入力用ＨＭＩによっては、画一的な情報ジャンルが興味対象として入力される。例えば、“新しい中華料理店”という情報ジャンルは、複数のユーザの間で共通に扱われる。このように複数のユーザの間で共通に扱われる興味対象は、この興味対象に関する興味情報を検索するキー情報として利用でき、またその興味情報の分類や利用頻度のような統計処理を施す場合に有効である。
　一方、複数のユーザの間で共通に扱われない情報、例えばユーザが独自に発した内容の音声ファイル等で興味対象を表す場合、ユーザの個性を反映させた興味情報を生成する際に有効である。
　また、興味情報は、興味対象と対応する地点の位置情報とを含む情報（属性）の列から構成される。例えば、＜時刻，緯度，経度，興味対象＞のように構成され、“時刻”は、興味対象が入力された時刻であり、“緯度，経度”は、興味対象が入力された地点の位置情報である。なお、興味情報は、＜時刻，＜緯度，経度＞，興味対象＞というように情報の一部を入れ子に構成してもよい。
　一方、ユーザＡが興味を持った地点に関する興味情報を検索するためのキー情報を入力する場合は、興味対象の入力よりも単純なＨＭＩでよい。
　例えば、ユーザ入力部２０が出力部２４の表示画面を利用したタッチパネルである場合に、タッチ操作でキー情報を入力するＨＭＩとして、地点入力用のソフトウェアボタンを表示画面に表示する。ユーザＡが、例えば景色が良い地点に通りがかり、この地点に興味を持った場合、この地点入力用ボタンを押下するだけで、図２にて後述するようにして、この地点に関する興味情報（ＰＯＩ情報）がサーバ装置３からフィードバックされる。
　位置検出部２１ａは、ユーザ端末装置２の位置を検出する構成部であり、例えばＧＰＳ（Global Positioning System）受信機、車速センサ、加速度センサ、角速度センサ等で現在位置情報を検出する。計時部２１ｂは、ユーザ端末装置２として機能するコンピュータに内蔵された内蔵時計である。
　装置側興味情報記憶部２２は、ユーザ端末装置２で興味情報を保存しておくための記憶部であり、ユーザ情報検出部２１で生成された興味情報や、通信部２３によってサーバ装置３から取得された興味情報が記憶される。
　通信部２３は、インターネット等の通信ネットワーク４を介してサーバ装置３の通信部３０と通信可能に接続してデータ通信を行う構成部である。
　出力部２４は、ユーザＡに興味情報を出力して提示する構成部であり、少なくとも表示モニタに興味情報を表示する表示出力部、及びスピーカ等で興味情報を音出力する音出力部として機能する。
　なお、ユーザ入力部２０、ユーザ情報検出部２１、位置検出部２１ａ、計時部２１ｂ、通信部２３及び出力部２４は、例えば、この発明の趣旨に従う情報処理用プログラムを、ユーザ端末装置２として機能するコンピュータに実行させることにより、ハードウェアとソフトウェアが協働した具体的な手段として実現される。
　また、装置側興味情報記憶部２２は、例えば、上述のコンピュータに搭載された記憶装置の記憶領域上に構築される。記憶装置としては、ハードディスク装置、半導体メモリ、ＣＤやＤＶＤ等の記憶メディアのドライブ装置等が挙げられる。
　サーバ装置３は、興味情報をユーザ毎に管理するとともに、ユーザから要求された興味情報を検索して返信する情報検索サーバであり、通信ネットワーク４を介してユーザ端末装置２と通信可能に接続される。その構成として、通信部３０、ユーザ認証部３１、ユーザ情報検索部３２及びサーバ側興味情報記憶部３３を備える。
　通信部３０は、通信ネットワーク４を介してユーザ端末装置２の通信部２３と通信可能に接続してデータ通信を行う構成部である。
　ユーザ認証部３１は、興味情報の保存及び閲覧（編集）を希望するユーザの認証処理を行う構成部である。例えば、ユーザ認証部３１が、この情報処理システム１によって提供されるサービスに登録したユーザに付与されたユーザＩＤを管理しており、ユーザ端末装置２からの各種要求に含まれるユーザＩＤを照合してユーザ認証を行う。
　ユーザ情報検索部３２は、ユーザ端末装置２から要求された興味情報を、サーバ側興味情報記憶部３３から検索する構成部であり、例えば興味情報に含まれる興味対象及び付加情報をキーとして検索を行う。また、検索結果に基づいた演算、例えば同一情報（属性）が利用される頻度やこの頻度の一定時間内の変化を演算する検索機能を持たせてもよい。
　なお、地点の位置情報（緯度、経度）をキーとして興味情報の検索が要求された場合、ユーザ情報検索部３２は、検索キーの地点を含む所定の範囲のエリア内に含まれる地点に関する興味情報を検索する。例えば、その地点を中心とした半径が所定の距離の円エリア内における地点の興味情報を検索対象とする。
　上記所定の範囲は、ユーザが検索キーの地点と同様の興味を持つと予想される距離範囲であればよく、検索キーの地点の位置との距離差が３０ｍ程度のエリアが考えられる。
　さらに、時刻がキーに含まれる興味情報の検索が要求された場合は、この時刻から所定の時間範囲で前後した時刻に対応する興味情報についても検索を行う。上記の所定の時間範囲についても、ユーザが検索キーの時刻と同様の興味を持つと予想される時間範囲であればよく、検索キーの時刻との時間差が３０分程度の時間範囲が考えられる。
　サーバ側興味情報記憶部３３は、ユーザ端末装置２から送信された興味情報を保存するための記憶部であり、興味情報がその生成元のユーザのユーザＩＤに対応付けて記憶される。なお、サーバ側興味情報記憶部３３に保存される興味情報は、装置側興味情報記憶部２２の場合と同様に、興味対象と対応する地点の位置情報とを含む情報（属性）の列から構成される。
　なお、通信部３０、ユーザ認証部３１及びユーザ情報検索部３２は、例えば、この発明の趣旨に従う情報処理用プログラムを、サーバ装置３として機能するコンピュータに実行させることにより、ハードウェアとソフトウェアが協働した具体的な手段として実現される。また、サーバ側興味情報記憶部３３は、例えば上述のコンピュータに搭載された記憶装置の記憶領域上に構築される。
　次に動作について説明する。
　図２は、実施の形態１の情報処理システムによる処理の流れを示すフローチャートであり、ユーザ端末装置２が車載機器として構成された場合について説明する。
　なお、実施の形態１の情報処理システム１による処理は、ユーザが行う明示的な操作によって興味対象を入力し、この興味対象を含む興味情報を生成してサーバ装置３に保存する処理と、ユーザが移動中に通り掛かった地点に関する興味情報を閲覧（利用）する処理に分けられる。
（１）興味情報の生成・保存
　ユーザＡが移動中に通り掛かった地点で興味を持った対象（興味対象）を、ユーザ入力部２０を用いて入力する（ステップＳＴ１）。
　図３は、興味対象入力用画面の一例を示す図であり、ユーザ入力部２０が出力部２４の表示画面を利用したタッチパネルである場合を示している。図３では、地図表示欄４０の他に、興味対象入力用のソフトウェアボタン４１ａ～４１ｄが設けられている。
　ソフトウェアボタン４１ａ～４１ｄには、各種の情報ジャンルが記載されている。
　例えば、頻繁に渋滞する地点に通り掛かった際に、渋滞ポイントボタン４１ａを押下することで、“渋滞ポイント”という情報ジャンルが興味対象としてユーザ情報検出部２１へ出力される。また、ユーザが知らなかった新しいお店に通り掛かった場合には、気になるお店ボタン４１ｂを押下することで、“気になるお店”という情報ジャンルが興味対象としてユーザ情報検出部２１へ出力される。同様に、工事中の地点に通り掛かった場合、工事ポイントボタン４１ｃを押下することにより、“工事ポイント”という情報ジャンルが興味対象としてユーザ情報検出部２１へ出力される。さらに、頻繁に事故が発生する地点に通り掛かった際は、危険ポイントボタン４１ｄを押下することで、“危険ポイント”という情報ジャンルが興味対象としてユーザ情報検出部２１へ出力される。
　なお、図３に示したソフトウェアボタンの情報ジャンルは一例であり、情報ジャンルをさらに大分類したものを利用してもよく、大分類から詳細な情報ジャンルへ階層的に設定できるようにしてもよい。
　また、上記の説明では、興味対象入力用のソフトウェアボタン４１ａ～４１ｄを、出力部２４の表示画面２４Ａに表示する場合を示したが、ハンドルに備え付けた専用ボタンとして設けてもかまわない。
　複数の入力装置を組み合わせて興味対象を入力するようにしてもよい。
　例えば、興味対象入力用画面と音声認識システムを組み合わせて、ソフトウェアボタン４１ａ～４１ｄのいずれかを押下した際に、その興味対象の詳細な内容を発声することにより、その音声認識結果を付加情報とする。また、ソフトウェアボタン４１ａ～４１ｄのいずれかを押下した時点で、車外を撮像した画像やユーザのジェスチャを撮影した映像を付加情報としてもかまわない。
　複数の入力装置を組み合わせて興味情報を入力するにあたり、車両の走行状況に応じて利用できる入力装置を制限してもよい。例えば、タッチパネルで操作するソフトウェアボタン４１ａ～４１ｄと、ハンドルに備え付けた専用ボタンとを備えている場合に、車両の走行中にはタッチ操作を無効とし、ハンドルに備え付けた専用ボタンのみを有効にする。
　ユーザ情報検出部２１は、ユーザ入力部２０を用いてユーザ端末装置２内に入力された情報のうち、興味対象入力用ＨＭＩで入力された情報を興味対象として検出し、少なくとも、この興味対象が入力された地点の位置情報を付加して興味情報を生成する（ステップＳＴ２）。例えば、興味情報は、上述したように＜緯度，経度，・・・：興味対象＞という情報（属性）の列から構成される。
　なお、興味情報は、興味対象を示すデータのファイル名を利用して、興味対象を示すデータに相当する外部の情報を参照するように構成してもよい。
　例えば、画像データや音声データで表される興味対象を含む場合、データのファイル名を設定する。つまり、興味対象が音声データであり、これが興味情報とは別個な記憶領域に保存されている場合、音声データのファイル名が＜緯度，経度，・・・：ファイル名＞のように設定された興味情報が生成される。
　また、興味情報は、複数の興味対象を含んでいてもよい。例えば、興味対象を示すデータのファイル名を利用する場合には、興味情報を、音声データ自体と、そのファイル名を興味対象として構成してもよい。
　次に、ユーザ情報検出部２１は、生成した興味情報を装置側興味情報記憶部２２に保存する（ステップＳＴ３）。
　装置側興味情報記憶部２２に興味情報が保存されると、通信部２３は、通信ネットワーク４を介してサーバ装置３と通信可能に接続して、ユーザＡのユーザＩＤを含む保存要求を送信する。なお、通信部２３が、装置側興味情報記憶部２２に保存しない場合、ユーザ情報検出部２１によって興味情報が生成された時点で保存要求を送信してもよい。
　サーバ装置３のユーザ認証部３１は、通信部３０によってユーザ端末装置２からの保存要求を受信すると、この要求に含まれるユーザＩＤを基に、要求元のユーザＡを認証する（ステップＳＴ４）。
　ユーザ端末装置２の通信部２３は、サーバ装置３から認証されると、ステップＳＴ２で生成された興味情報を、通信ネットワーク４を介してサーバ装置３へ送信する。
　サーバ装置３のユーザ認証部３１は、通信部３０によりユーザ端末装置２から受信した興味情報を、ユーザＡのユーザＩＤに対応付けてサーバ側興味情報記憶部３３に保存する（ステップＳＴ５）。ここまでが、興味情報の生成・保存処理に相当する。
（２）興味情報の閲覧（利用）
　ユーザＡが、車両での移動中に通り掛かった地点に関する興味情報を閲覧したい場合、ユーザ入力部２０を用いて、この興味情報の検索キーとなる情報を入力する。
　例えば、ユーザ入力部２０が出力部２４の表示画面を利用したタッチパネルである場合に、地点入力用のソフトウェアボタンを表示画面上に表示する。ユーザＡが、例えば景色の良い場所に通り掛かり、この地点に関する興味情報を閲覧したい場合には、地点入力用ボタンを押下する。これにより、ユーザ入力部２０が、地点入力用ボタンが押下された旨をユーザ情報検出部２１へ通知する。
　ユーザ情報検出部２１は、地点入力用ボタンが押下された旨、すなわちユーザＡが興味を持った地点であることを示す情報が入力された旨が通知されると、その時点の位置情報を位置検出部２１ａから取得して、この位置情報及びユーザＩＤを含む検索要求を通信部２３へ出力する。通信部２３は、ユーザ情報検出部２１から入力した上記検索要求を、通信ネットワーク４を介してサーバ装置３へ送信する。
　サーバ装置３のユーザ認証部３１は、通信部３０によってユーザ端末装置２からの検索要求が受信されると、この検索要求に含まれるユーザＩＤを基に、検索要求元のユーザＡを認証する。なお、ステップＳＴ５からの一連の処理としてサーバ側興味情報記憶部３３に保存した興味情報と同一の地点に関する他の興味情報を検索する場合は、ステップＳＴ４で既にユーザ認証が済んでいるので、上記認証処理は省略される。
　次いで、ユーザ情報検索部３２は、上記検索要求から抽出した位置情報をキーとして、サーバ側興味情報記憶部３３を検索する（ステップＳＴ６）。ここでは、上述したように検索キーとした位置情報の地点を含む所定の範囲のエリア内に含まれる地点の興味情報についても、検索要求された興味情報とみなして検索される。
　ステップＳＴ５で保存した興味情報と同一の地点に関する興味情報を検索する場合においても、位置情報に同一とみなす上記所定の範囲を設定し、この範囲のエリア内に含まれる地点の興味情報を検索する。
　サーバ側興味情報記憶部３３に検索要求された興味情報がある場合（ステップＳＴ６；ＹＥＳ）、ユーザ情報検索部３２は、サーバ側興味情報記憶部３３から当該興味情報を読み出し、通信部３０によって要求元のユーザ端末装置２へ送信する（ステップＳＴ７）。
　また、ステップＳＴ７において、ユーザ情報検索部３２が、サーバ側興味情報記憶部３３に保存される興味情報について検索要求された頻度又はこの頻度の一定期間における変化を記録しておき、これらの情報を検索結果の興味情報に付加して、検索要求元のユーザ端末装置２へ送信するようにしてもよい。この場合、検索要求元のユーザ端末装置２へ送信される興味情報は、例えば＜緯度，経度，頻度，付加情報１，付加情報２，・・・：興味対象＞のような構成となる。このようにすることにより、興味情報が検索要求された頻度、すなわちその地点が興味を持たれた度合いを把握することができる。
　ユーザ端末装置２の通信部２３は、ユーザＡから“保存”が設定されていれば（ステップＳＴ８；ＹＥＳ）、サーバ装置３から受信した検索結果の興味情報を、装置側興味情報記憶部２２に保存する（ステップＳＴ９）。
　一方、ユーザＡから“保存”が設定されていない（ステップＳＴ８；ＮＯ）、もしくはステップＳＴ９にて検索結果の興味情報を装置側興味情報記憶部２２に保存すると、通信部２３は、検索結果の興味情報を出力部２４へ渡す。出力部２４は、入力した検索結果の興味情報をユーザＡへ提示する（ステップＳＴ１０）。
　また、ステップＳＴ５からの一連の処理としてサーバ側興味情報記憶部３３に保存した興味情報と同一の地点に関する他の興味情報を検索した場合には、ステップＳＴ５で保存した興味情報以外に同一の地点に関して保存されていた興味情報が提示される。
　このように、移動中に通り掛かった景色の良い場所で、ユーザＡが、ユーザ入力部２０を用いて興味を持った地点であることを示す明示的な入力操作を施すことにより、サーバ装置３から、この地点に関する興味情報（ＰＯＩ情報）がフィードバックされる。
　検索要求された興味情報がない場合（ステップＳＴ６；ＮＯ）、サーバ装置３の通信部３０は、興味情報がないことを示す情報を要求元のユーザ端末装置２へ送信する。
　ユーザ端末装置２の通信部２３は、上記情報をサーバ装置３から受信すると、検索要求した興味情報がない旨を出力部２４に通知する。この通知を受けると、出力部２４は、検索要求した興味情報がない旨をユーザＡへ提示する（ステップＳＴ１１）。
　なお、興味情報の提示方法は、自車両の走行状態に応じて下記のようにしてもよい。
（Ａ）自車両が停止した時点で、それまでに生成した興味情報（例えば、装置側興味情報記憶部２２に保存した興味情報）を提示する。
（Ｂ）自車両が走行中である場合には、興味情報を表示せず、音声のみで提示する。
（Ｃ）自車両が以前に興味対象を入力した地点に到達すると、その地点に関する興味情報を提示する。この場合、装置側興味情報記憶部２２に保存した過去の興味情報であってもよく、サーバ装置３へ検索要求を行い、当該地点に関して新たに保存されていた興味情報を提示してもよい。
　以上のように、この実施の形態１によれば、移動した地点での興味の対象の入力を受け付けるユーザ入力部２０と、位置情報を検出する位置検出部２１ａと、ユーザ入力部２０で入力された興味の対象と位置検出部２１ａで検出された当該興味の対象が入力された地点の位置情報とを含む興味情報を生成するユーザ情報検出部２１と、サーバ装置３と通信可能に接続して、ユーザ情報検出部２１で生成された興味情報をサーバ装置３に保存し、サーバ装置３に保存された興味情報のうち、要求に応じて検索された興味情報を取得する通信部２３と、ユーザ情報検出部２１で生成された興味情報又は通信部２３で取得された興味情報を出力して、ユーザに提示する出力部２４とを備える。このように構成することにより、ユーザが移動中に通り掛かった地点で興味を持った対象を的確に保存し、この地点の情報を適宜利用することができる。
　上記実施の形態１では、ユーザ端末装置２とサーバ装置３が、インターネット等の通信ネットワーク４を介して情報をやり取りする場合を示したが、本発明は、これに限定されるものではない。例えば、サーバ装置３が、路側無線通信装置を介して車両に搭載されたユーザ端末装置２との間で情報をやり取りしてもよい。
　また、ユーザ端末装置２を搭載する複数の車両がある場合に、通信部２３に車車間通信機能を持たせることで、サーバ装置３との間だけでなく、車車間通信範囲に存在する他の車両のユーザ端末装置２との間で情報をやり取りしてもよい。
実施の形態２．
　図４は、この発明の実施の形態２による情報処理システムの構成を示すブロック図であり、図１と同一構成部には同一符号を付して説明を省略する。図４に示す例では、実施の形態２の情報処理システム１Ａにおいて、サーバ装置３ＡがユーザＡに管理されたユーザ端末装置２Ａ及びユーザＢに管理されたユーザ端末装置２Ｂからそれぞれ通信可能に接続される場合を示している。なお、サーバ装置３Ａに保存される興味情報は、ユーザ端末装置２Ａ，２Ｂの双方から閲覧可能である。
　ユーザ端末装置２Ａは、上記実施の形態１で示した構成に加え、編集処理部２５を備える。編集処理部２５は、ユーザ入力部２０を用いて入力された情報に基づいて、興味対象及びその付加情報を含む興味情報を編集する構成部である。
　以降では、ユーザＡが管理するユーザ端末装置２Ａを用いて、ユーザＢによってサーバ装置３Ａに保存された興味情報を編集する場合について述べる。従って、ユーザ端末装置２Ｂについては、ユーザ端末装置２Ａと同様に編集処理部２５を有する構成であっても、上記実施の形態１と同様の構成であってもよい。
　また、サーバ装置３Ａは、上記実施の形態１で示した構成に加えて、ユーザ通知部３４を備える。ユーザ通知部３４は、通信部３０を用いてユーザ端末装置２Ａ，２Ｂに対して通知処理を実行する構成部であり、特に、興味情報を編集したユーザが、これを生成してサーバ側興味情報記憶部３３に保存したユーザと異なる場合、編集された興味情報を生成し保存したユーザに対して当該興味情報が編集されたことを示す編集通知を行う。
　次に動作について説明する。
　図５は、実施の形態２の情報処理システムによる編集処理の流れを示すフローチャートであり、この図５に沿って処理の詳細を述べる。
　ユーザＡが、ユーザ入力部２０を用いてサーバ装置３Ａへのログインを指示する。通信部２３は、ユーザ入力部２０を用いてログインが指示されると、ユーザＡのユーザＩＤを含むログイン要求を、通信ネットワーク４を介してサーバ装置３Ａへ送信する。
　サーバ装置３Ａのユーザ認証部３１は、通信部３０によってユーザ端末装置２Ａからのログイン要求を受信すると、このログイン要求に含まれるユーザＩＤを基に、要求元のユーザＡを認証する（ステップＳＴ１ａ）。
　ユーザＡは、ユーザ認証部３１に認証されると、ユーザ入力部２０を用いて編集処理部２５を起動する。編集処理部２５は、ユーザ入力部２０及び出力部２４を用いて、情報編集用のＨＭＩを提供する。例えば、ユーザ入力部２０が出力部２４の表示画面を利用したタッチパネルである場合に、この表示画面上に情報編集用画面を表示する。
　ユーザＡは、情報編集用画面へのタッチ操作で、サーバ装置３Ａに保存されている興味情報から、編集対象の興味情報を検索するよう指示する。
　例えば、興味情報を構成する情報である、興味対象、この興味対象が入力された時刻、この興味対象を入力したユーザ名、この興味対象が入力された地点の位置等が検索キーとされる。この検索キーを含む検索要求は、通信部２３によってサーバ装置３Ａへ送信される。
　サーバ装置３Ａのユーザ情報検索部３２は、通信部３０により受信された上記検索要求に含まれる検索キーに基づいて、サーバ側興味情報記憶部３３を検索する（ステップＳＴ２ａ）。なお、興味情報は、＜緯度，経度，頻度，付加情報１，付加情報２，・・・：興味対象＞のように情報（属性）の列からなるので、ＲＤＢ（リレーショナルデータベース）形式のデータとして扱える。そこで、ＳＱＬ（Structured Query Language）文などで検索を行うようにユーザ情報検索部３２を構成してもかまわない。ユーザ情報検索部３２による検索結果の情報は、通信部３０によってユーザ端末装置２Ａへ送信される。
　ユーザ端末装置２Ａの通信部２３は、サーバ装置３Ａから受信した検索結果の興味情報を、上記情報編集用画面に表示する。
　次いで、編集処理部２５が、ユーザ入力部２０にて入力された編集用の情報を用いて、上記検索結果の興味情報をデータ編集する（ステップＳＴ３ａ）。
　例えば、入力された編集用の情報を興味情報に追加する編集を行う場合には、上記検索結果の興味情報が、＜ユーザ名，情報１，情報２，・・・，情報Ｎ：興味対象＞のように構成されているので、この列に続く形で情報を追加する。すなわち、編集後の興味情報のデータは、＜ユーザ名，情報１，情報２，・・・，情報Ｎ，情報Ｎ＋１：興味対象＞のような構成になる。
　また、興味情報のデータ構成に興味情報毎に付与したｉｄを設定することで、このｉｄを参照（ｒｅｆ）としてデータ編集することが可能である。例えば、ｉｄを付与した興味情報は、＜ｉｄ，ユーザ名，情報１，情報２，・・・，情報Ｎ：興味対象＞のように構成され、これに追加するデータを＜ｉｄ，ユーザ名，ｒｅｆ，情報Ｎ＋１，・・・：興味対象＞のように構成すれば、ｉｄを参照して情報Ｎ＋１以降の情報が追加される。
　このようにして編集された興味情報は、通信部２３によってサーバ装置３Ａへ送信される。
　サーバ装置３Ａのユーザ情報検索部３２は、通信部３０により受信された編集後の興味情報を、ユーザＩＤ（ユーザＢ）に対応付けてサーバ側興味情報記憶部３３に保存する。
　次いで、ユーザ通知部３４が、ユーザ端末装置２Ａからのログイン要求の際に得られたユーザＩＤと上記編集後の興味情報に対応付けられたユーザＩＤとを比較して、編集通知が必要であるか否かを判定する（ステップＳＴ４ａ）。ここで、双方のユーザＩＤが同一であり、ユーザＡが自身の興味情報を編集したと判断される場合には、編集通知が不要と判定され（ステップＳＴ４ａ；ＮＯ）、処理を終了する。
　一方、双方のユーザＩＤが異なり、当該興味情報を最初に保存したユーザ以外のユーザによって編集されたと判断される場合、編集通知が必要であると判定され（ステップＳＴ４ａ；ＹＥＳ）、ユーザ通知部３４は、編集後の興味情報に対応付けられたユーザＩＤを基に、このユーザＩＤに対応するユーザ端末装置を特定する。ここでは、ユーザＡが、ユーザＢの興味情報を編集したので、編集後の興味情報に対応付けられたユーザＩＤから、ユーザ端末装置２Ｂが特定される。
　この後、ユーザ通知部３４は、通信部３０を介して、ユーザ端末装置２Ｂへ編集通知を行う（ステップＳＴ５ａ）。なお、この編集通知は、例えば、電子メール、インスタントメッセンジャー、ＳＮＳ（Social Network Service）等によって実現可能である。
　また、編集通知の内容は、興味情報が編集されたことのみでもよいが、編集したユーザ名、編集内容のダイジェスト等を通知してもかまわない。
　さらに、編集前後の興味情報で新たな情報が追加されている場合に、ユーザ通知部３４が編集通知を行うようにしてもよい。
　ここで、ユーザＢが移動中に通り掛かった地点に新しいお店があり、興味対象入力用のＨＭＩを介した入力操作によって、この地点の位置及び情報ジャンル（新しいお店）が、ユーザ端末装置２Ｂに入力され、興味情報としてサーバ装置３Ａに保存された場合を仮定して、システム利用の具体例を説明する。
　上記興味情報は、ユーザＢによって、ユーザ端末装置２Ｂの編集処理部２５を用いて、上記と同様にして編集することができる。例えば、ユーザＢが、後日に、付加情報として“このお店の評判は？”というコメント情報を追加する編集を行ったものとする。
　サーバ装置３Ａに保存される興味情報は、登録ユーザであれば閲覧が可能であるので、“このお店の評判は？”というコメントは、登録ユーザの間で見ることができる。
　ここで、登録ユーザであるユーザＡが上記お店に実際に行っており、上記コメントに応じてお店の感想を述べる場合、ユーザ端末装置２Ａの編集処理部２５を用いて、ユーザＢの上記興味情報に対してコメント情報等を追加する編集を行う。
　例えば、“あまり美味しくありませんでした”というコメントが追加されると、サーバ装置３Ａのユーザ通知部３４が、ユーザＢに対して編集通知を行う。
　ユーザＢは、編集通知に応じて、ユーザ端末装置２Ｂで自身の興味情報を閲覧すると、新しいお店に関する評判として、“あまり美味しくありませんでした”というユーザＡのコメントを見ることができる。
　以上のように、この実施の形態２によれば、サーバ装置３Ａに保存された興味情報を編集する編集処理部２５を備えたので、ユーザが移動中に通り掛かった地点での興味対象とその地点の位置情報のみを興味情報としてサーバ装置３Ａに保存した場合であっても、後日に興味情報を編集することができ、有用な興味情報を複数のユーザ間で共有することが可能である。
　なお、上記実施の形態２では、編集処理部をユーザ端末装置に設けた場合を示したが、サーバ装置側に設けてもよい。この場合、サーバ装置の編集処理部が、通信ネットワーク４を介して通信部３０でユーザ端末装置からの編集要求及び編集用情報を受信して、これに応じた編集処理を実行する。また、ユーザ通知部３４が、編集処理部で編集された興味情報のユーザの同一性を判定し、この判定結果に応じて編集通知を行う。
実施の形態３．
　図６は、この発明の実施の形態３によるユーザ端末装置の構成を示すブロック図であり、図１と同一構成部には同一符号を付して説明を省略する。図６において、実施の形態３のユーザ端末装置２Ｃは、ユーザ入力部２０、ユーザ情報検出部２１Ａ、位置検出部２１ａ、計時部２１ｂ、通信部２３、出力部２４、ユーザ状態センサ２６、興味情報推定部２７及びユーザ情報・興味関係データ記憶部２８を備える。
　ユーザ情報検出部２１Ａは、ユーザ入力部２０を用いてユーザ端末装置２Ｃに入力された情報の中から、ユーザ入力部２０を用いたユーザＡの明示的な操作によって入力された興味対象を検出して、この興味対象及びこれが入力された地点の位置情報を含む興味情報と、上記興味対象が入力された時点におけるユーザＡの状態を示す情報とを組み合わせたユーザ状態・興味関係データを生成する構成部である。なお、興味対象の検出方法は、上記実施の形態１と同様に、興味対象入力用のＨＭＩで入力された情報を興味対象として検出する。例えば、興味対象入力用のＨＭＩで興味対象に特定の拡張子を設定する等して、他の情報から識別する。
　ユーザ状態センサ２６は、ユーザＡの状態を示す情報を検出するセンサであり、心拍数等のようにユーザＡの身体的な状態を示す生体情報や、視線の移動量及び車速の変化等のようにユーザＡの精神的な状態が反映される車両の運転状況を示す情報を、ユーザ状態を示す情報として検出する。
　例えば、脈拍を検出するセンサを用いて、興味対象が入力された時刻から一定時間（通常１分間）の心拍数を検出する。また、ユーザＡを撮影するカメラを用い、ユーザＡが撮影された画像から視線の位置を画像認識することで、興味対象が入力された時刻から一定時間内での視線の移動量を検出する。さらに、車両制御装置から取得した車両情報に基づいて、興味対象が入力された時刻から一定時間での車速の変化を検出する。
　なお、ユーザ状態を示す情報は、上記心拍数や視線移動量、車速変化に限らず、ユーザが興味対象を入力する際のユーザ状態を特定できる情報であればよい。
　興味情報推定部２７は、ユーザ情報・興味関係データ記憶部２８に保存されている過去のユーザ状態・興味関係データを用いて、ユーザＡが興味対象を入力する際のユーザ状態の傾向を求め、この傾向を示すユーザ状態データ範囲に基づいて、ユーザＡの興味対象を推定する構成部である。例えば、ユーザ状態センサ２６から逐次入力されてくるユーザＡのユーザ状態を示す情報が、予め求めたユーザＡについて興味対象を入力する際のユーザ状態の傾向を示す範囲内にあると、当該興味対象がその時点におけるユーザＡの興味対象と推定する。
　ユーザ情報・興味関係データ記憶部２８は、ユーザ情報・興味関係データを保存するための記憶部であり、ユーザ情報検出部２１Ａによって生成されたユーザ情報・興味関係データや、興味情報推定部２７で生成されたユーザ情報・興味関係データが記憶される。
　なお、実施の形態３のサーバ装置３では、興味情報を、ユーザ情報・興味関係データとしてサーバ側興味情報記憶部３３に記憶する。従って、上記実施の形態１の説明における“興味情報”を“ユーザ情報・興味関係データ”に置き換えることで、実施の形態３でのサーバ装置３の動作を説明できる。
　次に動作について説明する。
　図７は、実施の形態３のユーザ端末装置による処理の流れを示すフローチャートであり、この図７に沿って処理の詳細を述べる。なお、実施の形態３のユーザ端末装置２Ｃによる処理は、ユーザが行う明示的な操作で入力された興味対象を含む興味情報とその入力時のユーザ状態との組み合わせからなるユーザ情報・興味関係データを生成し保存する処理と、過去のユーザ情報・興味関係データから求めた傾向から、ユーザＡの興味対象を推定する処理に分けられる。
（１）ユーザ情報・興味関係データの生成・保存
　ユーザＡが移動中に通り掛かった地点で興味を持った対象（興味対象）を、ユーザ入力部２０を用いて入力する（ステップＳＴ１ｂ）。なお、興味対象の入力方法は、上記実施の形態１と同様である。
　次に、ユーザ情報検出部２１Ａは、ユーザ入力部２０を用いてユーザ端末装置２Ｃ内に入力された情報の中から、興味対象入力用ＨＭＩで入力された情報を興味対象として検出し、少なくともこの興味対象が入力された地点の位置情報を付加して興味情報を生成する（ステップＳＴ２ｂ）。例えば、＜緯度，経度，・・・：興味対象＞という情報（属性）の列から興味情報を構成する。
　続いて、ユーザ情報検出部２１Ａは、ユーザ状態センサ２６から、ステップＳＴ１ｂで興味対象が入力された時刻に検出されたユーザ状態を取得し（ステップＳＴ３ｂ）、これとステップＳＴ２ｂで生成した興味情報とを組み合わせてユーザ情報・興味関係データを生成し、ユーザ情報・興味関係データ記憶部２８に保存する（ステップＳＴ４ｂ）。
　ユーザ状態・興味関係データは、興味情報と、ユーザ状態を示す情報の列と、上記興味情報への参照情報から構成される。例えば、＜ｉｄ番号，緯度，経度，・・・：気になるお店＞という興味情報と、この興味情報への参照及びユーザ状態を示す情報の列からなる＜ｒｅｆ（ｉｄ番号），視線移動量（２０ｃｍ／秒），車速変化（－１０ｋｍ／秒）＞という情報とから、ユーザ状態・興味関係データが構成される。
（２）興味対象の推定
　次に、興味情報推定部２７は、ユーザ情報・興味関係データ記憶部２８に保存されている過去のユーザ状態・興味関係データを用いて、ユーザＡが興味対象を入力する際のユーザ状態の傾向を学習する（ステップＳＴ５ｂ）。なお、ユーザ状態の傾向を学習するアルゴリズムとしては、強化学習や機能論理プログラミングの手法等を利用する。
　例えば、情報ジャンル“気になるお店”が興味対象であるユーザ状態・興味関係データから、情報ジャンル“気になるお店”を入力する際のユーザ状態の傾向が学習され、その傾向を示すユーザ状態データ範囲が求められる。つまり、視線移動量が１５ｃｍ／秒以上で、かつ車速変化が±７ｋｍ／秒というようなユーザ状態データ範囲が決定される。
　次いで、興味情報推定部２７は、ユーザ状態センサ２６から逐次入力されてくるユーザＡのユーザ状態を示す情報が、ステップＳＴ５ｂで求めたユーザ状態の傾向を示す範囲内にあると、その傾向が示す興味対象が、現時点でのユーザＡの興味対象と推定する（ステップＳＴ６ｂ）。例えば、現在のユーザ状態が、視線移動量が２０ｃｍ／秒で車速変化が±７ｋｍ／秒であると、ステップＳＴ５ｂで求めたユーザ状態の傾向を示す範囲内であることから、現時点でのユーザＡの興味対象が“気になるお店”であると推定される。
　この後、興味情報推定部２７は、ユーザ情報検出部２１Ａと同様にして、ステップＳＴ６ｂで推定した興味対象及びこのときの地点の位置情報を少なくとも含む興味情報を生成し、さらにこの興味情報とこのときのユーザＡの状態を示す情報とを組み合わせたユーザ状態・興味関係データを生成して、ユーザ情報・興味関係データ記憶部２８に保存するようにしてもよい。この場合、出力部２４が、興味情報推定部２７に推定された興味情報を含むユーザ情報・興味関係データをユーザＡに提示して、ユーザＡに保存すべきか否かを承認させるＨＭＩを提供して、ユーザＡに承認されたユーザ情報・興味関係データのみを保存する。承認されなかったユーザ情報・興味関係データについては保存せず、その推定に用いたユーザ状態の傾向を示す範囲を廃棄して新たに学習し直すか、より厳格に推定されるようにその範囲が狭くなるように補正する。このようにすることで、興味対象の推定精度を向上させることができる。
　また、ステップＳＴ６ｂにおいて、興味情報推定部２７が、推定した興味対象及びこのときの地点の位置情報を検索キーとして、通信部２３を介してサーバ装置３に検索要求を行うようにしてもよい。出力部２４は、サーバ装置３から送信されてきた検索結果のユーザ情報・興味関係データをユーザＡに提示する。このとき、ユーザＡからは、車両等での移動中に通り掛かった地点において、そのときの自身の状態に応じて推定された興味対象を含む興味情報が自動的に提示されることになる。
　以上のように、この実施の形態３によれば、ユーザの状態を検出するユーザ状態センサ２６と、ユーザ情報検出部２１Ａにより生成された興味情報と、この情報に含まれる興味の対象が入力された時点で、ユーザ状態センサ２６に検出されたユーザの状態とを組み合わせたデータを記憶するユーザ情報・興味関係データ記憶部２８と、ユーザ情報・興味関係データ記憶部２８に記憶されたデータから興味の対象が入力される際のユーザ状態の傾向を学習し、学習したユーザ状態の傾向に基づいて、ユーザ状態センサ２６で検出されたユーザの状態から、興味の対象を推定する興味情報推定部２７とを備える。このように構成することで、ユーザ状態センサ２６で検出されたユーザ状態を示す情報から、ユーザＡの興味対象を自動的に推定することができる。
　また、本発明による情報処理装置は、車載用のナビゲーション装置のみならず、携帯電話端末又は携帯情報端末（ＰＤＡ；Personal Digital Assistance）の表示装置に適用してもよい。また車両、鉄道、船舶又は航空機等の移動体に、人が携帯して持ち込んで使用するＰＮＤ（Portable Navigation Device）等の表示装置に適用してもかまわない。
　なお、本願発明はその発明の範囲内において、各実施の形態の自由な組み合わせ、あるいは各実施の形態の任意の構成要素の変形、もしくは各実施の形態において任意の構成要素の省略が可能である。
　この発明に係る情報処理装置は、ユーザが移動中に通り掛かった地点で興味を持った対象を的確に保存しこの地点の情報を適宜利用することができるので、走行経路沿いの情報を取得するナビゲーション装置に好適である。
　１，１Ａ　情報処理システム、２，２Ａ，２Ｂ，２Ｃ　ユーザ端末装置、３，３Ａ　サーバ装置、４　通信ネットワーク、２０　ユーザ入力部、２１　ユーザ情報検出部、２２　装置側興味情報記憶部、２３，３０　通信部、２４　出力部、２５　編集処理部、２６　ユーザ状態センサ、２７　興味情報推定部、２８　ユーザ情報・興味関係データ記憶部、３１　ユーザ認証部、３２　ユーザ情報検索部、３３　サーバ側興味情報記憶部、３４　ユーザ通知部。

Claims (7)

  1. 　移動体に搭載又は携帯される情報処理装置であって、
    　前記移動体が移動した地点での興味の対象の入力を受け付けるユーザ入力部と、
    　前記移動体の位置情報を検出する位置検出部と、
    　前記ユーザ入力部で入力された前記興味の対象と前記位置検出部で検出された当該興味の対象が入力された地点の位置情報とを含む興味情報を生成する興味情報生成部と、
    　外部装置と通信可能に接続して、前記興味情報生成部で生成された興味情報を前記外部装置に保存し、前記外部装置に保存された興味情報のうち、要求に応じて検索された興味情報を取得する通信部と、
    　前記興味情報生成部で生成された興味情報又は前記通信部で取得された興味情報を出力して、ユーザに提示する出力部とを備えた情報処理装置。
  2. 　前記ユーザ入力部は、対象の情報ジャンル、対象が撮影された画像、及び対象の内容を示す音声情報のうちの少なくとも１つを、前記興味の対象として入力を受け付けることを特徴とする請求項１記載の情報処理装置。
  3. 　前記通信部は、前記外部装置に対して位置情報をキーとした興味情報の検索要求を行うことを特徴とする請求項１記載の情報処理装置。
  4. 　前記外部装置に保存された興味情報を編集する編集処理部を備えたことを特徴とする請求項１記載の情報処理装置。
  5. 　ユーザの状態を検出するユーザ状態検出部と、
    　前記興味情報生成部により生成された興味情報と、この情報に含まれる前記興味の対象が入力された時点で、前記ユーザ状態検出部に検出されたユーザの状態とを組み合わせたデータを記憶する記憶部と、
    　前記記憶部に記憶された前記データから前記興味の対象が入力される際のユーザ状態の傾向を学習し、前記学習したユーザ状態の傾向に基づいて、前記ユーザ状態検出部で検出されたユーザの状態から、興味の対象を推定する推定部とを備えたことを特徴とする請求項１記載の情報処理装置。
  6. 　情報検索サーバとこれに通信可能に接続された情報処理装置を備えた情報処理システムであって、
    　前記情報処理装置は、
    　移動体に搭載又は携帯され、前記移動体が移動した地点での興味の対象の入力を受け付けるユーザ入力部と、
    　前記移動体の位置情報を検出する位置検出部と、
    　前記ユーザ入力部で入力された前記興味の対象と前記位置検出部で検出された当該興味の対象が入力された地点の位置情報とを含む興味情報を生成する興味情報生成部と、
    　前記興味情報生成部で生成された興味情報を前記前記情報検索サーバに保存し、前記前記情報検索サーバに保存された興味情報のうち、要求に応じて検索された興味情報を取得する通信部と、
    　前記興味情報生成部で生成された興味情報又は前記通信部で取得された興味情報を出力して、ユーザに提示する出力部とを備えた情報処理システム。
  7. 　前記情報検索サーバに興味情報を保存した前記情報処理装置を管理するユーザと、当該興味情報を編集したユーザとが異なる場合に、当該興味情報を前記情報検索サーバに保存したユーザに対して編集があったことを通知するユーザ通知部を備えたことを特徴とする請求項６記載の情報処理システム。
PCT/JP2011/000225 2011-01-18 2011-01-18 情報処理システム及び情報処理装置 WO2012098574A1 (ja)

Priority Applications (5)

Application Number Priority Date Filing Date Title
CN2011800647020A CN103299611A (zh) 2011-01-18 2011-01-18 信息处理系统以及信息处理装置
JP2012553453A JPWO2012098574A1 (ja) 2011-01-18 2011-01-18 情報処理システム及び情報処理装置
PCT/JP2011/000225 WO2012098574A1 (ja) 2011-01-18 2011-01-18 情報処理システム及び情報処理装置
US13/884,000 US20130226990A1 (en) 2011-01-18 2011-01-18 Information processing system and information processing device
DE112011104733T DE112011104733T5 (de) 2011-01-18 2011-01-18 Informationsverarbeitungssystem und Informationsverarbeitungsvorrichtung

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2011/000225 WO2012098574A1 (ja) 2011-01-18 2011-01-18 情報処理システム及び情報処理装置

Publications (1)

Publication Number Publication Date
WO2012098574A1 true WO2012098574A1 (ja) 2012-07-26

Family

ID=46515230

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2011/000225 WO2012098574A1 (ja) 2011-01-18 2011-01-18 情報処理システム及び情報処理装置

Country Status (5)

Country Link
US (1) US20130226990A1 (ja)
JP (1) JPWO2012098574A1 (ja)
CN (1) CN103299611A (ja)
DE (1) DE112011104733T5 (ja)
WO (1) WO2012098574A1 (ja)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2014219937A (ja) * 2013-05-10 2014-11-20 パナソニック株式会社 嗜好判断システム
JP2015064704A (ja) * 2013-09-24 2015-04-09 株式会社トヨタマップマスター 属性データ評価装置及びその方法、並びに属性データを評価するためのコンピュータプログラム及びコンピュータプログラムを記録した記録媒体

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102014004675A1 (de) * 2014-03-31 2015-10-01 Audi Ag Gestenbewertungssystem, Verfahren zur Gestenbewertung und Fahrzeug
CN105447066A (zh) * 2014-09-30 2016-03-30 联想(北京)有限公司 一种数据处理方法、电子设备及服务器
CN105608236A (zh) * 2014-11-12 2016-05-25 索尼公司 数据记录方法、数据记录装置以及电子设备
US9983407B2 (en) * 2015-09-11 2018-05-29 Honda Motor Co., Ltd. Managing points of interest
CN109804400B (zh) * 2016-09-30 2022-10-18 本田技研工业株式会社 信息提供装置和移动体
JP6798849B2 (ja) * 2016-10-11 2020-12-09 シャープ株式会社 サーバ装置、通信システム、制御方法、およびプログラム

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004284259A (ja) * 2003-03-24 2004-10-14 Fuji Xerox Co Ltd 画像形成装置及びその方法
JP2005204057A (ja) * 2004-01-15 2005-07-28 Nippon Telegr & Teleph Corp <Ntt> 情報端末、情報サーバ及び情報提供システム
JP2010146188A (ja) * 2008-12-17 2010-07-01 Yahoo Japan Corp 音声広告配信装置、音声広告配信システムおよび音声広告配信方法
JP2010262383A (ja) * 2009-04-30 2010-11-18 Ntt Docomo Inc レコメンド情報生成装置およびレコメンド情報生成方法

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007280486A (ja) * 2006-04-05 2007-10-25 Sony Corp 記録装置、再生装置、記録再生装置、記録方法、再生方法および記録再生方法並びに記録媒体
GB0610116D0 (en) * 2006-05-20 2006-06-28 Ibm A method, apparatus and computer program for collaborative editing of a document
JP2008160612A (ja) 2006-12-26 2008-07-10 Funai Electric Co Ltd 記録システム
US8761815B2 (en) * 2007-03-21 2014-06-24 Motorola Mobility Llc Method, device and system for accessing mobile device user information
US8005611B2 (en) * 2007-07-31 2011-08-23 Rosenblum Alan J Systems and methods for providing tourist information based on a location
JP2009049951A (ja) * 2007-08-23 2009-03-05 Sony Corp 撮像装置、撮像方法
JP5250827B2 (ja) * 2008-09-19 2013-07-31 株式会社日立製作所 行動履歴の生成方法及び行動履歴の生成システム
CN101504290A (zh) * 2009-03-11 2009-08-12 凯立德欣技术（深圳）有限公司 一种导航系统及其使用的兴趣点周边检索方法

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004284259A (ja) * 2003-03-24 2004-10-14 Fuji Xerox Co Ltd 画像形成装置及びその方法
JP2005204057A (ja) * 2004-01-15 2005-07-28 Nippon Telegr & Teleph Corp <Ntt> 情報端末、情報サーバ及び情報提供システム
JP2010146188A (ja) * 2008-12-17 2010-07-01 Yahoo Japan Corp 音声広告配信装置、音声広告配信システムおよび音声広告配信方法
JP2010262383A (ja) * 2009-04-30 2010-11-18 Ntt Docomo Inc レコメンド情報生成装置およびレコメンド情報生成方法

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2014219937A (ja) * 2013-05-10 2014-11-20 パナソニック株式会社 嗜好判断システム
JP2015064704A (ja) * 2013-09-24 2015-04-09 株式会社トヨタマップマスター 属性データ評価装置及びその方法、並びに属性データを評価するためのコンピュータプログラム及びコンピュータプログラムを記録した記録媒体

Also Published As

Publication number Publication date
JPWO2012098574A1 (ja) 2014-06-09
CN103299611A (zh) 2013-09-11
DE112011104733T5 (de) 2013-10-24
US20130226990A1 (en) 2013-08-29

Similar Documents

Publication Publication Date Title
WO2012098574A1 (ja) 情報処理システム及び情報処理装置
KR102043588B1 (ko) 자율 주행 차량 내에서 미디어 콘텐츠를 표시하기 위한 시스템 및 방법
US10753760B2 (en) Navigation systems and associated methods
CN109643158B (zh) 使用多模态信号分析进行命令处理
US9667742B2 (en) System and method of conversational assistance in an interactive information system
US20140201004A1 (en) Managing Interactive In-Vehicle Advertisements
US11200892B1 (en) Speech-enabled augmented reality user interface
JP2013069266A (ja) コンテンツ推薦システム
KR20220031896A (ko) 레이저 투사 시스템을 갖는 웨어러블 멀티미디어 디바이스 및 클라우드 컴퓨팅 플랫폼
WO2017186007A1 (zh) 媒体处理方法、装置、设备和系统
US20190108559A1 (en) Evaluation-information generation system and vehicle-mounted device
JP7139904B2 (ja) 情報処理装置及び情報処理プログラム
JP5839978B2 (ja) ナビゲーション装置
JP2019021336A (ja) サーバ装置、端末装置、情報提示システム、情報提示方法、情報提示プログラムおよび記録媒体
US20170228105A1 (en) Generation of Media Content for Transmission to a Device
US20190005055A1 (en) Offline geographic searches
JP6387287B2 (ja) 不明事項解消処理システム
CN111578960B (zh) 导航方法、装置和电子设备
US20200380630A1 (en) Information processing apparatus, information processing method, and program
JP7052617B2 (ja) 情報処理装置、情報処理システム、及び、情報処理方法
US10533867B2 (en) Processing system having a machine learning engine for providing a common trip format (CTF) output
JP6480279B2 (ja) 情報取得方法、情報取得システム及び情報取得プログラム
WO2023218554A1 (ja) ナビゲーション装置および立ち寄り地提案方法
JP7421949B2 (ja) 情報処理システムおよび情報処理方法
JP2023057804A (ja) 情報処理装置、情報処理方法および情報処理プログラム

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 11856130

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2012553453

Country of ref document: JP

Kind code of ref document: A

WWE Wipo information: entry into national phase

Ref document number: 13884000

Country of ref document: US

WWE Wipo information: entry into national phase

Ref document number: 1120111047339

Country of ref document: DE

Ref document number: 112011104733

Country of ref document: DE

122 Ep: pct application non-entry in european phase

Ref document number: 11856130

Country of ref document: EP

Kind code of ref document: A1