WO2013133067A1 - 出力装置、出力システム、およびプログラム - Google Patents

出力装置、出力システム、およびプログラム Download PDF

Info

Publication number
WO2013133067A1
WO2013133067A1 PCT/JP2013/054742 JP2013054742W WO2013133067A1 WO 2013133067 A1 WO2013133067 A1 WO 2013133067A1 JP 2013054742 W JP2013054742 W JP 2013054742W WO 2013133067 A1 WO2013133067 A1 WO 2013133067A1
Authority
WO
WIPO (PCT)
Prior art keywords
data
state
current state
information
determination result
Prior art date
Application number
PCT/JP2013/054742
Other languages
English (en)
French (fr)
Inventor
砂金亮
小森吾郎
Original Assignee
オムロン株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by オムロン株式会社 filed Critical オムロン株式会社
Priority to JP2014503770A priority Critical patent/JP5590266B2/ja
Priority to EP13758530.3A priority patent/EP2824591A4/en
Priority to US14/383,849 priority patent/US20150016715A1/en
Publication of WO2013133067A1 publication Critical patent/WO2013133067A1/ja

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00—Administration; Management
    • G06Q10/10—Office automation; Time management
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00—Pattern recognition
    • G06F18/20—Analysing
    • G06F18/24—Classification techniques
    • G06F18/241—Classification techniques relating to the classification model, e.g. parametric or non-parametric approaches
    • G06F18/2413—Classification techniques relating to the classification model, e.g. parametric or non-parametric approaches based on distances to training or reference patterns
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00—Administration; Management
    • G06Q10/02—Reservations, e.g. for tickets, services or events
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/40—Business processes related to the transportation industry

Definitions

  • the present invention relates to an output device that outputs various kinds of information, an output system using the output device, and a program.
  • Patent Document 1 searches for information associated with an image captured by a camera, and displays the retrieved information superimposed on the captured image.
  • the conventional system does not display the information desired by the user, only the related information of the photographed object.
  • An object of the present invention is to provide an output device, an output system, and a program that output information desired by a user.
  • the output device of the present invention includes a first input means for inputting target state data, a second input means for inputting current state data, and other states including the target state, Sensing means for sensing the state of the transition means for shifting from the current state and generating sensing data, and transmission means for transmitting the sensing data, the target state data, and the current state data to a predetermined external device And conformity determination result data for determining the adaptability of the transition means for transitioning from the current state to the target state based on the sensing data, the target state data, and the current state data, Receiving means for receiving from the external device; and output means for outputting suitability determination result data received by the receiving means.
  • the “current state” here is the current state of the target for which the target state is set. This current state can be expressed as a point corresponding to the current time on the “state space”, which is a space composed of one or more variables representing the state of the object.
  • the “target state” indicates the position of the target in the state space.
  • the “other state” is an arbitrary state that can be shifted by the shifting means. A “target state” can be set as the “other state”, or an intermediate state that is a state in the middle from the current state to the target state can be set.
  • Transition means is means for moving from each point on the state space to another point.
  • Adaptability indicates whether or not the transition means is adapted to the route from the current state position to the target state position in the state space.
  • the conformity can be described by a binary value of conformity or nonconformity, or can be described by a multi-stage value of conformity.
  • the target state is the destination that the user of the railway is going to go.
  • the current state is the current location where the railway user is present at that time.
  • the state space can be described as a four-dimensional space composed of a total of four dimensions, one dimension of latitude, longitude, altitude, and time.
  • a “train operation chart” can be used as a state space.
  • the vertical axis shows station names and the horizontal axis shows time.
  • the transfer means is a train that is operated according to a specific operation schedule.
  • the suitability is the suitability of a train that is operated on the specific operation schedule with respect to the route from the current location to the destination.
  • the state space is a space composed of the axis of the amount of cash held in the currency of the current country and the axis of the amount of cash held in the currency of the home country. is there.
  • the current state is a state in which cash is held only in the currency of the current country, and a set of X, which is the amount of cash held in the currency of the current country, and 0, which is the amount of cash held in the home currency. It can be described as a point (X, 0).
  • the target state is a state in which the cash holding amount Y is held only in the currency of the home country, and can be described as (0, Y) when expressed in the state space.
  • the transition means is a foreign currency exchange service. In this case, as the degree of conformity, a scale that is better as Y / X is larger can be used.
  • the state space is a space composed of two axes: a plant size axis and a color axis.
  • the target state is a set of ideal values for the size and color of the plant to be grown.
  • the current state is a set of the current value of the size and color of the plant to be grown.
  • the transition means in this case is expressed by a combination of the amount of water given to the plant at a specific timing, the type of fertilizer, and the amount of fertilizer. Further, the adaptability of the transition means can be a value of a probability that the target state can be reached by executing the transition means in the current state.
  • the state space is a space composed of the amount of each allergic substance and the amount of each nutrient contained in the meal.
  • the current state is a state in which each substance is 0 because no meal is being eaten.
  • the target state is a state where each nutrient substance has a sufficient amount and each allergic substance is zero.
  • the degree of compatibility may be a degree indicating whether each menu item can be eaten or consumed from the viewpoint of obtaining necessary nutritional substances while avoiding acquisition of allergic substances.
  • the user takes a picture of the guide plate with a camera which is a sensing means mounted on the mobile phone (the output device of the present invention) owned by the user.
  • This captured image data corresponds to sensing data.
  • the external device analyzes the image data received from the mobile phone using a method such as a character recognition function, extracts train information displayed on the information board, and uses this train information as a feature amount. Then, the external device retrieves the route from the current station to the target station from the database. The external device collates the route obtained by the search with the extracted train information (feature amount) to determine suitability. For example, a train that matches the route is determined from a plurality of trains displayed on the photographed guide board. This determination result is transmitted to the user's mobile phone.
  • a method such as a character recognition function
  • the mobile phone outputs the received judgment result. For example, text data such as “3rd home, 9:14 minutes, semi-express, get off at fifth station” is displayed, and information on the train to be taken is displayed.
  • the determination result can be displayed on the screen in association with the transition means.
  • the information of the train to be boarded is displayed in a superimposed manner (for example, a mark indicating that the boarding is possible is displayed), so that the user is the train to be boarded It can be judged intuitively.
  • the feature amount extraction may be performed on the server side or the mobile phone side. Further, a mode in which all processing on the server side is processed on the mobile phone side without performing transmission / reception with the external device is also possible. In this case, various databases are prepared in the mobile phone.
  • information desired by the user can be output.
  • FIG. 7A shows a station information database
  • FIG. 7B shows a train information database
  • FIG. 8A is a diagram illustrating a train information database
  • FIG. 8B is a diagram illustrating a transfer information database.
  • 3 is a flowchart showing the operation of the server 2.
  • FIG. 3 is a flowchart showing the operation of the server 2. It is a figure which shows the display system which concerns on the other example 1. FIG. It is a figure which shows the display system which concerns on the other example 2. FIG. It is a figure which shows the display system which concerns on the other example 3. FIG.
  • FIG. 1 is a block diagram showing a configuration of a display system provided with a display device which is an example of an output device of the present invention.
  • the display system includes a display device 1 that is connected via the Internet 7, a server 2, and a plurality of sensors (sensor 51 and sensor 52 in the example of the figure).
  • the display device 1 is an information processing device such as a mobile phone or a PDA owned by the user.
  • the display device 1 includes a control unit 11, a communication unit 12, a display unit 13, a storage unit 14, an input unit 15, a camera 16, and a GPS 17.
  • the control unit 11 transmits various data to the server 2 via the communication unit 12 and the Internet 7, receives data from the server 2, and displays the received data on the display unit 13.
  • the server 2 includes a control unit 21, a communication unit 22, and a database (DB) 23.
  • the control unit 21 receives sensing data that is a result of sensing the object from the display device 1, the sensor 51, the sensor 52, and the like via the communication unit 22 and the Internet 7.
  • the sensor include a camera, a GPS, a temperature sensor, a humidity sensor, an illuminance sensor, and an atmospheric pressure sensor.
  • the object is, for example, a guide board (indicating information such as the departure time, destination, train type, and landing of each train) installed at a railway passenger station.
  • the display device 1 is equipped with a touch panel that serves as both the display unit 13 and the input unit 15.
  • the user photographs the guide plate using the sensor (camera) 16.
  • the image data captured here corresponds to sensing data.
  • train information 101 (101A, 101B, 101C) such as departure time, destination, train type, and landing of each train is displayed.
  • three pieces of train information 101A, 101B, and 101C are displayed.
  • the control unit 11 reads a program stored in the storage unit 14 and extracts a feature amount by pattern recognition.
  • the feature amount is obtained by extracting specific information from the captured image.
  • the “quasi-urgent Semi-Exp.” Portion and the “Kawaramachi Kawaramachi” portion are extracted by the character recognition function, and the character information 102 is extracted as a feature amount.
  • control part 11 transmits the extracted feature-value to the server 2.
  • FIG. The captured image data may be transmitted to the server 2 and the control unit 21 of the server 2 may extract the feature amount.
  • control unit 11 transmits the current location information and the destination information to the server 2.
  • the current location information is the station name information of the station closest to the current location detected by the GPS 17 and corresponds to the current state data in the present invention.
  • the destination information is the station name information of the station closest to the destination input by the user, and corresponds to the target state data in the present invention.
  • the current location information for example, station name information of the station closest to the current location detected by the GPS 17 is automatically selected.
  • a list of stations close to the current location may be displayed on the display unit 13 or may be displayed on a map so that the user can select.
  • a list of railway companies, routes, and stations in a station information database (downloaded from the storage unit 14 or the server 2) as shown in FIG. 7A may be displayed and allowed to be selected by the user. .
  • the user may take a picture of a station signboard using the camera 16, and the control unit 11 may read the station name from the image data using the character recognition function, display the same station name candidate on the display unit 13, and allow the user to select.
  • the user's voice may be acquired by a microphone (not shown) provided in the display device 1 and an input of a station name may be received by voice recognition.
  • the station name information of the station closest to the current position detected by the GPS 17 may be automatically selected, or the station 13 near the current location (within a predetermined distance) on the display unit 13 may be selected.
  • a list may be displayed or displayed on a map so that the user can select it.
  • a list of railway companies, routes, and stations in the station information database (downloaded from the storage unit 14 or the DB 23 of the server 2) as shown in FIG. Also good.
  • the user's voice may be acquired by a microphone (not shown) provided in the display device 1 and an input of a station name may be received by voice recognition.
  • the server 2 receives the character information 102, the current station name information, and the destination station name information transmitted from the display device 1 (s11). Then, the route from the current station to the destination station is searched from the DB 23, and the suitability of the train indicated in each character information 102 for the route is determined.
  • FIG. 7B is an example of a train information database.
  • FIG. 8A is a train information database including arrival and departure times at each station of each train in addition to the train information of FIG. 7B.
  • FIG. 8B shows a transfer information database. These databases are stored in the DB 23 of the server 2. These databases correspond to the knowledge information referred to in the present invention, and the DB 23 corresponds to the knowledge information storage means referred to in the present invention.
  • the server 2 refers to the transfer information database (s12).
  • the server 2 determines whether there is a station name information in the current location that matches “From” in the transfer information database, and a station name information in the destination matches “To” in the transfer information database.
  • the server 2 sets the transfer station described in the transfer information database as a temporary destination station (s13).
  • the server 2 extracts a train that matches the train type indicated in the received character information 102 from the train information database shown in FIG.
  • the departure time is extracted from the train information 101 (101A, 101B, 101C), and the departure time of the train information database is also checked (s14).
  • the server 2 includes the destination station name, the current station name, and the target station name indicated in the character information 102 from the train information database shown in FIG. 7B or 8A. Information is searched (s14).
  • the server 2 determines the suitability (whether or not it reaches the destination) of the train in the character information 102 and the route to the target station obtained by searching the DB 23 (s15). If there is character information 102 that matches all in the train information database in s14, the boarding permission information is transmitted as a determination result to the display device 1 (s17), and if there is no matching character information 102, boarding is not possible. Information is output to the display device 1 as a determination result (s18). These determination results correspond to the compatibility determination result data referred to in the present invention.
  • the display device receives these determination results from the server 2 and displays them on the display unit 13. For example, as shown in FIG. 4, when the boarding permission information is received, a boarding permission mark (OK mark) 103 is displayed so as to be superimposed on the train information 101A corresponding to the character information 102 indicated by the boarding permission information. When the boarding disabled information is received, the boarding disabled mark (NG mark) 104 is displayed so as to be superimposed on the train information 101B and the train information 101C corresponding to the character information 102 indicated by the boarding disabled information.
  • the user can easily determine whether or not each train is a train to be on by simply photographing the guide board with the camera.
  • the guide board is shot.
  • the boarding permission mark (OK mark) 103 or the boarding impossible mark (NG mark) 104 may be superimposed on the side image of the train. The same applies to buses as well as trains.
  • the train information database includes information indicating free and paid categories. For example, when selecting a station name of the current location or a target station name, by selecting “use a toll train” or “do not use a toll train”, the selected information is transmitted to the server 2 and the train Used for collation with information database. In this way, the user can specify various conditions and use them for determination of suitability.
  • information specifying the degree of congestion specified by the user is transmitted from the display device 1 to the server 2.
  • the degree of congestion is generated by selecting, for example, “considering the degree of congestion of the train” or “not considering the degree of congestion of the train” when selecting the station name of the current location or the target station name. These selected information is transmitted to the server 2 and used for collation with the train information database.
  • the server 2 is transmitted from the sensor 51 and the sensor 52 with an in-car image of the train or information indicating the degree of congestion.
  • the server 2 converts the information into information indicating the degree of congestion.
  • the information indicating the degree of congestion is, for example, extracting passenger images from images in the train, calculating passenger image occupancy in the entire image, and assuming that no passengers are 0% and the maximum is 100%. To do.
  • the server 2 determines the suitability of each train (whether or not it reaches the destination) in s15, determines that there is a matching train, and then determines the degree of congestion for the train. (S21). For example, when the degree of congestion exceeds 50%, the boarding impossibility information is output to the display device 1 as a determination result, assuming that it is below the standard (s18). Only when the degree of congestion is less than 50%, the boarding permission information is transmitted as a determination result to the display device 1 (s17).
  • the sensor 51 and the sensor 52 are fixed cameras installed in each train, and may be configured to automatically transmit data to the server 2, but the user uses a mobile phone or the like owned by the user. Alternatively, the train may be manually photographed, or the degree of congestion may be input. Moreover, when inputting a congestion degree manually, it is desirable to select the train which the user himself gets on from the several train information prescribed
  • the server 2 can search for the corresponding train by referring to the train information database at the received latitude and longitude information and the time when the information is received, and obtain the degree of congestion for each train. Can do.
  • FIG. 11, FIG. 12, and FIG. 13 are diagrams showing another example of the display system of the present embodiment.
  • FIG. 11 is a diagram illustrating a display system according to another example 1.
  • the user uses a sensor (camera) 16 to photograph a tag or the like on which the price of a product is displayed.
  • the control unit 11 extracts the text “ ⁇ 1980” as the price information 201 as a feature amount of the captured image data by using a character recognition function or the like. Then, the control unit 11 transmits the extracted price information 201 to the server 2.
  • the captured image data may be transmitted to the server 2, and the control unit 21 of the server 2 may extract the feature amount.
  • control unit 11 transmits current currency information and target currency information to the server 2.
  • the currency information of the current location is the currency of the country at the current location detected by the GPS 17 and corresponds to the current state data referred to in the present invention.
  • the target currency information is the currency of the home country input by the user, and corresponds to the target state data in the present invention.
  • the price information corresponds to a transfer means for transferring from the current currency (current state) to another currency (other state).
  • the captured image data corresponds to sensing data.
  • the server 2 receives the price information 201, the current currency information, and the target currency information transmitted from the display device 1. Then, a route (for example, exchange at a bank, payment by a credit card, payment by a traveler's check, etc.) for shifting from the current currency to the target currency is searched from the DB 23. Then, the suitability of the price information for the route is determined. Since the conversion rate between currencies is included in the DB 23, the price converted into the target currency is calculated here as the suitability. For example, the server 2 extracts a route that is the cheapest when converted into the target currency, and uses the price of the target currency in the extracted route as a determination result. The price information of the target currency on the cheapest route corresponds to the suitability determination result data in the present invention. Note that not only the lowest price but also price information on a plurality of routes may be used as the suitability determination result data.
  • the display device 1 receives price information from the server 2 and displays it on the display unit 13. For example, as shown in FIG. 11, “$ 25.53” which is the price information 203 of the target currency is displayed superimposed on the price information 201.
  • a mode in which text data is generated and price information of the target currency is displayed separately from the price information 201 is also possible.
  • the user can easily determine the price in the home currency simply by photographing the price information with the camera.
  • FIG. 12 is a diagram showing a display system according to another example 2.
  • the user uses a sensor (camera) 16 to photograph a plant.
  • the control unit 11 extracts the growth status of the plant 301 as the feature amount of the image data.
  • the growth status is obtained from the difference from the image at the previous shooting, the distance from the ground, the green occupancy rate, and the like.
  • Information indicating the growth status is transmitted to the server 2.
  • the control part 11 may transmit image data to the server 2, and may extract the growth condition on the server 2 side.
  • temperature data and humidity data are also extracted as sensing data.
  • control unit 11 also transmits the current state data and the target state data to the server 2.
  • the current state data in this example is, for example, the number of growing days after planting.
  • the target state data is, for example, the ideal size and color of the plant.
  • the target state is the state of eating.
  • the transfer means in this example corresponds to the type of water or fertilizer given to the plant, the amount of fertilizer, and the like.
  • the server 2 receives the data indicating the growth status, the growth days, and the state of the target plant transmitted from the display device 1. Then, a route for shifting from the current plant state to the target plant state (for example, when and when to apply fertilizer) is searched from the DB 23.
  • the DB 23 stores data indicating the optimum temperature, optimum humidity, standard size, fertilizer and amount, etc. for each growing day for each plant name.
  • the server 2 determines the suitability of the growth status for the route.
  • the suitability a measure for changing to a state most suitable for growing in the state of the target plant is obtained. For example, information that the temperature is lowered by 1 degree is obtained. Alternatively, information on the type of fertilizer and the timing to be given (eg, fertilizer AA is torn in tomorrow morning) is obtained. These pieces of information correspond to the compatibility determination result data referred to in the present invention.
  • the state space may be a space composed of two axes, a plant size axis and a color axis.
  • the target state is a set of ideal values of the size and color of the plant to be grown.
  • the current state is a set of the current value of the size and color of the plant to be grown.
  • the transfer means is expressed by a combination of the amount of water given to the plant at a specific timing and the type and amount of fertilizer.
  • the suitability may be a value of a probability that the target state can be reached by executing the transition means in the current state (giving a predetermined amount of water and a specific fertilizer at a specific timing).
  • the display device 1 receives the above information (information such as lowering the temperature once, sowing fertilizer AA tomorrow morning) from the server 2 and displaying it on the display unit 13.
  • the advice information 303 “air conditioning is ⁇ 1 ° C. and fertilizer AA is towed tomorrow morning” is displayed superimposed on the plant 301.
  • a mode in which text data is generated and advice information is displayed separately from the plant 301 is also possible.
  • the user can easily determine the measures for growing the plant to the desired growth situation simply by photographing the plant with the camera.
  • FIG. 13 is a diagram showing a display system according to another example 3.
  • the user uses the sensor (camera) 16 to photograph the restaurant menu table 401.
  • the sensor (camera) 16 to photograph the restaurant menu table 401.
  • the control unit 11 extracts the menu information 402 as a feature amount of the image data using a character recognition function technique. Then, the control unit 11 transmits the extracted menu information 402 to the server 2.
  • the captured image data may be transmitted to the server 2, and the control unit 21 of the server 2 may extract the feature amount.
  • the control unit 11 transmits the current status data and the target status data to the server 2.
  • the current information data is the name of the dish (spaghetti, stew, etc.) extracted from the image data by a method such as a character recognition function, or the name of the dish selected by the user from the list.
  • the purpose information data is information on raw materials that the user cannot input and drink. Further, the shifting means in this example corresponds to a menu table.
  • the server 2 receives the menu information, the name information of the dish, and the information on the raw materials that cannot be eaten and received transmitted from the display device 1. Then, a route for extracting information that cannot be eaten from each dish (for example, food and seasoning necessary for creating each menu) is searched from the DB 23. The server 2 determines the suitability of the menu information for the food and seasoning. Here, as the adaptability, for each menu, it is extracted whether the food can be eaten or not. If there is a match between the information of the raw material that the user has entered that cannot be eaten and the ingredients, seasonings, etc. included in the route, the information indicating that the menu is not available is output. If the information on the raw materials that cannot be eaten by the user and the ingredients, seasonings, etc. included in the route do not all match, the food availability information is output for the menu information.
  • the state space is a space composed of the amount of each allergic substance and the amount of each nutrient contained in the meal.
  • the current state is a state in which each substance is 0 because no meal is being eaten.
  • the target state is a state where each nutrient substance has a sufficient amount and each allergic substance is zero.
  • the degree of compatibility may be a degree indicating whether each menu item can be eaten or consumed from the viewpoint of obtaining necessary nutritional substances while avoiding acquisition of allergic substances.
  • the display device 1 receives these determination results from the server 2 and displays them on the display unit 13. For example, as shown in FIG. 13, when the food availability information is received, a food availability mark (OK mark) 403 is displayed so as to be superimposed on the menu information indicated by the food availability information. When the food / beverage disabling information is received, a food / beverage disabling mark (NG mark) 404 is displayed superimposed on the menu information indicated by the food / beverage disabling information. Moreover, as shown in FIG. 13, the raw material information 405 may be displayed.
  • the determination result is displayed on the display unit 13.
  • the output form of the determination result is not limited to display, and may be output by voice, or output in other output forms. May be.

Landscapes

  • Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Tourism & Hospitality (AREA)
  • Strategic Management (AREA)
  • Human Resources & Organizations (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Economics (AREA)
  • General Business, Economics & Management (AREA)
  • Marketing (AREA)
  • Data Mining & Analysis (AREA)
  • Operations Research (AREA)
  • Quality & Reliability (AREA)
  • Primary Health Care (AREA)
  • General Health & Medical Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • Development Economics (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Evolutionary Biology (AREA)
  • Evolutionary Computation (AREA)
  • General Engineering & Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Artificial Intelligence (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Train Traffic Observation, Control, And Security (AREA)

Abstract

表示装置（１）は、入力部（１５）において、目標状態のデータ、および現在状態のデータの入力を受け付ける。また、表示装置（１）は、目標状態を含む他の状態に、現在状態から移行するための移行手段の状態をセンシングし、センシングデータを生成する。表示装置（１）は、通信部（１２）において、センシングデータ、目標状態のデータ、および現在状態のデータを所定の外部装置に送信し、現在状態から目標状態に移行するための移行手段の適合性が判定された適合性判定結果データを外部装置から受信する。そして、表示装置（１）は、受信した適合性判定結果データを表示部（１３）に表示する。

Description

出力装置、出力システム、およびプログラム
　この発明は、各種情報を出力する出力装置、当該出力装置を用いた出力システム、およびプログラムに関する。
　従来、カメラで撮影した画像上にオーバレイ情報を重畳表示するものが提案されている（例えば特許文献１を参照）。
　特許文献１のシステムは、カメラで撮影した画像に対応付けられた情報を検索し、検索された情報を撮影画像に重畳して表示するものである。
特開２０１１－５５２５０号公報
　しかし、従来のシステムは、撮影した物の関連情報を表示するだけで、ユーザの所望する情報を表示するものではなかった。
　この発明は、ユーザが所望する情報を出力する出力装置、出力システム、およびプログラムを提供することを目的とする。
　この発明の出力装置は、目標状態のデータを入力するための第１の入力手段と、現在状態のデータを入力するための第２の入力手段と、前記目標状態を含む他の状態に、前記現在状態から移行するための移行手段の状態をセンシングし、センシングデータを生成するセンシング手段と、前記センシングデータ、前記目標状態のデータ、および前記現在状態のデータを所定の外部装置に送信する送信手段と、前記センシングデータ、前記目標状態のデータ、および前記現在状態のデータに基づいて、前記現在状態から前記目標状態に移行するための前記移行手段の適合性を判定した適合性判定結果データを、前記外部装置から受信する受信手段と、前記受信手段が受信した適合性判定結果データを出力する出力手段と、を備えている。
　なお、ここで言う「現在状態」とは、目標状態を設定する対象の現在の状態である。この現在状態は前記対象の状態を表現する１個以上の変数を軸として構成される空間である「状態空間」上の現在時刻に対応する点として表現することができる。
　「目標状態」は、前記の状態空間上の目標の位置を示すものである。
　「他の状態」は、移行手段によって移行可能な任意の状態である。「他の状態」として「目標状態」を設定することもできるし、現在状態から目標状態に至る途中段階の状態である中間状態を設定することもできる。
　「移行手段」は前記の状態空間上の各点から他の点に移行するための手段である。
　「適合性」は、上記状態空間における現在状態の位置から目標状態の位置にまで至るルートに、移行手段が適合するか否かを示すものである。適合性は、適合または不適合という２値で記述することもできるし、適合度という多段階の値で記述することもできる。
　（１）図１から図５で説明している列車の例においては、目標状態は、鉄道のユーザが行こうとしている目的地である。現在状態は、鉄道のユーザがその時点で存在する現在地である。この列車の例において、状態空間は、緯度と経度と高度の３次元と時間という１次元の合計４次元で構成された４次元空間として記述することができる。しかし、「列車運行図表」（トレイン・ダイヤグラム）を、状態空間とすることもできる。トレイン・ダイヤグラムでは、縦軸は駅名が並んだものとなり、横軸は時刻となっている。また、移行手段は、特定の運行スケジュールで運行されている列車である。適合性は、現在地から目的地までのルートに対する、前記特定の運行スケジュールで運行されている列車の適合度である。
　（２）図１１で説明している外貨両替の例では、状態空間は、現在地の国の通貨での保有現金額の軸と、母国の通貨での保有現金額の軸で構成された空間である。そして、現在状態は、現在地の国の通貨でのみ現金を保有している状態であり現在地の国の通貨での現金保有額であるＸと、母国通貨での現金保有額である０の組である（Ｘ，０）の点として記述できる。また、目標状態は、母国の通貨でのみ現金保有額Ｙを保有している状態であり、同じく状態空間で表現すると（０，Ｙ）として記述できる。この場合、移行手段は外貨両替サービスである。この場合、適合度としては、Ｙ／Ｘが大きいほど良いという尺度を使用することもできる。
　（３）図１２で説明している植物の育成の例においては、状態空間は、植物の大きさの軸と色の軸の２軸から構成された空間となる。目標状態は、育成対象の植物の大きさと色の理想的な値の組である。現在状態は、育成対象の植物の大きさと色の現在値の組である。この場合の移行手段は、植物に特定のタイミングで与える水の量と肥料の種類と肥料の量との組み合わせで表現される。また、この移行手段の適合性は、現在状態においてその移行手段を実施することで目標状態に到達できる確率の値ともできる。
　（４）図１３で説明している料理の選択の例では、状態空間は、食事の中に含まれる各アレルギー物質の量と各栄養物質の量とで構成された空間である。現在状態は、食事をしていないために各物質が０である状態である。目標状態は各栄養物質が十分な量であり、各アレルギー物質が０である状態である。適合性は、各メニューについて、アレルギー物質の取得を避けつつ、必要な栄養物質を取得する観点で飲食可能であるか、飲食不可能であるかを示す度合いが考えられる。
　そして、ユーザは、所有する携帯電話（上記本発明の出力装置）に搭載されたセンシング手段であるカメラで案内板を撮影する。この撮影された画像データがセンシングデータに相当する。
　外部装置（サーバ）は、携帯電話から受信した画像データを文字認識機能等の手法で解析し、案内板に表示されている列車情報を抽出し、この列車情報を特徴量とする。そして、外部装置は、現在の駅から目的の駅に至るルートをデータベースから検索して得る。外部装置は、検索して得たルートと、抽出した列車情報（特徴量）を照合し、適合性を判定する。例えば、撮影された案内板に表示されている複数の列車のうち、上記ルートに適合する列車を判定する。この判定結果がユーザの携帯電話に送信される。
　携帯電話は、受信した判定結果を出力する。例えば「３番ホーム、９：１４分、準急、５つ目の駅で下車」等とテキストデータを表示し、乗るべき列車の情報を表示する。
　あるいは、画面上に上記移行手段と対応付けて判定結果を表示することも可能である。特に、撮影した案内板の画像データにおいて、乗るべき列車の情報を重畳して表示する（例えば乗車可能であることを示すマークを表示する）ことで、ユーザは、乗るべき列車がどの列車であるのかを直感的に判断することができる。さらに、判定結果を音声で出力することも可能である。
　なお、特徴量の抽出は、サーバ側で行ってもよいし、携帯電話側で行ってもよい。また、外部装置との送受信を行わずに、サーバ側の処理を全て携帯電話側で処理する態様も可能である。この場合、携帯電話内に各種データベースを用意する。
　この発明によれば、ユーザが所望する情報を出力することができる。
表示システムの構成を示すブロック図である。 表示装置を用いて案内板を撮影した場合の例を示す図である。 表示装置からサーバに情報を送信する態様を示した図である。 判定結果を重畳して表示する例を示す図である。 テキストデータで判定結果を表示する例を示す図である。 混雑情報を用いる場合の表示システムを示す図である。 図７（Ａ）は駅情報データベースを示す図であり、図７（Ｂ）は列車情報データベースを示した図である。 図８（Ａ）は列車情報データベースを示した図であり、図８（Ｂ）は乗り換え情報データベースを示した図である。 サーバ２の動作を示すフローチャートである。 サーバ２の動作を示すフローチャートである。 他の例１に係る表示システムを示す図である。 他の例２に係る表示システムを示す図である。 他の例３に係る表示システムを示す図である。
　図１は、本発明の出力装置の例である表示装置を備えた表示システムの構成を示すブロック図である。表示システムは、インターネット７を介して接続される表示装置１と、サーバ２と、複数のセンサ（同図の例ではセンサ５１およびセンサ５２）と、を備えている。
　表示装置１は、ユーザが所有する携帯電話やＰＤＡ等の情報処理装置である。表示装置１は、制御部１１、通信部１２、表示部１３、記憶部１４、入力部１５、カメラ１６、およびＧＰＳ１７を備えている。
　制御部１１は、通信部１２およびインターネット７を介してサーバ２に各種データを送信し、サーバ２からデータを受信して、受信したデータを表示部１３に表示する動作を行う。
　サーバ２は、制御部２１、通信部２２、およびデータベース（ＤＢ）２３を備えている。
　制御部２１は、通信部２２およびインターネット７を介して、表示装置１やセンサ５１、センサ５２等から、対象物についてセンシングした結果であるセンシングデータを受信する。センサとしては、カメラ、ＧＰＳ、温度センサ、湿度センサ、照度センサ、気圧センサ等がある。対象物は、例えば、鉄道の旅客駅に設置された案内板（各列車の発車時刻、行き先、列車種別、乗り場等の情報を示すもの）である。
　図２に示すように、表示装置１は、表示部１３と入力部１５を兼ねたタッチパネルを搭載している。ユーザは、センサ（カメラ）１６を用いて案内板を撮影する。ここで撮影した画像データがセンシングデータに相当する。案内板には、各列車の発車時刻、行き先、列車種別、乗り場等の列車情報１０１（１０１Ａ、１０１Ｂ，１０１Ｃ）が表示されている。同図の例では３つの列車情報１０１Ａ、１０１Ｂ，１０１Ｃが表示されている。
　制御部１１は、記憶部１４に記憶されているプログラムを読み出し、パターン認識により特徴量を抽出する。特徴量は、撮影した画像の中から特定の情報を抽出したものである。この例では、図３に示すように、「準急Semi-Exp.」の部分と「河原町Kawaramachi」の部分とを文字認識機能で抽出し、特徴量として文字情報１０２を抽出する。
　そして、制御部１１は、抽出した特徴量をサーバ２に送信する。なお、撮影した画像データをサーバ２に送信し、サーバ２の制御部２１が特徴量を抽出する態様であってもよい。
　また、制御部１１は、現在地の情報および目的地の情報をサーバ２に送信する。現在地の情報は、ＧＰＳ１７で検出された現在位置に最も近い駅の駅名情報であり、この発明でいう現在状態のデータに相当する。目的地の情報は、ユーザが入力した目的地に最も近い駅の駅名情報であり、この発明でいう目標状態のデータに相当する。
　なお、現在地の情報は、例えば、ＧＰＳ１７で検出された現在位置に最も近い駅の駅名情報を自動的に選択する。また、表示部１３において現在地に近い（所定距離以下の）駅の一覧を表示する、あるいは地図上に表示し、ユーザに選択させるようにしてもよい。また、図７（Ａ）に示すような駅情報データベース（記憶部１４またはサーバ２からダウンロードしたもの）内の鉄道会社、路線、駅の一覧表を表示し、ユーザに選択させるようにしてもよい。あるいは、ユーザがカメラ１６を用いて駅の看板を撮影し、制御部１１が画像データから文字認識機能で駅名を読み取り、同じ駅名の候補を表示部１３に表示し、ユーザに選択させてもよい。また、表示装置１に備えられたマイク（不図示）でユーザの音声を取得し、音声認識により駅名の入力を受けつける態様にしてもよい。
　また、目的地の情報は、ＧＰＳ１７で検出された現在位置に最も近い駅の駅名情報を自動的に選択するようにしてもよいし、表示部１３において現在地に近い（所定距離以下の）駅の一覧を表示する、あるいは地図上に表示し、ユーザに選択させるようにしてもよい。また、図７（Ａ）に示すような駅情報データベース（記憶部１４またはサーバ２のＤＢ２３からダウンロードしたもの）内の鉄道会社、路線、駅の一覧表を表示し、ユーザに選択させるようにしてもよい。また、表示装置１に備えられたマイク（不図示）でユーザの音声を取得し、音声認識により駅名の入力を受けつける態様にしてもよい。
　図９のフローチャートを参照して、サーバ２の動作について説明する。図３に示したように、サーバ２は、表示装置１から送信された文字情報１０２、現在地の駅名情報、および目的地の駅名情報を受信する（ｓ１１）。そして、現在地の駅から目的地の駅に至るルートをＤＢ２３から検索し、当該ルートに対する各文字情報１０２に示される列車の適合性を判定する。
　図７（Ｂ）は、列車情報データベースの一例である。図８（Ａ）は、図７（Ｂ）の列車情報に加えて、各列車の各駅での到着および発車時刻が含まれた列車情報データベースである。図８（Ｂ）は、乗り換え情報データベースである。これらデータベースは、サーバ２のＤＢ２３に格納されている。これらデータベースが、この発明でいう知識情報に相当し、ＤＢ２３がこの発明でいう知識情報記憶手段に相当する。
　まず、サーバ２は、乗り換え情報データベースを参照する（ｓ１２）。ここでは、サーバ２は、現在地の駅名情報が乗り換え情報データベースの「Ｆｒｏｍ」と一致し、かつ目的地の駅名情報が乗り換え情報データベースの「Ｔｏ」と一致するものがあるか否かを判断する。サーバ２は、一致するものがあると判断した場合、乗り換え情報データベースに記載されている乗換え駅を仮目的地の駅とする（ｓ１３）。
　次に、サーバ２は、図７（Ｂ）または図８（Ａ）の列車情報データベースから、受信した文字情報１０２に示される列車種別と一致するものを抽出する。図８（Ａ）の列車情報データベースから検索する場合には、列車情報１０１（１０１Ａ、１０１Ｂ，１０１Ｃ）から発車時刻の抽出も行い、列車情報データベースの発車時刻との照合も行う（ｓ１４）。
　かつ、サーバ２は、図７（Ｂ）または図８（Ａ）の列車情報データベースから、文字情報１０２に示される行き先駅名と、現在地の駅名と、目的の駅名とが停車駅に含まれている情報を検索する（ｓ１４）。
　このようにして、サーバ２は、ＤＢ２３を検索して得た目的の駅に至るルートと、文字情報１０２の各列車の適合性（目的地に至るか否か）を判定する（ｓ１５）。ｓ１４において列車情報データベースに全てに一致する文字情報１０２があった場合には、乗車可情報を判定結果として表示装置１に送信し（ｓ１７）、一致する文字情報１０２がない場合には、乗車不可情報を判定結果として表示装置１に出力する（ｓ１８）。これら判定結果がこの発明でいう適合性判定結果データに相当する。
　表示装置は、サーバ２からこれら判定結果を受信し、表示部１３に表示する。例えば、図４に示すように、乗車可情報を受信した場合、当該乗車可情報が示す文字情報１０２に対応する列車情報１０１Ａに重畳して、乗車可マーク（ＯＫマーク）１０３を表示する。乗車不可情報を受信した場合、当該乗車不可情報が示す文字情報１０２に対応する列車情報１０１Ｂおよび列車情報１０１Ｃに重畳して、乗車不可マーク（ＮＧマーク）１０４を表示する。
　あるいは、図５に示すように、「３番ホーム、９：１４分、準急、５つ目の駅で下車」等とテキストデータを生成して表示し、乗るべき列車の情報を表示する態様も可能である。
　このように、ユーザはカメラで案内板を撮影するだけで、各列車が乗るべき列車であるか否かを容易に判断することができる。なお、ユーザがカメラで、駅のホームで停車している列車の側面に表示されている列車の種別（例：普通、準急）や行き先や列車番号の表示を撮影しても、案内板を撮影した場合と同じく、乗車可マーク（ＯＫマーク）１０３、または乗車不可マーク（ＮＧマーク）１０４を列車の側面の画像に重畳表示するようにすることもできる。また、同様のことは列車だけでなくバスについても適用可能である。
　なお、図７（Ｂ）および図８（Ａ）に示したように、列車情報データベースには、無料、有料区分を示す情報が含まれている。例えば、現在地の駅名や目的の駅名を選択するときに、「有料列車を利用する」「有料列車を利用しない」等の選択を行うことで、これら選択された情報がサーバ２に送信され、列車情報データベースとの照合に用いられる。このように、ユーザが種々の条件を指定して適合性の判定に用いることも可能である。
　例えば、図６および図１０に示すように、列車の混雑度を適合性の判定に用いることも可能である。なお、図１０に示すフローチャートにおいては、図９と共通する部分については同一の符号を付し、その説明を省略する。
　この例では、ユーザから指定された混雑度を指定する情報が、表示装置１からサーバ２に送信される。混雑度は、例えば、現在地の駅名や目的の駅名を選択するときに、「列車の混雑度を考慮する」「列車の混雑度を考慮しない」等の選択を行うことで生成される。これら選択された情報がサーバ２に送信され、列車情報データベースとの照合に用いられる。
　また、サーバ２には、センサ５１およびセンサ５２から列車の車内画像、または混雑度を示す情報が送信される。車内画像が送信された場合、サーバ２側で、混雑度を示す情報への変換を行う。混雑度を示す情報は、例えば列車内の画像から、乗客の画像を抽出し、画像全体における乗客の画像の占有率を算出し、乗客無しの状態を０％、最高を１００％として混雑度とする。
　サーバ２は、図１０に示すように、ｓ１５において各列車の適合性（目的地に至るか否か）を判定し、一致する列車が存在すると判断した後に、当該列車について混雑度の判断を行う（ｓ２１）。例えば、混雑度が５０％を超える場合には基準を下回るとして、乗車不可情報を判定結果として表示装置１に出力する（ｓ１８）。混雑度が５０％未満である場合にのみ乗車可情報を判定結果として表示装置１に送信する（ｓ１７）。
　なお、センサ５１およびセンサ５２は、各列車内に設置された固定カメラであって、自動的にサーバ２にデータを送信する態様としてもよいが、ユーザが自身の所有する携帯電話等を用いて、手動で列車内を撮影する、または混雑の程度を入力する態様であってもよい。また、手動で混雑度を入力する場合には、予め規定された複数の列車情報から、ユーザ自身が乗車している列車を選択させることが望ましい。
　また、ＧＰＳを備えた携帯電話であれば、緯度、経度情報をサーバ２に送信する態様も可能である。この場合、サーバ２は、受信した緯度、経度情報と、当該情報を受信した時刻で、列車情報データベースを参照して、該当する列車の検索を行うことができ、列車ごとの混雑度を得ることができる。
　次に、図１１、図１２、および図１３は、本実施形態の表示システムの他の例を示す図である。図１１は、他の例１に係る表示システムを示す図である。この例では、ユーザは、センサ（カメラ）１６を用いて商品の値段が表示されたタグ等を撮影する。
　制御部１１は、文字認識機能等により、撮影した画像データの特徴量として、値段情報２０１である「￥１９８０」のテキストを抽出する。そして、制御部１１は、抽出した値段情報２０１をサーバ２に送信する。なお、この例においても、撮影した画像データをサーバ２に送信し、サーバ２の制御部２１が特徴量を抽出する態様であってもよい。
　また、制御部１１は、現在地の通貨情報および目的の通貨情報をサーバ２に送信する。現在地の通貨情報は、ＧＰＳ１７で検出された現在位置における国の通貨であり、この発明でいう現在状態のデータに相当する。目的の通貨情報は、ユーザが入力した母国の通貨であり、この発明でいう目標状態のデータに相当する。また、値段情報は、現在地の通貨（現在の状態）から他の通貨（他の状態）に移行するための移行手段に相当する。撮影した画像データがセンシングデータに相当する。
　サーバ２は、表示装置１から送信された値段情報２０１、現在地の通貨情報、および目的の通貨情報を受信する。そして、現在地の通貨から目的の通貨に移行するためのルート（例えば銀行における両替、クレジットカードでの支払い、トラベラーズチェックでの支払い、等）をＤＢ２３から検索する。そして、当該ルートに対する値段情報の適合性を判定する。ＤＢ２３には、通貨間の換算レートが含まれているため、ここでは、適合性としては、目的の通貨に換算した値段を算出する。サーバ２は、例えば目的の通貨に換算した場合に最も安くなるルートを抽出し、抽出したルートにおける目的の通貨の値段を判定結果とする。この最も安くなるルートにおける目的の通貨の値段情報がこの発明でいう適合性判定結果データに相当する。なお、最も安い値段だけでなく、複数のルートにおける値段情報を適合性判定結果データとしてもよい。
　表示装置１は、サーバ２から値段情報を受信し、表示部１３に表示する。例えば、図１１に示すように、値段情報２０１に重畳して目的通貨の値段情報２０３である「＄２５．５３」を表示する。無論、テキストデータを生成して、値段情報２０１とは別に、目的通貨の値段情報を表示する態様も可能である。
　このように、ユーザはカメラで値段情報を撮影するだけで、母国の通貨における値段を容易に判断することができる。
　次に、図１２は、他の例２に係る表示システムを示す図である。この例では、ユーザは、センサ（カメラ）１６を用いて植物を撮影する。
　制御部１１は、画像データの特徴量として、植物３０１の生育状況を抽出する。生育状況は、前回撮影時の画像との差分や、地面からの距離、緑色の占有率等で求める。生育状況を示す情報は、サーバ２に送信される。あるいは、制御部１１は、サーバ２に画像データを送信し、サーバ２側で生育状況を抽出してもよい。また、この例では、センシングデータとして温度データや湿度データも抽出する。
　また、制御部１１は、現在状態のデータおよび目的状態のデータもサーバ２に送信する。この例における現在状態のデータは、例えば植物を植えてからの生育日数である。目的状態のデータは、例えば理想的な植物の大きさ、色等である。また、食用植物であれば目的の状態は、食べごろの状態である。また、この例における移行手段は、植物に与える水や肥料の種類や肥料の量等に相当する。
　サーバ２は、表示装置１から送信された生育状況、生育日数、および目的の植物の状態を示すデータを受信する。そして、現在の植物の状態から目的の植物の状態に移行するためのルート（例えばいつどのタイミングで肥料を与えるか等）をＤＢ２３から検索する。この例では、ＤＢ２３には、植物名毎に、各生育日数における最適温度、最適湿度、標準的な大きさ、肥料と量等を示すデータが蓄積されている。サーバ２は、当該ルートに対する生育状況の適合性を判定する。ここでは、適合性としては、最も目的の植物の状態に生育するのに適した状況に変化させるための対策を求める。例えば、温度を１度下げるという情報を求める。あるいは、肥料の種類と与えるべきタイミング（明日の朝に肥料ＡＡを撒く等）の情報を求める。これらの情報がこの発明でいう適合性判定結果データに相当する。
　なお、状態空間が、植物の大きさの軸と色の軸の２軸から構成された空間とする場合も考えられる。この場合、目標状態は、育成対象の植物の大きさと色の理想的な値の組である。現在状態は、育成対象の植物の大きさと色の現在値の組である。移行手段は、植物に特定のタイミングで与える水の量と肥料の種類と量の組み合わせで表現される。適合性は、現在状態において移行手段を実施する（特定のタイミングで所定量の水および特定の肥料を与える）ことで目標状態に到達できる確率の値とすることもできる。
　表示装置１は、サーバ２から上記情報（温度を１度下げる、明日の朝に肥料ＡＡを撒く等の情報）を受信し、表示部１３に表示する。例えば、図１２に示すように、植物３０１に重畳してアドバイス情報３０３である「空調を－１℃、肥料ＡＡを明日の朝に撒く」を表示する。無論、テキストデータを生成して、植物３０１とは別に、アドバイス情報を表示する態様も可能である。
　このように、ユーザはカメラで植物を撮影するだけで、目的の生育状況まで育てるための対策を容易に判断することができる。
　次に、図１３は、他の例３に係る表示システムを示す図である。この例では、ユーザは、センサ（カメラ）１６を用いてレストランのメニュー表４０１を撮影する。この例は、例えば、アレルギーや宗教上の理由で飲食できない原材料がメニュー表４０１に存在する場合に自動的に表示するものである。
　制御部１１は、画像データの特徴量として、文字認識機能の手法を用いてメニュー情報４０２を抽出する。そして、制御部１１は、抽出したメニュー情報４０２をサーバ２に送信する。なお、この例においても、撮影した画像データをサーバ２に送信し、サーバ２の制御部２１が特徴量を抽出する態様であってもよい。
　また、制御部１１は、現在状況データおよび目的状況データをサーバ２に送信する。現在情報データは、文字認識機能等の手法で画像データから抽出された料理の名称（スパゲティ、シチュー等）、あるいはユーザ自身が、一覧から選択した料理の名称である。目的情報データは、ユーザが入力した、ユーザ自身が飲食できない原材料の情報である。また、この例における移行手段は、メニュー表に相当する。
　サーバ２は、表示装置１から送信されたメニュー情報、料理の名称情報、および飲食できない原材料の情報を受信する。そして、各料理から飲食できない情報を抽出するためのルート（例えば各メニューを作成するために必要な食材、調味料を示すもの）をＤＢ２３から検索する。サーバ２は、当該食材や調味料に対するメニュー情報の適合性を判定する。ここでは、適合性としては、各メニューについて、飲食可能であるか、飲食不可能であるか、を抽出することである。ユーザが入力した飲食できない原材料の情報と、上記ルートに含まれる食材、調味料等と、に一致するものが存在した場合に、当該メニュー情報について飲食不可情報を出力する。ユーザが入力した飲食できない原材料の情報と、上記ルートに含まれる食材、調味料等で全て一致しなければ、当該メニュー情報について飲食可情報を出力する。
　なお、状態空間が、食事の中に含まれる各アレルギー物質の量と各栄養物質の量で構成された空間とする例も考えられる。この場合、現在状態は、食事をしていないために各物質が０である状態である。目標状態は各栄養物質が十分な量であり、各アレルギー物質が０である状態である。適合性は、各メニューについて、アレルギー物質の取得を避けつつ、必要な栄養物質を取得する観点で飲食可能であるか、飲食不可能であるかを示す度合いが考えられる。
　表示装置１は、サーバ２からこれら判定結果を受信し、表示部１３に表示する。例えば、図１３に示すように、飲食可情報を受信した場合、当該飲食可情報が示すメニュー情報に重畳して、飲食可マーク（ＯＫマーク）４０３を表示する。飲食不可情報を受信した場合、当該飲食不可情報が示すメニュー情報に重畳して、飲食不可マーク（ＮＧマーク）４０４を表示する。また、図１３に示すように、原材料情報４０５を表示してもよい。
　このように、ユーザはカメラでメニュー表を撮影するだけで、各メニューが飲食可であるか否かを容易に判断することができる。
　なお、上記の例では、判定結果を表示部１３に表示するとしたが、この判定結果の出力形態については、表示に限らず、音声で出力してもよいし、これ以外の出力形態で出力してもよい。
１…表示装置
２…サーバ
７…インターネット
１１…制御部
１２…通信部
１３…表示部
１４…記憶部
１５…入力部
１６…カメラ
１７…ＧＰＳ
２１…制御部
２２…通信部
２３…ＤＢ
５１…センサ
５２…センサ

Claims (15)

  1. 　目標状態のデータを入力するための第１の入力手段と、
    　現在状態のデータを入力するための第２の入力手段と、
    　前記目標状態を含む他の状態に、前記現在状態から移行するための移行手段の状態をセンシングし、センシングデータを生成するセンシング手段と、
    　前記センシングデータ、前記目標状態のデータ、および前記現在状態のデータを所定の外部装置に送信する送信手段と、
    　前記センシングデータ、前記目標状態のデータ、および前記現在状態のデータに基づいて、前記現在状態から前記目標状態に移行するための前記移行手段の適合性を判定した適合性判定結果データを、前記外部装置から受信する受信手段と、
    　前記受信手段が受信した適合性判定結果データを出力する出力手段と、
    　を備えたことを特徴とする出力装置。
  2. 　目標状態のデータを入力するための第１の入力手段と、
    　現在状態のデータを入力するための第２の入力手段と、
    　前記目標状態を含む他の状態に、前記現在状態から移行するための移行手段の状態をセンシングし、センシングデータを生成するセンシング手段と、
    　前記センシングデータから特徴量を抽出する特徴量抽出手段と、
    　前記特徴量、前記目標状態のデータ、および前記現在状態のデータを所定の外部装置に送信する送信手段と、
    　前記特徴量、前記目標状態のデータ、および前記現在状態のデータに基づいて、前記現在状態から前記目標状態に移行するための前記移行手段の適合性を判定した適合性判定結果データを、前記外部装置から受信する受信手段と、
    　前記受信手段が受信した適合性判定結果データを出力する出力手段と、
    　を備えた出力装置。
  3. 　前記出力手段は、前記適合性判定結果データを、前記移行手段と対応付けて出力することを特徴とする請求項１または請求項２に記載の出力装置。
  4. 　前記出力手段は、前記適合性判定結果データを、前記移行手段を撮影した画像に重畳して表示することを特徴とする請求項３に記載の出力装置。
  5. 　前記出力手段は、前記適合性判定結果データを、前記移行手段に基づいて生成した情報として出力することを特徴とする請求項３に記載の出力装置。
  6. 　目標状態のデータを入力するための第１の入力手段と、
    　現在状態のデータを入力するための第２の入力手段と、
    　前記目標状態を含む他の状態に、前記現在状態から移行するための移行手段の状態をセンシングし、センシングデータを生成するセンシング手段と、
    　前記センシングデータから特徴量を抽出する特徴量抽出手段と、
    　前記現在状態から前記目標状態に至るルートの情報を獲得するために利用可能な知識情報を複数個、保有した知識情報記憶手段と、
    　前記目標状態のデータ、および前記現在状態のデータに基づいて、前記現在状態から前記目標状態に至るルートの情報を、前記知識情報記憶手段を検索して得るルート獲得手段と、
    　前記特徴量に基づいて、前記ルート獲得手段が得たルートの情報に対する前記移行手段の適合性を判定する適合性判定手段と、
    　前記適合性判定手段の判定結果である適合性判定結果データを出力する出力手段と、
    　を備えた出力システム。
  7. 　前記出力手段は、前記適合性判定結果データを、前記移行手段と対応付けて出力することを特徴とする請求項６に記載の出力システム。
  8. 　前記出力手段は、前記適合性判定結果データを、前記移行手段を撮影した画像に重畳して表示することを特徴とする請求項７に記載の出力システム。
  9. 　前記出力手段は、前記適合性判定結果データを、前記移行手段に基づいて生成した情報として出力することを特徴とする請求項７に記載の出力システム。
  10. 　目標状態のデータを入力する第１の入力ステップと、
    　現在状態のデータを入力する第２の入力ステップと、
    　前記目標状態を含む他の状態に、前記現在状態から移行するための移行手段の状態をセンシングし、センシングデータを生成するセンシングステップと、
    　前記センシングデータ、前記目標状態のデータ、および前記現在状態のデータを所定の外部装置に送信する送信ステップと、
    　前記センシングデータ、前記目標状態のデータ、および前記現在状態のデータに基づいて、前記現在状態から前記目標状態に移行するための前記移行手段の適合性を判定した適合性判定結果データを、前記外部装置から受信する受信ステップと、
    　前記受信ステップで受信した適合性判定結果データを出力する出力ステップと、
    　を情報処理装置に実行させることを特徴とするプログラム。
  11. 　目標状態のデータを入力する第１の入力ステップと、
    　現在状態のデータを入力する第２の入力ステップと、
    　前記目標状態を含む他の状態に、前記現在状態から移行するための移行手段の状態をセンシングし、センシングデータを生成するセンシングステップと、
    　前記センシングデータから特徴量を抽出する特徴量抽出ステップと、
    　前記特徴量、前記目標状態のデータ、および前記現在状態のデータを所定の外部装置に送信する送信ステップと、
    　前記特徴量、前記目標状態のデータ、および前記現在状態のデータに基づいて、前記現在状態から前記目標状態に移行するための前記移行手段の適合性を判定した適合性判定結果データを、前記外部装置から受信する受信ステップと、
    　前記受信ステップで受信した適合性判定結果データを出力する出力ステップと、
    　を情報処理装置に実行させることを特徴とするプログラム。
  12. 　目標状態のデータを入力する第１の入力ステップと、
    　現在状態のデータを入力する第２の入力ステップと、
    　前記目標状態を含む他の状態に、前記現在状態から移行するための移行手段の状態をセンシングし、センシングデータを生成するセンシングステップと、
    　前記センシングデータから特徴量を抽出する特徴量抽出ステップと、
    　前記目標状態のデータ、および前記現在状態のデータに基づいて、前記現在状態から前記目標状態に至るルートの情報を、前記現在状態から前記目標状態に至るルートの情報を獲得するために利用可能な知識情報を複数個、保有した知識情報記憶手段から検索して得るルート獲得ステップと、
    　前記特徴量に基づいて、前記ルート獲得ステップで得たルートの情報に対する前記移行手段の適合性を判定する適合性判定ステップと、
    　前記適合性判定ステップの判定結果である適合性判定結果データを出力する出力ステップと、
    　を情報処理装置に実行させることを特徴とするプログラム。
  13. 　前記出力ステップは、前記適合性判定結果データを、前記移行手段と対応付けて出力することを特徴とする請求項１０、請求項１１、または請求項１２に記載のプログラム。
  14. 　前記出力ステップは、前記適合性判定結果データを、前記移行手段を撮影した画像に重畳して表示することを特徴とする請求項１３に記載のプログラム。
  15. 　前記出力ステップは、前記適合性判定結果データを、前記移行手段に基づいて生成した情報として出力することを特徴とする請求項１３に記載のプログラム。
PCT/JP2013/054742 2012-03-08 2013-02-25 出力装置、出力システム、およびプログラム WO2013133067A1 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP2014503770A JP5590266B2 (ja) 2012-03-08 2013-02-25 出力装置、出力システム、およびプログラム
EP13758530.3A EP2824591A4 (en) 2012-03-08 2013-02-25 OUTPUT DEVICE, OUTPUT SYSTEM, AND PROGRAM
US14/383,849 US20150016715A1 (en) 2012-03-08 2013-02-25 Output device and output system

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2012052144 2012-03-08
JP2012-052144 2012-03-08

Publications (1)

Publication Number Publication Date
WO2013133067A1 true WO2013133067A1 (ja) 2013-09-12

Family

ID=49116548

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2013/054742 WO2013133067A1 (ja) 2012-03-08 2013-02-25 出力装置、出力システム、およびプログラム

Country Status (4)

Country Link
US (1) US20150016715A1 (ja)
EP (1) EP2824591A4 (ja)
JP (1) JP5590266B2 (ja)
WO (1) WO2013133067A1 (ja)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20150206257A1 (en) * 2012-07-24 2015-07-23 Nec Corporation Information processing device, data processing method thereof, and program
JP2018106465A (ja) * 2016-12-27 2018-07-05 株式会社リコー 乗車案内システム、乗車案内方法、情報処理装置およびプログラム

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10841654B2 (en) * 2016-11-24 2020-11-17 Hanwha Techwin Co., Ltd. Apparatus and method for displaying images and passenger density
WO2018198809A1 (ja) * 2017-04-26 2018-11-01 日本電気株式会社 案内システム

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH1030933A (ja) * 1996-07-17 1998-02-03 Toshiba Corp 経路検索装置および移動履歴利用システム
JP2009168567A (ja) * 2008-01-15 2009-07-30 Denso Corp カーナビゲーションシステム
JP2010118019A (ja) * 2008-11-14 2010-05-27 Sharp Corp 端末装置、配信装置、端末装置の制御方法、配信装置の制御方法、制御プログラムおよび記録媒体
JP2010152679A (ja) * 2008-12-25 2010-07-08 Toshiba Corp 情報提示装置および情報提示方法
JP2011055250A (ja) 2009-09-02 2011-03-17 Sony Corp 情報提供方法及び装置、情報表示方法及び携帯端末、プログラム、並びに情報提供システム

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8547401B2 (en) * 2004-08-19 2013-10-01 Sony Computer Entertainment Inc. Portable augmented reality device and method
US20080147730A1 (en) * 2006-12-18 2008-06-19 Motorola, Inc. Method and system for providing location-specific image information
US8180396B2 (en) * 2007-10-18 2012-05-15 Yahoo! Inc. User augmented reality for camera-enabled mobile devices
KR101612785B1 (ko) * 2009-06-01 2016-04-26 엘지전자 주식회사 차량 내비게이션 방법 및 그 장치
WO2011158352A1 (ja) * 2010-06-16 2011-12-22 株式会社ナビタイムジャパン ナビゲーションシステム、端末装置、ナビゲーションサーバ、ナビゲーション装置、ナビゲーション方法、および、プログラム
US8731814B2 (en) * 2010-07-02 2014-05-20 Ford Global Technologies, Llc Multi-modal navigation system and method
US20120296885A1 (en) * 2010-09-09 2012-11-22 Google Inc. Transportation Information Systems and Methods
US8700316B2 (en) * 2011-05-23 2014-04-15 Microsoft Corporation Optional re-routing

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH1030933A (ja) * 1996-07-17 1998-02-03 Toshiba Corp 経路検索装置および移動履歴利用システム
JP2009168567A (ja) * 2008-01-15 2009-07-30 Denso Corp カーナビゲーションシステム
JP2010118019A (ja) * 2008-11-14 2010-05-27 Sharp Corp 端末装置、配信装置、端末装置の制御方法、配信装置の制御方法、制御プログラムおよび記録媒体
JP2010152679A (ja) * 2008-12-25 2010-07-08 Toshiba Corp 情報提示装置および情報提示方法
JP2011055250A (ja) 2009-09-02 2011-03-17 Sony Corp 情報提供方法及び装置、情報表示方法及び携帯端末、プログラム、並びに情報提供システム

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
MASAJI KATAGIRI ET AL.: "A Navigation System for Mobile Enironment using Live Video : Mobile Magic View", IEICE TECHNICAL REPORT, vol. 98, no. 490 (P, 18 December 1998 (1998-12-18), pages 149 - 156, XP008174554 *
See also references of EP2824591A4

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20150206257A1 (en) * 2012-07-24 2015-07-23 Nec Corporation Information processing device, data processing method thereof, and program
JPWO2014017392A1 (ja) * 2012-07-24 2016-07-11 日本電気株式会社 情報処理装置、そのデータ処理方法、およびプログラム
US9489702B2 (en) * 2012-07-24 2016-11-08 Nec Corporation Information processing device, data processing method thereof, and program
JP2018106465A (ja) * 2016-12-27 2018-07-05 株式会社リコー 乗車案内システム、乗車案内方法、情報処理装置およびプログラム

Also Published As

Publication number Publication date
JPWO2013133067A1 (ja) 2015-07-30
US20150016715A1 (en) 2015-01-15
EP2824591A1 (en) 2015-01-14
EP2824591A4 (en) 2015-11-25
JP5590266B2 (ja) 2014-09-17

Similar Documents

Publication Publication Date Title
US20170357984A1 (en) Information processing device, information processing method, and program
JP6272947B2 (ja) モバイルデバイスを使用した拡張メニューを伴うシステムおよび方法
CN107076563A (zh) 信息处理设备、控制方法和程序
WO2013133067A1 (ja) 出力装置、出力システム、およびプログラム
JP5140027B2 (ja) 情報提供装置、情報提供方法およびプログラム
WO2013112399A1 (en) Customizing printed products based on travel paths
CN107110949A (zh) 基于无线信号信息改变相机参数
KR101671856B1 (ko) 어플리케이션을 기반으로 관광 정보를 제공하는 방법 및 장치
CN109348417A (zh) 路线的显示方法、装置、终端及存储介质
KR20160009686A (ko) 증강 현실 콘텐츠를 스크리닝하는 방법, 장치, 및 시스템
JP2016045678A (ja) 価格表示システム、価格判定装置、表示装置、価格判定方法、および、価格判定プログラム
AU2015218443B2 (en) Itinerary estimation device and method, program, and information classification method
WO2018193805A1 (ja) 取引システム及び取引方法
US20160275419A1 (en) Information processing apparatus, vacancy information providing program, and method of providing vacancy information
KR20180079110A (ko) O2o 기반 음식점 이용관리 시스템 및 이용관리방법
JP7446274B2 (ja) 情報処理装置、情報処理方法および情報処理プログラム
JP6942209B2 (ja) 情報処理装置、情報処理方法および情報処理プログラム
JP2003233694A (ja) くじシステム、くじ購入端末、くじ販売サーバ、当たりくじの決定方法、および記録媒体
JP6870827B2 (ja) 地図情報処理装置、地図情報処理方法およびプログラム
TW201608522A (zh) 一種影像資料處理方法及影像資料管理系統
JP6992592B2 (ja) コンテンツ提供装置及びコンテンツ提供方法
US20080235037A1 (en) Bonus Point System to Create a Profile of a Person
JP2021111215A (ja) プログラム及び注文システム
CN108513028A (zh) 信息显示系统及第一电子装置
WO2023135727A1 (ja) 情報提供装置、端末装置、情報提供方法、及びプログラム

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 13758530

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2014503770

Country of ref document: JP

Kind code of ref document: A

NENP Non-entry into the national phase

Ref country code: DE

WWE Wipo information: entry into national phase

Ref document number: 14383849

Country of ref document: US

WWE Wipo information: entry into national phase

Ref document number: IDP00201405417

Country of ref document: ID

WWE Wipo information: entry into national phase

Ref document number: 2013758530

Country of ref document: EP