WO2022074955A1 - 情報取得装置、情報取得プログラム、および情報取得方法 - Google Patents
情報取得装置、情報取得プログラム、および情報取得方法 Download PDFInfo
- Publication number
- WO2022074955A1 WO2022074955A1 PCT/JP2021/031467 JP2021031467W WO2022074955A1 WO 2022074955 A1 WO2022074955 A1 WO 2022074955A1 JP 2021031467 W JP2021031467 W JP 2021031467W WO 2022074955 A1 WO2022074955 A1 WO 2022074955A1
- Authority
- WO
- WIPO (PCT)
- Prior art keywords
- information
- code
- unit
- display
- image
- Prior art date
Links
- 238000000034 method Methods 0.000 title claims description 21
- 238000004891 communication Methods 0.000 description 10
- 238000010586 diagram Methods 0.000 description 7
- 238000001514 detection method Methods 0.000 description 6
- 235000008429 bread Nutrition 0.000 description 5
- 238000005516 engineering process Methods 0.000 description 4
- 230000006870 function Effects 0.000 description 4
- 238000010411 cooking Methods 0.000 description 3
- 239000000463 material Substances 0.000 description 3
- 230000002194 synthesizing effect Effects 0.000 description 3
- 240000007594 Oryza sativa Species 0.000 description 2
- 235000007164 Oryza sativa Nutrition 0.000 description 2
- 239000002131 composite material Substances 0.000 description 2
- 235000021186 dishes Nutrition 0.000 description 2
- 239000004615 ingredient Substances 0.000 description 2
- 235000009566 rice Nutrition 0.000 description 2
- 240000004808 Saccharomyces cerevisiae Species 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 235000013312 flour Nutrition 0.000 description 1
- 235000013305 food Nutrition 0.000 description 1
- 238000010438 heat treatment Methods 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 230000006698 induction Effects 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 238000004898 kneading Methods 0.000 description 1
- 239000011159 matrix material Substances 0.000 description 1
- 235000015927 pasta Nutrition 0.000 description 1
- 235000013550 pizza Nutrition 0.000 description 1
- 238000002360 preparation method Methods 0.000 description 1
- 150000003839 salts Chemical class 0.000 description 1
- 239000013589 supplement Substances 0.000 description 1
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06K—GRAPHICAL DATA READING; PRESENTATION OF DATA; RECORD CARRIERS; HANDLING RECORD CARRIERS
- G06K17/00—Methods or arrangements for effecting co-operative working between equipments covered by two or more of main groups G06K1/00 - G06K15/00, e.g. automatic card files incorporating conveying and reading operations
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06K—GRAPHICAL DATA READING; PRESENTATION OF DATA; RECORD CARRIERS; HANDLING RECORD CARRIERS
- G06K7/00—Methods or arrangements for sensing record carriers, e.g. for reading patterns
- G06K7/10—Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06K—GRAPHICAL DATA READING; PRESENTATION OF DATA; RECORD CARRIERS; HANDLING RECORD CARRIERS
- G06K7/00—Methods or arrangements for sensing record carriers, e.g. for reading patterns
- G06K7/10—Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation
- G06K7/14—Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation using light without selection of wavelength, e.g. sensing reflected white light
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
- G06Q50/10—Services
Definitions
- This disclosure relates to an information acquisition device, an information acquisition program, and an information acquisition method.
- QR codes registered trademarks
- Patent Document 1 discloses a music audition service system.
- the two-dimensional code is read as digital image data.
- the music identification symbol of the requested music content is decoded and transmitted. Receives and plays the requested music content.
- Information codes are expected to be used more frequently in a wide range of fields such as information provision and payment. Therefore, there is a need for a technique for further improving the convenience of the user when reading the information code.
- This disclosure provides a technique for improving user convenience when reading an information code.
- the information acquisition device of this embodiment includes a display device, an image acquisition unit, a display control unit, a code recognition unit, a code selection unit, and a code reading unit.
- the image acquisition unit acquires an image including an information code.
- the display control unit causes the display device to display the image acquired by the image acquisition unit.
- the code recognition unit recognizes the information code included in the image acquired by the image acquisition unit.
- the code selection unit receives from the user an instruction to select an information code to be read from the information codes recognized by the code recognition unit displayed on the display device.
- the code reading unit reads the information stored in the information code selected by the user.
- Another aspect of the present disclosure is an information acquisition program in an information acquisition device including a computer and a display device.
- the information acquisition program of this embodiment causes the computer to function as an image acquisition unit, a display control unit, a code recognition unit, a code selection unit, and a code reading unit.
- the image acquisition unit acquires an image including an information code.
- the display control unit causes the display device to display the image acquired by the image acquisition unit.
- the code recognition unit recognizes the information code included in the image acquired by the image acquisition unit.
- the code selection unit receives from the user an instruction to select an information code to be read from the information codes recognized by the code recognition unit displayed on the display device.
- the code reading unit reads the information stored in the information code selected by the user.
- FIG. 1 is a configuration diagram of an information providing system according to an embodiment of the present disclosure.
- FIG. 2 is a diagram showing an example of a menu list.
- FIG. 3 is a diagram showing an example of a display screen displayed by the information acquisition device.
- FIG. 4A is a diagram showing an example of layers constituting a display screen displayed by the information acquisition device.
- FIG. 4B is a diagram showing an example of layers constituting a display screen displayed by the information acquisition device.
- FIG. 5 is a diagram showing another example of the display screen displayed by the information acquisition device.
- FIG. 6 is a configuration diagram of an information acquisition device according to an embodiment.
- FIG. 7 is a flowchart showing the procedure of the information acquisition method according to the embodiment.
- the information is acquired by reading the information code in which the information is stored.
- the information code is, for example, a one-dimensional code such as a bar code, a two-dimensional code such as a QR code, or a graphic code such as a three-dimensional code.
- the two-dimensional code may be a matrix type such as a QR code, or a stack type in which a plurality of one-dimensional barcodes are stacked.
- This embodiment is an example of reading an information code that stores address information for accessing an information providing server that provides recipe information of a dish that can be cooked using a cooker.
- the address information is a path on the information providing server in which the recipe information is stored.
- This address information may be a URL (uniform resource locator) that can be accessed by a protocol such as HTTP (hypertext transfer protocol).
- This address information may be a character string or a symbol for generating an address according to a predetermined procedure.
- the address information stores information that can be used by a general browser such as a URL
- a general-purpose information code reader and a browser can also access the information providing server and acquire recipe information. Service can be provided.
- the technique of the present disclosure is applicable to a cooker capable of performing at least a part of the cooking procedure.
- This heating cooker includes a microwave oven, an oven, a toaster, a roaster, a gas cooktop, a rice cooker, a home bakery (breadmachine), an IH cooking heater (induction cooktop), a hot plate (electric griddle), and a pressure cooker (pressure). cooker) etc. are included.
- the technology disclosed in this disclosure can also be applied to cookers such as mixers (blenders), juicers, and food processors.
- cookers such as mixers (blenders), juicers, and food processors.
- the technology of the present disclosure can also be applied to terminal devices used for information provision and payment, and general household electric appliances having an information code.
- the following mainly describes an example of reading an information code in order to acquire recipe information of a dish that can be cooked using a home bakery from an information providing server.
- FIG. 1 shows the configuration of the information providing system 10 according to the embodiment of the present disclosure.
- the information providing system 10 includes a home bakery 20, an information acquisition device 100, an information providing server 200, and a communication network 12 connecting these.
- the home bakery 20 is a device for automatically making bread such as bread de mie, bread, and brioche from ingredients such as flour, yeast, salt, and water. ..
- the home bakery 20 is provided with setting information for automatically executing a process of kneading a material, a process of fermenting the kneaded material, a process of baking the fermented material, and the like for each type of bread.
- Home bakery 20 also has setting information for making bread dough, pizza dough, udon, pasta, etc., and setting information for making cakes, jams, dumplings, rice cakes, etc.
- the user specifies a desired dish from these dishes via the user interface 21.
- the home bakery 20 automatically cooks according to the designated cooking setting information.
- the information providing server 200 provides recipe information indicating necessary ingredients and preparations.
- the information providing server 200 has recipe information for each dish that can be automatically cooked.
- the information acquisition device 100 is used by the user to browse recipe information and the like.
- the information acquisition device 100 may be a mobile phone terminal such as a smartphone, or may be a tablet terminal or the like.
- the user searches for the desired dish from the menu list 30 attached to the home bakery 20.
- an information code 40 for storing address information for acquiring recipe information of a dish that can be automatically cooked by the home bakery 20 is described for each dish.
- the user causes the information acquisition device 100 to read the information code 40 that stores the address information for acquiring the recipe information of the desired dish.
- the information acquisition device 100 accesses the information providing server 200 by using the read address information, acquires the recipe information from the information providing server 200, and displays the recipe information.
- FIG. 2 shows an example of the menu list 30.
- the menu list 30 includes menu numbers, dish names, and information codes 40a to 40d of dishes that can be automatically cooked by the home bakery 20.
- Each of the information codes 40a to 40d stores the address information of the information providing server 200 that provides the recipe information of each dish.
- FIG. 3 shows an example of the display screen 150 displayed by the information acquisition device.
- the user captures the information code 40 of the menu list 30 by using the imaging device of the information acquisition device 100.
- the information acquisition device 100 displays the captured image on the display device.
- the information acquisition device 100 When the captured image includes the information code 40, the information acquisition device 100 recognizes the information code included in the captured image. For example, a QR code has an overall square shape and has a position detection pattern at three of its four corners. The information acquisition device 100 detects a position detection pattern from the captured image, and recognizes the information code 40 when all three position detection patterns of the information code 40 are detected. The information acquisition device 100 displays the recognized information code in an identifiable manner.
- a QR code has an overall square shape and has a position detection pattern at three of its four corners.
- the information acquisition device 100 detects a position detection pattern from the captured image, and recognizes the information code 40 when all three position detection patterns of the information code 40 are detected.
- the information acquisition device 100 displays the recognized information code in an identifiable manner.
- the frame 41 of the aspect A is AR-displayed around the recognized information code in order to indicate that the information code is recognized.
- AR display is a technology for superimposing a virtual reality image on a computer on a real world image and displaying it.
- the information acquisition device 100 reads the information code 40 recognized from the imaged device in the background, and displays the decoded information code 40 in an identifiable manner. As shown in FIG. 3, in order to show that the information code is readable, the frame 42 of the aspect B is AR-displayed around the information code that has been successfully read.
- the frame 41 of the aspect A is displayed in AR instead of the frame 42 of the aspect B. In this case, it may be displayed that decoding was not possible.
- the display screen changes. That is, the information acquisition device 100 accesses the information providing server 200 by using the address information stored in the selected information code 40.
- the information acquisition device 100 acquires recipe information of a dish corresponding to the selected information code 40 and displays the recipe information on the display device.
- the information code may not be recognized due to reasons such as being out of focus.
- neither the frame 41 of the aspect A nor the frame 42 of the aspect B is AR-displayed in the information code.
- the focus of the image sensor is adjusted to match the information code.
- the information code is recognized.
- the frame 41 of the aspect A is AR-displayed around the recognized information code.
- the frame 42 of the aspect B is AR-displayed.
- the conventional information code reader acquires the information stored in the first recognized information code. Therefore, as shown in FIG. 3, when a plurality of information codes are displayed in close proximity to each other, another information code may be read before the information code that the user wants to read. In this case, the information code to be read cannot be read.
- the information acquisition device 100 does not access the information providing server 200 as soon as the information stored in the information code is read.
- the information acquisition device 100 waits until the user selects the information code to be read.
- the information code to be read is an information code that the user wants the information acquisition device 100 to read.
- the user can have the information acquisition device 100 read the desired information code, and the convenience of the user can be improved.
- the information acquisition device 100 receives from the user an instruction to select an information code to be read from the recognized information codes displayed on the display device. As a result, it is possible to provide an intuitively easy-to-understand user interface, and it is possible to improve the convenience of the user.
- FIG. 4A and 4B show an example of a layer constituting a display screen displayed by the information acquisition device 100.
- FIG. 4A shows a layer 151 that displays an image captured by the image pickup device of the information acquisition device 100.
- FIG. 4B shows a layer 152 for the information acquisition device 100 to display the frame 41 of the aspect A and the frame 42 of the aspect B.
- the frame 41 of the aspect A is displayed at the position of the information code recognized by the information acquisition device 100.
- the frame 42 of the aspect B is displayed at the position of the information code that the information acquisition device 100 has successfully read.
- the information acquisition device 100 AR-displays the frame 41 of the aspect A and the frame 42 of the aspect B by superimposing and displaying the layer 151 and the layer 152 on the display device.
- the display positions of the frame 41 of the aspect A and the frame 42 of the aspect B on the captured image are made to follow the movement of the information code 40 in the captured image by the physical movement of the information acquisition device 100 or the like.
- FIG. 5 shows another example of the display screen displayed by the information acquisition device 100.
- information such as a menu number or a dish name may not be included in the captured image.
- the user cannot identify in the captured image which information code 40 is the information code for acquiring the recipe information of the desired dish.
- the information acquisition device 100 AR displays related information 43a and 43b related to the information stored in the information code directly above or in the vicinity of the recognized information code.
- the user can identify the desired information code 40 by the related information 43a and 43b even when the information described around the information code 40 is not included in the captured image.
- the convenience of the user can be improved.
- the related information 43a and the related information 43b may be characters, numbers, symbols, figures, images, icons, or the like.
- the related information 43a and 43b may be displayed on the layer 152 in which the frame 41 of the aspect A and the frame 42 of the aspect B are displayed, or may be displayed on another layer and overlaid.
- the related information 43a and 43b may be displayed in the frame 42. If the related information 43a and 43b are displayed in the vicinity of the information code 40 and the user can identify which information code the related information corresponds to, the related information 43a and 43b are displayed outside the frame 42. You may.
- the information acquisition device 100 accesses the information providing server 200 by using the address information stored in the selected information code 40.
- the information acquisition device 100 acquires recipe information of a dish corresponding to the selected information code 40, and displays the recipe information on the display device.
- the display position of the related information 43a and 43b on the captured image follows the movement of the information code 40 on the captured image due to the physical movement of the information acquisition device 100 or the like.
- the AR display of the related information 43a and 43b is stopped.
- the related information may be stored at a predetermined position of the information read from the information code 40.
- the related information may be stored in the information stored in the information code 40, separated by predetermined delimiter information, following the main information to be read.
- the delimiter information may be a predetermined bit, character, character string, symbol, or the like.
- the information acquisition device 100 uses the information stored before the delimiter information among the information read from the information code 40 as the address information.
- the information acquisition device 100 uses the information stored after the delimiter information as the related information.
- padding may be performed to supplement the meaningless predetermined bits after the valid data. That is, the information stored in the information code 40 includes "valid data”, “predetermined termination pattern”, and "padding bit".
- related information may be stored at the position where the padding bit is stored.
- a general information code reader reads only valid data.
- the information acquisition device 100 reads the information code 40, it can also read the padding bit to acquire related information. Therefore, the related information can be displayed in AR.
- the related information may be stored in another information code described or displayed in the vicinity of the information code 40.
- the GS1 DataBar Composite symbol standardized as ISO / IEC24723 may be used.
- the GS1 data bar composite symbol includes a symbol obtained by synthesizing a plurality of one-dimensional barcodes, a symbol obtained by synthesizing a plurality of one-dimensional barcodes and a two-dimensional code, a symbol obtained by synthesizing a plurality of two-dimensional codes, and the like.
- the address information and the related information may be stored in separate information codes.
- the information acquisition device 100 acquires the related information by reading an information code of the type in which the related information is stored.
- the information acquisition device 100 acquires address information by reading an information code of the type in which the address information is stored.
- the information acquisition device 100 reads the information code to acquire the address information.
- the information acquisition device 100 accesses the information providing server 200 using the address information and acquires related information.
- Related information and recipe information may be acquired using the same address information.
- the address for acquiring the related information may be different from the address for acquiring the recipe information.
- the information acquisition device 100 generates an address for acquiring related information from the address information read from the information code.
- the information acquisition device 100 accesses the information providing server 200 using the address and acquires related information.
- the information acquisition device 100 may access the information providing server 200 every time the related information is acquired.
- the information acquisition device 100 may download and hold related information from the information providing server 200 at a predetermined timing.
- the latest information held in the information providing server 200 can be acquired.
- the amount of data held in the information acquisition device 100 can be reduced.
- the delay time until the related information is displayed can be reduced. Even when the information acquisition device 100 cannot communicate with the information providing server 200, related information can be displayed.
- FIG. 6 shows the configuration of the information acquisition device 100 according to the embodiment.
- the information acquisition device 100 includes a communication device 101, an image pickup device 102, an input device 103, a display device 104, a storage device 105, and a control device 120.
- the communication device 101 controls communication of any communication method by wire or wireless.
- the image pickup apparatus 102 captures an image including the information code 40.
- the input device 103 receives an instruction input from the user and transmits the instruction input to the control device 120.
- the display device 104 displays the display screen generated by the control device 120.
- the storage device 105 stores data, programs, parameters, and the like used by the control device 120.
- the control device 120 includes an image acquisition unit 121, a code recognition unit 122, a code selection unit 123, a code reading unit 124, a related information acquisition unit 125, a recipe information acquisition unit 126, and a display control unit 127.
- the control device 120 is composed of hardware such as a CPU (central processing unit), memory, and other LSIs (large-scale integration), and software such as programs stored in the memory.
- hardware such as a CPU (central processing unit), memory, and other LSIs (large-scale integration), and software such as programs stored in the memory.
- control device 120 is a functional block configured by coordinating these elements. Therefore, it is easily understood by those skilled in the art that the control device 120 can be configured in various forms such as hardware alone or a combination of hardware and software.
- the image acquisition unit 121 acquires an image including an information code.
- the image acquisition unit 121 may acquire an image captured from the image pickup device 102, or may acquire an image from another device via the communication device 101.
- the image acquisition unit 121 may acquire a moving image or a still image.
- the image acquisition unit 121 may read out a moving image or a still image imaged by the image pickup device 102 and stored in the storage device 105.
- the image acquisition unit 121 may acquire a display image on a web browser (webbrowser) that displays a website on which the information code is posted.
- the image acquisition unit 121 may acquire an image of the site on which the information code is posted from a document file such as an instruction manual on which the information code is posted.
- the code recognition unit 122 recognizes the information code included in the image acquired by the image acquisition unit 121.
- the code recognition unit 122 recognizes the information code by, for example, detecting the position detection pattern of the information code.
- the code selection unit 123 selects the information code to be read.
- the code selection unit 123 may receive an information code selection instruction from the user via the input device 103.
- the code selection unit 123 may automatically select an information code according to a predetermined rule.
- the code selection unit 123 may preferentially select an information code closer to the center of the image, for example.
- the code selection unit 123 waits for a selection instruction from the user until a predetermined time elapses.
- the code selection unit 123 may automatically select an information code according to a predetermined rule when a predetermined time elapses without receiving a selection instruction from the user. This rule may be specified by the user in advance.
- the code selection unit 123 automatically selects the recognized information code when a predetermined time elapses without recognizing the second information code when one information code is recognized by the code recognition unit 122. You may.
- the code selection unit 123 may wait without automatically selecting an information code until it receives a selection instruction from the user.
- the user may specify in advance whether or not the code selection unit 123 automatically selects the information code, and the waiting time until the code selection unit 123 automatically selects the information code.
- the code reading unit 124 reads the information stored in the information code.
- the code reading unit 124 may read the information after the information code to be read is selected by the code selection unit 123.
- the code reading unit 124 may read the information in the background before the information code to be read is selected by the code selection unit 123.
- the related information acquisition unit 125 acquires related information related to the information stored in the information code.
- the method of acquiring related information is as described above.
- the related information acquisition unit 125 may acquire related information from the information providing server 200 at a predetermined timing and store the related information in the storage device 105.
- the recipe information acquisition unit 126 acquires the address information stored in the information code selected by the code selection unit 123 from the code reading unit 124.
- the recipe information acquisition unit 126 requests recipe information from the information providing server 200 via the communication device 101 using the address information.
- the recipe information acquisition unit 126 stores the recipe information acquired from the information providing server 200 in the storage device 105.
- the display control unit 127 causes the display device 104 to display the image acquired by the image acquisition unit 121.
- the display control unit 127 displays the information code recognized by the code recognition unit 122 in an identifiable manner.
- the display control unit 127 may superimpose and display the frame 41 of the aspect A on the recognized information code.
- the display control unit 127 acquires the position information of the information code recognized by the code recognition unit 122 from the code recognition unit 122, and displays the frame 41 of the aspect A at the position of the recognized information code in the layer 152.
- the display control unit 127 displays the information code successfully read by the code reading unit 124 in an identifiable manner. As described above, the display control unit 127 may superimpose and display the frame 42 of the aspect B on the information code that has been successfully read.
- the display control unit 127 acquires the position information of the information code recognized by the code recognition unit 122 from the code recognition unit 122, and displays the frame 42 of the aspect B at the position of the information code that has been successfully read in the layer 152.
- the display control unit 127 displays related information related to the information stored in the information code in the vicinity of the information code. As described above, the display control unit 127 may overlay the related information in the vicinity of the information code. The display control unit 127 may automatically adjust the position, size, display mode, etc. of displaying the related information so that the related information does not protrude from the display screen.
- the display control unit 127 acquires the position information of the information code recognized by the code recognition unit 122 from the code recognition unit 122, and displays the related information in the vicinity of the recognized information code in the layer 152.
- the position, size, display mode, and the like on which the related information is displayed may be specified in advance by the user.
- the display control unit 127 causes the display device 104 to display the recipe information acquired by the recipe information acquisition unit 126.
- a predetermined time may elapse without any information code being recognized by the code recognition unit 122.
- the display control unit 127 may display on the display device 104 that the time-out has occurred without the information code being recognized.
- the user may select an information code that is recognized by the code recognition unit 122 but cannot be read by the code reading unit 124.
- the display control unit 127 may display on the display device 104 that the display cannot be read.
- FIG. 7 is a flowchart showing the procedure of the information acquisition method according to the present embodiment.
- the image pickup device 102 of the information acquisition device 100 captures the information code described in the menu list 30 (step S10).
- the image acquisition unit 121 acquires an image including the information code (step S12).
- the display control unit 127 displays the image acquired by the image acquisition unit 121 on the display device 104 (step S14).
- the code recognition unit 122 recognizes the information code included in the image acquired by the image acquisition unit 121 (step S16).
- the display control unit 127 superimposes and displays the frame of the aspect A on the information code recognized by the code recognition unit 122 (step S18).
- the code reading unit 124 reads the information stored in the information code recognized by the code recognition unit 122 in the background (step S20).
- the display control unit 127 superimposes and displays the frame of aspect B on the information code that has been successfully read by the code recognition unit 122 (step S22).
- the related information acquisition unit 125 requests the information providing server 200 for related information related to the information stored in the information code (step S24).
- the information providing server 200 transmits the requested related information to the information acquisition device 100 (step S26).
- the display control unit 127 superimposes and displays the acquired related information in the vicinity of the information code (step S28).
- the related information acquisition unit 125 acquires the related information from the information code or the like instead of step S24 and step S26.
- the code selection unit 123 receives an information code selection instruction from the user via the input device 103 (step S30).
- the recipe information acquisition unit 126 acquires the address information stored in the information code selected by the code selection unit 123 from the code reading unit 124.
- the recipe information acquisition unit 126 requests recipe information from the information providing server 200 via the communication device 101 using the address information (step S32).
- the information providing server 200 transmits the requested recipe information to the information acquisition device 100 (step S34).
- the display control unit 127 causes the display device 104 to display the recipe information acquired by the recipe information acquisition unit 126 (step S36).
- the information acquisition device includes an image acquisition unit, a display control unit, a code recognition unit, a code selection unit, and a code reading unit.
- the image acquisition unit acquires an image including an information code.
- the display control unit displays the image acquired by the image acquisition unit on the display device.
- the code recognition unit recognizes the information code included in the image acquired by the image acquisition unit.
- the code selection unit receives from the user an instruction to select an information code to be read from the information codes recognized by the code recognition unit displayed on the display device.
- the code reading unit reads the information stored in the information code selected by the user.
- the display control unit displays the information code recognized by the code recognition unit in an identifiable manner. Thereby, the convenience of the user can be further improved.
- the display control unit superimposes and displays information indicating that the information code is a recognized information code on the information code recognized by the code recognition unit.
- the display control unit displays the information code successfully read by the code reading unit in an identifiable manner. Thereby, the convenience of the user can be further improved.
- the display control unit superimposes and displays information indicating that the information code is a readable information code on the information code that the code reading unit has successfully read.
- the display control unit displays related information related to the information stored in the information code directly above or in the vicinity of the information code. Thereby, the convenience of the user can be further improved.
- the related information is information included in a predetermined position of the information stored in the information code. This makes it possible to provide related information with a simple configuration.
- the related information is a character string included in the address information stored in the information code. This makes it possible to provide related information with a simple configuration.
- the related information is the information included in the bits supplemented by padding after the information stored in the information code. This makes it possible to provide related information with a simple configuration.
- the related information is information acquired from an information providing server that can be accessed using the address information stored in the information code. This makes it possible to provide related information with a simple configuration.
- the related information is information stored in another information code existing in the vicinity of the information code. This makes it possible to provide related information with a simple configuration.
- the code selection unit receives the selection instruction of the related information displayed on the display device from the user, and selects the information code corresponding to the instructed related information. Thereby, the convenience of the user can be further improved.
- the code reading unit automatically displays the information stored in the information code when the state in which only one information code recognized by the code recognition unit is displayed on the display device continues for a predetermined time or longer. Read to. Thereby, the convenience of the user can be further improved.
- the display control unit displays on the display device that the information code is not recognized and the time-out occurs when a predetermined time elapses without displaying any information code recognized by the code recognition unit on the display device. Let me. Thereby, the convenience of the user can be further improved.
- the information acquisition program causes the computer to function as an image acquisition unit, a display control unit, a code recognition unit, a code selection unit, and a code reading unit.
- the image acquisition unit acquires an image including an information code.
- the display control unit displays the image acquired by the image acquisition unit on the display device.
- the code recognition unit recognizes the information code included in the image acquired by the image acquisition unit.
- the code selection unit receives from the user an instruction to select an information code to be read from the information codes displayed on the display device and recognized by the code recognition unit.
- the code reading unit reads the information stored in the information code selected by the user.
- the information code 40 is described in the menu list 30.
- the information code 40 may be displayed on the display device of the home bakery 20 or the like.
- the technique of the present disclosure can be applied to terminal devices used for information provision and payment, and general home appliances having an information code for storing information.
- the information acquisition device 100 acquires recipe information from the information providing server 200.
- the information acquisition device 100 may acquire recipe information from a database in a dedicated application software having this function.
- the application software is referred to as an application.
- the dedicated application with this function is not a so-called web application (web application), but a native application that operates offline.
- web application web application
- the information acquisition device 100 updates the native application in a state where it can communicate with the information providing server 200.
- the dedicated application may acquire the updated recipe information from the information providing server 200 and hold it in the database in the dedicated application.
- the information code includes address information for accessing the recipe information in the database of the dedicated application executed by the information acquisition device 100.
- This address information may be, for example, character information such as "menu1" or a character string using a custom URI schema (custom uniform resource identifier schema) starting with something other than "http:” or "https:”. ..
- This disclosure can be used as an information acquisition device for reading an information code.
- Information provision system 12
- Communication network 20
- Home bakery 21 User interface 30
- Information code 40a
- Information code 40b
- Information code 40c
- Information code 40d
- Frame 42
- Frame 43a
- Related information 43b
- Information acquisition device 101
- Communication device 102
- Image pickup device 103
- Input device 104
- Display device 105
- Control device 121
- Image acquisition unit 122
- Code recognition unit 123
- Code selection unit Code reading unit
- Related information acquisition unit 126
- Recipe information acquisition unit 127
- Display control unit 150
- Display screen 151
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Business, Economics & Management (AREA)
- Health & Medical Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Electromagnetism (AREA)
- Artificial Intelligence (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Toxicology (AREA)
- Tourism & Hospitality (AREA)
- Economics (AREA)
- Human Resources & Organizations (AREA)
- Marketing (AREA)
- Primary Health Care (AREA)
- Strategic Management (AREA)
- General Business, Economics & Management (AREA)
- User Interface Of Digital Computer (AREA)
- Telephone Function (AREA)
Abstract
情報取得装置は、画像取得部と、表示制御部と、コード認識部と、コード選択部と、コード読取部と、を備える。画像取得部は、情報コードを含む画像を取得する。表示制御部は、画像取得部により取得された画像を表示装置に表示する。コード認識部は、画像取得部により取得された画像に含まれる情報コードを認識する。コード選択部は、表示装置に表示されて、コード認識部により認識された情報コードの中から、読み取り対象の情報コードの選択指示を使用者から受け取る。コード読取部は、使用者により選択された情報コードに格納された情報を読み取る。
Description
本開示は、情報取得装置、情報取得プログラム、および情報取得方法に関する。
多くの人がスマートフォンなどの携帯端末を所持している現状において、携帯端末で読み取り可能なQRコード(登録商標)などの情報コードが広く利用されている。
例えば、特許文献1には、音楽試聴サービスシステムが開示されている。このシステムにおいて、二次元コードをデジタル画像データとして読み取る。読み取った二次元コードのデジタル画像データから、リクエストする音楽コンテンツの音楽識別記号を復号して送信する。リクエストした音楽コンテンツを受信して再生する。
情報コードは、情報提供および決済など、幅広い分野においてより頻繁に利用されることが期待される。従って、情報コードを読み取る際の使用者の利便性をさらに向上させる技術が求められる。
本開示は、情報コードを読み取る際の使用者の利便性を向上させる技術を提供する。
本開示における一態様は情報取得装置である。本態様の情報取得装置は、表示装置と、画像取得部と、表示制御部と、コード認識部と、コード選択部と、コード読取部と、を備える。
画像取得部は、情報コードを含む画像を取得する。表示制御部は、画像取得部により取得された画像を表示装置に表示させる。コード認識部は、画像取得部により取得された画像に含まれる情報コードを認識する。
コード選択部は、表示装置に表示される、コード認識部により認識された情報コードの中から、読み取り対象の情報コードの選択指示を使用者から受け取る。コード読取部は、使用者により選択された情報コードに格納された情報を読み取る。
本開示における他の態様は、コンピュータと表示装置とを備えた情報取得装置における情報取得プログラムである。本態様の情報取得プログラムは、コンピュータを、画像取得部と、表示制御部と、コード認識部と、コード選択部と、コード読取部と、として機能させる。
画像取得部は、情報コードを含む画像を取得する。表示制御部は、画像取得部により取得された画像を表示装置に表示させる。コード認識部は、画像取得部により取得された画像に含まれる情報コードを認識する。
コード選択部は、表示装置に表示される、コード認識部により認識された情報コードの中から、読み取り対象の情報コードの選択指示を使用者から受け取る。コード読取部は、使用者により選択された情報コードに格納された情報を読み取る。
本開示の技術によれば、情報コードを読み取る際の使用者の利便性を向上させることができる。
以下、図面を参照しながら本開示の実施の形態を詳細に説明する。但し、必要以上に詳細な説明は省略する場合がある。例えば、既知の事項の説明、または、実質的に同一の構成に対する重複説明を省略する場合がある。
添付図面および以下の説明は、当業者が本開示を十分に理解するために提供されるのであって、これらにより請求の範囲に記載の主題を限定することを意図していない。
本実施の形態では、情報が格納された情報コードを読み取って情報を取得する。情報コードは、例えば、バーコードなどの一次元コード、QRコードなどの二次元コード、三次元コードなどの図形コードである。二次元コードは、QRコードなどのマトリックス式でもよいし、一次元バーコードを複数重ねたスタック式でもよい。
本実施の形態は、調理器を使用して調理可能な料理のレシピ情報を提供する情報提供サーバにアクセスするためのアドレス情報を格納する情報コードを読み取る例である。アドレス情報は、レシピ情報が格納された情報提供サーバ上のパスである。
このアドレス情報は、HTTP(hypertext transfer protocol)などのプロトコルによりアクセス可能なURL(uniform resource locator)などでもよい。このアドレス情報は、所定の手順によりアドレスを生成するための文字列または記号などでもよい。
アドレス情報が、URLなどの一般的なブラウザが利用可能な情報が格納される場合、一般的な情報コードリーダとブラウザとによっても情報提供サーバにアクセスしてレシピ情報を取得することが可能な汎用的なサービスを提供することができる。
本開示の技術は、調理の手順のうち少なくとも一部を実行可能な加熱調理器に適用可能である。この加熱調理器には、電子レンジ、オーブン、トースタ、ロースタ、ガスコンロ(gas cooktop)、炊飯器、ホームベーカリ(bread machine)、IHクッキングヒータ(induction cooktop)、ホットプレート(electric griddle)、圧力鍋(pressure cooker)などが含まれる。
本開示の技術は、ミキサ(blender)、ジューサ、フードプロセッサなどの調理器にも適用可能である。本開示の技術は、情報提供および決済などに用いる端末装置、情報コードを有する一般的な家庭用電化製品にも適用可能である。
以下、ホームベーカリを使用して調理可能な料理のレシピ情報を情報提供サーバから取得するために情報コードを読み取る例について主に説明する。
[1-1.構成]
図1は、本開示の実施の形態に係る情報提供システム10の構成を示す。情報提供システム10は、ホームベーカリ20、情報取得装置100、情報提供サーバ200、およびこれらを接続する通信網12を備える。
図1は、本開示の実施の形態に係る情報提供システム10の構成を示す。情報提供システム10は、ホームベーカリ20、情報取得装置100、情報提供サーバ200、およびこれらを接続する通信網12を備える。
ホームベーカリ20は、小麦粉、イースト(yeast)、塩、水などの材料から、パン・ド・ミ(pain de mie)、食パン、ブリオッシュ(brioche)などのパンを自動的に作るための装置である。ホームベーカリ20は、材料を練る工程、練った材料を発酵させる工程、発酵した材料を焼く工程などを自動的に実行するための設定情報を、パンの種類ごとに備える。
ホームベーカリ20はさらに、パン生地、ピザ生地、うどん、パスタなどを作るための設定情報、および、ケーキ、ジャム、餡子、餅などを作るための設定情報を備える。使用者は、ユーザインタフェース21を介して、これらの料理の中から所望の料理を指定する。ホームベーカリ20は、指定された料理の設定情報に応じて自動調理を行う。
情報提供サーバ200は、必要な材料および下ごしらえなどを示すレシピ情報を提供する。情報提供サーバ200は、自動調理可能な料理ごとにレシピ情報を有する。
情報取得装置100は、使用者がレシピ情報などを閲覧するために使用される。情報取得装置100は、スマートフォンなどの携帯電話端末でもよく、タブレット端末などでもよい。
使用者は、ホームベーカリ20に付属するメニュー一覧表30から、所望の料理を検索する。メニュー一覧表30は、ホームベーカリ20により自動調理可能な料理のレシピ情報を取得するためのアドレス情報を格納する情報コード40を料理ごとに記載する。
使用者は、所望の料理のレシピ情報を取得するためのアドレス情報を格納する情報コード40を情報取得装置100に読み取らせる。情報取得装置100は、読み取ったアドレス情報を用いて情報提供サーバ200にアクセスし、情報提供サーバ200からレシピ情報を取得してこのレシピ情報を表示する。
図2は、メニュー一覧表30の例を示す。メニュー一覧表30は、ホームベーカリ20が自動調理可能な料理のメニュー番号、料理名、および情報コード40a~40dを含む。情報コード40a~40dの各々は、各料理のレシピ情報を提供する情報提供サーバ200のアドレス情報を格納する。
図3は、情報取得装置が表示する表示画面150の例を示す。使用者は、レシピ情報を情報提供サーバ200から取得するために、情報取得装置100の撮像装置を用いてメニュー一覧表30の情報コード40を撮像する。情報取得装置100は、撮像された画像を表示装置に表示する。
撮像された画像に情報コード40が含まれる場合、情報取得装置100は、撮像された画像に含まれる情報コードを認識する。例えば、QRコードは、全体的に正方形の形状を有し、その四つの角のうちの三つの角に位置検出パターンを有する。情報取得装置100は、撮像された画像から位置検出パターンを検出し、情報コード40の三つの位置検出パターンが全て検出された場合、情報コード40を認識する。情報取得装置100は、認識された情報コードを識別可能な態様で表示する。
図3に示すように、認識済みの情報コードであることを示すために、認識された情報コードの周囲に態様Aの枠41がAR表示される。AR表示とは、現実世界の映像にコンピュータ上の仮想現実の映像を重ね合わせて表示する技術である。
情報取得装置100は、撮像された装置から認識された情報コード40をバックグラウンドで読み取り、デコードした情報コード40を識別可能な態様で表示する。図3に示すように、読み取り可能な情報コードであることを示すために、読み取りに成功した情報コードの周囲に態様Bの枠42がAR表示される。
情報取得装置100が情報コード40cを認識したもののデコードすることができない場合、態様Bの枠42ではなく、態様Aの枠41がAR表示される。この場合、デコードできなかった旨が表示されてもよい。
情報コード40dの三つの位置検出パターンのうち二つしか撮像された画像に含まれていない。このため、情報取得装置100は情報コード40dを認識することができない。従って、情報コード40dには、態様Aの枠41も態様Bの枠42もAR表示されない。
態様Bの枠42がAR表示されている情報コード40aまたは情報コード40bを、使用者がタッチパネルなどを介して選択すると、表示画面が変化する。すなわち、情報取得装置100は、選択された情報コード40に格納されたアドレス情報を用いて情報提供サーバ200にアクセスする。情報取得装置100は、選択された情報コード40に対応する料理のレシピ情報を取得してそのレシピ情報を表示装置に表示する。
撮像された画像が三つの位置検出パターンを含んでいても、ピントが合っていないなどの理由で情報コードを認識できない場合がある。この場合、情報コードに態様Aの枠41も態様Bの枠42もAR表示されない。
使用者がタッチパネルなどを介してその情報コードを読み取りが必要な情報コードとして選択すると、撮像素子のピントが情報コードに合うように調整される。その結果、情報コードは認識される。認識済みの情報コードであることを示すために、認識された情報コードの周囲に態様Aの枠41がAR表示される。認識した情報コードがデコードされると、態様Bの枠42がAR表示される。
使用者が情報コードを読み取るために撮像装置で情報コードを撮像すると、従来の情報コードリーダは、最初に認識した情報コードに格納された情報を取得する。従って、図3に示すように、複数の情報コードが近接して表示される場合、使用者が読み取りたい情報コードよりも先に別の情報コードが読み取られる場合がある。この場合、読み取りたい情報コードを読み取ることができない。
この問題を解決するため、情報取得装置100は、情報コードに格納された情報を読み取るとすぐに情報提供サーバ200にアクセスすることはしない。情報取得装置100は、使用者が読み取り対象の情報コードを選択するまで待機する。読み取り対象の情報コードとは、使用者が情報取得装置100に読み取らせたいと考えている情報コードである。
これにより、使用者は所望の情報コードを情報取得装置100に読み取らせることができ、使用者の利便性を向上させることができる。
情報取得装置100は、表示装置に表示される、認識された情報コードの中から、読み取り対象の情報コードの選択指示を使用者から受け取る。これにより、直感的に分かりやすいユーザインタフェースを提供することができ、使用者の利便性を向上させることができる。
図4Aおよび図4Bは、情報取得装置100が表示する表示画面を構成するレイヤ(layer)の例を示す。図4Aは、情報取得装置100の撮像装置により撮像された画像を表示するレイヤ151を示す。図4Bは、情報取得装置100が態様Aの枠41および態様Bの枠42を表示するためのレイヤ152を示す。
レイヤ152において、態様Aの枠41は、情報取得装置100が認識した情報コードの位置に表示される。態様Bの枠42は、情報取得装置100が読み取りに成功した情報コードの位置に表示される。情報取得装置100は、レイヤ151とレイヤ152とを表示装置に重畳表示することにより、態様Aの枠41および態様Bの枠42をAR表示する。
態様Aの枠41および態様Bの枠42の撮像画像上での表示位置を、情報取得装置100の物理的な移動などにより、撮像された画像における情報コード40の移動に追随させる。
移動に伴い情報コード40a、40b、40cが撮像された画像から消えて、情報の認識またはデコードができなくなると、態様Aの枠41および態様Bの枠42のAR表示を停止する。
そのため、一度検知された情報コードに関連するAR表示が蓄積され、撮像された画像が見づらくなることを防止することができる。どの情報コードが現在実際に検知されているのかを判別しにくくなることを防止することができる。
図5は、情報取得装置100が表示する表示画面の別の例を示す。使用者が情報取得装置100を用いて情報コード40を撮像する際に、メニュー番号または料理名などの情報が撮像された画像に入らないことがある。この場合、使用者は、どの情報コード40が所望の料理のレシピ情報を取得するための情報コードであるのかを撮像された画像において識別することができない。
この問題を解決するため、情報取得装置100は、認識された情報コードの直上または近傍に、その情報コードに格納された情報に関連する関連情報43a、43bをAR表示する。これにより、使用者は、情報コード40の周囲に記載された情報などが撮像された画像に含まれない場合でも、関連情報43a、43bにより所望の情報コード40を識別することができる。その結果、使用者の利便性を向上させることができる。
関連情報43a、関連情報43bは、文字、数字、記号、図形、画像、またはアイコンなどでもよい。関連情報43a、43bは、態様Aの枠41および態様Bの枠42が表示されるレイヤ152に表示されてもよく、別のレイヤに表示されてオーバーレイ(overlay)されてもよい。
関連情報43a、43bは、枠42内に表示されてもよい。関連情報43a、43bが情報コード40の近傍に表示されて、その関連情報がどの情報コードに対応するかを使用者が識別可能であれば、関連情報43a、43bは枠42の外に表示されてもよい。
このとき、使用者が、情報コード40ではなく関連情報43a、43bを、タッチパネルなどを介して選択しても、表示画面が変化する。情報取得装置100は、選択された情報コード40に格納されたアドレス情報を用いて情報提供サーバ200にアクセスする。情報取得装置100は、選択された情報コード40に対応する料理のレシピ情報を取得し、そのレシピ情報を表示装置に表示する。
関連情報43a、43bの撮像画像上の表示位置を、情報取得装置100の物理的な移動などによる情報コード40の撮像画像上の移動に追随させる。移動に伴い情報コード40a、40bが撮像画像上から消えて、情報の認識またはデコードができなくなると、関連情報43a、43bのAR表示を停止する。
そのため、一度検知された情報コードに関連するAR表示が蓄積され、撮像された画像が見づらくなることを防止することができる。どの関連情報が表示されているのかを判別しにくくなることを防止することができる。
例えば、関連情報は、情報コード40から読み取られる情報の所定位置に格納されてもよい。関連情報は、情報コード40に格納された情報において、読み取られるべき主情報に続いて、所定の区切り情報で区切られて格納されてもよい。
区切り情報は、所定のビット、文字、文字列、記号などでもよい。本実施の形態では、情報コード40にアドレス情報が格納される。このため、「?」などの文字を区切り文字として、「https://xxx/menu1.html?ar=パン・ド・ミ」のようにクエリ(query)文字列として関連情報が格納されてもよい。
この場合、情報取得装置100は、情報コード40から読み取られた情報のうち、区切り情報よりも前に格納された情報をアドレス情報として使用する。情報取得装置100は、区切り情報よりも後に格納された情報を関連情報として使用する。
情報コード40に格納される情報の量が、情報コード40に格納可能な情報量よりも少ない場合、有効データの後に意味のない所定のビットを補うパディングが行われてもよい。すなわち、情報コード40に格納される情報は、「有効データ」、「所定の終端パターン」、「パディングビット」を含む。
この場合、パディングビットが格納される位置に関連情報が格納されてもよい。一般的な情報コードリーダは、情報コード40を読み取る場合、有効データのみを読み取る。しかし、情報取得装置100は、情報コード40を読み取る際、パディングビットをも読み取って関連情報を取得することができる。このため、関連情報をAR表示することができる。
この例では、一般的な情報コードリーダでも主情報を読み取り可能な汎用的なサービスを提供することができる。
関連情報は、情報コード40の近傍に記載または表示された別の情報コードに格納されてもよい。例えば、ISO/IEC24723として規格化されたGS1データバー合成シンボル(GS1 DataBar Composite symbol)を利用してもよい。GS1データバー合成シンボルは、複数の一次元バーコードを合成したシンボル、複数の一次元バーコードと二次元コードを合成したシンボル、複数の二次元コードを合成したシンボルなどを含む。
このような合成シンボルを利用して、アドレス情報と関連情報とが別々の情報コードに格納されてもよい。この場合、情報取得装置100は、関連情報が格納される種類の情報コードを読み取ることにより関連情報を取得する。情報取得装置100は、アドレス情報が格納される種類の情報コードを読み取ることによりアドレス情報を取得する。
関連情報は、情報提供サーバ200から提供されてもよい。この場合、情報取得装置100は、情報コードを読み取ってアドレス情報を取得する。情報取得装置100は、そのアドレス情報を用いて情報提供サーバ200にアクセスして関連情報を取得する。
同じアドレス情報を用いて関連情報とレシピ情報とが取得されてもよい。関連情報を取得するためのアドレスが、レシピ情報を取得するためのアドレスと異なってもよい。
後者の場合、情報取得装置100は、情報コードから読み取られたアドレス情報から、関連情報を取得するためのアドレスを生成する。情報取得装置100は、そのアドレスを用いて情報提供サーバ200にアクセスして関連情報を取得する。
情報取得装置100は、関連情報を取得するたびに情報提供サーバ200にアクセスしてもよい。情報取得装置100は、所定のタイミングで情報提供サーバ200から関連情報をダウンロードして保持してもよい。
前者の場合、情報提供サーバ200に保持された最新の情報を取得することができる。情報取得装置100に保持されるデータ量を低減させることができる。後者の場合、関連情報が表示されるまでの遅延時間を低減させることができる。情報取得装置100が情報提供サーバ200と通信できない場合でも、関連情報を表示することができる。
図6は、実施の形態に係る情報取得装置100の構成を示す。情報取得装置100は、通信装置101、撮像装置102、入力装置103、表示装置104、記憶装置105、および制御装置120を備える。
通信装置101は、有線または無線による任意の通信方式の通信を制御する。撮像装置102は、情報コード40を含む画像を撮像する。入力装置103は、使用者から指示入力を受け取り、その指示入力を制御装置120に伝達する。表示装置104は、制御装置120により生成された表示画面を表示する。記憶装置105は、制御装置120が使用するデータ、プログラム、パラメータなどを記憶する。
制御装置120は、画像取得部121、コード認識部122、コード選択部123、コード読取部124、関連情報取得部125、レシピ情報取得部126、および表示制御部127を備える。
制御装置120は、CPU(central processing unit)、メモリ、その他のLSI(large-scale integration)などのハードウェアと、メモリに記憶されたプログラムなどのソフトウェアとによって構成される。
本実施の形態では、制御装置120は、これらの要素の連携によって構成される機能ブロックである。従って、制御装置120をハードウェアのみ、またはハードウェアとソフトウェアとの組合せなどの種々の形態で構成可能であるということは、当業者には容易に理解可能である。
画像取得部121は、情報コードが含まれる画像を取得する。画像取得部121は、撮像装置102から撮像された画像を取得してもよく、通信装置101を介して他の装置から画像を取得してもよい。画像取得部121は、動画像を取得してもよく、静止画像を取得してもよい。
画像取得部121は、撮像装置102により撮像され、記憶装置105に保存された動画像または静止画像を読み出してもよい。画像取得部121は、情報コードを掲載するウェブサイト(website)を表示するウェブブラウザ(web browser)上の表示画像を取得してもよい。画像取得部121は、情報コードを掲載する取扱説明書などの文書ファイルから情報コードを掲載するサイトの画像を取得してもよい。
コード認識部122は、画像取得部121により取得された画像に含まれる情報コードを認識する。コード認識部122は、例えば、情報コードの位置検出パターンを検出することにより情報コードを認識する。
コード選択部123は、コード認識部122により複数の情報コードが認識された場合、読み取り対象の情報コードを選択する。コード選択部123は、入力装置103を介して使用者から情報コードの選択指示を受け取ってもよい。コード選択部123は、所定の規則に従って自動的に情報コードを選択してもよい。コード選択部123は、例えば、画像の中央により近い情報コードを優先的に選択してもよい。
コード選択部123は、所定の時間が経過するまで使用者からの選択指示を待機する。コード選択部123は、使用者からの選択指示を受け取らないまま所定の時間が経過した場合、所定の規則に従って情報コードを自動的に選択してもよい。この規則は、予め使用者から指定されてもよい。
コード選択部123は、コード認識部122により一つの情報コードが認識された場合に、二つ目の情報コードが認識されないまま所定時間が経過すると、認識されている情報コードを自動的に選択してもよい。
コード選択部123は、使用者からの選択指示を受け取るまで、自動的に情報コードを選択せずに待機してもよい。使用者が、コード選択部123が情報コードを自動的に選択するか否か、およびコード選択部123が情報コードを自動的に選択するまでの待機時間などを予め指定してもよい。
コード読取部124は、情報コードに格納された情報を読み取る。コード読取部124は、コード選択部123により情報を読み取り対象の情報コードが選択されてから情報を読み取ってもよい。コード読取部124は、コード選択部123により情報を読み取り対象の情報コードが選択される前にバックグラウンドで情報を読み取ってもよい。
関連情報取得部125は、情報コードに格納された情報に関連する関連情報を取得する。関連情報の取得方法は上述の通りである。関連情報取得部125は、所定のタイミングで情報提供サーバ200から関連情報を取得して、その関連情報を記憶装置105に格納してもよい。
レシピ情報取得部126は、コード選択部123により選択された情報コードに格納されたアドレス情報をコード読取部124から取得する。レシピ情報取得部126は、そのアドレス情報を用いて、通信装置101を介して情報提供サーバ200にレシピ情報を要求する。レシピ情報取得部126は、情報提供サーバ200から取得したレシピ情報を記憶装置105に格納する。
表示制御部127は、画像取得部121により取得された画像を表示装置104に表示させる。表示制御部127は、コード認識部122により認識された情報コードを識別可能な態様で表示する。
上述したように、表示制御部127は、認識された情報コードに態様Aの枠41を重畳表示してもよい。表示制御部127は、コード認識部122により認識された情報コードの位置情報をコード認識部122から取得し、レイヤ152において、認識された情報コードの位置に態様Aの枠41を表示する。
表示制御部127は、コード読取部124が読み取りに成功した情報コードを識別可能な態様で表示する。上述したように、表示制御部127は、読み取りに成功した情報コードに態様Bの枠42を重畳表示してもよい。
表示制御部127は、コード認識部122により認識された情報コードの位置情報をコード認識部122から取得し、レイヤ152において、読み取りに成功した情報コードの位置に態様Bの枠42を表示する。
表示制御部127は、情報コードに格納された情報に関連する関連情報を情報コードの近傍に表示する。上述したように、表示制御部127は、関連情報を情報コードの近傍にオーバーレイ表示してもよい。関連情報が表示画面からはみ出さないように、表示制御部127が関連情報を表示する位置、大きさ、表示態様などを自動的に調整してもよい。
表示制御部127は、コード認識部122により認識された情報コードの位置情報をコード認識部122から取得し、レイヤ152において、認識された情報コードの近傍に関連情報を表示する。関連情報を表示する位置、大きさ、表示態様などは、使用者から予め指定されてもよい。
表示制御部127は、レシピ情報取得部126により取得されたレシピ情報を表示装置104に表示させる。
画像取得部121により取得された画像において、コード認識部122により情報コードが一つも認識されないまま所定時間が経過する場合がある。この場合、表示制御部127は、情報コードが認識されないままタイムアウトした旨を表示装置104に表示してもよい。
コード認識部122により認識されたものの、使用者がコード読取部124により読み取り不能な情報コードを選択する場合がある。この場合、表示制御部127は、読み取り不能である旨を表示装置104に表示してもよい。
[1-2.動作]
以上のように構成された情報提供システム10について、以下その動作、作用を説明する。
以上のように構成された情報提供システム10について、以下その動作、作用を説明する。
図7は、本実施の形態に係る情報取得方法の手順を示すフローチャートである。情報取得装置100の撮像装置102は、メニュー一覧表30に記載された情報コードを撮像する(ステップS10)。画像取得部121は、情報コードが含まれる画像を取得する(ステップS12)。表示制御部127は、画像取得部121により取得された画像を表示装置104に表示する(ステップS14)。
コード認識部122は、画像取得部121により取得された画像に含まれる情報コードを認識する(ステップS16)。表示制御部127は、コード認識部122により認識された情報コードに態様Aの枠を重畳表示する(ステップS18)。
コード読取部124は、コード認識部122により認識された情報コードに格納された情報をバックグラウンドで読み取る(ステップS20)。表示制御部127は、コード認識部122により読み取りに成功した情報コードに態様Bの枠を重畳表示する(ステップS22)。
関連情報取得部125は、情報コードに格納された情報に関連する関連情報を情報提供サーバ200に要求する(ステップS24)。情報提供サーバ200は、要求された関連情報を情報取得装置100に送信する(ステップS26)。
表示制御部127は、取得された関連情報を情報コードの近傍に重畳表示する(ステップS28)。関連情報が情報コードなどから取得される場合、ステップS24およびステップS26に代えて、関連情報取得部125は情報コードなどから関連情報を取得する。
コード選択部123は、入力装置103を介して使用者から情報コードの選択指示を受け取る(ステップS30)。レシピ情報取得部126は、コード選択部123により選択された情報コードに格納されたアドレス情報をコード読取部124から取得する。レシピ情報取得部126は、そのアドレス情報を用いて、通信装置101を介して情報提供サーバ200にレシピ情報を要求する(ステップS32)。
情報提供サーバ200は、要求されたレシピ情報を情報取得装置100に送信する(ステップS34)。表示制御部127は、レシピ情報取得部126により取得されたレシピ情報を表示装置104に表示させる(ステップS36)。
[1-3.効果等]
以上のように、本実施の形態において、情報取得装置は、画像取得部と、表示制御部と、コード認識部と、コード選択部と、コード読取部と、を備える。
以上のように、本実施の形態において、情報取得装置は、画像取得部と、表示制御部と、コード認識部と、コード選択部と、コード読取部と、を備える。
画像取得部は、情報コードを含む画像を取得する。表示制御部は、画像取得部により取得された画像を表示装置に表示する。コード認識部は、画像取得部により取得された画像に含まれる情報コードを認識する。
コード選択部は、表示装置に表示される、コード認識部により認識された情報コードの中から、読み取り対象の情報コードの選択指示を使用者から受け取る。コード読取部は、使用者により選択された情報コードに格納された情報を読み取る。
これにより、使用者が使いやすいユーザインタフェースを提供することができ、使用者の利便性を向上させることができる。
本実施の形態において、表示制御部は、コード認識部により認識された情報コードを識別可能な態様で表示する。これにより、使用者の利便性をさらに向上させることができる。
本実施の形態において、表示制御部は、コード認識部により認識された情報コードに、認識済みの情報コードであることを示す情報を重畳表示する。これにより、使用者の利便性をさらに向上させることができる。
本実施の形態において、表示制御部は、コード読取部が読み取りに成功した情報コードを識別可能な態様で表示する。これにより、使用者の利便性をさらに向上させることができる。
本実施の形態において、表示制御部は、コード読取部が読み取りに成功した情報コードに、読取可能な情報コードであることを示す情報を重畳表示する。これにより、使用者の利便性をさらに向上させることができる。
本実施の形態において、表示制御部は、情報コードに格納された情報に関連する関連情報を情報コードの直上または近傍に表示する。これにより、使用者の利便性をさらに向上させることができる。
本実施の形態において、関連情報は、情報コードに格納された情報の所定位置に含まれる情報である。これにより、簡易な構成により関連情報を提供することができる。
本実施の形態において、関連情報は、情報コードに格納されたアドレス情報に含まれる文字列である。これにより、簡易な構成により関連情報を提供することができる。
本実施の形態において、関連情報は、情報コードに格納された情報の後にパディングにより補われたビットに含まれる情報である。これにより、簡易な構成により関連情報を提供することができる。
本実施の形態において、関連情報は、情報コードに格納されたアドレス情報を用いてアクセス可能な情報提供サーバから取得される情報である。これにより、簡易な構成により関連情報を提供することができる。
本実施の形態において、関連情報は、情報コードの近傍に存在する別の情報コードに格納された情報である。これにより、簡易な構成により関連情報を提供することができる。
本実施の形態において、コード選択部は、表示装置に表示された関連情報の選択指示を使用者から受け取り、指示された関連情報に対応する情報コードを選択する。これにより、使用者の利便性をさらに向上させることができる。
本実施の形態において、コード読取部は、コード認識部により認識された情報コードが表示装置に一つだけ表示される状態が所定時間以上継続した場合、その情報コードに格納された情報を自動的に読み取る。これにより、使用者の利便性をさらに向上させることができる。
本実施の形態において、表示制御部は、コード認識部により認識された情報コードが一つも表示装置に表示されないまま所定時間が経過すると、情報コードが認識されずにタイムアウトした旨を表示装置に表示させる。これにより、使用者の利便性をさらに向上させることができる。
本実施の形態において、情報取得プログラムは、コンピュータを、画像取得部と、表示制御部と、コード認識部と、コード選択部と、コード読取部と、として機能させる。
画像取得部は、情報コードを含む画像を取得する。
表示制御部は、画像取得部により取得された画像を表示装置に表示する。コード認識部は、画像取得部により取得された画像に含まれる情報コードを認識する。コード選択部は、表示装置に表示される、コード認識部により認識された情報コードの中から、読み取り対象の情報コードの選択指示を使用者から受け取る。コード読取部は、使用者により選択された情報コードに格納された情報を読み取る。
これにより、使用者が使いやすいユーザインタフェースを提供することができるので、使用者の利便性を向上させることができる。
(他の実施の形態)
上記実施の形態は、本開示の技術の一例である。本開示の技術は、これに限定されない。以下は、他の実施の形態である。
上記実施の形態は、本開示の技術の一例である。本開示の技術は、これに限定されない。以下は、他の実施の形態である。
上記実施の形態では、情報コード40がメニュー一覧表30に記載される。他の実施の形態では、情報コード40がホームベーカリ20の表示装置などに表示されてもよい。本開示の技術は、情報提供および決済などに用いる端末装置、ならびに、情報を格納する情報コードを有する家電全般にも適用可能である。
上記実施の形態では、情報取得装置100は情報提供サーバ200からレシピ情報を取得する。しかし、情報取得装置100は、本機能を備えた専用のアプリケーションソフト内のデータベースからレシピ情報を取得してもよい。以下、アプリケーションソフトをアプリと呼ぶ。
本機能を備えた専用のアプリは、いわゆるウェブアプリ(web application)ではなく、オフラインで動作するネイティブアプリケーションである。情報提供サーバ200におけるレシピ情報のデータベースが更新されると、情報取得装置100は、情報提供サーバ200と通信可能な状態において、ネイティブアプリケーションを更新する。
これにより、使用者は、ネットワーク環境下でなくても、情報取得装置100によりレシピ情報を閲覧することができる。専用のアプリは、情報提供サーバ200から更新されたレシピ情報を取得して専用のアプリ内のデータベースに保持してもよい。
この場合、情報コードは、情報取得装置100において実行される専用のアプリのデータベース内のレシピ情報にアクセスするためのアドレス情報を含む。このアドレス情報は、例えば、「menu1」などの文字情報、または、「http:」や「https:」以外で始まるカスタムURIスキーマ(custom uniform resource identifier schema)を用いた文字列などであってもよい。
本開示は、情報コードを読み取るための情報取得装置に利用可能である。
10 情報提供システム
12 通信網
20 ホームベーカリ
21 ユーザインタフェース
30 メニュー一覧表
40 情報コード
40a 情報コード
40b 情報コード
40c 情報コード
40d 情報コード
41 枠
42 枠
43a 関連情報
43b 関連情報
100 情報取得装置
101 通信装置
102 撮像装置
103 入力装置
104 表示装置
105 記憶装置
120 制御装置
121 画像取得部
122 コード認識部
123 コード選択部
124 コード読取部
125 関連情報取得部
126 レシピ情報取得部
127 表示制御部
150 表示画面
151 レイヤ
152 レイヤ
200 情報提供サーバ
12 通信網
20 ホームベーカリ
21 ユーザインタフェース
30 メニュー一覧表
40 情報コード
40a 情報コード
40b 情報コード
40c 情報コード
40d 情報コード
41 枠
42 枠
43a 関連情報
43b 関連情報
100 情報取得装置
101 通信装置
102 撮像装置
103 入力装置
104 表示装置
105 記憶装置
120 制御装置
121 画像取得部
122 コード認識部
123 コード選択部
124 コード読取部
125 関連情報取得部
126 レシピ情報取得部
127 表示制御部
150 表示画面
151 レイヤ
152 レイヤ
200 情報提供サーバ
Claims (16)
- 表示装置と、
情報コードを含む画像を取得するように構成された画像取得部と、
前記画像取得部により取得された前記画像を表示装置に表示させるように構成された表示制御部と、
前記画像取得部により取得された前記画像に含まれる前記情報コードを認識するように構成されたコード認識部と、
前記表示装置に表示される、前記コード認識部により認識された前記情報コードの中から、読み取り対象の前記情報コードの選択指示を使用者から受け取るように構成されたコード選択部と、
前記使用者により選択された前記情報コードに格納された情報を読み取るように構成されたコード読取部と、を備える情報取得装置。 - 前記表示制御部は、前記コード認識部により認識された前記情報コードを識別可能な態様で表示するように構成された、請求項1に記載の情報取得装置。
- 前記表示制御部は、前記コード認識部により認識された前記情報コードに、認識済みの前記情報コードであることを示す情報を重畳表示するように構成された、請求項2に記載の情報取得装置。
- 前記表示制御部は、前記コード読取部が読み取りに成功した前記情報コードを識別可能な態様で表示するように構成された、請求項1~3のいずれか1項に記載の情報取得装置。
- 前記表示制御部は、前記コード読取部が読み取りに成功した前記情報コードに、読取可能な前記情報コードであることを示す情報を重畳表示するように構成された、請求項4に記載の情報取得装置。
- 前記表示制御部は、前記情報コードに格納された情報に関連する関連情報を前記情報コードの直上または近傍に表示するように構成された、請求項1~5のいずれか1項に記載の情報取得装置。
- 前記関連情報は、前記情報コードに格納された情報の所定位置に含まれる情報である、請求項6に記載の情報取得装置。
- 前記関連情報は、前記情報コードに格納されたアドレス情報に含まれる文字列である、請求項7に記載の情報取得装置。
- 前記関連情報は、前記情報コードに格納された情報の後にパディングにより補われたビットに含まれる情報である、請求項7に記載の情報取得装置。
- 前記関連情報は、前記情報コードに格納されたアドレス情報を用いてアクセス可能な情報提供サーバから取得される情報である、請求項6に記載の情報取得装置。
- 前記関連情報は、前記情報コードの近傍に存在する別の情報コードに格納された情報である、請求項6に記載の情報取得装置。
- 前記コード選択部は、前記表示装置に表示される前記関連情報の選択指示を使用者から受け取り、指示された前記関連情報に対応する前記情報コードを選択する、請求項6~11のいずれか1項に記載の情報取得装置。
- 前記コード読取部は、前記コード認識部により認識された前記情報コードが前記表示装置に一つだけ表示される状態が所定時間以上継続した場合、前記情報コードに格納された情報を自動的に読み取るように構成された、請求項1~12のいずれか1項に記載の情報取得装置。
- 前記表示制御部は、前記コード認識部により認識された前記情報コードが一つも前記表示装置に表示されないまま所定時間が経過すると、前記情報コードが認識されずにタイムアウトした旨を前記表示装置に表示させるように構成された、請求項1~13のいずれか1項に記載の情報取得装置。
- コンピュータと表示装置とを備えた情報取得装置における情報取得プログラムであって、
前記コンピュータを、
情報コードを含む画像を取得するように構成された画像取得部と、
前記画像取得部により取得された前記画像を前記表示装置に表示させるように構成された表示制御部と、
前記画像取得部により取得された前記画像に含まれる前記情報コードを認識するように構成されたコード認識部と、
前記表示装置に表示される、前記コード認識部により認識された前記情報コードの中から、読み取り対象の前記情報コードの選択指示を使用者から受け取るように構成されたコード選択部と、
前記使用者により選択された前記情報コードに格納された情報を読み取るように構成されたコード読取部と、
として機能させるように構成された情報取得プログラム。 - 表示装置を備えた情報取得装置における情報取得方法であって、
画像取得部が、情報コードを含む画像を取得するステップと、
表示制御部が、前記画像取得部により取得された前記画像を前記表示装置に表示させるステップと、
コード認識部が、前記画像取得部により取得された前記画像に含まれる前記情報コードを認識するステップと、
前記表示装置に表示される、前記コード認識部により認識された前記情報コードの中から、読み取り対象の前記情報コードの選択指示を、コード選択部が受け取るステップと、
コード読取部が、使用者により選択された前記情報コードに格納された情報を読み取るステップと、
を含む情報取得方法。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2022555297A JPWO2022074955A1 (ja) | 2020-10-05 | 2021-08-27 | |
CN202180066888.7A CN116324797A (zh) | 2020-10-05 | 2021-08-27 | 信息取得装置、信息取得程序以及信息取得方法 |
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2020168167 | 2020-10-05 | ||
JP2020-168167 | 2020-10-05 |
Publications (1)
Publication Number | Publication Date |
---|---|
WO2022074955A1 true WO2022074955A1 (ja) | 2022-04-14 |
Family
ID=81125803
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
PCT/JP2021/031467 WO2022074955A1 (ja) | 2020-10-05 | 2021-08-27 | 情報取得装置、情報取得プログラム、および情報取得方法 |
Country Status (3)
Country | Link |
---|---|
JP (1) | JPWO2022074955A1 (ja) |
CN (1) | CN116324797A (ja) |
WO (1) | WO2022074955A1 (ja) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP7323901B1 (ja) | 2022-11-09 | 2023-08-09 | ソノー電機工業株式会社 | 情報処理プログラム及び情報処理端末 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2006119921A (ja) * | 2004-10-21 | 2006-05-11 | Nec Corp | レンタルサービスサーバ、及びレンタルサービスシステム |
JP2008299412A (ja) * | 2007-05-29 | 2008-12-11 | B-Core Inc | 光学式認識コード認識結果表示方法 |
JP2014071818A (ja) * | 2012-10-01 | 2014-04-21 | Sharp Corp | 二次元コード読取装置および二次元コード読取方法 |
-
2021
- 2021-08-27 WO PCT/JP2021/031467 patent/WO2022074955A1/ja active Application Filing
- 2021-08-27 JP JP2022555297A patent/JPWO2022074955A1/ja active Pending
- 2021-08-27 CN CN202180066888.7A patent/CN116324797A/zh active Pending
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2006119921A (ja) * | 2004-10-21 | 2006-05-11 | Nec Corp | レンタルサービスサーバ、及びレンタルサービスシステム |
JP2008299412A (ja) * | 2007-05-29 | 2008-12-11 | B-Core Inc | 光学式認識コード認識結果表示方法 |
JP2014071818A (ja) * | 2012-10-01 | 2014-04-21 | Sharp Corp | 二次元コード読取装置および二次元コード読取方法 |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP7323901B1 (ja) | 2022-11-09 | 2023-08-09 | ソノー電機工業株式会社 | 情報処理プログラム及び情報処理端末 |
JP2024069003A (ja) * | 2022-11-09 | 2024-05-21 | ソノー電機工業株式会社 | 情報処理プログラム及び情報処理端末 |
Also Published As
Publication number | Publication date |
---|---|
JPWO2022074955A1 (ja) | 2022-04-14 |
CN116324797A (zh) | 2023-06-23 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN107426262A (zh) | 烹饪电器的控制方法、终端、服务器及系统 | |
CN204698314U (zh) | 一种智能厨房烹饪系统 | |
JP2007107766A (ja) | 調理システム | |
CN104146586A (zh) | 一种智能烹饪设备及智能烹饪设备的工作方法 | |
CN111580430A (zh) | 烹饪设备的控制方法、装置、烹饪设备及烹饪系统 | |
WO2022074955A1 (ja) | 情報取得装置、情報取得プログラム、および情報取得方法 | |
WO2020027633A2 (ko) | 레시피 생성 및 공유를 위한 요리 레시피 서비스 제공 방법 | |
CN106547241B (zh) | 一种实现烹饪信息处理的方法及烹饪装置 | |
CN108415301B (zh) | 烹饪参数变更方法及装置 | |
US11435878B2 (en) | Sentence builder system and method | |
CN111131855A (zh) | 烹饪过程分享方法及装置 | |
WO2022074948A1 (ja) | 調理器および調理器の表示装置における表示方法 | |
JP6579947B2 (ja) | 加熱調理システム | |
US9369515B2 (en) | Communication method, communication device, appliance control method, and appliance control device | |
CN112006520A (zh) | 烹饪处理的方法、烹饪设备、用户终端和存储装置 | |
CN107526305B (zh) | 烹饪电器的控制方法及装置 | |
JPH11243874A (ja) | 調理システム | |
WO2016009551A1 (ja) | 情報処理装置、情報処理方法及びプログラム | |
WO2018029779A1 (ja) | 情報処理装置、情報処理方法、プログラム、記憶媒体 | |
CN105911896A (zh) | 一种智能厨房系统及其控制方法 | |
CN114568948A (zh) | 烹饪控制方法、装置和系统 | |
CN112330399A (zh) | 一种便于分享自定义菜品的智能烹饪方法、计算机可读存储介质及智能烹饪设备 | |
CN112263135A (zh) | 一种能输出烹饪视频的智能烹饪方法、计算机可读存储介质及智能烹饪设备 | |
CN112099372A (zh) | 菜谱生成方法、装置和烹饪设备、移动终端及存储介质 | |
JP7478971B2 (ja) | プログラム、端末装置、及びサービス提供システム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
121 | Ep: the epo has been informed by wipo that ep was designated in this application |
Ref document number: 21877258 Country of ref document: EP Kind code of ref document: A1 |
|
ENP | Entry into the national phase |
Ref document number: 2022555297 Country of ref document: JP Kind code of ref document: A |
|
NENP | Non-entry into the national phase |
Ref country code: DE |
|
122 | Ep: pct application non-entry in european phase |
Ref document number: 21877258 Country of ref document: EP Kind code of ref document: A1 |