WO2014054221A1 - Image display method, image display apparatus, and image providing method - Google Patents

Image display method, image display apparatus, and image providing method Download PDF

Info

Publication number
WO2014054221A1
WO2014054221A1 PCT/JP2013/005206 JP2013005206W WO2014054221A1 WO 2014054221 A1 WO2014054221 A1 WO 2014054221A1 JP 2013005206 W JP2013005206 W JP 2013005206W WO 2014054221 A1 WO2014054221 A1 WO 2014054221A1
Authority
WO
WIPO (PCT)
Prior art keywords
setting information
image
mark
determined
image data
Prior art date
Application number
PCT/JP2013/005206
Other languages
French (fr)
Japanese (ja)
Inventor
聡明 大西
山岡　勝
麻理子 中曾
Original Assignee
パナソニック株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by パナソニック株式会社 filed Critical パナソニック株式会社
Priority to CN201380003928.9A priority Critical patent/CN103959265B/en
Priority to JP2014514270A priority patent/JP6042881B2/en
Priority to US14/353,864 priority patent/US9508323B2/en
Publication of WO2014054221A1 publication Critical patent/WO2014054221A1/en

Links

Images

Classifications

    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/36—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory
    • G09G5/37—Details of the operation on graphic patterns
    • G09G5/377—Details of the operation on graphic patterns for mixing or overlaying two or more graphic patterns
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00—Administration; Management
    • G06Q10/06—Resources, workflows, human or project management; Enterprise or organisation planning; Enterprise or organisation modelling
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/40—Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
    • G06F16/43—Querying
    • G06F16/432—Query formulation
    • G06F16/434—Query formulation using image data, e.g. images, photos, pictures taken by a user
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/58—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/583—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content

Abstract

This image display method involves acquiring combined data that includes image data of an image of an article and first setting information that indicates processing performed by a first electric device on the article (S2301), determining whether the first setting information included in the acquired combined data can be converted to second setting information in a format that can be run by a second electric device indicated in advance by a user, and, if the first setting information is determined to be convertible to the second setting information, determining a first mark to add to the image of the image data (S2305), and displaying the image of the image data included in the combined data to which the determined first mark has been added (S2307).

Description

画像表示方法、画像表示装置、及び、画像提供方法Image display method, image display apparatus, and image providing method
　本発明は、画像表示方法、画像表示装置、及び、画像提供方法に関する。 The present invention relates to an image display method, an image display device, and an image providing method.
　従来、画像データを共有するためのサーバを介して、電気機器で処理を施された物品を被写体とする画像データを複数のユーザ間で共有することができる。 Conventionally, a plurality of users can share image data having an article processed by an electrical device as a subject via a server for sharing image data.
　電気機器の操作情報、又は、センサ情報などの環境情報を画像ファイル内に埋め込むことで画像上に環境情報を視覚化する技術が開示されている（例えば、特許文献１）。特許文献１によれば、ユーザは、画像ファイルを閲覧するだけで直感的に環境情報を取得し、その環境を制御することができる。 A technique for visualizing environmental information on an image by embedding environmental information such as operation information of electric equipment or sensor information in an image file is disclosed (for example, Patent Document 1). According to Patent Literature 1, a user can intuitively acquire environment information simply by browsing an image file and control the environment.
特開２００５－２５０７３４号公報JP-A-2005-250734
　上記サーバを介して画像ファイルを取得したユーザが、当該画像ファイルを取得したときに、画像ファイルが物品に対して施された処理の内容を含むものであるか否かを判断することができないという問題がある。 There is a problem that when a user who has acquired an image file via the server acquires the image file, it cannot determine whether the image file includes the contents of processing performed on the article. is there.
　そこで、物品が処理された時の電気機器の設定情報を含む画像をユーザに容易に視認させる画像表示方法等を提供することを目的とする。 Therefore, an object of the present invention is to provide an image display method for allowing a user to easily view an image including setting information of an electrical device when an article is processed.
　上記課題を解決するために、本発明の一様態に係る画像表示方法は、物品を被写体とする画像の画像データと、前記物品に対して第一電気機器により施される処理を示す第一設定情報とを含む合成データを取得し、取得された前記合成データに含まれる前記第一設定情報を、ユーザによって予め指定された第二電気機器が実行することが可能な形式の情報である第二設定情報に変換することができるか否かを判定し、前記第一設定情報を前記第二設定情報に変換することができると判定される場合に、前記画像データの画像に付加する第一のマークを決定し、決定された前記第一のマークが付加された、前記合成データに含まれる画像データの画像を表示する画像表示方法である。 In order to solve the above-described problem, an image display method according to an aspect of the present invention includes an image data of an image having an article as a subject, and a first setting indicating processing performed on the article by a first electric device. Second information that is information in a format that can be executed by a second electrical device that is designated in advance by the user, and that the first setting information included in the acquired combined data is acquired. It is determined whether it can be converted into setting information, and when it is determined that the first setting information can be converted into the second setting information, a first to be added to the image of the image data In the image display method, a mark is determined, and an image of image data included in the composite data, to which the determined first mark is added, is displayed.
　なお、これらの包括的または具体的な態様は、システム、方法、集積回路、コンピュータプログラムまたはコンピュータ読み取り可能なＣＤ－ＲＯＭなどの記録媒体で実現されてもよく、システム、方法、集積回路、コンピュータプログラムおよび記録媒体の任意な組み合わせで実現されてもよい。 Note that these comprehensive or specific modes may be realized by a system, a method, an integrated circuit, a computer program, or a recording medium such as a computer-readable CD-ROM, and the system, method, integrated circuit, and computer program. And any combination of recording media.
　本発明にかかる画像表示方法等により、物品が処理された時の電気機器の設定情報を含む画像をユーザに視認させることができる。 The image display method or the like according to the present invention allows the user to visually recognize an image including setting information of the electrical device when the article is processed.
図１は、実施の形態１に係る機器制御システムの構成図である。FIG. 1 is a configuration diagram of a device control system according to the first embodiment. 図２は、実施の形態１に係る通信装置の機能ブロック図の例である。FIG. 2 is an example of a functional block diagram of the communication apparatus according to the first embodiment. 図３は、実施の形態１に係る通信装置の処理の一例を示すシーケンス図である。FIG. 3 is a sequence diagram illustrating an example of processing of the communication apparatus according to Embodiment 1. 図４は、実施の形態１に係る通信装置の処理の説明図である。FIG. 4 is an explanatory diagram of processing of the communication apparatus according to the first embodiment. 図５は、実施の形態１に係る通信装置の設定処理の説明図である。FIG. 5 is an explanatory diagram of the setting process of the communication device according to the first embodiment. 図６Ａは、実施の形態１に係る画像データの埋め込みデータの例の説明図である。FIG. 6A is an explanatory diagram of an example of embedded data of image data according to the first embodiment. 図６Ｂは、実施の形態１に係る設定コマンド基準値及び基準設定コマンドの説明図である。FIG. 6B is an explanatory diagram of a setting command reference value and a reference setting command according to the first embodiment. 図７は、実施の形態１に係る設定コマンドの変換テーブルの例である。FIG. 7 is an example of a setting command conversion table according to the first embodiment. 図８は、実施の形態２に係る機器制御システムの構成図である。FIG. 8 is a configuration diagram of a device control system according to the second embodiment. 図９Ａは、実施の形態２に係る通信装置の機能ブロック図の例である。FIG. 9A is an example of a functional block diagram of a communication apparatus according to Embodiment 2. 図９Ｂは、実施の形態２に係る処理サーバの機能ブロック図の例である。FIG. 9B is an example of a functional block diagram of the processing server according to the second embodiment. 図１０は、実施の形態２に係る通信装置及び処理サーバの処理の例を示すシーケンス図である。FIG. 10 is a sequence diagram illustrating an example of processing of the communication device and the processing server according to the second embodiment. 図１１は、実施の形態３に係る機器制御システムの構成図である。FIG. 11 is a configuration diagram of a device control system according to the third embodiment. 図１２は、実施の形態３に係る機器制御装置の機能ブロック図の例である。FIG. 12 is an example of a functional block diagram of the device control apparatus according to the third embodiment. 図１３は、実施の形態３に係る機器制御装置の処理の一例を示すシーケンス図である。FIG. 13 is a sequence diagram illustrating an example of processing of the device control apparatus according to the third embodiment. 図１４は、実施の形態３に係る機器制御装置の処理の説明図である。FIG. 14 is an explanatory diagram of processing of the device control apparatus according to the third embodiment. 図１５は、実施の形態４に係る機器制御システムの構成図である。FIG. 15 is a configuration diagram of a device control system according to the fourth embodiment. 図１６Ａは、実施の形態４に係る機器制御装置の機能ブロック図の例である。FIG. 16A is an example of a functional block diagram of a device control apparatus according to Embodiment 4. 図１６Ｂは、実施の形態４に係る処理サーバの機能ブロック図の例である。FIG. 16B is an example of a functional block diagram of the processing server according to the fourth embodiment. 図１７は、実施の形態４に係る通信装置及び処理サーバの処理の例を示すシーケンス図である。FIG. 17 is a sequence diagram illustrating an example of processing of the communication device and the processing server according to the fourth embodiment. 図１８は、実施の形態５に係る機器制御システムの構成図である。FIG. 18 is a configuration diagram of a device control system according to the fifth embodiment. 図１９は、実施の形態５に係る表示装置の機能ブロック図の例である。FIG. 19 is an example of a functional block diagram of a display device according to Embodiment 5. 図２０は、実施の形態５に係る対応家電判定部の機能ブロック図の例である。FIG. 20 is an example of a functional block diagram of the corresponding home appliance determination unit according to the fifth embodiment. 図２１は、実施の形態５に係る表示装置の処理の例を示す第一のシーケンス図である。FIG. 21 is a first sequence diagram illustrating an example of processing of the display device according to the fifth embodiment. 図２２は、実施の形態５に係る表示装置の処理の例を示す第二のシーケンス図である。FIG. 22 is a second sequence diagram illustrating an example of processing of the display device according to the fifth embodiment. 図２３Ａは、実施の形態５に係る表示装置の処理の第一の説明図である。FIG. 23A is a first explanatory diagram of processing of the display device according to Embodiment 5. 図２３Ｂは、実施の形態５に係る表示装置の処理の第二の説明図である。FIG. 23B is a second explanatory diagram of the process of the display device according to the fifth embodiment. 図２３Ｃは、実施の形態５に係る表示装置の処理の第三の説明図である。FIG. 23C is a third explanatory diagram of the process performed by the display device according to Embodiment 5. 図２４Ａは、実施の形態５に係るマークの例である。FIG. 24A is an example of a mark according to the fifth embodiment. 図２４Ｂは、実施の形態５に係る付加されるマークの説明図である。FIG. 24B is an explanatory diagram of marks to be added according to the fifth embodiment. 図２５は、実施の形態６に係る機器制御システムの構成図である。FIG. 25 is a configuration diagram of a device control system according to the sixth embodiment. 図２６Ａは、実施の形態６に係る表示装置の機能ブロック図の例である。FIG. 26A is an example of a functional block diagram of a display device according to Embodiment 6. 図２６Ｂは、実施の形態６に係る処理サーバの機能ブロック図の例である。FIG. 26B is an example of a functional block diagram of the processing server according to the sixth embodiment. 図２７は、実施の形態６に係る表示装置及び処理サーバの処理の例を示す第一のシーケンス図である。FIG. 27 is a first sequence diagram illustrating an example of processing of the display device and the processing server according to the sixth embodiment. 図２８は、実施の形態６に係る表示装置及び処理サーバの処理の例を示す第二のシーケンス図である。FIG. 28 is a second sequence diagram illustrating an example of processing of the display device and the processing server according to the sixth embodiment. 図２９は、各実施の形態における装置及びプログラムサーバを含むシステム構成図である。FIG. 29 is a system configuration diagram including an apparatus and a program server in each embodiment.
　（本発明の基礎となった知見）
　本発明者は、「背景技術」の欄において記載した、情報取得方法に関し、以下の問題が生じることを見出した。 (Knowledge that became the basis of the present invention)
The present inventor has found that the following problems occur with respect to the information acquisition method described in the “Background Art” column.
　従来、画像データを共有するためのサーバを介して、電気機器で処理を施された物品を被写体とする画像データを複数のユーザ間で共有することができる。 Conventionally, a plurality of users can share image data having an article processed by an electrical device as a subject via a server for sharing image data.
　そのような画像データをユーザが取得及び閲覧し、そのユーザが自身の電気機器により物品に処理を施すことにより当該画像データの物品を生成したいと考える場合がある。しかし、そのユーザは、その処理を行った電気機器の種別や、その処理が施されたときの電気機器の設定情報を知ることができないので、自身で同様の処理を施すことができない。 In some cases, the user acquires and browses such image data, and the user wants to generate an article of the image data by processing the article with his / her own electrical equipment. However, since the user cannot know the type of the electric device that has performed the process and the setting information of the electric device when the process has been performed, the user cannot perform the same process.
　電気機器の操作情報、又は、センサ情報などの環境情報を画像ファイル内に埋め込むことで画像上に環境情報を視覚化する技術が開示されている（例えば、特許文献１）。特許文献１によれば、ユーザは、画像ファイルを閲覧するだけで直感的に環境情報を取得し、その環境を制御することができる。 A technique for visualizing environmental information on an image by embedding environmental information such as operation information of electric equipment or sensor information in an image file is disclosed (for example, Patent Document 1). According to Patent Literature 1, a user can intuitively acquire environment information simply by browsing an image file and control the environment.
　上記サーバを介して画像ファイルを取得したユーザが、当該画像ファイルを取得したときに、画像ファイルが物品に対して施された処理の内容を含むものであるか否かを判断することができないという問題がある。 There is a problem that when a user who has acquired an image file via the server acquires the image file, it cannot determine whether the image file includes the contents of processing performed on the article. is there.
　そこで、物品が処理された時の電気機器の設定情報を含む画像をユーザに容易に視認させる画像表示方法等を提供することを目的とする。 Therefore, an object of the present invention is to provide an image display method for allowing a user to easily view an image including setting information of an electrical device when an article is processed.
　このような問題を解決するために、本発明の一様態に係る画像表示方法は、物品を被写体とする画像の画像データと、前記物品に対して第一電気機器により施される処理を示す第一設定情報とを含む合成データを取得し、取得された前記合成データに含まれる前記第一設定情報を、ユーザによって予め指定された第二電気機器が実行することが可能な形式の情報である第二設定情報に変換することができるか否かを判定し、前記第一設定情報を前記第二設定情報に変換することができると判定される場合に、前記画像データの画像に付加する第一のマークを決定し、決定された前記第一のマークが付加された、前記合成データに含まれる画像データの画像を表示する画像表示方法である。 In order to solve such a problem, an image display method according to an aspect of the present invention includes image data of an image having an article as a subject and a process performed on the article by a first electric device. It is information in a format in which composite data including one setting information is acquired, and the first electric information specified in advance by the user can execute the first setting information included in the acquired composite data. It is determined whether or not it can be converted into second setting information, and when it is determined that the first setting information can be converted into the second setting information, the second setting information is added to the image data. In the image display method, one mark is determined, and the image of the image data included in the composite data, to which the determined first mark is added, is displayed.
　これによれば、画像データに含まれる電気機器（第一電気機器）の設定情報に対応する処理が、ユーザが予め指定する電気機器（第二電気機器）で行うことができる場合に、当該画像データとともにマーク（第一のマーク）が表示される。ユーザは、画像データとともに第一のマークが表示された画像は、自身が指定した電気機器で処理できる設定情報が含まれていることを知ることができる。ここで、第一電気機器と第二電気機器とは同じ型式の電気機器であってもよいし、まったく同一の電気機器であってもよい。よって、ユーザは、物品が処理された時の電気機器の設定情報を含む画像を容易に視認することができる。 According to this, when the process corresponding to the setting information of the electric device (first electric device) included in the image data can be performed by the electric device (second electric device) designated in advance by the user, the image A mark (first mark) is displayed together with the data. The user can know that the image in which the first mark is displayed together with the image data includes setting information that can be processed by the electric device designated by the user. Here, the first electrical device and the second electrical device may be the same type of electrical device or may be exactly the same electrical device. Therefore, the user can easily visually recognize an image including setting information of the electric device when the article is processed.
　また、本発明の一態様に係る画像表示方法は、物品を被写体とする画像の画像データと、前記物品に対して第一電気機器により施される処理を示す第一設定情報とを含む合成データを取得し、取得された前記合成データに含まれる前記第一設定情報が、ユーザによって予め指定された第二電気機器が実行することが可能な形式の情報である第二設定情報であるか否かを判定し、前記第一設定情報が前記第二設定情報であると判定される場合に、前記画像データの画像に付加する第一のマークを決定し、決定された前記第一のマークが付加された、前記合成データに含まれる画像データの画像を表示する画像表示方法である。 The image display method according to an aspect of the present invention includes composite data including image data of an image having an article as a subject and first setting information indicating processing performed on the article by a first electric device. Whether or not the first setting information included in the acquired composite data is second setting information that is information in a format that can be executed by the second electrical device designated in advance by the user. When the first setting information is determined to be the second setting information, a first mark to be added to the image of the image data is determined, and the determined first mark is An image display method for displaying an image of added image data included in the composite data.
　これにより、上記と同様の効果を奏する。 This produces the same effect as above.
　例えば、前記画像表示方法では、さらに、前記第一電気機器の所定機種の設定情報に対応付けて、前記第一電気機器の前記所定機種とは異なる機種の設定情報を示す変換テーブルを取得し、前記第一設定情報を前記第二設定情報に変換することができるか否かを判定する際には、取得した前記変換テーブルを参照することで、前記第一設定情報を前記第二設定情報に変換することができるか否かを判定する。 For example, in the image display method, a conversion table indicating setting information of a model different from the predetermined model of the first electric device is acquired in association with setting information of the predetermined model of the first electric device, When determining whether the first setting information can be converted into the second setting information, the first setting information is converted into the second setting information by referring to the acquired conversion table. It is determined whether or not conversion is possible.
　これによれば、画像データに含まれる電気機器の設定情報を変換テーブルによりユーザが指定する電気機器の設定情報に変換できる場合に、ユーザは、第一のマークとともに表示された画像が、自身が指定する電気機器で処理できる設定情報が含まれていると知ることができる。 According to this, when the setting information of the electric device included in the image data can be converted into the setting information of the electric device specified by the user by the conversion table, the user displays the image displayed with the first mark by himself / herself. It can be known that setting information that can be processed by the designated electrical device is included.
　例えば、前記画像表示方法では、さらに、電気機器の所定機種の設定情報と、汎用形式の設定情報である前記第一設定情報とを対応付ける変換テーブルを取得し、前記第一設定情報を前記第二設定情報に変換することができるか否かを判定する際には、取得された前記変換テーブルを参照して、前記第一設定情報を前記第二設定情報に変換することができるか否かにより判定する。 For example, in the image display method, a conversion table for associating setting information of a predetermined model of an electric device with the first setting information that is setting information in a general-purpose format is acquired, and the first setting information is converted into the second setting information. When determining whether or not it can be converted into setting information, referring to the acquired conversion table, whether or not the first setting information can be converted into the second setting information. judge.
　これによれば、画像データに含まれる電気機器の設定情報を汎用形式に変換できる場合に、ユーザは、第一のマークとともに表示された画像が、自身が指定する電気機器で処理できる設定情報が含まれていると知ることができる。 According to this, when the setting information of the electric device included in the image data can be converted into a general-purpose format, the user has the setting information that the image displayed with the first mark can be processed by the electric device specified by the user. You can know that it is included.
　例えば、前記画像表示方法では、さらに、前記ユーザを特定するユーザＩＤに対応するリストであって、予め指定される１つまたは複数の電気機器のリストである家電リストを取得し、前記第一設定情報を前記第二設定情報に変換することができるか否かを判定する際には、取得された前記家電リストに含まれる電気機器のうち少なくとも１つの電気機器を前記第二電気機器とするときに前記第一設定情報を前記第二設定情報に変換することができる場合に前記第一設定情報を前記第二設定情報に変換することができると判定し、取得された前記家電リストに含まれる電気機器のいずれの電気機器を前記第二電気機器とするときにも前記第一設定情報を前記第二設定情報に変換することができない場合に前記第一設定情報を前記第二設定情報に変換することができないと判定する。 For example, in the image display method, a home appliance list that is a list corresponding to a user ID that identifies the user and that is a list of one or more electrical devices specified in advance is acquired, and the first setting is performed. When determining whether or not information can be converted into the second setting information, when at least one electric device among the electric devices included in the acquired home appliance list is the second electric device If the first setting information can be converted into the second setting information, it is determined that the first setting information can be converted into the second setting information, and is included in the acquired home appliance list When the first setting information cannot be converted into the second setting information when any of the electric devices is the second electric device, the first setting information is converted into the second setting information. It determines that it can not be converted to.
　例えば、前記画像表示方法では、さらに、前記ユーザを特定するユーザＩＤに対応するリストであって、予め指定される１つまたは複数の電気機器のリストである家電リストを取得し、前記第一設定情報が前記第二設定情報であるか否かを判定する際には、取得された前記家電リストに含まれる電気機器のうち少なくとも１つの電気機器を前記第二電気機器とするときに前記第一設定情報が前記第二設定情報である場合に前記第一設定情報が前記第二設定情報であると判定し、取得された前記家電リストに含まれる電気機器のいずれの電気機器を前記第二電気機器とするときにも前記第一設定情報が前記第二設定情報ではない場合に前記第一設定情報が前記第二設定情報ではないと判定する。 For example, in the image display method, a home appliance list that is a list corresponding to a user ID that identifies the user and that is a list of one or more electrical devices specified in advance is acquired, and the first setting is performed. When determining whether or not the information is the second setting information, the first electric device is the first electric device when at least one of the electric devices included in the acquired home appliance list is the second electric device. When the setting information is the second setting information, the first setting information is determined to be the second setting information, and any of the electric devices included in the acquired home appliance list is selected as the second electric information. Even when the device is a device, if the first setting information is not the second setting information, it is determined that the first setting information is not the second setting information.
　これによれば、ユーザに対応する家電リストに基づいて、画像データに含まれる電気機器の設定情報が、当該ユーザに対応する電気機器の設定情報に変換できるか否かが判定される。 According to this, based on the home appliance list corresponding to the user, it is determined whether or not the setting information of the electric device included in the image data can be converted into the setting information of the electric device corresponding to the user.
　例えば、前記画像表示方法では、さらに、前記第一設定情報を前記第二設定情報に変換することができないと判定される場合に、前記画像データの画像に付加する前記第一のマークと異なる第二のマークを決定し、決定された前記第二のマークを付加された、前記合成データに含まれる画像データの画像を表示する。 For example, in the image display method, when it is determined that the first setting information cannot be converted into the second setting information, a first mark different from the first mark added to the image of the image data is used. A second mark is determined, and an image of the image data included in the composite data to which the determined second mark is added is displayed.
　例えば、前記画像表示方法では、さらに、前記第一設定情報が前記第二設定情報ではないと判定される場合に、前記画像データの画像に付加する前記第一のマークと異なる第二のマークを決定し、決定された前記第二のマークを付加された、前記合成データに含まれる画像データの画像を表示する。 For example, in the image display method, when it is determined that the first setting information is not the second setting information, a second mark different from the first mark added to the image of the image data is added. An image of the image data included in the composite data, to which the determined second mark is added, is displayed.
　これによれば、電気機器の設定情報が画像データに含まれている場合に、当該画像データとともにマーク（第二のマーク）が表示される。ユーザは、画像データとともに第二のマークが表示された画像が、電気機器の設定情報が含まれているが、自身が指定する電気機器で処理できない設定情報を含むことを知ることができる。よって、ユーザは、物品が処理された時の電気機器の設定情報を含む画像を容易に視認することができる。 According to this, when the setting information of the electric device is included in the image data, a mark (second mark) is displayed together with the image data. The user can know that the image in which the second mark is displayed together with the image data includes setting information of the electric device, but includes setting information that cannot be processed by the electric device specified by the user. Therefore, the user can easily visually recognize an image including setting information of the electric device when the article is processed.
　例えば、前記第二のマークを決定する際には、それぞれが電気機器に対応する少なくとも１つのマークのうち、前記第一電気機器に対応するマークを、前記第二のマークとして決定する。 For example, when determining the second mark, a mark corresponding to the first electric device is determined as the second mark among at least one mark each corresponding to the electric device.
　これによれば、第二のマークの形状が、電気機器に対応する形状のものとなる。これにより、ユーザは、直感的に処理する電気機器が何であるかを知ることができる。よって、ユーザは、物品が処理された時の電気機器の設定情報を含む画像を容易に視認することができる。 According to this, the shape of the second mark is a shape corresponding to the electric device. Thereby, the user can know what the electric equipment to process intuitively. Therefore, the user can easily visually recognize an image including setting information of the electric device when the article is processed.
　例えば、前記第一のマークを決定する際には、それぞれが電気機器に対応する少なくとも１つのマークのうち、前記第二電気機器に対応するマークを、前記第一のマークとして決定する。 For example, when determining the first mark, a mark corresponding to the second electric device is determined as the first mark among at least one mark corresponding to the electric device.
　これによれば、第一のマークの形状が、電気機器に対応するものとなる。これにより、ユーザは、直感的に処理する電気機器が何であるかを知ることができる。よって、ユーザは、物品が処理された時の電気機器の設定情報を含む画像を容易に視認することができる。 According to this, the shape of the first mark corresponds to the electric device. Thereby, the user can know what the electric equipment to process intuitively. Therefore, the user can easily visually recognize the image including the setting information of the electric device when the article is processed.
　例えば、前記画像データは、Ｅｘｉｆ（Exchangeable image file format）規格に準拠した形式で埋め込まれた前記第一設定情報を含む画像データである。 For example, the image data is image data including the first setting information embedded in a format compliant with the Exif (Exchangeable image file format) standard.
　これによれば、一般に画像データへの情報の埋め込みに用いられているＥｘｉｆ規格に準拠した形式で、電気機器の設定情報が画像データに埋め込まれる。よって、電気機器の設定情報が埋め込まれた画像が、電気機器の設定情報が埋め込まれていない一般の画像データと同じように取り扱われる。 According to this, the setting information of the electric device is embedded in the image data in a format conforming to the Exif standard generally used for embedding information in the image data. Therefore, the image in which the setting information of the electric device is embedded is handled in the same manner as general image data in which the setting information of the electric device is not embedded.
　また、本発明の一態様に係る画像提供方法は、表示装置に画像を表示させるための画像提供方法であって、物品を被写体とする画像の画像データと、前記物品に対して第一電気機器により施される処理を示す第一設定情報を含む合成データを取得し、取得された前記合成データに含まれる前記第一設定情報を、ユーザによって予め指定された第二電気機器が実行することが可能な形式である第二設定情報に変換することができるか否かを判定し、前記第一設定情報を前記第二設定情報に変換することができると判定される場合に、前記画像データの画像に付加する第一のマークを決定し、決定された前記第一のマークが付加された、前記合成データに含まれる画像データの画像を表示するインタフェースを提供する画像提供方法である。 An image providing method according to an aspect of the present invention is an image providing method for displaying an image on a display device, the image data of an image having an article as a subject, and a first electric device for the article. The composite data including the first setting information indicating the processing to be performed by the second electrical equipment that is designated in advance by the user is executed by the first setting information included in the acquired composite data It is determined whether or not it can be converted into second setting information in a possible format, and when it is determined that the first setting information can be converted into the second setting information, It is an image providing method for providing an interface for determining a first mark to be added to an image and displaying an image of image data included in the composite data to which the determined first mark is added.
　また、本発明の一態様に係る画像提供方法は、表示装置に画像を表示させるための画像提供方法であって、物品を被写体とする画像の画像データと、前記物品に対して第一電気機器により施される処理を示す第一設定情報を含む合成データを取得するインタフェースを提供し、取得された前記合成データに含まれる前記第一設定情報が、ユーザによって予め指定された第二電気機器が実行することが可能な形式である第二設定情報であるか否かを判定し、前記第一設定情報が前記第二設定情報であると判定される場合に、前記画像データの画像に付加する第一のマークを決定し、決定された前記第一のマークが付加された、前記合成データに含まれる画像データの画像を提供する画像提供方法である。 An image providing method according to an aspect of the present invention is an image providing method for displaying an image on a display device, the image data of an image having an article as a subject, and a first electric device for the article. Providing an interface for acquiring composite data including first setting information indicating processing performed by the second electrical device in which the first setting information included in the acquired composite data is designated in advance by a user. It is determined whether or not the second setting information is in a format that can be executed, and if it is determined that the first setting information is the second setting information, it is added to the image of the image data In the image providing method, a first mark is determined, and an image of image data included in the composite data, to which the determined first mark is added, is provided.
　これにより、上記の画像表示方法と同様の効果を奏する。 This produces the same effect as the above image display method.
　例えば、前記画像提供方法は、さらに、前記ユーザを特定するユーザＩＤに対応するリストであって、予め指定される１つまたは複数の電気機器のリストである家電リストを取得し、前記第一設定情報を前記第二設定情報に変換することができるか否かを判定する際には、取得された前記家電リストに含まれる電気機器のうち少なくとも１つの電気機器を前記第二電気機器とするときに前記第一設定情報を前記第二設定情報に変換することができる場合に前記第一設定情報を前記第二設定情報に変換することができると判定し、取得された前記家電リストに含まれる電気機器のうちいずれの電気機器を前記第二電気機器とするときにも前記第一設定情報を前記第二設定情報に変換することができない場合に前記第一設定情報を前記第二設定情報に変換することができないと判定する。 For example, the image providing method further acquires a home appliance list that is a list corresponding to a user ID that specifies the user and is a list of one or more electrical devices specified in advance. When determining whether or not information can be converted into the second setting information, when at least one electric device among the electric devices included in the acquired home appliance list is the second electric device If the first setting information can be converted into the second setting information, it is determined that the first setting information can be converted into the second setting information, and is included in the acquired home appliance list When the first setting information cannot be converted into the second setting information even when any of the electric devices is the second electric device, the first setting information is set to the second setting information. It determines that it can not be converted to broadcast.
　これにより、上記の画像表示方法と同様の効果を奏する。 This produces the same effect as the above image display method.
　例えば、前記画像提供方法は、さらに、前記第一設定情報を前記第二設定情報に変換することができないと判定される場合に、前記画像データの画像に付加する前記第一のマークと異なる第二のマークを決定し、決定された前記第二のマークを付加された前記合成データに含まれる画像データの画像を表示する。 For example, the image providing method further differs from the first mark added to the image of the image data when it is determined that the first setting information cannot be converted into the second setting information. A second mark is determined, and an image of the image data included in the composite data to which the determined second mark is added is displayed.
　これにより、上記の画像表示方法と同様の効果を奏する。 This produces the same effect as the above image display method.
　また、本発明の一態様に係る画像表示装置は、物品を被写体とする画像の画像データと、前記物品に対して第一電気機器により施される処理を示す第一設定情報とを含む合成データを取得する画像取得部と、取得された前記合成データに含まれる前記第一設定情報を、ユーザによって予め指定された第二電気機器が実行することが可能な形式の情報である第二設定情報に変換することができるか否かを判定する判定部と、前記第一設定情報を前記第二設定情報に変換することができると判定される場合に、前記画像データの画像に付加する第一のマークを決定するマーク付加部と、決定された前記第一のマークが付加された、前記合成データに含まれる画像データの画像を表示する表示部とを備える画像表示装置である。 The image display device according to an aspect of the present invention includes composite data including image data of an image having an article as a subject, and first setting information indicating processing performed on the article by a first electrical device. And second setting information that is information in a format that can be executed by a second electrical device that is designated in advance by the user, and the first setting information included in the acquired composite data. A first determination unit that determines whether or not the first setting information can be converted to the second setting information; and a first unit that is added to the image of the image data. An image display device including a mark adding unit for determining the mark and a display unit for displaying an image of the image data included in the composite data to which the determined first mark is added.
　また、本発明の一態様に係る画像表示装置は、物品を被写体とする画像の画像データと、前記物品に対して第一電気機器により施される処理を示す第一設定情報とを含む合成データを取得する画像取得部と、取得された前記合成データに含まれる前記第一設定情報が、ユーザによって予め指定された第二電気機器が実行することが可能な形式の情報である第二設定情報であるか否かを判定する判定部と、前記第一設定情報が前記第二設定情報であると判定される場合に、前記画像データの画像に付加する第一のマークを決定するマーク付加部と、決定された前記第一のマークが付加された、前記合成データに含まれる画像データの画像を表示する表示部とを備える画像表示装置である。 The image display device according to an aspect of the present invention includes composite data including image data of an image having an article as a subject, and first setting information indicating processing performed on the article by a first electrical device. And second setting information in which the first setting information included in the acquired combined data is information in a format that can be executed by a second electrical device designated in advance by the user. And a mark adding unit that determines a first mark to be added to the image of the image data when it is determined that the first setting information is the second setting information. And a display unit that displays an image of the image data included in the composite data, to which the determined first mark is added.
　これにより、上記の画像表示方法と同様の効果を奏する。 This produces the same effect as the above image display method.
　また、本発明の一態様に係るプログラムは、物品を被写体とする画像の画像データと、前記物品に対して第一電気機器により施される処理を示す第一設定情報とを含む合成データを取得するステップと、取得された前記合成データに含まれる前記第一設定情報を、ユーザによって予め指定された第二電気機器が実行することが可能な形式の情報である第二設定情報に変換することができるか否かを判定するステップと、前記第一設定情報を前記第二設定情報に変換することができると判定される場合に、前記画像データの画像に付加する第一のマークを決定するステップと、決定された前記第一のマークが付加された、前記合成データに含まれる画像データの画像を表示するステップとをコンピュータに実行させるためのプログラムである。 The program according to one aspect of the present invention acquires composite data including image data of an image having an article as a subject and first setting information indicating processing performed on the article by a first electrical device. And converting the first setting information included in the acquired composite data into second setting information that is information in a format that can be executed by a second electrical device designated in advance by the user. A first mark to be added to an image of the image data is determined when it is determined that the first setting information can be converted into the second setting information. A program for causing a computer to execute a step and a step of displaying an image of image data included in the composite data to which the determined first mark is added
　これにより、上記の画像表示方法と同様の効果を奏する。 This produces the same effect as the above image display method.
　また、本発明の一態様に係る記憶媒体は、上記に記載のプログラムが記憶されている記憶媒体である。 Further, the storage medium according to one aspect of the present invention is a storage medium in which the program described above is stored.
　これにより、上記の画像表示方法と同様の効果を奏する。 This produces the same effect as the above image display method.
　また、本発明の一態様に係るサーバ装置は、ネットワークを介して接続された画像表示装置で実行されるプログラムを前記画像表示装置へ送信するサーバ装置であって、プログラムを記憶する記憶部と、前記画像表示装置から前記プログラムをダウンロードする要求を受けて、前記記憶部に記憶されている前記プログラムを前記画像表示装置へ送信する送信部とを備え、前記プログラムは、前記画像表示装置に、物品を被写体とする画像の画像データと、前記物品に対して第一電気機器により施される処理を示す第一設定情報とを含む合成データを取得させ、取得された前記合成データに含まれる前記第一設定情報を、ユーザによって予め指定された第二電気機器が実行することが可能な形式の情報である第二設定情報に変換することができるか否かを判定させ、前記第一設定情報を前記第二設定情報に変換することができると判定される場合に、前記画像データの画像に付加する第一のマークを決定させ、決定された前記第一のマークが付加された、前記合成データに含まれる画像データの画像を表示させるサーバ装置である。 A server device according to an aspect of the present invention is a server device that transmits a program executed by an image display device connected via a network to the image display device, and a storage unit that stores the program; A transmission unit that receives a request to download the program from the image display device and transmits the program stored in the storage unit to the image display device; The composite data including the image data of the image having the subject as the subject and the first setting information indicating the processing performed by the first electrical device on the article is acquired, and the first data included in the acquired composite data is acquired. One setting information can be converted into second setting information which is information in a format that can be executed by a second electrical device designated in advance by the user. A first mark to be added to the image of the image data is determined when it is determined that the first setting information can be converted into the second setting information. Further, the server device displays an image of the image data included in the composite data to which the first mark is added.
　これにより、上記の画像表示方法と同様の効果を奏する。 This produces the same effect as the above image display method.
　なお、これらの包括的または具体的な態様は、システム、方法、集積回路、コンピュータプログラムまたはコンピュータ読み取り可能なＣＤ－ＲＯＭなどの記録媒体で実現されてもよく、システム、方法、集積回路、コンピュータプログラムまたは記録媒体の任意な組み合わせで実現されてもよい。 Note that these comprehensive or specific modes may be realized by a system, a method, an integrated circuit, a computer program, or a recording medium such as a computer-readable CD-ROM, and the system, method, integrated circuit, and computer program. Alternatively, it may be realized by any combination of recording media.
　以下、実施の形態について、図面を参照しながら具体的に説明する。 Hereinafter, embodiments will be specifically described with reference to the drawings.
　なお、以下で説明する実施の形態は、いずれも包括的または具体的な例を示すものである。以下の実施の形態で示される数値、形状、材料、構成要素、構成要素の配置位置及び接続形態、ステップ、ステップの順序などは、一例であり、本発明を限定する主旨ではない。また、以下の実施の形態における構成要素のうち、最上位概念を示す独立請求項に記載されていない構成要素については、任意の構成要素として説明される。 It should be noted that each of the embodiments described below shows a comprehensive or specific example. The numerical values, shapes, materials, constituent elements, arrangement positions and connecting forms of the constituent elements, steps, order of steps, and the like shown in the following embodiments are merely examples, and are not intended to limit the present invention. In addition, among the constituent elements in the following embodiments, constituent elements that are not described in the independent claims indicating the highest concept are described as optional constituent elements.
　（実施の形態１）
　本実施の形態において、電気機器で処理を施された物品の画像データに、当該処理時の電気機器の設定情報を汎用形式に変換した設定情報を付加し、設定情報が付加された画像データを蓄積サーバに送信する通信装置の例を示す。なお、汎用形式に変換する処理のことを、「汎用化する」と記述する場合がある。なお、設定情報を付加することを、「設定情報を埋め込む」と記述する場合がある。なお、「電気機器で処理を施された物品の画像データ」は、本実施の形態における画像データの一例である。つまり、上記の画像データが当該処理を施される前の物品の画像データである場合も、同様に、本発明の技術的範囲に属する。 (Embodiment 1)
In the present embodiment, setting information obtained by converting the setting information of the electric device at the time of processing into the general-purpose format is added to the image data of the article processed by the electric device, and the image data to which the setting information is added is added. The example of the communication apparatus transmitted to a storage server is shown. Note that the process of converting to a general-purpose format may be described as “generalizing”. Note that adding setting information may be described as “embedding setting information”. Note that “image data of an article processed by an electrical device” is an example of image data in the present embodiment. That is, the case where the above-described image data is image data of an article before being subjected to the processing similarly belongs to the technical scope of the present invention.
　図１は、本実施の形態に係る機器制御システムの構成図である。 FIG. 1 is a configuration diagram of a device control system according to the present embodiment.
　図１に示されるように、本実施の形態に係る機器制御システム１は、通信装置１１と、端末機器３１と、蓄積サーバ４１とを備える。 As shown in FIG. 1, the device control system 1 according to the present embodiment includes a communication device 11, a terminal device 31, and a storage server 41.
　通信装置１１は、近接無線通信を利用して端末機器３１と通信するとともに、ネットワークを介して蓄積サーバ４１と通信する。通信装置１１は、端末機器３１との通信により設定情報を取得する。通信装置１１は、取得した設定情報に後述の処理を施した後、設定情報を蓄積サーバ４１に送信する。通信装置１１は、近接無線通信インタフェースとネットワーク通信インタフェースとを搭載した携帯電話又はスマートフォン（高機能携帯電話）などで実現される。 The communication device 11 communicates with the terminal device 31 using close proximity wireless communication, and communicates with the storage server 41 via the network. The communication device 11 acquires setting information through communication with the terminal device 31. The communication device 11 performs processing described later on the acquired setting information, and then transmits the setting information to the storage server 41. The communication device 11 is realized by a mobile phone or a smartphone (high function mobile phone) equipped with a close proximity wireless communication interface and a network communication interface.
　端末機器３１は、電気機器の設定情報などを通信装置１１から取得、及び、電気機器に設定するとともに、近接無線通信を利用して通信装置１１と通信する。端末機器３１は、電気機器の内部機能として実現されることもあるし、単独の機器として実現され、電気機器に接続して使用される形態をとることもある。電気機器とは、例えば、家電機器であり、具体的には電子レンジやオーブンなどである。以下では電気機器として家電機器を利用する場合の例を示す。 The terminal device 31 acquires the setting information of the electric device from the communication device 11 and sets it in the electric device, and communicates with the communication device 11 using proximity wireless communication. The terminal device 31 may be realized as an internal function of the electric device, or may be realized as a single device and connected to the electric device. The electric device is, for example, a home appliance, and specifically a microwave oven, an oven, or the like. Below, the example in the case of using household appliances as an electric equipment is shown.
　蓄積サーバ４１は、データを蓄積するサーバであり、ネットワークを介して通信装置１１と通信する。データは、例えば、画像データである。蓄積サーバ４１は、他の通信装置（不図示）ともネットワークを介して通信可能である。他の通信装置は、蓄積サーバ４１と通信することにより、画像データを蓄積サーバ４１に保存（アップロード）することができ、また、画像データを蓄積サーバ４１から取得（ダウンロード）することができる。蓄積サーバ４１は、インターネット上のＳＮＳ（Social networking service）サイト、画像共有サイト、又は、ネットワークを介してアクセス可能なファイルサーバなどで実現される。 The accumulation server 41 is a server that accumulates data, and communicates with the communication device 11 via a network. The data is, for example, image data. The storage server 41 can communicate with other communication devices (not shown) via a network. Other communication devices can store (upload) image data in the storage server 41 by communicating with the storage server 41, and can acquire (download) image data from the storage server 41. The storage server 41 is realized by an SNS (Social networking service) site on the Internet, an image sharing site, or a file server accessible via a network.
　図２は、本実施の形態に係る通信装置１１の機能ブロック図の一例である。 FIG. 2 is an example of a functional block diagram of the communication device 11 according to the present embodiment.
　図２に示されるように、通信装置１１は、家電設定コマンド合成部１１１と、表示部１１２と、カメラ１１３と、操作部１１４と、近接無線通信部１１５と、近接無線通信アンテナ１１６と、制御部１１７と、移動網通信部１１８と、移動網通信アンテナ１１９とを備える。 As shown in FIG. 2, the communication device 11 includes a home appliance setting command composition unit 111, a display unit 112, a camera 113, an operation unit 114, a proximity wireless communication unit 115, a proximity wireless communication antenna 116, and a control. Unit 117, mobile network communication unit 118, and mobile network communication antenna 119.
　家電設定コマンド合成部１１１は、電気機器の設定コマンドと、当該電気機器により処理を施された物品の画像データとを合成する。家電設定コマンド合成部１１１は、その内部機能として、家電設定コマンド取得部１１１１と、基準値生成部１１１２と、合成部１１１３と、画像生成部１１１４とを有する。 The home appliance setting command combining unit 111 combines the setting command for the electric device and the image data of the article processed by the electric device. The home appliance setting command composition unit 111 includes, as its internal functions, a home appliance setting command acquisition unit 1111, a reference value generation unit 1112, a composition unit 1113, and an image generation unit 1114.
　画像生成部１１１４は、カメラ１１３を用いて、電気機器に処理を施された物品を被写体とする写真を取得し、当該写真の画像データを生成する。なお、写真の代わりに、電気機器が処理を施した物品を被写体とする画像を用いることもできる。具体的には、写真に代わりに、電気機器が処理を施した物品のイラスト又は文字列の画像のイメージデータを用いることもできる。 The image generation unit 1114 uses the camera 113 to acquire a photograph of an article that has been processed on the electrical device as a subject, and generates image data of the photograph. Note that an image of an article processed by an electrical device as a subject can be used instead of a photograph. Specifically, instead of a photograph, image data of an illustration of an article processed by an electric device or an image of a character string can be used.
　家電設定コマンド取得部１１１１は、近接無線通信部１１５及び近接無線通信アンテナ１１６を通じて端末機器３１との通信を行い、電気機器の設定コマンドを取得する。家電設定コマンド取得部１１１１は、設定情報取得部に相当する。 The home appliance setting command acquisition unit 1111 communicates with the terminal device 31 through the proximity wireless communication unit 115 and the proximity wireless communication antenna 116, and acquires an electrical device setting command. The home appliance setting command acquisition unit 1111 corresponds to a setting information acquisition unit.
　基準値生成部１１１２は、家電設定コマンド取得部１１１１が取得した家電設定コマンドを変換することで、汎用形式の設定情報である基準設定情報を生成する。ここで、汎用形式の設定情報とは、当該電気機器の特定の機種に依存しない体系の設定情報のことである。基準値生成部１１１２は、基準設定情報生成部に相当する。基準設定情報は、基準設定情報自体、又は、基準設定情報が格納された場所（ＵＲＬ（Uniform Resource Locator））などにより特定される。言い換えれば、基準設定情報を特定する情報とは、上記の基準設定情報自体、又は、場所（ＵＲＬ）である。 The reference value generation unit 1112 generates reference setting information, which is general-purpose setting information, by converting the home appliance setting command acquired by the home appliance setting command acquisition unit 1111. Here, the general-purpose setting information is setting information of a system that does not depend on a specific model of the electric device. The reference value generation unit 1112 corresponds to a reference setting information generation unit. The reference setting information is specified by the reference setting information itself or a location (URL (Uniform 格納 Resource Locator)) where the reference setting information is stored. In other words, the information for specifying the reference setting information is the reference setting information itself or the location (URL).
　なお、基準設定情報に対して上記と逆の変換を施すことにより、家電設定コマンド取得部１１１１が取得した家電設定コマンドを得ることができる。つまり、基準設定情報も第一電気器の設定情報を示す情報であるといえる。 Note that the home appliance setting command acquired by the home appliance setting command acquisition unit 1111 can be obtained by performing the reverse conversion to the above on the reference setting information. That is, it can be said that the reference setting information is information indicating the setting information of the first electric appliance.
　なお、「変換する」という文言は、変換前のものと、それを変換することで得られる変換後のものとが同一である場合も含む。つまり、「変換する」という文言は、変換することが不要な場合には、いっさい変換しないことも含む。 In addition, the word “convert” includes the case where the one before conversion and the one after conversion obtained by converting it are the same. In other words, the phrase “convert” includes not converting at all when conversion is unnecessary.
　合成部１１１３は、画像生成部１１１４が生成した画像データに対して、画像データの埋め込みデータとして、基準値生成部１１１２が生成した基準設定情報を格納する。基準設定情報が格納された画像データを合成データともよぶ。合成データは、合成データ自体、又は、合成データを保存した場合のファイル名、合成データに付された番号、若しくは、合成データが格納された場所（ＵＲＬ）などにより特定される。言い換えれば、合成データを特定する情報とは、上記の合成データ自体、又は、ファイル名、番号、若しくは、場所（ＵＲＬ）である。 The synthesizing unit 1113 stores the reference setting information generated by the reference value generating unit 1112 as embedded data of image data for the image data generated by the image generating unit 1114. The image data in which the reference setting information is stored is also referred to as composite data. The synthesized data is specified by the synthesized data itself, the file name when the synthesized data is saved, the number assigned to the synthesized data, the location (URL) where the synthesized data is stored, or the like. In other words, the information specifying the composite data is the composite data itself, or the file name, number, or location (URL).
　表示部１１２は、制御部１１７が構成する表示データを表示する表示パネルである。 The display unit 112 is a display panel that displays display data configured by the control unit 117.
　カメラ１１３は、電気機器により処理を施された物品を撮影し、画像データを生成する。 The camera 113 shoots an article that has been processed by an electrical device and generates image data.
　操作部１１４は、ユーザの操作を受け付けるインタフェースである。操作部１１４は、例えば、タッチパネル又はキーボードなどで実現される。 The operation unit 114 is an interface that accepts user operations. The operation unit 114 is realized by, for example, a touch panel or a keyboard.
　近接無線通信部１１５は、近接無線通信により端末機器３１と通信を行うための信号処理を行う。なお、近接無線通信の通信規格は、どんなものであってもよい。近接無線通信の通信規格の例として、ＮＦＣ（Near field communication）がある。また、近接無線通信の通信規格として、ＩＥＥＥ８０２．１１規格準拠の無線ＬＡＮ（Local area network）、Ｂｌｕｅｔｏｏｔｈ（登録商標）、ＺｉｇＢｅｅなどを用いることもできる。 The proximity wireless communication unit 115 performs signal processing for communicating with the terminal device 31 by proximity wireless communication. Note that any communication standard for close proximity wireless communication may be used. NFC (Near field communication) is an example of a communication standard for close proximity wireless communication. Further, as a communication standard for close proximity wireless communication, a wireless LAN (Local area network), Bluetooth (registered trademark), ZigBee, or the like conforming to the IEEE 802.11 standard can be used.
　近接無線通信アンテナ１１６は、近接無線通信部１１５が通信を行う際に電波の送受信を行うアンテナである。 The near field communication antenna 116 is an antenna that transmits and receives radio waves when the near field communication unit 115 performs communication.
　制御部１１７は、通信装置１１における一連の情報処理の制御、及び、通信装置１１内の各機能ブロックの間の処理の受け渡しを行う。また、家電設定コマンド合成部１１１が合成した画像データを蓄積サーバ４１へ送信する。なお、制御部１１７は、送信部に相当する。 The control unit 117 controls a series of information processing in the communication device 11 and transfers processing between the functional blocks in the communication device 11. In addition, the image data combined by the home appliance setting command combining unit 111 is transmitted to the storage server 41. The control unit 117 corresponds to a transmission unit.
　移動網通信部１１８は、ネットワークを介して蓄積サーバ４１と通信を行うための信号処理を行う。なお、ネットワークの通信規格は、どんなものであってもよい。ネットワークの通信規格の例として、携帯電話網、公衆無線ＬＡＮ網、公衆電話回線網、衛星通信網などがある。 The mobile network communication unit 118 performs signal processing for communicating with the storage server 41 via the network. Note that any network communication standard may be used. Examples of network communication standards include a mobile phone network, a public wireless LAN network, a public telephone line network, and a satellite communication network.
　移動網通信アンテナ１１９は、移動網通信部１１８が通信を行う際に電波の送受信を行うアンテナである。 The mobile network communication antenna 119 is an antenna that transmits and receives radio waves when the mobile network communication unit 118 performs communication.
　図３は、本実施の形態に係る通信装置１１の処理の一例を示すシーケンス図である。また、図４は、本実施の形態に係る通信装置１１の処理の説明図である。これらの図を参照しながら、本実施の形態に係る通信装置１１の処理について説明する。 FIG. 3 is a sequence diagram showing an example of processing of the communication device 11 according to the present embodiment. FIG. 4 is an explanatory diagram of processing of the communication device 11 according to the present embodiment. The processing of the communication device 11 according to the present embodiment will be described with reference to these drawings.
　まず、通信装置１１は、家電設定コマンドを端末機器３１に送信する（ステップＳ３０１）。通信装置１１の操作部１１４は、ユーザによる操作を受け付ける。制御部１１７は、ユーザの操作により作成された家電設定コマンドを近接無線通信部１１５及び近接無線通信アンテナ１１６を通じて、端末機器３１に送信する。家電設定コマンドを作成する方法は、さまざまな方法がある。一例として、通信装置１１上のソフトウェアで実現される方法であり、設定項目をユーザに選択させることにより、家電設定コマンドを作成する方法がある。他の一例として、通信装置１１が、移動網通信部１１８及び移動網通信アンテナ１１９を通じてインターネット上の特定のＷｅｂサイトに接続し、Ｗｅｂサイトから受信するデータに従って、設定項目をユーザに選択させることにより作成する方法がある。ここで、家電設定コマンドとは、電気機器が物品に処理を施すときの設定情報のことである。具体例として、電気機器であるオーブンでパンを焼く場合には、電気機器はオーブンに、物品はパンに、処理は「焼くこと」に対応する。設定情報は、「２００℃」若しくは「１５分」、又は、それらを結合した「２００℃で１５分」のようなオーブンに対する設定情報に対応する。なお、本ステップ（ステップＳ３０１）は、必須ではない。本ステップの代わりに、ユーザが手動で電気機器に設定を行うようにしてもよい。 First, the communication device 11 transmits a home appliance setting command to the terminal device 31 (step S301). The operation unit 114 of the communication device 11 receives an operation by a user. The control unit 117 transmits the home appliance setting command created by the user's operation to the terminal device 31 through the proximity wireless communication unit 115 and the proximity wireless communication antenna 116. There are various methods for creating the home appliance setting command. As an example, there is a method realized by software on the communication device 11 and a method of creating a home appliance setting command by causing a user to select a setting item. As another example, the communication device 11 connects to a specific Web site on the Internet through the mobile network communication unit 118 and the mobile network communication antenna 119, and causes the user to select setting items according to data received from the Web site. There is a way to create. Here, the home appliance setting command is setting information when the electric device performs processing on the article. As a specific example, when baking bread in an oven, which is an electric device, the electric device corresponds to the oven, the article corresponds to the pan, and the processing corresponds to “baking”. The setting information corresponds to setting information for the oven such as “200 ° C.” or “15 minutes”, or “200 ° C. for 15 minutes” combined. Note that this step (step S301) is not essential. Instead of this step, the user may manually set the electrical device.
　次に、端末機器３１は、ステップＳ３０１で通信装置１１から受信した家電設定コマンドを電気機器に送信し、電気機器がその家電設定コマンドに従って物品に処理を施す（ステップＳ３１１）。その結果、処理を施された物品が生成される。具体的には、例えば、端末機器であるオーブンが、物品であるパンに対して、焼くという処理を施す。その結果、焼かれたパン５１が生成される。 Next, the terminal device 31 transmits the home appliance setting command received from the communication device 11 in step S301 to the electric device, and the electric device processes the article according to the home appliance setting command (step S311). As a result, a processed article is generated. Specifically, for example, an oven that is a terminal device performs a process of baking bread that is an article. As a result, baked bread 51 is generated.
　次に、通信装置１１は、ステップＳ３１１で端末機器３１が処理を施した物品を被写体とする画像を取得し、画像データを生成する（ステップＳ３０２）。通信装置１１の画像生成部１１１４は、カメラ１１３を用いて、端末機器３１が処理を施した物品を被写体とする写真を撮影し、画像データを生成する。具体例として、オーブンでパンを焼く場合には、焼かれたパン５１を被写体とする画像を取得し、画像データを生成する。なお、画像は、電気機器が処理を施した物品を被写体とする画像であればよく、写真、イラスト又は文字列の画像のイメージデータを用いることができる。本ステップの処理が図４の（ａ）に示されている。 Next, the communication device 11 acquires an image having the article processed by the terminal device 31 in step S311 as a subject, and generates image data (step S302). The image generation unit 1114 of the communication device 11 uses the camera 113 to take a picture of the article processed by the terminal device 31 as a subject, and generates image data. As a specific example, when baking bread in an oven, an image having the baked bread 51 as a subject is acquired and image data is generated. Note that the image may be an image having an article processed by the electric device as a subject, and image data of a photograph, an illustration, or a character string image may be used. The process in this step is shown in FIG.
　次に、通信装置１１は、家電設定コマンドと画像との紐付けを行う（ステップＳ３０３）。通信装置１１の画像生成部１１１４は、ステップＳ３０１で通信装置１１が作成した家電設定コマンドと、ステップＳ３０２で取得した写真との紐付けを行う。ここで、紐付けとは、家電設定コマンドと画像との対応付けのことである。具体的には、電気機器で当該家電設定コマンドによる処理を物品に施すことで、当該画像の被写体である物品が生成される、という対応付けのことである。このとき、ユーザに対して、紐付けを行うか否かを問い合わせるインタフェースを提供し、紐付けを行うか否かをユーザに指定させるようにしてもよい。本ステップでの画像の表示は、例えば、図４の（ｂ）のようになる。 Next, the communication device 11 associates the home appliance setting command with the image (step S303). The image generation unit 1114 of the communication device 11 associates the home appliance setting command created by the communication device 11 in step S301 with the photograph acquired in step S302. Here, the association is the association between the home appliance setting command and the image. Specifically, this is an association in which an article that is a subject of the image is generated by processing the article with the home appliance setting command in the electric device. At this time, an interface for inquiring whether or not to perform association may be provided to the user so that the user can specify whether or not to perform association. The image display in this step is, for example, as shown in FIG.
　次に、通信装置１１は、家電設定コマンドを基準設定情報に変換する（ステップＳ３０４）。通信装置１１の基準値生成部１１１２は、家電設定コマンド取得部１１１１が取得した家電設定コマンドを、汎用形式の設定情報（基準設定情報）に変換する。基準設定情報には、具体的には、オーブンの設定情報「２２０℃で１１分」を、「０ｘＡ１２３３」（“０ｘ”は１６進数を意味する接頭語）のような値で表現する設定コマンド基準値と、オーブンの設定情報「２２０℃で１１分」を、そのままの形で表現する基準コマンドとがある。なお、基準値生成部１１１２は、電気機器の特定機種の専用形式の設定情報に対応付けて、電気機器の機種に依存しない汎用形式の設定情報を格納する変換テーブルを保持していてもよい。この変換テーブルを参照して、上記の変換を行うことができる。なお、基準設定情報への変換は必須ではない。基準設定情報への変換を行わない場合は、家電設定コマンドそのものを以降の処理の基準設定情報として用いる。 Next, the communication device 11 converts the home appliance setting command into reference setting information (step S304). The reference value generation unit 1112 of the communication device 11 converts the home appliance setting command acquired by the home appliance setting command acquisition unit 1111 into setting information (reference setting information) in a general format. Specifically, the reference setting information includes setting command criteria for expressing oven setting information “11 minutes at 220 ° C.” with a value such as “0xA1233” (“0x” is a prefix meaning a hexadecimal number). There is a reference command for expressing the value and the oven setting information “11 minutes at 220 ° C.” as it is. Note that the reference value generation unit 1112 may hold a conversion table that stores setting information in a general-purpose format that does not depend on the model of the electrical device, in association with the setting information in the dedicated format of the specific model of the electrical device. The above conversion can be performed with reference to this conversion table. Note that conversion to reference setting information is not essential. When conversion to reference setting information is not performed, the home appliance setting command itself is used as reference setting information for subsequent processing.
　次に、通信装置１１は、基準設定情報を画像データに埋め込む（ステップＳ３０５）。通信装置１１の合成部１１１３は、基準値生成部１１１２が生成した基準設定情報を、画像生成部１１１４が生成した画像データに埋め込む。具体例としては、合成部１１１３は、基準値生成部１１１２が生成した基準設定情報を、画像生成部１１１４がカメラ１１３を用いて取得した画像データのＥｘｉｆ（Exchangeable image file format）データに格納する。 Next, the communication device 11 embeds the reference setting information in the image data (step S305). The synthesizing unit 1113 of the communication device 11 embeds the reference setting information generated by the reference value generating unit 1112 in the image data generated by the image generating unit 1114. As a specific example, the synthesis unit 1113 stores the reference setting information generated by the reference value generation unit 1112 in Exif (Exchangeable image file format) data of image data acquired by the image generation unit 1114 using the camera 113.
　次に、通信装置１１は、ステップＳ３０５で基準設定情報が埋め込まれた画像データを、蓄積サーバ４１に送信する（ステップＳ３０６）。通信装置１１の制御部１１７は、家電設定コマンド合成部１１１（合成部１１１３）から、基準設定情報が埋め込まれた画像データを受け取り、移動網通信部１１８及び移動網通信アンテナ１１９を通じて蓄積サーバ４１へ送信する。なお、ユーザに対して、画像データを蓄積サーバへ送信するか否かを問い合わせるインタフェースを提供し、画像サーバへ送信するか否かをユーザにより指定させるようにしてもよい。また、ユーザに対して、合成データを特定する情報を提供するインタフェースを提供するとしてもよい。本ステップでの画像の表示は、例えば、図４の（ｃ）のようになる。 Next, the communication device 11 transmits the image data in which the reference setting information is embedded in step S305 to the storage server 41 (step S306). The control unit 117 of the communication device 11 receives the image data in which the reference setting information is embedded from the home appliance setting command combining unit 111 (combining unit 1113), and sends it to the storage server 41 through the mobile network communication unit 118 and the mobile network communication antenna 119. Send. Note that an interface for inquiring whether or not to transmit image data to the storage server may be provided to the user so that the user can specify whether or not to transmit the image data to the image server. In addition, an interface may be provided that provides information specifying the composite data to the user. For example, the display of the image in this step is as shown in FIG.
　ステップＳ３０６の後、蓄積サーバ４１上に基準設定情報が埋め込まれた画像データが保存されているので、蓄積サーバ４１にアクセスしたユーザは、当該画像データを閲覧することができる。そのときの通信装置１１の画面の例は、図４の（ｄ）である。図４の（ｄ）において、蓄積サーバ４１（サイト名は“ＡＢＣ”）内に保存された画像として、画像データがユーザのコメント付きで表示されている。 After step S306, since the image data in which the reference setting information is embedded is stored on the storage server 41, the user who has accessed the storage server 41 can view the image data. The example of the screen of the communication apparatus 11 at that time is (d) of FIG. In FIG. 4D, image data is displayed with the user's comment as an image stored in the storage server 41 (site name is “ABC”).
　以上のようにして、電気機器により処理を施された物品を被写体とする画像であって、当該処理時の家電設定コマンドが埋め込まれた画像が、蓄積サーバ４１に保存される。 As described above, an image having an article processed by an electric device as a subject and having an appliance setting command embedded at the time of processing is stored in the storage server 41.
　図５は、本実施の形態に係る通信装置の設定処理の説明図である。図５は、家電設定コマンドと画像との紐付け処理（ステップＳ３０３）の具体的な方法を示す図である。 FIG. 5 is an explanatory diagram of setting processing of the communication device according to the present embodiment. FIG. 5 is a diagram illustrating a specific method of the home appliance setting command and image linking process (step S303).
　図５の（ａ）は、端末機器３１と通信装置１１とが近接無線通信を行うことにより、通信装置１１が、家電設定コマンドを取得する例を示す。例えば、オーブンでパンを焼く場合、パンを焼いた後に通信装置１１の近接無線通信アンテナ１１６と、端末機器３１の近接無線通信アンテナ（不図示）とを近接させることで、パンを焼いたときのオーブンの設定情報を通信装置１１が取得する。このようにすることで、ユーザは設定値を意識することなく、通信装置１１にオーブンの設定情報を取得させることができる。なお、このように取得する場合、通信装置１１は、端末機器３１の最新の設定情報を受け付けるようにしてもよいし、過去の複数の設定情報を受け付け、それらの複数の設定情報の中から適したものをユーザに指定させるようにしてもよい。その際には、通信装置１１は、複数の設定情報の中から適したものをユーザに指定させるためのインタフェースをユーザに提供し、ユーザはそのインタフェースを用いて指定を行う。 (A) of FIG. 5 shows an example in which the communication device 11 acquires a home appliance setting command when the terminal device 31 and the communication device 11 perform close proximity wireless communication. For example, when baking bread in an oven, after the bread is baked, the proximity wireless communication antenna 116 of the communication device 11 and the proximity wireless communication antenna (not shown) of the terminal device 31 are brought close to each other so that the bread is baked. The communication device 11 acquires oven setting information. In this way, the user can cause the communication device 11 to acquire oven setting information without being aware of the setting value. In addition, when acquiring in this way, the communication apparatus 11 may receive the latest setting information of the terminal device 31, or may receive a plurality of past setting information, and is suitable from the plurality of setting information. You may make it make a user specify what was. In that case, the communication apparatus 11 provides the user with an interface for allowing the user to specify a suitable item from among a plurality of setting information, and the user performs the designation using the interface.
　図５の（ｂ）は、通信装置１１にユーザ自身が設定情報を入力する例を示す。例えば、オーブンでパンを焼く場合、パンを焼いた後に、パンを焼いたときのオーブンの設定値をユーザが通信装置１１に入力する。このようにすることで、ユーザは設定値を自身で確認しながら入力することができる。 FIG. 5B shows an example in which the user himself / herself inputs setting information to the communication device 11. For example, when baking bread in an oven, the user inputs the set value of the oven when baking the bread to the communication device 11 after baking the bread. In this way, the user can input the set value while confirming the setting value by himself / herself.
　図５の（ｃ）は、通信装置１１が、撮影した画像を画像解析することによってオーブンの設定値を取得する例である。具体的には、パンの膨らみの具合、色合い又は焦げ目の量などから画像解析によって取得することができる。このようにすることで、ユーザは電気機器の設定値を意識することなく、通信装置１１にオーブンの設定情報を取得させることができる。 (C) of FIG. 5 is an example in which the communication device 11 acquires the set value of the oven by analyzing the photographed image. Specifically, it can be obtained by image analysis from the degree of bread bulge, hue, or amount of browning. By doing so, the user can cause the communication device 11 to acquire oven setting information without being aware of the setting value of the electric device.
　図６Ａは、本実施の形態に係る画像データの埋め込みデータの一例の説明図である。図６Ａは、具体的には、Ｅｘｉｆ規格のデータ構造を示す図である。 FIG. 6A is an explanatory diagram of an example of embedded data of image data according to the present embodiment. FIG. 6A is a diagram specifically showing the data structure of the Exif standard.
　図６Ａに示されるように、画像データの埋め込みデータ６０１は、「ファイル情報」、「カメラ情報」、及び、「メーカ固有情報」の３つの部分を含む。ファイル情報の部分には、この埋め込みデータが埋め込まれている画像のファイル名（ａｂｃ．ｊｐｇ）、画像の形式（ＪＰＥＧ）、ファイルサイズ（１．４ＭＢ）などの項目がある。カメラ情報の部分には、この埋め込みデータが埋め込まれている画像を取得したカメラのメーカ名（Ｘｙｚ）、機種（Ｏｐｑ１）などの項目がある。メーカ固有情報の部分には、任意の情報が埋め込まれる。 As shown in FIG. 6A, the embedded data 601 of image data includes three parts: “file information”, “camera information”, and “maker specific information”. The file information portion includes items such as the file name (abc.jpg) of the image in which the embedded data is embedded, the image format (JPEG), and the file size (1.4 MB). The camera information portion includes items such as the manufacturer name (Xyz) and model (Opq1) of the camera that acquired the image in which the embedded data is embedded. Arbitrary information is embedded in the maker specific information portion.
　本実施の形態に係る画像データの埋め込みデータは、メーカ固有情報の部分に格納される。メーカ固有情報の部分に書き込まれるデータは、図６Ａに示されるように、バージョン（１．１）、設定コマンド品番（ＮＥ－Ｑ１０）、設定コマンド基準値（０ｘＡ１２３３）などがある。設定コマンド基準値は、ステップＳ３０４で生成されるものである。設定コマンド基準値の代わりに、同様にステップＳ３０４で生成される基準設定コマンドを用いてもよい。バージョンは、このデータフォーマットに付けられた番号である。設定コマンド品番は、この設定コマンド基準値を生成した端末機器３１の機種を示す。なお、設定コマンド基準値及び基準設定コマンド以外の項目は、必須ではない。 The embedded data of the image data according to the present embodiment is stored in the manufacturer specific information part. As shown in FIG. 6A, the data written in the maker specific information part includes version (1.1), setting command product number (NE-Q10), setting command reference value (0xA1233), and the like. The setting command reference value is generated in step S304. Instead of the setting command reference value, the reference setting command generated in step S304 may be used similarly. The version is a number assigned to this data format. The setting command product number indicates the model of the terminal device 31 that generated the setting command reference value. Items other than the setting command reference value and the reference setting command are not essential.
　図６Ｂは、設定コマンド基準値及び基準設定コマンドの説明図である。図６Ｂの（ａ）は、設定コマンド基準値の例であり、図６Ａのメーカ固有部分に書き込まれるものと同一である。 FIG. 6B is an explanatory diagram of the setting command reference value and the reference setting command. FIG. 6B shows an example of the setting command reference value, which is the same as that written in the manufacturer-specific part of FIG. 6A.
　図６Ｂの（ｂ）は、設定コマンド基準値の別の例である。端末機器３１が物品に処理を施す際に、２回の処理を順に施す場合がある。その場合、図６Ｂの（ｂ）のように、設定コマンド基準値１及び２というように、２つの設定コマンド基準値を記述する。例えば、オーブンでパンを焼く場合、まず、２４０℃で７分焼き、その後、２２０℃で２０分焼く、という手順をとる場合がある。そのような場合には、「２４０℃で７分焼く」処理に対応する設定コマンド基準値０ｘＡ１２４４と、「２２０℃で２０分焼く」処理に対応する設定コマンド基準値０ｘＡ１２２２との両方を記述する。 (B) in FIG. 6B is another example of the setting command reference value. When the terminal device 31 performs a process on an article, the process may be performed twice in order. In this case, two setting command reference values are described as setting command reference values 1 and 2 as shown in FIG. 6B (b). For example, when baking bread in an oven, there may be a procedure of first baking at 240 ° C. for 7 minutes and then baking at 220 ° C. for 20 minutes. In such a case, both the setting command reference value 0xA1244 corresponding to the “baking at 240 ° C. for 7 minutes” process and the setting command reference value 0xA1222 corresponding to the “baking at 220 ° C. for 20 minutes” process are described.
　図６Ｂの（ｃ）は、基準設定コマンドの例であり、図６Ｂの（ａ）に対応するものである。つまり、オーブンの場合、基準設定コマンドとは、「２００℃で１０分」のような情報のことである。 (C) in FIG. 6B is an example of a reference setting command, and corresponds to (a) in FIG. 6B. That is, in the case of an oven, the reference setting command is information such as “10 minutes at 200 ° C.”.
　図６Ｂの（ｄ）は、基準コマンドの別の例であり、図６Ｂの（ｂ）に対応するものである。図６Ｂの（ｂ）の場合と同様、端末機器３１が物品に処理を施す際に、２回の処理を順に施す場合の例である。つまり、２つの基準設定コマンド「２４０℃で７分」及び「２２０℃で１０分」が示されている。 (D) in FIG. 6B is another example of the reference command, and corresponds to (b) in FIG. 6B. As in the case of (b) of FIG. 6B, when the terminal device 31 performs processing on the article, it is an example in which the processing is performed twice. That is, two reference setting commands “7 minutes at 240 ° C.” and “10 minutes at 220 ° C.” are shown.
　図６Ｂの（ｅ）は、基準コマンドを保存したＵＲＬ（Uniform resource locator）（基準コマンドＵＲＬ）を示す例である。インターネット上の所定のサイトに上記の設定コマンド基準値又は基準コマンドを保存しておき、埋め込みデータの埋め込みデータ部分には、設定コマンド基準値又は基準コマンドにアクセスするためのＵＲＬを記述するようにしてもよい。図６Ｂの（ｅ）の例では、ＵＲＬであるhttp://aaa.com/aaa.htmlに、基準コマンドが保存されている場合の例である。 (E) of FIG. 6B is an example showing a URL (Uniform resource locator) (reference command URL) where the reference command is stored. The setting command reference value or the reference command is stored in a predetermined site on the Internet, and a URL for accessing the setting command reference value or the reference command is described in the embedded data portion of the embedded data. Also good. The example of (e) of FIG. 6B is an example in which the reference command is stored in the URL http://aaa.com/aaa.html.
　図７は、本実施の形態に係る設定コマンドの変換テーブル７０１の例である。変換テーブル７０１は、オーブンの複数の機種（Ａ、Ｂ、及び、Ｃ）ごとに、当該機種の設定値を設定コマンド基準値に変換するときの変換数を表すテーブルである。ステップＳ３０４において通信装置１１が家電設定コマンドを基準設定情報に変換するときに用いられる。具体的には、オーブンＡにおける設定値ｓを設定コマンド基準値に変換するときには、変換テーブル７０１のオーブンＡの欄にある係数Ａを参照し、設定値ｓに係数Ａを乗ずることで設定コマンド基準値ｔを得るというように用いられる。また、オーブンＡと異なる機種のオーブンＢにおける設定値ｘを設定コマンド基準値に変換するときには、変換テーブル７０１のオーブンＢの欄にある係数Ｂを参照し、設定値ｘに係数Ｂを乗ずることで、設定コマンド基準値ｙを得るというように用いられる。なお、変換テーブル７０１には、オーブンの３機種のみを示したが、これより多くの機種が登録されてもよいし、その他の家電機器（ベーカリー、ＩＨクッキングヒータ、又は、洗濯機など）の機種に対する係数が登録されてもよい。 FIG. 7 shows an example of the setting command conversion table 701 according to the present embodiment. The conversion table 701 is a table that represents the number of conversions when converting the set value of the model into the set command reference value for each of the plurality of oven models (A, B, and C). It is used when the communication device 11 converts the home appliance setting command into reference setting information in step S304. Specifically, when the setting value s in the oven A is converted into the setting command reference value, the setting command reference is obtained by referring to the coefficient A in the oven A column of the conversion table 701 and multiplying the setting value s by the coefficient A. Used to obtain the value t. When the set value x in the oven B of a model different from the oven A is converted into the set command reference value, the coefficient B in the oven B column of the conversion table 701 is referred to and the set value x is multiplied by the coefficient B. The setting command reference value y is used. Note that although only three types of ovens are shown in the conversion table 701, more models may be registered, or for other home appliances (bakery, IH cooking heater, washing machine, etc.) models. A coefficient may be registered.
　上記では、単に家電の設定値に対して変換テーブル７０１の係数を乗ずる例を示したが、複数の値を組み合わせてなる設定コマンドを変換することも可能である。例えば、「２２０℃で２０分焼く」という設定コマンドを、処理される物品に同様の効果が与えられる「２１０℃で２２分焼く」という設定コマンドに変換することも可能である。 In the above, an example in which the setting value of the home appliance is simply multiplied by the coefficient of the conversion table 701 is shown, but it is also possible to convert a setting command formed by combining a plurality of values. For example, a setting command of “baking at 220 ° C. for 20 minutes” can be converted into a setting command of “baking at 210 ° C. for 22 minutes”, which gives the same effect to the article to be processed.
　以上では、通信装置の利用方法として、一般ユーザが電気機器の設定情報を提供する方法を説明した。当該一般ユーザが設定情報を提供し、他の一般ユーザが当該設定情報を取得することで、一般ユーザ同士で電気機器の設定情報を共有することができる。その他の利用方法として、オーブンの提供事業者、又は、パンの材料の提供事業者が、推奨されるオーブンの設定情報をパンの画像に埋め込み、オーブンの使用者、又は、パンの材料の購入者が当該設定情報を使用してオーブンを使用する、又は、パンを焼く、という利用方法がある。 In the above, as a method of using a communication device, a method in which a general user provides setting information of an electric device has been described. When the general user provides the setting information and another general user acquires the setting information, the general user can share the setting information of the electrical device. As another method of use, an oven provider or bread ingredient provider embeds recommended oven setting information in the bread image, and the oven user or bread ingredient purchaser. Use the setting information and use an oven or bake bread.
　以上では、電気機器の具体例として、オーブンを用いて説明したが、他の電気機器にも適用することが可能である。例えば、電気機器である洗濯機についても適用することができる。具体的には、洗濯機により洗濯物が洗濯される場合の洗濯機の設定情報を、洗濯物の画像データに埋め込むこともできる。このようにすれば、所定の洗濯物に対してしわの少ない洗濯ができる洗濯機の設定情報をユーザ間で共有することができる。また、衣服のメーカが、製造する衣服を洗濯機で洗濯する場合の洗濯機の設定情報を、衣服の購入者に配布することができる。 In the above description, an oven is used as a specific example of the electric device, but the present invention can also be applied to other electric devices. For example, the present invention can also be applied to a washing machine that is an electric device. Specifically, the setting information of the washing machine when the laundry is washed by the washing machine can be embedded in the image data of the laundry. In this way, setting information of a washing machine that can perform washing with less wrinkles on a predetermined laundry can be shared between users. In addition, setting information of the washing machine when the garment manufacturer wash the clothes to be manufactured with the washing machine can be distributed to the purchasers of the clothes.
　他の例として、電気機器である炊飯器についても適用することができる。具体的には、炊飯器により白米が炊かれる場合の炊飯器の設定情報を、白米の画像データに埋め込むこともできる。このようにすれば、所定の種類の米がおいしく炊ける炊飯器の設定情報をユーザ間で共有することができる。また、米の販売事業者が、販売する米を炊飯器で炊く場合の炊飯器の設定情報を、米の購入者に配布することができる。 As another example, the present invention can also be applied to a rice cooker that is an electric device. Specifically, the setting information of the rice cooker when white rice is cooked by the rice cooker can be embedded in the image data of white rice. If it does in this way, the setting information of the rice cooker which can cook a predetermined kind of rice deliciously can be shared between users. Moreover, the setting information of the rice cooker when the rice sales business person cooks the rice to sell with a rice cooker can be distributed to the rice purchaser.
　他の例として、ＩＨクッキングヒータについても適用することができる。具体的には、ＩＨクッキングヒータで調理された調理設定を画像データに埋め込むこともできる。 As another example, the present invention can also be applied to an IH cooking heater. Specifically, cooking settings cooked by the IH cooking heater can be embedded in the image data.
　他の例として、テレビなどの映像装置についても適用することができる。具体的には、録画情報を趣味嗜好が同様のユーザが設定した録画予約情報やキーワード録画情報を画像データに埋め込むことができる。 As another example, the present invention can also be applied to a video device such as a television. More specifically, recording reservation information and keyword recording information set by users who have similar hobbies and preferences for recording information can be embedded in the image data.
　他の例として、電気機器がエラー情報を表示している画像について、表示されているエラーに応じた対処方法を設定情報として、画像に埋め込むこともできる。 As another example, with respect to an image on which error information is displayed by an electric device, a coping method corresponding to the displayed error can be embedded in the image as setting information.
　以上のように、本実施の形態に係る通信方法によれば、物品に対して処理が施されたときの電気機器の設定情報に対応する汎用形式の設定情報が埋め込まれた画像データが蓄積サーバに保存される。その画像データは、蓄積サーバにアクセスするユーザに閲覧され、取得される。その画像データを取得したユーザは、画像データとともに、画像データに埋め込まれている電気機器の設定情報を得ることができる。よって、物品が処理された時の電気機器の設定情報の共有が可能となる。 As described above, according to the communication method according to the present embodiment, the image data in which the setting information in the general-purpose format corresponding to the setting information of the electrical device when the processing is performed on the article is stored in the storage server Saved in. The image data is browsed and acquired by a user who accesses the storage server. The user who acquired the image data can obtain the setting information of the electric device embedded in the image data together with the image data. Therefore, it becomes possible to share the setting information of the electric device when the article is processed.
　また、通信装置のユーザが電気機器の設定情報の詳細を認識することなく、電気機器から通信装置へ設定情報が転送される。ユーザの手入力により設定情報を入力するのに比べて、通信装置は、より正確に設定情報を取得することができる。よって、物品が処理された時の電気機器の設定情報の共有が可能となる。 Also, the setting information is transferred from the electric device to the communication device without the user of the communication device recognizing the details of the setting information of the electric device. The communication apparatus can acquire the setting information more accurately than the setting information is input manually by the user. Therefore, it becomes possible to share the setting information of the electric device when the article is processed.
　また、電気機器の特定機種の設定情報が、電気機器の機種に依存しない汎用形式の設定情報に変換され、汎用形式の設定情報が画像データに埋め込まれる。汎用形式の設定情報を用いることで、その画像を取得した装置における設定情報の変換処理の処理負荷が低減される。 Also, the setting information of the specific model of the electric device is converted into the setting information of the general format that does not depend on the model of the electric device, and the setting information of the general format is embedded in the image data. By using the setting information in the general format, the processing load of the setting information conversion process in the apparatus that acquired the image is reduced.
　また、通信装置が搭載するカメラにより生成される、物品を被写体とする画像データに、当該物品に処理が施されたときの電気機器の設定情報が埋め込まれる。よって、より容易に物品の画像データが生成される。 In addition, setting information of the electrical device when the article is processed is embedded in image data generated by the camera mounted on the communication device and having the article as a subject. Therefore, the image data of the article can be generated more easily.
　また、一般に画像データへの情報の埋め込みに用いられているＥｘｉｆ規格に準拠した形式で、電気機器の設定情報が埋め込まれる。よって、電気機器の設定情報が埋め込まれた画像が、電気機器の設定情報が埋め込まれていない一般の画像データと同じように取り扱われる。 Also, the setting information of the electric device is embedded in a format compliant with the Exif standard that is generally used for embedding information in image data. Therefore, the image in which the setting information of the electric device is embedded is handled in the same manner as general image data in which the setting information of the electric device is not embedded.
　また、ユーザの入力により電気機器の設定情報が取得される。よって、通信装置と電気機器との間に通信インタフェースがないときにも、電気機器の設定情報が取得される。 Also, the setting information of the electric device is acquired by the user input. Therefore, even when there is no communication interface between the communication device and the electric device, the setting information of the electric device is acquired.
　また、物品に対して処理が施されたときの電気機器の設定情報が埋め込まれた画像データが蓄積サーバに保存される。その画像は、蓄積サーバにアクセスするユーザにより閲覧され、取得される。その画像データを取得したユーザは、画像データとともに、画像データに埋め込まれている電気機器の設定情報を得ることができる。よって、物品が処理された時の電気機器の設定情報の共有が可能となる。 Also, the image data in which the setting information of the electric device when the processing is performed on the article is embedded is stored in the storage server. The image is viewed and acquired by a user accessing the storage server. The user who acquired the image data can obtain the setting information of the electric device embedded in the image data together with the image data. Therefore, it becomes possible to share the setting information of the electric device when the article is processed.
　（実施の形態２）
　本実施の形態において、実施の形態１における設定情報の汎用化の処理を、通信装置で行う代わりに処理サーバで行う例について説明する。なお、実施の形態１におけるものと同様の構成及び処理についての記述を省略する場合がある。 (Embodiment 2)
In the present embodiment, an example will be described in which the processing for generalizing the setting information in the first embodiment is performed by a processing server instead of by a communication device. Note that the description of the same configuration and processing as those in Embodiment 1 may be omitted.
　図８は、本実施の形態に係る機器制御システムの構成図である。 FIG. 8 is a configuration diagram of the device control system according to the present embodiment.
　図８に示されるように、本実施の形態に係る機器制御システム２は、通信装置１２と、処理サーバ２１と、端末機器３１と、蓄積サーバ４１とを備える。ここで、実施の形態１における機器制御システム１と異なるのは、通信装置１２と、処理サーバ２１とである。これらについて説明する。 As shown in FIG. 8, the device control system 2 according to the present embodiment includes a communication device 12, a processing server 21, a terminal device 31, and a storage server 41. Here, the communication device 12 and the processing server 21 are different from the device control system 1 in the first embodiment. These will be described.
　通信装置１２は、近接無線通信を利用して端末機器３１と通信するとともに、ネットワークを介して処理サーバ２１及び蓄積サーバ４１のそれぞれと通信する。また、通信装置１１は、端末機器３１との通信により取得した設定情報データの一部を処理サーバ２１に送信し、処理サーバ２１で処理された処理データを受信する。また、通信装置１１は、処理サーバ２１の処理データを蓄積サーバ４１に送信する。通信装置１１は、近接無線通信インタフェースとネットワーク通信インタフェースとを搭載した携帯電話又はスマートフォン（高機能携帯電話）などで実現される。 The communication device 12 communicates with the terminal device 31 using proximity wireless communication and also communicates with each of the processing server 21 and the storage server 41 via the network. In addition, the communication device 11 transmits a part of the setting information data acquired by communication with the terminal device 31 to the processing server 21 and receives the processing data processed by the processing server 21. In addition, the communication device 11 transmits the processing data of the processing server 21 to the storage server 41. The communication device 11 is realized by a mobile phone or a smartphone (high function mobile phone) equipped with a close proximity wireless communication interface and a network communication interface.
　処理サーバ２１は、通信装置１２が送信したデータを受信し、当該データに対し後述する処理を施したものを通信装置１２に処理データとして送信する。処理サーバは、一般的なサーバ機器などで実現される。 The processing server 21 receives the data transmitted by the communication device 12 and transmits the data subjected to processing described later to the communication device 12 as processing data. The processing server is realized by a general server device.
　図９Ａは、本実施の形態に係る通信装置１２の機能ブロック図の例である。図９Ａに示されるように、通信装置１２は、家電設定コマンド合成部１２１と、表示部１１２と、カメラ１１３と、操作部１１４と、近接無線通信部１１５と、近接無線通信アンテナ１１６と、制御部１２７と、移動網通信部１１８と、移動網通信アンテナ１１９とを備える。ここで、実施の形態１における通信装置１１と異なるのは、家電設定コマンド合成部１２１と、制御部１２７とである。 FIG. 9A is an example of a functional block diagram of the communication device 12 according to the present embodiment. As shown in FIG. 9A, the communication device 12 includes a home appliance setting command combining unit 121, a display unit 112, a camera 113, an operation unit 114, a proximity wireless communication unit 115, a proximity wireless communication antenna 116, and a control. Unit 127, mobile network communication unit 118, and mobile network communication antenna 119. Here, a difference from communication device 11 in the first embodiment is home appliance setting command composition unit 121 and control unit 127.
　家電設定コマンド合成部１２１は、電気機器の設定コマンドと、当該電気機器により処理を施された物品を被写体とする画像データとを合成する。この処理の一部は、処理サーバ２１により実行される。家電設定コマンド合成部１２１は、その内部機能として、家電設定コマンド取得部１２１１と、識別情報取得部１２１２と、合成部１２１３と、画像生成部１２１４とを有する。 The home appliance setting command composition unit 121 synthesizes the setting command of the electric device and the image data having the article processed by the electric device as a subject. Part of this process is executed by the processing server 21. The home appliance setting command combining unit 121 includes a home appliance setting command acquiring unit 1211, an identification information acquiring unit 1212, a combining unit 1213, and an image generating unit 1214 as its internal functions.
　画像生成部１２１４は、カメラ１１３を用いて、電気機器に処理を施された物品を被写体とする画像を取得する。 The image generation unit 1214 uses the camera 113 to acquire an image having an article processed on an electrical device as a subject.
　家電設定コマンド取得部１２１１は、近接無線通信部１１５及び近接無線通信アンテナ１１６を通じて電気機器との通信を行い、電気機器に対する設定コマンドを取得する。 The home appliance setting command acquisition unit 1211 communicates with an electrical device through the proximity wireless communication unit 115 and the proximity wireless communication antenna 116, and acquires a setting command for the electrical device.
　識別情報取得部１２１２は、家電設定コマンド取得部１２１１が取得した家電設定コマンドを処理サーバ２１へ送信する。そして、処理サーバ２１において、家電設定コマンドから変換されて生成された識別情報を取得する。ここで、識別情報とは、汎用形式の設定情報（基準設定情報）と一対一に対応し、汎用形式の設定情報を特定するための情報のことである。言い換えれば、識別情報とは、基準設定情報を特定する情報であるともいえる。なお、識別情報は、汎用形式の設定情報そのものであってもよい。 The identification information acquisition unit 1212 transmits the home appliance setting command acquired by the home appliance setting command acquisition unit 1211 to the processing server 21. And in the processing server 21, the identification information converted and produced | generated from the household appliance setting command is acquired. Here, the identification information is information for specifying the general-purpose setting information in one-to-one correspondence with the general-purpose setting information (reference setting information). In other words, it can be said that the identification information is information for specifying the reference setting information. The identification information may be general-purpose setting information itself.
　合成部１２１３は、画像生成部１２１４が取得した画像データに識別情報取得部１２１２が取得した識別情報を埋め込む。 The synthesis unit 1213 embeds the identification information acquired by the identification information acquisition unit 1212 in the image data acquired by the image generation unit 1214.
　制御部１２７は、通信装置１２における一連の情報処理の制御、及び、通信装置１２内の各機能ブロックの間の処理の受け渡しを行う。また、家電設定コマンド合成部１２１が合成した画像データを蓄積サーバ４１へ送信する。 The control unit 127 controls a series of information processing in the communication device 12 and transfers processing between the functional blocks in the communication device 12. In addition, the image data combined by the home appliance setting command combining unit 121 is transmitted to the storage server 41.
　図９Ｂは、本実施の形態に係る処理サーバ２１の機能ブロック図の例である。図９Ｂに示されるように、処理サーバ２１は、家電設定コマンド受信部２１２と、基準値生成部２１３と、識別情報生成部２１４と、識別情報送信部２１５と、基準値記憶部２１６とを備える。 FIG. 9B is an example of a functional block diagram of the processing server 21 according to the present embodiment. As shown in FIG. 9B, the processing server 21 includes a home appliance setting command receiving unit 212, a reference value generating unit 213, an identification information generating unit 214, an identification information transmitting unit 215, and a reference value storage unit 216. .
　家電設定コマンド受信部２１２は、通信装置１２の識別情報取得部１２１２が送信した家電設定コマンドを受信する。 The home appliance setting command receiving unit 212 receives the home appliance setting command transmitted by the identification information acquiring unit 1212 of the communication device 12.
　基準値生成部２１３は、家電設定コマンド受信部２１２が取得した家電設定コマンドを変換することで、汎用化された設定情報である基準設定情報を生成する。 The reference value generating unit 213 generates reference setting information that is generalized setting information by converting the home appliance setting command acquired by the home appliance setting command receiving unit 212.
　識別情報生成部２１４は、基準値生成部２１３が生成した基準設定情報に対応する識別情報を生成する。 The identification information generation unit 214 generates identification information corresponding to the reference setting information generated by the reference value generation unit 213.
　識別情報送信部２１５は、識別情報生成部２１４が生成した識別情報を、通信装置１２へ送信する。 The identification information transmission unit 215 transmits the identification information generated by the identification information generation unit 214 to the communication device 12.
　基準値記憶部２１６は、基準値生成部２１３が生成した基準値と、識別情報生成部２１４が生成した識別情報とを対応させて保持する。 The reference value storage unit 216 holds the reference value generated by the reference value generation unit 213 and the identification information generated by the identification information generation unit 214 in association with each other.
　図１０は、本実施の形態に係る通信装置及び処理サーバの処理の例を示すシーケンス図である。 FIG. 10 is a sequence diagram showing an example of processing of the communication device and the processing server according to the present embodiment.
　図１０におけるステップＳ１００１、ステップＳ１０１１、ステップＳ１００２及びステップＳ１００３の各処理は、実施の形態１における各処理ステップＳ３０１、ステップＳ３１１、ステップＳ３０２及びステップＳ３０３にそれぞれ同一であるため、記述を省略する。 10 is the same as each process step S301, step S311, step S302, and step S303 in the first embodiment, and thus description thereof is omitted.
　通信装置１２は、家電設定コマンドを基準設定情報に変換するために、家電設定コマンドを処理サーバへ送信する（ステップＳ１００４）。通信装置１２の識別情報取得部１２１２は、家電設定コマンド取得部１２１１が取得した家電設定コマンドを、移動網通信部１１８及び移動網通信アンテナ１１９を通じて、処理サーバ２１へ送信する。 The communication device 12 transmits the home appliance setting command to the processing server in order to convert the home appliance setting command into the reference setting information (step S1004). The identification information acquisition unit 1212 of the communication device 12 transmits the home appliance setting command acquired by the home appliance setting command acquisition unit 1211 to the processing server 21 through the mobile network communication unit 118 and the mobile network communication antenna 119.
　次に、処理サーバ２１は、通信装置１２が送信した家電設定コマンドを基準設定情報に変換する（ステップＳ１０２１）。処理サーバ２１は、ステップＳ１００４で通信装置１２（識別情報取得部１２１２）が送信した家電設定コマンドを、基準設定情報に変換する。家電設定コマンドから基準設定情報への変換処理は、実施の形態１におけるステップＳ３０４における処理と同様である。 Next, the processing server 21 converts the home appliance setting command transmitted by the communication device 12 into reference setting information (step S1021). The processing server 21 converts the home appliance setting command transmitted by the communication device 12 (identification information acquisition unit 1212) in step S1004 into reference setting information. The conversion process from the home appliance setting command to the reference setting information is the same as the process in step S304 in the first embodiment.
　次に、処理サーバ２１は、ステップＳ１０２１で生成した基準設定情報に対応する識別情報を生成する（ステップＳ１０２２）。処理サーバ２１は、ステップＳ１０２１で生成した基準設定情報と一対一に対応し、当該基準設定情報を一意に特定することができる識別情報を生成し、基準設定情報と識別情報との対応関係である識別情報基準値Ｄ１０２２を処理サーバ２１内の記憶装置に保存する。識別情報は、例えば、識別情報を生成するたびにインクリメントする数値であってよい。また、基準設定情報をキーとしてハッシュ関数などにより得られる数値であってもよい。また、識別情報は、汎用化された設定情報そのものであってもよい。なお、記憶装置は処理サーバ２１内にあるとしたが、処理サーバ２１の外部であって処理サーバ２１と通信可能な場所にあってもよい。 Next, the processing server 21 generates identification information corresponding to the reference setting information generated in step S1021 (step S1022). The processing server 21 has one-to-one correspondence with the reference setting information generated in step S1021, generates identification information that can uniquely identify the reference setting information, and has a correspondence relationship between the reference setting information and the identification information. The identification information reference value D1022 is stored in the storage device in the processing server 21. For example, the identification information may be a numerical value that is incremented each time the identification information is generated. Further, it may be a numerical value obtained by a hash function or the like using the reference setting information as a key. The identification information may be generalized setting information itself. Although the storage device is in the processing server 21, it may be outside the processing server 21 and in a place where it can communicate with the processing server 21.
　次に、処理サーバ２１は、ステップＳ１０２２で生成した識別情報を通信装置１２に送信する（ステップＳ１０２３）。 Next, the processing server 21 transmits the identification information generated in step S1022 to the communication device 12 (step S1023).
　次に、通信装置１２は、ステップＳ１０２３で処理サーバ２１が送信した識別情報を受信する（ステップＳ１００５）。通信装置１２の識別情報取得部１２１２は、移動網通信部１１８及び移動網通信アンテナ１１９を通じて、ステップＳ１０２３で処理サーバ２１が送信した識別情報を受信する。 Next, the communication device 12 receives the identification information transmitted by the processing server 21 in step S1023 (step S1005). The identification information acquisition unit 1212 of the communication device 12 receives the identification information transmitted by the processing server 21 in step S1023 through the mobile network communication unit 118 and the mobile network communication antenna 119.
　次に、通信装置１２は識別情報を画像データに埋め込む（ステップＳ１００６）。通信装置１２の合成部１２１３は、識別情報取得部１２１２が取得した識別情報を、画像生成部１２１４が取得した画像データの埋め込みデータとして、画像データに埋め込む。具体例としては、合成部１２１３は、識別情報取得部１２１２が取得した識別情報を、画像生成部１２１４がカメラ１１３を用いて取得した画像データのＥｘｉｆデータに格納する。 Next, the communication device 12 embeds identification information in the image data (step S1006). The synthesizing unit 1213 of the communication device 12 embeds the identification information acquired by the identification information acquiring unit 1212 in the image data as embedded data of the image data acquired by the image generating unit 1214. As a specific example, the synthesis unit 1213 stores the identification information acquired by the identification information acquisition unit 1212 in the Exif data of the image data acquired by the image generation unit 1214 using the camera 113.
　次に、通信装置１２は、ステップＳ１００６で識別情報が埋め込まれた画像データを、蓄積サーバ４１に送信する（ステップＳ１００７）。この処理は、実施の形態１におけるステップＳ３０６の処理と同様である。 Next, the communication device 12 transmits the image data in which the identification information is embedded in step S1006 to the storage server 41 (step S1007). This process is the same as the process of step S306 in the first embodiment.
　ステップＳ１００７の後、蓄積サーバ４１上に識別情報が埋め込まれた画像データが保存されているので、蓄積サーバにアクセスしたユーザは、当該画像データを閲覧することができる。 After step S1007, since the image data in which the identification information is embedded is stored on the storage server 41, the user who has accessed the storage server can view the image data.
　以上のようにして、電気機器により処理を施された物品を被写体とする画像であって、当該処理時の家電設定コマンドの識別情報が埋め込まれた画像が、蓄積サーバ４１に保存される。なお、ステップＳ１０２２において、識別情報として、汎用化された設定情報そのものを用いた場合は、当該処理時の家電設定コマンドの設定情報が埋め込まれた画像が、蓄積サーバ４１に保存される。 As described above, an image in which an article processed by an electrical device is a subject and the identification information of the home appliance setting command at the time of the processing is embedded is stored in the storage server 41. In step S1022, when generalized setting information itself is used as the identification information, an image in which the setting information of the home appliance setting command at the time of the processing is embedded is stored in the storage server 41.
　以上のように、本実施の形態に係る通信方法によれば、電気機器の特定機種の設定情報を、電気機器の機種に依存しない汎用形式の設定情報に変換する処理が、処理サーバにおいて行われる。当該変換処理には変換テーブルが必要とされ、変換処理が複雑になる場合もある。処理サーバにおいて、当該処理を行うことにより、通信装置の処理負荷が増大するのを未然に防ぐことができる。 As described above, according to the communication method according to the present embodiment, the processing server performs the process of converting the setting information of the specific model of the electric device into the setting information of the general format independent of the model of the electric device. . The conversion process requires a conversion table, and the conversion process may be complicated. By performing the processing in the processing server, it is possible to prevent an increase in the processing load of the communication device.
　（実施の形態３）
　本実施の形態において、電気機器で処理を施された物品の画像データであって、当該処理時の汎用形式の設定情報が埋め込まれた画像データを、蓄積サーバから受信して電気機器に設定することで電気機器を制御する機器制御装置の例を示す。 (Embodiment 3)
In the present embodiment, image data of an article processed by an electrical device, which is embedded with general-purpose format setting information at the time of the processing, is received from the storage server and set in the electrical device. The example of the apparatus control apparatus which controls an electric apparatus is shown.
　図１１は、本実施の形態に係る機器制御システムの構成図である。 FIG. 11 is a configuration diagram of the device control system according to the present embodiment.
　図１１に示されるように、本実施の形態に係る機器制御システム３は、機器制御装置１３と、端末機器３２と、蓄積サーバ４１とを備える。 As shown in FIG. 11, the device control system 3 according to the present embodiment includes a device control device 13, a terminal device 32, and a storage server 41.
　機器制御装置１３は、近接無線通信を利用して端末機器３２と通信するとともに、ネットワークを介して蓄積サーバ４１と通信する。また、機器制御装置１３は、蓄積サーバ４１から受信した、電気機器の制御情報が埋め込まれた画像データに、後述の処理を施した後、端末機器３２に対して設定情報を送信し制御を行う。機器制御装置１３は、近接無線通信インタフェースとネットワーク通信インタフェースとを搭載した携帯電話又はスマートフォン（高機能携帯電話）などで実現される。 The device control device 13 communicates with the terminal device 32 using proximity wireless communication and also communicates with the storage server 41 via the network. In addition, the device control device 13 performs processing described later on the image data embedded with the control information of the electrical device received from the storage server 41, and then transmits the setting information to the terminal device 32 to perform control. . The device control device 13 is realized by a mobile phone or a smartphone (high performance mobile phone) equipped with a close proximity wireless communication interface and a network communication interface.
　端末機器３２は、電気機器の設定情報などを取得、及び、電気機器に設定するとともに、近接無線通信を利用して機器制御装置１３と通信する。端末機器３２は、電気機器の内部機能として実現されることもあるし、単独の機器として実現され、電気機器に接続して使用される形態をとることもある。電気機器とは、例えば、家電機器であり、具体的には電子レンジやオーブンなどである。以下では電気機器として家電機器を利用する場合の例を示す。 The terminal device 32 acquires and sets the setting information of the electric device and the like, and communicates with the device control device 13 using the proximity wireless communication. The terminal device 32 may be realized as an internal function of the electric device, or may be realized as a single device and connected to the electric device. The electric device is, for example, a home appliance, and specifically a microwave oven, an oven, or the like. Below, the example in the case of using household appliances as an electric equipment is shown.
　蓄積サーバ４１は、データを蓄積するサーバであり、ネットワークを介して機器制御装置１３と通信する。データは、例えば、画像データである。蓄積サーバ４１は、他の通信装置（不図示）ともネットワークを介して通信可能である。他の通信装置は、蓄積サーバ４１と通信することにより、画像データを蓄積サーバ４１に保存（アップロード）することができ、また、画像データを蓄積サーバ４１から取得（ダウンロード）することができる。蓄積サーバ４１は、インターネット上のＳＮＳ（Social networking service）サイト、画像共有サイト、又は、ネットワークを介してアクセス可能なファイルサーバなどで実現される。 The accumulation server 41 is a server that accumulates data, and communicates with the device control apparatus 13 via a network. The data is, for example, image data. The storage server 41 can communicate with other communication devices (not shown) via a network. Other communication devices can store (upload) image data in the storage server 41 by communicating with the storage server 41, and can acquire (download) image data from the storage server 41. The storage server 41 is realized by an SNS (Social networking service) site on the Internet, an image sharing site, or a file server accessible via a network.
　図１２は、本実施の形態に係る機器制御装置１３の機能ブロック図の例である。図１２に示されるように、機器制御装置１３は、家電設定コマンド取得部１３１と、表示部１１２と、カメラ１１３と、操作部１１４と、近接無線通信部１１５と、近接無線通信アンテナ１１６と、制御部１３７と、移動網通信部１１８と、移動網通信アンテナ１１９とを備える。ここで、実施の形態１における通信装置１１と異なるのは、家電設定コマンド取得部１３１と、制御部１３７とである。これらについて説明する。なお、カメラ１１３は必須の構成要素ではない。つまり、機器制御装置１３は、カメラ１１３を備えなくてもよい。 FIG. 12 is an example of a functional block diagram of the device control apparatus 13 according to the present embodiment. As shown in FIG. 12, the appliance control device 13 includes a home appliance setting command acquisition unit 131, a display unit 112, a camera 113, an operation unit 114, a proximity wireless communication unit 115, a proximity wireless communication antenna 116, A control unit 137, a mobile network communication unit 118, and a mobile network communication antenna 119 are provided. Here, the home appliance setting command acquisition unit 131 and the control unit 137 are different from the communication device 11 in the first embodiment. These will be described. The camera 113 is not an essential component. That is, the device control device 13 does not have to include the camera 113.
　家電設定コマンド取得部１３１は、蓄積サーバ４１から画像データを取得するとともに、ユーザが保有している電気機器のリスト（家電リスト）を取得又は生成する。そして、当該画像データに埋め込まれている基準設定情報を、家電リストを参照して、ユーザの保有する電気機器の設定情報に変換する。家電設定コマンド取得部１３１は、その内部機能として、変換テーブル記憶部１３１１と、画像取得部１３１２と、基準コマンド分離部１３１３と、家電設定コマンド変換部１３１４と、家電リスト取得部１３１５とを有する。なお、家電リストは、家電リストを格納しているサーバ等から取得してもよいし、家電設定コマンド取得部１３１が生成してもよい。他の用途のために家電リストを格納しているサーバが存在する場合には、当該サーバから家電リストを取得するようにしてもよい。このようにすれば、機器制御装置１３のために専用に、家電リストを格納しているサーバを設置する必要がないというメリットがある。 The home appliance setting command acquisition unit 131 acquires image data from the storage server 41, and acquires or generates a list (electric home appliance list) of electric devices owned by the user. Then, the reference setting information embedded in the image data is converted into setting information of the electric device owned by the user with reference to the home appliance list. The home appliance setting command acquisition unit 131 includes a conversion table storage unit 1311, an image acquisition unit 1312, a reference command separation unit 1313, a home appliance setting command conversion unit 1314, and a home appliance list acquisition unit 1315 as its internal functions. Note that the home appliance list may be acquired from a server or the like that stores the home appliance list, or may be generated by the home appliance setting command acquisition unit 131. When there is a server that stores a home appliance list for other purposes, the home appliance list may be acquired from the server. In this way, there is an advantage that it is not necessary to install a server storing the home appliance list exclusively for the device control apparatus 13.
　なお、家電リストは、ユーザが保有している家電機器のリストであると説明したが、その代わりに、ユーザが予め指定した家電機器のリストであってもよい。つまり、家電リストに示される家電機器は、ユーザが保有しているものに限らず、ユーザが予め指定した家電機器のリストであればよい。 Although the home appliance list has been described as a list of home appliances owned by the user, it may instead be a list of home appliances designated in advance by the user. That is, the home appliances shown in the home appliance list are not limited to those owned by the user, but may be a list of home appliances designated in advance by the user.
　変換テーブル記憶部１３１１は、電気機器の特定機種の専用形式の設定情報に対応付けて、電気機器の機種に依存しない汎用形式の設定情報を格納する変換テーブルを記憶している。 The conversion table storage unit 1311 stores a conversion table that stores setting information in a general-purpose format that does not depend on the model of the electrical device, in association with the setting information in the dedicated format of the specific model of the electrical device.
　画像取得部１３１２は、蓄積サーバ４１から、電気機器によって処理された物品の画像データであって、基準設定情報が埋め込まれた画像データを、移動網通信部１１８及び移動網通信アンテナ１１９を通じて取得する。 The image acquisition unit 1312 acquires, from the storage server 41, image data of an article processed by an electrical device and embedded with reference setting information through the mobile network communication unit 118 and the mobile network communication antenna 119. .
　基準コマンド分離部１３１３は、画像取得部１３１２が取得した画像データから、電気機器の設定情報を分離する（取り出す）。 The reference command separation unit 1313 separates (takes out) the setting information of the electric device from the image data acquired by the image acquisition unit 1312.
　家電リスト取得部１３１５は、ユーザが保有している電気機器のリスト（家電リスト）を、取得又は生成する。家電リストを生成する方法には、さまざまな方法がある。例えば、ユーザが、ユーザが保有する電気機器に機器制御装置１３を近接させ、近接無線通信におけるポーリングを行い、近接無線通信の通信リンクを確立させた後に、当該電気機器の識別情報などを受信することができる。家電リスト取得部１３１５は、ユーザが保有する電気機器に順次上記の受信をさせることで、家電リストを生成することができる。なお、家電リスト取得部１３１５は、上記の方法で家電リストを生成する代わりに、あらかじめ当該ユーザの家電リストを生成し保持している装置から取得するようにしてもよい。 The home appliance list acquisition unit 1315 acquires or generates a list of electric devices (home appliance list) held by the user. There are various methods for generating the home appliance list. For example, after the user brings the device control apparatus 13 close to an electrical device owned by the user, performs polling in close proximity wireless communication, and establishes a communication link for close proximity wireless communication, then receives identification information of the electrical device or the like be able to. The home appliance list acquisition unit 1315 can generate the home appliance list by causing the electric devices owned by the user to sequentially receive the above-described reception. The home appliance list acquisition unit 1315 may acquire the home appliance list of the user from a device that has been generated and held in advance, instead of generating the home appliance list by the above method.
　家電設定コマンド変換部１３１４は、基準コマンド分離部１３１３が分離した（取り出した）電気機器の設定情報を、ユーザが保有している電気機器の設定情報に変換する。 The home appliance setting command conversion unit 1314 converts the setting information of the electric device separated (taken out) by the reference command separation unit 1313 into the setting information of the electric device held by the user.
　制御部１３７は、機器制御装置１３における一連の情報処理の制御、及び、機器制御装置１３内の各機能ブロックの間の処理の受け渡しを行う。また、制御部１３７は、家電設定コマンド取得部１３１が生成した家電設定コマンドを、近接無線通信部１１５及び近接無線通信アンテナ１１６を通じて、端末機器３２に送信する。 The control unit 137 controls a series of information processing in the device control device 13 and transfers processing between the functional blocks in the device control device 13. In addition, the control unit 137 transmits the home appliance setting command generated by the home appliance setting command acquisition unit 131 to the terminal device 32 through the close proximity wireless communication unit 115 and the close proximity wireless communication antenna 116.
　図１３は、本実施の形態に係る機器制御装置１３の処理の一例を示すシーケンス図である。また、図１４は、本実施の形態に係る通信装置の処理の説明図である。これらの図を参照しながら、本実施の形態に係る通信装置の処理について説明する。 FIG. 13 is a sequence diagram showing an example of processing of the device control apparatus 13 according to the present embodiment. Moreover, FIG. 14 is explanatory drawing of the process of the communication apparatus which concerns on this Embodiment. Processing of the communication apparatus according to the present embodiment will be described with reference to these drawings.
　まず、機器制御装置１３は、蓄積サーバ４１から画像データを取得する（ステップＳ１３０１）。機器制御装置１３のユーザが、蓄積サーバ４１内に保存されている画像を参照する。そして、ユーザが物品に対して施したいと思う処理がなされた後の物品の画像を選択する。機器制御装置１３の画像取得部１３１２は、電気機器によって処理された物品の画像データであって、基準設定情報が埋め込まれた画像データを、移動網通信部１１８及び移動網通信アンテナ１１９を通じて取得する。ユーザが蓄積サーバ４１内に保存されている画像を閲覧するときの機器制御装置１３の画面の例を、図１４の（ａ）に示す。図１４の（ａ）は、具体例として、オーブンで焼かれたパンの場合に、ユーザがオーブンで焼かれたパンの画像を選択する画面を示している。 First, the device control apparatus 13 acquires image data from the storage server 41 (step S1301). A user of the device control apparatus 13 refers to an image stored in the storage server 41. Then, the image of the article after the processing that the user wants to perform on the article is selected. The image acquisition unit 1312 of the device control device 13 acquires image data of an article processed by an electric device and embedded with reference setting information through the mobile network communication unit 118 and the mobile network communication antenna 119. . An example of the screen of the device control apparatus 13 when the user browses an image stored in the storage server 41 is shown in FIG. FIG. 14A shows a screen for the user to select an image of bread baked in the oven in the case of bread baked in the oven as a specific example.
　次に、機器制御装置１３は、画像データの埋め込みデータから基準設定情報を取得する（ステップＳ１３０２）。機器制御装置１３の基準コマンド分離部１３１３は、画像取得部１３１２が取得した画像データのＥｘｉｆデータに格納された基準設定情報を分離する（取り出す）。画像データのＥｘｉｆデータのデータ構造は、図６Ａに示されているものと同一である。 Next, the device control apparatus 13 acquires reference setting information from the embedded data of the image data (step S1302). The reference command separation unit 1313 of the device control device 13 separates (takes out) the reference setting information stored in the Exif data of the image data acquired by the image acquisition unit 1312. The data structure of the Exif data of the image data is the same as that shown in FIG. 6A.
　次に、機器制御装置１３は、ユーザが保有する電気機器のリスト（家電リスト）を取得する（ステップＳ１３０３）。 Next, the device control apparatus 13 acquires a list of electric devices (home appliance list) held by the user (step S1303).
　次に、機器制御装置１３は、基準設定情報と家電リストとに基づいて家電設定コマンドを生成する（ステップＳ１３０４）。機器制御装置１３の家電設定コマンド変換部１３１４は、基準コマンド分離部１３１３が分離した（取り出した）電気機器の設定情報を取得する。また、家電リスト取得部１３１５が取得して家電リストを取得する。そして、変換テーブル記憶部１３１１が記憶している変換テーブルを参照して、電気機器の設定情報を変換することで、ユーザが保有する電気機器の設定情報である家電設定コマンドを生成する。なお、ユーザが保有する電気機器が複数ある場合等には、操作部１１４でユーザの操作による電気機器の指定を受け付けるようにしてもよい。ここで指定された電気機器を、設定情報の変換先の電気機器とする。また、ユーザが近接無線通信アンテナ１１６を電気機器に近接させることで、設定情報の変換先の電気機器を指定することとしてもよい。 Next, the device control apparatus 13 generates a home appliance setting command based on the reference setting information and the home appliance list (step S1304). The home appliance setting command conversion unit 1314 of the device control apparatus 13 acquires the setting information of the electric device separated (taken out) by the reference command separation unit 1313. Moreover, the household appliance list acquisition part 1315 acquires and acquires a household appliance list. Then, by referring to the conversion table stored in the conversion table storage unit 1311 and converting the setting information of the electric device, a home appliance setting command that is the setting information of the electric device held by the user is generated. In addition, when there are a plurality of electric devices held by the user, the operation unit 114 may accept designation of the electric device by the user's operation. The electrical device designated here is the electrical device to which the setting information is converted. Alternatively, the user may designate the electrical device that is the conversion destination of the setting information by bringing the proximity wireless communication antenna 116 close to the electrical device.
　次に、機器制御装置１３は、ステップＳ１３０４で生成された家電設定コマンドを端末機器３２に送信する（ステップＳ１３０５）。機器制御装置１３の制御部１３７は、家電設定コマンド取得部１３１が生成した家電設定コマンドを、近接無線通信部１１５及び近接無線通信アンテナ１１６を通じて、端末機器３２に送信する。その際には、機器制御装置１３はユーザに対して、機器制御装置１３を端末機器３２に近づけるように促すインタフェースを提供してもよい。本ステップは、図１４の（ｂ）及び（ｃ）に対応する。 Next, the device control apparatus 13 transmits the home appliance setting command generated in step S1304 to the terminal device 32 (step S1305). The control unit 137 of the device control apparatus 13 transmits the home appliance setting command generated by the home appliance setting command acquisition unit 131 to the terminal device 32 through the close proximity wireless communication unit 115 and the close proximity wireless communication antenna 116. In this case, the device control apparatus 13 may provide an interface that prompts the user to bring the device control apparatus 13 closer to the terminal device 32. This step corresponds to (b) and (c) of FIG.
　次に、端末機器３２は、ステップＳ１３０５で送信された家電設定コマンドを受信し、物品に処理を施す（ステップＳ１３１１）。例えば、オーブンでパンを焼く場合、ステップＳ１３１１で受信したオーブンの設定（例えば、「２００℃で１５分」）で、パンを焼く制御を行う。これにより、パンが焼け、焼けたパン５２が生成される。本ステップは、図１４の（ｄ）及び（ｅ）に対応する。これにより、画像を提供したユーザの電気機器の設定情報と同じ（又は、ほぼ同じ）処理を、ユーザが保有する電気機器において物品に施すことができる。 Next, the terminal device 32 receives the home appliance setting command transmitted in step S1305, and processes the article (step S1311). For example, when baking bread in an oven, the baking control is performed with the oven setting (for example, “15 minutes at 200 ° C.”) received in step S1311. Thereby, the bread is baked and the baked bread 52 is generated. This step corresponds to (d) and (e) of FIG. Accordingly, the same processing (or almost the same) as the setting information of the user's electric device that provided the image can be applied to the article in the electric device owned by the user.
　なお、上記では、機器制御装置１３が蓄積サーバ４１から取得した画像データから家電設定コマンドを生成し、生成した家電設定コマンドによって端末機器３２を制御する例を示した。同様の制御を行うために、例えば、機器制御装置１３が電気機器のＩＤを蓄積サーバ４１へ送信し、家電設定コマンドが付加された合成データを蓄積サーバ４１が機器制御装置１３へ送信するようにしてもよい。また、例えば、機器制御装置１３がユーザＩＤを蓄積サーバ４１へ送信し、蓄積サーバ４１が当該ユーザの家電リストの中の対応機種用の家電設定コマンドを付加した合成データを機器制御装置１３へ送信するようにしてもよい。 In the above description, an example is shown in which the appliance control device 13 generates a home appliance setting command from the image data acquired from the storage server 41 and controls the terminal device 32 using the generated home appliance setting command. In order to perform the same control, for example, the device control device 13 transmits the ID of the electrical device to the storage server 41, and the storage server 41 transmits the composite data to which the home appliance setting command is added to the device control device 13. May be. Also, for example, the device control apparatus 13 transmits a user ID to the storage server 41, and the storage server 41 transmits composite data to which the home appliance setting command for the corresponding model in the user's home appliance list is added to the device control apparatus 13. You may make it do.
　以上のように、本実施の形態に係る機器制御方法によれば、電気機器の設定情報が埋め込まれた画像データから、電気機器の設定情報が分離され、ユーザが指定する電気機器を用いて当該設定情報に対応する処理が物品に施される。ここで、画像データに埋め込まれた設定情報に対応する電気機器（第一電気機器）の機種と、ユーザが保有する電気機器（第二電気機器）の機種とが異なる場合にも第二電気機器での処理が可能である。なぜなら、機器制御装置が第一電気機器の設定情報を第二電気機器に適合する形式に変換するためである。よって、物品が処理された時の電気機器の設定情報の共有が可能となる。 As described above, according to the device control method according to the present embodiment, the setting information of the electric device is separated from the image data in which the setting information of the electric device is embedded, and the electric device specified by the user is used. Processing corresponding to the setting information is performed on the article. Here, even if the model of the electrical device (first electrical device) corresponding to the setting information embedded in the image data is different from the model of the electrical device (second electrical device) owned by the user, the second electrical device Can be processed. This is because the device control apparatus converts the setting information of the first electric device into a format compatible with the second electric device. Therefore, it becomes possible to share the setting information of the electric device when the article is processed.
　また、ユーザが指定する電気機器のうち、ユーザが明示的に指定する電気機器の形式に、画像データに埋め込まれた設定情報を変換することができる。よって、ユーザが電気機器を複数機種保有している場合にも、適切に電気機器の設定情報変換することができ、物品に対する処理を施すことができる。 Also, the setting information embedded in the image data can be converted into the format of the electrical device explicitly specified by the user among the electrical devices specified by the user. Therefore, even when the user has a plurality of types of electric equipment, the setting information of the electric equipment can be appropriately converted, and processing for the article can be performed.
　また、変換テーブルに従って、設定情報が変換される。 Also, the setting information is converted according to the conversion table.
　また、ユーザが指定する電気機器のうち、ユーザが機器制御装置を近接させた電気機器に適合する形式に、画像データに埋め込まれた設定情報が変換される。よって、ユーザが電気機器を複数機種保有している場合にも、適切に電気機器の設定情報変換することができ、物品に対する処理を施すことができる。 Also, the setting information embedded in the image data is converted into a format that is compatible with the electrical device that the user has placed the device control device among the electrical devices specified by the user. Therefore, even when the user has a plurality of types of electric equipment, the setting information of the electric equipment can be appropriately converted, and processing for the article can be performed.
　（実施の形態４）
　本実施の形態において、実施の形態３における家電設定コマンドへの変換処理を、機器制御装置で行う代わりに処理サーバで行う例について説明する。なお、実施の形態３におけるものと同様の構成及び処理についての記述を省略する場合がある。 (Embodiment 4)
In the present embodiment, an example will be described in which the conversion process to the home appliance setting command in the third embodiment is performed by the processing server instead of the device control apparatus. Note that description of the same configuration and processing as those in Embodiment 3 may be omitted.
　図１５は、本実施の形態に係る機器制御システムの構成図である。 FIG. 15 is a configuration diagram of a device control system according to the present embodiment.
　図１５に示されるように、本実施の形態に係る機器制御システム４は、機器制御装置１４と、処理サーバ２２と、端末機器３２と、蓄積サーバ４１とを備える。ここで、実施の形態３における機器制御システム３と異なるのは、機器制御装置１４と、処理サーバ２２とである。これらについて説明する。 As shown in FIG. 15, the device control system 4 according to the present embodiment includes a device control device 14, a processing server 22, a terminal device 32, and a storage server 41. Here, the device control apparatus 14 and the processing server 22 are different from the device control system 3 in the third embodiment. These will be described.
　機器制御装置１４は、近接無線通信を利用して端末機器３２と通信するとともに、ネットワークを介して蓄積サーバ４１と通信する。また、機器制御装置１４は、蓄積サーバ４１から受信した、電気機器の制御情報が埋め込まれた画像データの埋め込みデータを処理サーバ２２に送信し、それに対する処理サーバ２２の処理データを受信する。また、機器制御装置１４は、端末機器３１に対して設定情報を送信し制御を行う。機器制御装置１３は、近接無線通信インタフェースとネットワーク通信インタフェースとを搭載した携帯電話又はスマートフォン（高機能携帯電話）などで実現される。 The device control apparatus 14 communicates with the terminal device 32 using close proximity wireless communication and also communicates with the storage server 41 via the network. Further, the device control apparatus 14 transmits the embedded data of the image data embedded with the control information of the electrical device received from the storage server 41 to the processing server 22 and receives the processing data of the processing server 22 corresponding thereto. In addition, the device control device 14 performs control by transmitting setting information to the terminal device 31. The device control device 13 is realized by a mobile phone or a smartphone (high performance mobile phone) equipped with a close proximity wireless communication interface and a network communication interface.
　処理サーバ２２は、機器制御装置１４が送信したデータを受信し、当該データに対し後述する処理を施したものを機器制御装置１４に、処理データとして送信する。処理サーバは、一般的なサーバ機器などで実現される。 The processing server 22 receives the data transmitted by the device control device 14 and transmits the data subjected to the processing described later to the device control device 14 as processing data. The processing server is realized by a general server device.
　図１６Ａは、本実施の形態に係る機器制御装置の機能ブロック図の例である。図１６Ａに示されるように、機器制御装置１４は、家電設定コマンド取得部１４１と、表示部１１２と、カメラ１１３と、操作部１１４と、近接無線通信部１１５と、近接無線通信アンテナ１１６と、制御部１４７と、移動網通信部１１８と、移動網通信アンテナ１１９とを備える。ここで、実施の形態３における機器制御装置１３と異なるのは、家電設定コマンド取得部１４１と、制御部１４７とである。なお、カメラ１１３は必須の構成要素ではない。つまり、機器制御装置１４は、カメラ１１３を備えなくてもよい。 FIG. 16A is an example of a functional block diagram of the device control apparatus according to the present embodiment. As shown in FIG. 16A, the appliance control device 14 includes a home appliance setting command acquisition unit 141, a display unit 112, a camera 113, an operation unit 114, a proximity wireless communication unit 115, a proximity wireless communication antenna 116, A control unit 147, a mobile network communication unit 118, and a mobile network communication antenna 119 are provided. Here, the appliance control command acquisition unit 141 and the control unit 147 are different from the device control apparatus 13 in the third embodiment. The camera 113 is not an essential component. That is, the device control apparatus 14 does not have to include the camera 113.
　家電設定コマンド取得部１４１は、蓄積サーバ４１から画像データを取得し、画像データの埋め込みデータから識別情報を分離する。そして、識別情報をユーザの保有する電気機器の設定情報に変換する。この処理の一部は、処理サーバ２２により実行される。家電設定コマンド取得部１４１は、その内部機能として、家電設定コマンド受信部１４１１と、画像取得部１４１２と、識別情報分離部１４１３と、識別情報送信部１４１４とを有する。 The home appliance setting command acquisition unit 141 acquires image data from the storage server 41 and separates identification information from embedded data of the image data. And identification information is converted into the setting information of the electric equipment which a user holds. Part of this processing is executed by the processing server 22. The home appliance setting command acquisition unit 141 includes, as its internal functions, a home appliance setting command reception unit 1411, an image acquisition unit 1412, an identification information separation unit 1413, and an identification information transmission unit 1414.
　画像取得部１４１２は、移動網通信部１１８及び移動網通信アンテナ１１９を通じて、蓄積サーバ４１から画像データを取得する。この画像データは、電気機器によって処理された物品を被写体とする画像であり、この画像データの埋め込みデータには、物品が処理されたときの電気機器の設定情報に対応する識別情報が含まれている。 The image acquisition unit 1412 acquires image data from the storage server 41 through the mobile network communication unit 118 and the mobile network communication antenna 119. This image data is an image of an article processed by the electric device as a subject, and the embedded data of this image data includes identification information corresponding to setting information of the electric device when the article is processed. Yes.
　識別情報分離部１４１３は、画像取得部１４１２が取得した画像データの埋め込みデータから、識別情報を分離する（取り出す）。 The identification information separation unit 1413 separates (takes out) the identification information from the embedded data of the image data acquired by the image acquisition unit 1412.
　識別情報送信部１４１４は、移動網通信部１１８及び移動網通信アンテナ１１９を通じて、識別情報分離部１４１３が分離した（取り出した）識別情報を処理サーバ２２へ送信する。 The identification information transmission unit 1414 transmits the identification information separated (taken out) by the identification information separation unit 1413 to the processing server 22 through the mobile network communication unit 118 and the mobile network communication antenna 119.
　家電設定コマンド受信部１４１１は、識別情報送信部１４１４が送信した識別情報を、処理サーバ２２が変換して生成した基準設定コマンドを受信する。 The home appliance setting command receiving unit 1411 receives the reference setting command generated by the processing server 22 converting the identification information transmitted by the identification information transmitting unit 1414.
　制御部１４７は、機器制御装置１４における一連の情報処理の制御、及び、機器制御装置１４内の各機能ブロックの間の処理の受け渡しを行う。また、制御部１４７は、家電設定コマンド取得部１４１が生成した家電設定コマンドを、近接無線通信部１１５及び近接無線通信アンテナ１１６を通じて、端末機器３２に送信する。 The control unit 147 controls a series of information processing in the device control device 14 and transfers processing between the functional blocks in the device control device 14. In addition, the control unit 147 transmits the home appliance setting command generated by the home appliance setting command acquisition unit 141 to the terminal device 32 through the close proximity wireless communication unit 115 and the close proximity wireless communication antenna 116.
　図１６Ｂは、本実施の形態に係る処理サーバの機能ブロック図の例である。図１６Ｂに示されるように、処理サーバ２２は、識別情報取得部２２１と、基準値生成部２２２と、家電設定コマンド変換部２２３と、家電設定コマンド送信部２２４と、基準値記憶部２２５と、変換テーブル記憶部２２６と、家電リスト取得部２２７とを備える。 FIG. 16B is an example of a functional block diagram of the processing server according to the present embodiment. As illustrated in FIG. 16B, the processing server 22 includes an identification information acquisition unit 221, a reference value generation unit 222, a home appliance setting command conversion unit 223, a home appliance setting command transmission unit 224, a reference value storage unit 225, A conversion table storage unit 226 and a home appliance list acquisition unit 227 are provided.
　識別情報取得部２２１は、機器制御装置１４が送信する識別情報を受信することにより取得する。 The identification information acquisition part 221 acquires by receiving the identification information which the apparatus control apparatus 14 transmits.
　基準値生成部２２２は、識別情報と基準設定コマンドとの変換テーブルを参照し、識別情報取得部２２１が取得した識別情報を変換することで基準設定コマンドを生成する。 The reference value generation unit 222 refers to the conversion table between the identification information and the reference setting command, and generates the reference setting command by converting the identification information acquired by the identification information acquisition unit 221.
　家電設定コマンド変換部２２３は、機器制御装置１４のユーザが保有する電気機器のリスト（家電リスト）を参照し、基準値生成部２２２が生成した基準設定コマンドを、ユーザが保有する電気機器の家電設定コマンドに変換する。 The home appliance setting command conversion unit 223 refers to a list of electric appliances (home appliance list) held by the user of the device control device 14, and uses the reference setting command generated by the reference value generation unit 222 as the home appliance of the electric appliance held by the user. Convert to setting command.
　家電設定コマンド送信部２２４は、家電設定コマンド変換部２２３が変換することで生成した家電設定コマンドを機器制御装置に送信する。 The home appliance setting command transmission unit 224 transmits the home appliance setting command generated by the home appliance setting command conversion unit 223 to the device control apparatus.
　基準値記憶部２２５は、基準値と識別情報とを対応させて保持している。この対応関係は、家電設定コマンドが基準値に変換され識別情報が生成されたときに生成されるものである。なお、基準値記憶部２２５は、実施の形態２における基準値記憶部２１６に相当する。 The reference value storage unit 225 holds the reference value and the identification information in association with each other. This correspondence is generated when the home appliance setting command is converted into a reference value and identification information is generated. The reference value storage unit 225 corresponds to the reference value storage unit 216 in the second embodiment.
　変換テーブル記憶部２２６は、基準値生成部２２２により参照される、識別情報と基準設定コマンドの変換テーブルを記憶している。 The conversion table storage unit 226 stores identification information and a reference setting command conversion table that are referred to by the reference value generation unit 222.
　家電リスト取得部２２７は、ユーザが保有している電気機器のリスト（家電リスト）を、取得または生成する。 The home appliance list acquisition unit 227 acquires or generates a list of electric devices (home appliance list) held by the user.
　図１７は、本実施の形態に係る通信装置及び処理サーバの処理の例を示すシーケンス図である。 FIG. 17 is a sequence diagram illustrating an example of processing of the communication device and the processing server according to the present embodiment.
　まず、機器制御装置１４は、蓄積サーバ４１から画像データを取得する（ステップＳ１７０１）。機器制御装置１４のユーザが、蓄積サーバ４１内に保存されている画像を参照する。そして、ユーザが物品に対して施したいと思う処理がなされた後の物品の画像を選択する。機器制御装置１４の画像取得部１４１２は、電気機器によって処理された物品の画像データであって、基準設定情報から変換された識別情報が埋め込まれた画像データを、移動網通信部１１８及び移動網通信アンテナ１１９を通じて取得する。 First, the device control apparatus 14 acquires image data from the storage server 41 (step S1701). A user of the device control apparatus 14 refers to an image stored in the storage server 41. Then, the image of the article after the processing that the user wants to perform on the article is selected. The image acquisition unit 1412 of the device control device 14 converts the image data of the article processed by the electrical device and including the identification information converted from the reference setting information into the mobile network communication unit 118 and the mobile network. Obtained through the communication antenna 119.
　次に、機器制御装置１４は、ステップＳ１７０１で取得した画像データの埋め込みデータから識別情報を取得する（ステップＳ１７０２）。機器制御装置１４の識別情報分離部１４１３は、画像取得部１４１２が取得した画像データのＥｘｉｆデータに格納された識別情報を分離する（取り出す）。画像データのＥｘｉｆデータのデータ構造は、図６Ａに示されている。 Next, the device control apparatus 14 acquires identification information from the embedded data of the image data acquired in step S1701 (step S1702). The identification information separation unit 1413 of the device control apparatus 14 separates (takes out) the identification information stored in the Exif data of the image data acquired by the image acquisition unit 1412. The data structure of the Exif data of the image data is shown in FIG. 6A.
　次に、機器制御装置１４は、ステップＳ１７０２で取得した識別情報を処理サーバ２２へ送信する（ステップＳ１７０３）。機器制御装置１４の識別情報送信部１４１４は、識別情報分離部１４１３が分離した（取り出した）識別情報を、移動網通信部１１８及び移動網通信アンテナ１１９を通じて処理サーバ２２へ送信する。 Next, the device control apparatus 14 transmits the identification information acquired in step S1702 to the processing server 22 (step S1703). The identification information transmission unit 1414 of the device control device 14 transmits the identification information separated (taken out) by the identification information separation unit 1413 to the processing server 22 through the mobile network communication unit 118 and the mobile network communication antenna 119.
　次に、処理サーバ２２は、ステップＳ１７０３で機器制御装置１４が送信した識別情報を受信する（ステップＳ１７２１）。処理サーバ２２の識別情報取得部２２１は、機器制御装置１４の識別情報送信部１４１４が送信した識別情報を受信する。 Next, the processing server 22 receives the identification information transmitted by the device control apparatus 14 in step S1703 (step S1721). The identification information acquisition unit 221 of the processing server 22 receives the identification information transmitted by the identification information transmission unit 1414 of the device control device 14.
　次に、処理サーバ２２は、ステップＳ１７２１で受信した識別情報に基づいて基準値を生成する（ステップＳ１７２２）。処理サーバ２２の基準値生成部２２２は、ステップＳ１７０２で受信した識別情報と基準設定コマンドとの変換テーブルを参照し、識別情報取得部２２１が取得した識別情報を変換することで基準設定コマンドを生成する。ここで、変換テーブルとは、実施の形態２において識別情報が生成された際に生成された、基準値と識別情報との対応関係である識別情報基準値Ｄ１０２２である。 Next, the processing server 22 generates a reference value based on the identification information received in step S1721 (step S1722). The reference value generation unit 222 of the processing server 22 generates a reference setting command by converting the identification information acquired by the identification information acquisition unit 221 with reference to the conversion table of the identification information and the reference setting command received in step S1702. To do. Here, the conversion table is the identification information reference value D1022 that is a correspondence relationship between the reference value and the identification information that is generated when the identification information is generated in the second embodiment.
　次に、処理サーバ２２は、ステップＳ１７２２で生成された基準値を、ユーザが保有する電気機器の家電設定コマンドに変換する（ステップＳ１７２３）。処理サーバ２２の家電設定コマンド変換部２２３は、ユーザが保有する電気機器のリスト（家電リスト）を参照し、ステップＳ１７２２で生成された基準値に対応する処理が可能な電気機器を検索する。基準値に対応する処理が可能な電気機器が見つかったら、変換テーブル記憶部２２６に記憶されている変換テーブルを参照することで、ステップＳ１７２２で生成された基準値をユーザが保有する電気機器の家電設定コマンドに変換する。 Next, the processing server 22 converts the reference value generated in step S 1722 into a home appliance setting command of an electric device held by the user (step S 1723). The home appliance setting command conversion unit 223 of the processing server 22 refers to a list (electric home appliance list) of electric devices owned by the user, and searches for electric devices that can perform processing corresponding to the reference value generated in step S1722. When an electric device capable of processing corresponding to the reference value is found, the home appliance of the electric device that the user holds the reference value generated in step S 1722 by referring to the conversion table stored in the conversion table storage unit 226. Convert to setting command.
　次に、処理サーバ２２は、ステップＳ１７２３が生成した家電設定コマンドを機器制御装置１４に送信する（ステップＳ１７２４）。 Next, the processing server 22 transmits the home appliance setting command generated in step S1723 to the device control apparatus 14 (step S1724).
　次に、機器制御装置１４は、ステップＳ１７２４で処理サーバ２２が送信した家電設定コマンドを受信する（ステップＳ１７０４）。機器制御装置１４の家電設定コマンド受信部１４１１は、移動網通信部１１８及び移動網通信アンテナ１１９を通じて、ステップＳ１７２３で処理サーバ２１が送信した家電設定コマンドを受信する。 Next, the device control apparatus 14 receives the home appliance setting command transmitted by the processing server 22 in step S1724 (step S1704). The home appliance setting command receiving unit 1411 of the device control apparatus 14 receives the home appliance setting command transmitted by the processing server 21 in step S1723 through the mobile network communication unit 118 and the mobile network communication antenna 119.
　次に、機器制御装置１４は、家電設定コマンドを端末機器３１に送信する（ステップＳ１７０５）。機器制御装置１４の制御部１４７は、ステップＳ１７０４で家電設定コマンド受信部１４１１が受信した家電設定コマンドを、近接無線通信部１１５及び近接無線通信アンテナ１１６を通じて端末機器３２に送信する。 Next, the device control apparatus 14 transmits a home appliance setting command to the terminal device 31 (step S1705). The control unit 147 of the device control apparatus 14 transmits the home appliance setting command received by the home appliance setting command receiving unit 1411 in step S1704 to the terminal device 32 through the close proximity wireless communication unit 115 and the close proximity wireless communication antenna 116.
　次に、端末機器３２は、ステップＳ１７０５で送信された家電設定コマンドを受信し、物品に処理を施す（ステップＳ１７１１）。 Next, the terminal device 32 receives the home appliance setting command transmitted in step S1705, and processes the article (step S1711).
　以上のように、本実施の形態に係る機器制御方法によれば、第一電気機器の設定情報を、第二電気機器に適合する形式に変換する処理を、処理サーバにおいて行うことができる。当該変換処理には変換テーブルが必要とされ、変換処理が複雑になる場合もある。処理サーバにおいて、当該処理を行うことにより、通信装置の処理負荷が増大するのを未然に防ぐことができる。 As described above, according to the device control method according to the present embodiment, the processing server can perform processing for converting the setting information of the first electrical device into a format suitable for the second electrical device. The conversion process requires a conversion table, and the conversion process may be complicated. By performing the processing in the processing server, it is possible to prevent an increase in the processing load of the communication device.
　（実施の形態５）
　本実施の形態において、蓄積サーバより取得した画像であって、物品が処理された時の電気機器の設定情報を含む画像を、一般の画像とは異なる態様でユーザに視認させる表示装置の例を示す。 (Embodiment 5)
In the present embodiment, an example of a display device that allows a user to visually recognize an image acquired from a storage server and including setting information of an electrical device when an article is processed in a manner different from a general image. Show.
　図１８は、本実施の形態に係る機器制御システム５の構成図である。図１８に示されるように、機器制御システム５は、表示装置１５と、端末機器３３と、蓄積サーバ４１とを備える。 FIG. 18 is a configuration diagram of the device control system 5 according to the present embodiment. As illustrated in FIG. 18, the device control system 5 includes a display device 15, a terminal device 33, and a storage server 41.
　表示装置１５は、近接無線通信を利用して端末機器３３と通信するとともに、ネットワークを介して蓄積サーバ４１と通信する。また、表示装置１５は、蓄積サーバ４１から電気機器の制御情報が埋め込まれた画像データ、又は、一般の画像データを受信する。 The display device 15 communicates with the terminal device 33 using proximity wireless communication and also communicates with the storage server 41 via the network. In addition, the display device 15 receives image data in which control information on the electrical device is embedded or general image data from the storage server 41.
　機器制御装置１３は、近接無線通信インタフェースとネットワーク通信インタフェースとを搭載した携帯電話又はスマートフォン（高機能携帯電話）などで実現される。 The device control device 13 is realized by a mobile phone or a smartphone (high-performance mobile phone) equipped with a close proximity wireless communication interface and a network communication interface.
　端末機器３３は、電気機器の設定情報などを取得及び設定するとともに、近接無線通信を利用して表示装置１５と通信する。端末機器３３は、電気機器の内部機能として実現されることもあるし、単独の機器として実現され、電気機器に接続して使用される形態をとることもある。電気機器とは、例えば、家電機器であり、具体的には電子レンジやオーブンなどである。以下では電気機器として家電機器を利用する場合の例を示す。 The terminal device 33 acquires and sets the setting information of the electric device and communicates with the display device 15 using the proximity wireless communication. The terminal device 33 may be realized as an internal function of the electric device, or may be realized as a single device and connected to the electric device. The electric device is, for example, a home appliance, and specifically a microwave oven, an oven, or the like. Below, the example in the case of using household appliances as an electric equipment is shown.
　蓄積サーバ４１は、データを蓄積するサーバであり、ネットワークを介して表示装置１５と通信する。データは、例えば、画像データである。蓄積サーバ４１は、他の通信装置（不図示）ともネットワークを介して通信可能である。他の通信装置は、蓄積サーバ４１と通信することにより、画像データを蓄積サーバ４１に保存（アップロード）することができ、また、画像データを蓄積サーバ４１から取得（ダウンロード）することができる。蓄積サーバ４１は、インターネット上のＳＮＳ（Social networking service）サイト、画像共有サイト、又は、ネットワークを介してアクセス可能なファイルサーバなどで実現される。 The accumulation server 41 is a server for accumulating data, and communicates with the display device 15 via a network. The data is, for example, image data. The storage server 41 can communicate with other communication devices (not shown) via a network. Other communication devices can store (upload) image data in the storage server 41 by communicating with the storage server 41, and can acquire (download) image data from the storage server 41. The storage server 41 is realized by an SNS (Social networking service) site on the Internet, an image sharing site, or a file server accessible via a network.
　図１９は、本実施の形態に係る表示装置１５の機能ブロック図の例である。 FIG. 19 is an example of a functional block diagram of the display device 15 according to the present embodiment.
　図１９に示されるように、表示装置１５は、マーク付加部１５１と、表示部１１２と、カメラ１１３と、操作部１１４と、近接無線通信部１１５と、近接無線通信アンテナ１１６と、制御部１５７と、移動網通信部１１８と、移動網通信アンテナ１１９とを備える。ここで、実施の形態３における機器制御装置１３と異なるのは、マーク付加部１５１と、制御部１５７とである。これらについて説明する。なお、カメラ１１３は必須の構成要素ではない。つまり、表示装置１５は、カメラ１１３を備えなくてもよい。 As illustrated in FIG. 19, the display device 15 includes a mark adding unit 151, a display unit 112, a camera 113, an operation unit 114, a close proximity wireless communication unit 115, a close proximity wireless communication antenna 116, and a control unit 157. A mobile network communication unit 118, and a mobile network communication antenna 119. Here, the difference from the device control apparatus 13 in the third embodiment is a mark adding unit 151 and a control unit 157. These will be described. The camera 113 is not an essential component. That is, the display device 15 may not include the camera 113.
　マーク付加部１５１は、物品が処理された時の電気機器の設定情報を含む画像（以降、「設定画像」とよぶ）と、そうでない画像（以降、「一般画像」とよぶ）とを識別し、設定画像に所定のマークを付加する。ここで、設定画像に所定のマークを付加することを「合成画像を生成する」とも表現する。 The mark adding unit 151 identifies an image including setting information of an electrical device when an article is processed (hereinafter referred to as “setting image”) and an image other than that (hereinafter referred to as “general image”). A predetermined mark is added to the setting image. Here, adding a predetermined mark to the setting image is also expressed as “generating a composite image”.
　マーク付加部１５１は、設定画像に含まれている設定情報が、表示装置のユーザが保有する電気機器で処理できるものであるときと、表示装置のユーザが保有する電気機器で処理できるものでないときとで、付加するマークを変えるようにしてもよい。さらに、マーク付加部１５１は、付加するマークを決定（選定）するだけでもよい。その場合、他の機能ブロックにて、決定（選定）されたマークが画像に付加されたように表示されるようにしてもよい。なお、マークは、典型的には、アイコン（図形、図柄など）、又は、文字若しくは記号を含む。ただし、設定画像にマークを付加する代わりに、他の画像と異なる態様でユーザに提示することができる方法を用いることもできる。具体的には、設定画像を所定の色の枠で囲んで表示すること、設定画像の色合い、明るさ又は透明度を変化させて表示すること、設定画像の大きさを変化させて表示することなどによって、設定画像をその他の画像と異なる態様でユーザに提示する方法も含まれる。また、「マークが画像に付加されたように表示される」とは、マークが画像に重ねられて（重畳されて）表示されることだけでなく、マークが画像の隣に表示されることも含む。 When the setting information included in the setting image can be processed by the electric device owned by the user of the display device and when the mark adding unit 151 can not be processed by the electric device held by the user of the display device The mark to be added may be changed. Further, the mark adding unit 151 may only determine (select) a mark to be added. In that case, the mark determined (selected) in another functional block may be displayed as if it was added to the image. Note that the mark typically includes an icon (such as a graphic or a symbol), or a character or symbol. However, instead of adding a mark to the setting image, a method that can be presented to the user in a manner different from other images can be used. Specifically, the setting image is displayed by being surrounded by a frame of a predetermined color, displayed by changing the hue, brightness, or transparency of the setting image, and displayed by changing the size of the setting image. A method of presenting the setting image to the user in a manner different from other images is also included. Also, “displayed as if the mark was added to the image” not only means that the mark is superimposed (overlapped) on the image but also that the mark is displayed next to the image. Including.
　また、マーク付加部１５１は、その内部機能として、画像受信部１５１１と、基準コマンド分離部１５１２と、対応家電判定部１５１３と、家電リスト取得部１５１４と、マーク記憶部１５１５と、マーク合成部１５１６とを有する。 Further, the mark adding unit 151 includes, as its internal functions, an image receiving unit 1511, a reference command separating unit 1512, a compatible home appliance determining unit 1513, a home appliance list acquiring unit 1514, a mark storage unit 1515, and a mark combining unit 1516. And have.
　画像受信部１５１１は、蓄積サーバ４１から設定画像及び一般画像の画像データを、移動網通信部１１８及び移動網通信アンテナ１１９を通じて取得し、保持する。設定画像において、設定情報は、例えば、図６Ａに示される画像データのＥｘｉｆ（Exchangeable image file format）データに格納されている。 The image receiving unit 1511 acquires the image data of the setting image and the general image from the storage server 41 through the mobile network communication unit 118 and the mobile network communication antenna 119 and holds it. In the setting image, the setting information is stored, for example, in Exif (Exchangeable image file format) data of the image data shown in FIG. 6A.
　基準コマンド分離部１５１２は、画像受信部１５１１に保持されている画像から、電気機器の設定情報を分離する（取り出す）。ここで分離された（取り出された）設定情報を、第一設定情報ともよぶ。なお、第一設定情報は、電気機器の汎用形式の設定情報であってもよいし、電気機器の特定機種の専用形式の設定情報であってもよい。 The reference command separating unit 1512 separates (takes out) the setting information of the electrical device from the image held in the image receiving unit 1511. The setting information separated (taken out) here is also referred to as first setting information. Note that the first setting information may be setting information in a general format of the electric device, or may be setting information in a dedicated format of a specific model of the electric device.
　家電リスト取得部１５１４は、ユーザが保有している電気機器のリスト（家電リスト）を、取得または生成する。 The home appliance list acquisition unit 1514 acquires or generates a list of electric devices (home appliance list) held by the user.
　対応家電判定部１５１３は、家電リスト取得部１５１４が取得した家電リストの中から、基準コマンド分離部１５１２が分離した設定情報が示す処理を施すことができる電気機器を検索する。詳細な処理を後述する。 The compatible home appliance determination unit 1513 searches the home appliance list acquired by the home appliance list acquisition unit 1514 for an electrical device that can perform the process indicated by the setting information separated by the reference command separation unit 1512. Detailed processing will be described later.
　マーク記憶部１５１５は、設定画像に付加されるマークを保持する。なお、マーク記憶部１５１５は、設定画像を表示するときの態様を示す情報を保持してもよい。具体的には、「赤みがかった色合いで表示する」、「明るく表示する」、又は、「大きく表示する」のような情報を保持してもよい。また、それぞれが電気機器に対応する少なくとも１つのマークを保持してもよい。例えば、図２４Ａに示されるように、電気機器であるレンジの形状のマーク（「レンジ用」欄）、電気機器である炊飯器の形状のマーク（「炊飯器用」欄）、及び、電気機器であるＩＨクッキングヒータの形状のマーク（「ＩＨクッキングヒータ用」欄）を保持してもよい。その場合、レンジの設定情報を含む設定画像には、レンジの形状のマークを付加するようにすると、ユーザは直感的に設定画像の処理を施すことができる電気機器を知ることができる。 The mark storage unit 1515 holds a mark added to the setting image. Note that the mark storage unit 1515 may hold information indicating an aspect when the setting image is displayed. Specifically, information such as “display with a reddish hue”, “display brightly”, or “display large” may be held. Moreover, you may hold | maintain at least 1 mark each corresponding to an electric equipment. For example, as shown in FIG. 24A, the mark of the shape of the range that is an electric device (“for range” column), the mark of the shape of the rice cooker that is an electric device (“column for rice cooker”), and the electric device A mark of the shape of a certain IH cooking heater (“IH cooking heater” column) may be held. In this case, if a mark having a shape of the range is added to the setting image including the setting information of the range, the user can intuitively know the electric device that can perform the processing of the setting image.
　マーク合成部１５１６は、対応家電判定部１５１３の判定結果に基づいて、設定画像にマークを重畳するように合成する。具体的には、対応家電判定部１５１３が家電リスト内に設定画像の設定情報を示す処理を行う電気機器があるか否かを判定し、あると判定した場合に、設定画像に第一のマークを重畳するように合成する。その際、設定画像の画像データに含まれる設定情報（第一設定情報）を、家電リスト内の電気機器の設定情報（第二設定情報）に変換できる場合も、設定画像の設定情報を示す処理を行う電気機器があると判定する。この変換には、電気機器の機種間での設定情報を対応付けて格納する変換テーブルを用いてもよい。また、この変換テーブルは、電気機器の汎用形式の設定情報と、電気機器の設定情報との変換テーブルであってもよい。また、マーク合成部１５１６は、対応家電判定部１５１３が設定画像の設定情報を示す処理を行う電気機器が家電リスト内にないと判定した場合には、設定画像に第二のマークを重畳するように合成してもよい。 The mark composition unit 1516 synthesizes the mark to be superimposed on the setting image based on the determination result of the corresponding home appliance determination unit 1513. Specifically, the corresponding home appliance determination unit 1513 determines whether or not there is an electrical device that performs processing that indicates the setting information of the setting image in the home appliance list. Are combined so as to overlap. At this time, even when the setting information (first setting information) included in the image data of the setting image can be converted into the setting information (second setting information) of the electric device in the home appliance list, the process indicating the setting information of the setting image It is determined that there is an electrical device that performs. For this conversion, a conversion table that stores setting information between models of electrical devices in association with each other may be used. In addition, this conversion table may be a conversion table between setting information in a general-purpose format for electric equipment and setting information for electric equipment. Also, the mark composition unit 1516 superimposes the second mark on the setting image when the corresponding home appliance determination unit 1513 determines that the electrical device that performs the process indicating the setting information of the setting image is not in the home appliance list. May be synthesized.
　第一のマークと第二のマークとの選択方法の説明図を図２４Ｂに示す。第一のマークは、画像データが電気機器の設定情報を含み、かつ、ユーザが当該電気機器を保有している場合に付加されるものである。ユーザは、第一のマークが付加された画像を見ると、この画像は自身が保有する電気機器の設定情報を含んでおり、当該電気機器による処理によってこの画像の被写体となっている物品を生成することができることを知ることができる。第一のマークは、「設定マーク」とも表現される。また、第二のマークは、画像が電気機器の設定情報を含み、かつ、ユーザが当該電気機器を保有していない場合に付加されるものである。ユーザは、第二のマークが付加された画像を見ると、電気機器の設定情報を含んでいるものの、自身が当該電気機器を保有していないということを知ることができる。第二のマークは、「通知マーク」とも表現される。また、マーク合成部１５１６は、付加するマークを決定（選定）するだけでもよい。その場合、他の機能ブロックにて、決定（選定）されたマークが画像に付加されたように表示されるようにしてもよい。 FIG. 24B shows an explanatory diagram of a method for selecting the first mark and the second mark. The first mark is added when the image data includes setting information of the electric device and the user owns the electric device. When the user looks at the image with the first mark added, this image contains the setting information of the electric device that he / she owns, and the object that is the subject of this image is generated by the processing by the electric device. You can know what you can do. The first mark is also expressed as a “setting mark”. The second mark is added when the image includes setting information of the electric device and the user does not have the electric device. When the user sees the image with the second mark added, the user can know that he / she does not own the electric device, although the setting information of the electric device is included. The second mark is also expressed as a “notification mark”. Further, the mark composition unit 1516 may only determine (select) a mark to be added. In that case, the mark determined (selected) in another functional block may be displayed as if it was added to the image.
　制御部１５７は、表示装置１５における一連の情報処理の制御、及び、表示装置１５内の各機能ブロックの間の処理の受け渡しを行う。また、制御部１５７は、マーク付加部１５１がマークを付加した後の設定画像を表示部１１２に表示することで、ユーザに提示する。また、制御部１５７は、設定画像に加えて、一般画像も表示部１１２に表示することで、ユーザに提示する。すなわち、マークを付加した後の設定画像が、ユーザへ提供される。 The control unit 157 controls a series of information processing in the display device 15 and transfers processing between the functional blocks in the display device 15. In addition, the control unit 157 displays the setting image after the mark adding unit 151 adds a mark on the display unit 112 to present it to the user. In addition to the setting image, the control unit 157 displays a general image on the display unit 112 to present it to the user. That is, the setting image after adding the mark is provided to the user.
　図２０は、本実施の形態に係る対応家電判定部１５１３の機能ブロック図の例である。 FIG. 20 is an example of a functional block diagram of the corresponding home appliance determination unit 1513 according to the present embodiment.
　図２０に示されるように、対応家電判定部１５１３は、登録家電判定部１５１３Ａと、非登録家電表示選択部１５１３Ｂと、マーク画像決定部１５１３Ｃとを有する。 As shown in FIG. 20, the corresponding home appliance determination unit 1513 includes a registered home appliance determination unit 1513A, a non-registered home appliance display selection unit 1513B, and a mark image determination unit 1513C.
　登録家電判定部１５１３Ａは、基準コマンド分離部１５１２が分離した設定情報が示す処理を施すことができる電気機器が、ユーザが登録した電気機器に含まれているか否かを判定する。ユーザが登録した電気機器に含まれているか否かは、家電リスト取得部１５１４が取得した家電リストの中に含まれているものであるか否かにより判定されてもよい。 The registered home appliance determination unit 1513A determines whether or not an electrical device that can be processed by the setting information separated by the reference command separation unit 1512 is included in the electrical device registered by the user. Whether or not it is included in the electrical device registered by the user may be determined by whether or not it is included in the home appliance list acquired by the home appliance list acquisition unit 1514.
　非登録家電表示選択部１５１３Ｂは、登録家電判定部１５１３Ａで家電リストの中に含まれているものでないと判定された電気機器を表示するか否かを選択する。 The unregistered home appliance display selection unit 1513B selects whether or not to display an electrical device that is determined not to be included in the home appliance list by the registered home appliance determination unit 1513A.
　マーク画像決定部１５１３Ｃは、設定画像に対して付加するマークのマーク画像を決定する。マーク画像を決定する方法はさまざまな方法がある。例えば、設定画像から分離された設定情報が示す処理を施すことができる電気機器に対応する形状のマークを、当該設定画像に付加すると決定することができる。 The mark image determination unit 1513C determines a mark image of a mark to be added to the setting image. There are various methods for determining the mark image. For example, it can be determined that a mark having a shape corresponding to an electrical device that can be processed by the setting information separated from the setting image is added to the setting image.
　図２１は、本実施の形態に係る表示装置１５の処理の例を示す第一のシーケンス図である。また、図２２は、本実施の形態に係る表示装置の処理の例を示す第二のシーケンス図である。また、図２３Ａは、本実施の形態に係る表示装置の処理の第一の説明図である。これらの図を参照しながら、本実施の形態に係る表示装置の処理について説明する。なお、図２１及び図２２において、ステップＳ２３０１からステップＳ２３０４までは、同一の処理が記述されている。ステップＳ２３０４の判定結果がＹＥＳの場合には、図２１におけるステップＳ２３０５以降の処理が行われる。また、ステップＳ２３０４の判定結果がＮＯの場合には、図２２におけるステップＳ２４０１以降の処理が行われる。 FIG. 21 is a first sequence diagram illustrating an example of processing of the display device 15 according to the present embodiment. FIG. 22 is a second sequence diagram illustrating an example of processing of the display device according to the present embodiment. FIG. 23A is a first explanatory diagram of processing of the display device according to the present embodiment. Processing of the display device according to the present embodiment will be described with reference to these drawings. 21 and 22, the same processing is described from step S2301 to step S2304. If the decision result in the step S2304 is YES, the processes after the step S2305 in FIG. 21 are performed. If the determination result of step S2304 is NO, the processes after step S2401 in FIG. 22 are performed.
　まず、表示装置１５は、蓄積サーバ４１より画像データを取得する（ステップＳ２３０１）。表示装置１５の画像受信部１５１１は、蓄積サーバ４１から画像データを、移動網通信部１１８及び移動網通信アンテナ１１９を通じて取得し、保持する。蓄積サーバ４１から取得した画像データには、電気機器の設定情報が埋め込みデータとして格納されている設定画像の画像データが含まれている。また、一般画像の画像データが含まれていてもよい。なお、蓄積サーバ４１から取得した画像データは、蓄積サーバ４１に保存されている画像データのうちの一部又は全部の画像データであってよい。一部とする場合、蓄積サーバ４１から取得した画像データは、蓄積サーバ４１に保存されている画像データのうちの保存日時が新しい所定数の画像データとしてもよい。また、蓄積サーバ４１に保存されている画像データのうち、ユーザが指定する検索語に対応する画像データとしてもよい。また、ここでの取得とは、表示装置１５のユーザが表示装置１５内に画像データを保存する目的で取得することと、表示装置１５のユーザが表示装置１５上で蓄積サーバ４１内の画像を閲覧する目的で、一時的に表示装置１５内に画像データを保存することのどちらでもよい。 First, the display device 15 acquires image data from the storage server 41 (step S2301). The image receiving unit 1511 of the display device 15 acquires and holds the image data from the storage server 41 through the mobile network communication unit 118 and the mobile network communication antenna 119. The image data acquired from the accumulation server 41 includes image data of a setting image in which setting information of the electric device is stored as embedded data. Moreover, the image data of a general image may be included. Note that the image data acquired from the storage server 41 may be part or all of the image data stored in the storage server 41. When a part of the image data is acquired from the storage server 41, the image data stored in the storage server 41 may be a predetermined number of image data having a new storage date and time. Further, the image data stored in the storage server 41 may be image data corresponding to a search term designated by the user. The acquisition here means that the user of the display device 15 acquires the image data for the purpose of storing the image data in the display device 15, and the user of the display device 15 acquires the image in the storage server 41 on the display device 15. Either the image data may be temporarily stored in the display device 15 for the purpose of browsing.
　次に、表示装置１５は、設定画像の画像データの埋め込みデータから、基準コマンドおよび品番を取得する（ステップＳ２３０２）。表示装置１５の基準コマンド分離部１５１２は、設定画像の埋め込みデータとして格納されている基準コマンドを分離する（取り出す）。 Next, the display device 15 acquires a reference command and a product number from the embedded data of the image data of the setting image (step S2302). The reference command separation unit 1512 of the display device 15 separates (takes out) a reference command stored as embedded data of a setting image.
　次に、表示装置１５は、ユーザが保有する電気機器のリストである家電リストを取得する（ステップＳ２３０３）。 Next, the display device 15 acquires a home appliance list that is a list of electrical devices owned by the user (step S2303).
　次に、表示装置１５は、設定画像の画像データに、ユーザが保有している電気機器に対応する基準コマンドが埋め込まれているか否かを判定する（ステップＳ２３０４）。表示装置１５の対応家電判定部１５１３は、基準コマンド分離部１５１２が分離した（取り出した）基準コマンドが示す処理を施すことができる電気機器を、家電リスト取得部が取得した家電リストの中から検索する。その結果、当該電気機器が家電リストの中に存在する場合は、基準コマンドが埋め込まれていると判定され、ステップＳ２３０５の処理に移る。また、当該電気機器が家電リストの中に存在しない場合は、基準コマンドが埋め込まれていないと判定され、図２２のステップＳ２４０１の処理に移る。 Next, the display device 15 determines whether or not a reference command corresponding to the electric device held by the user is embedded in the image data of the setting image (step S2304). The compatible home appliance determination unit 1513 of the display device 15 searches the home appliance list acquired by the home appliance list acquisition unit for an electrical device that can perform the process indicated by the reference command separated (taken out) by the reference command separation unit 1512. To do. As a result, if the electrical device is present in the home appliance list, it is determined that the reference command is embedded, and the process proceeds to step S2305. If the electrical device does not exist in the home appliance list, it is determined that the reference command is not embedded, and the process proceeds to step S2401 in FIG.
　すなわち、分離された基準コマンドが家電リストの中のいずれかの家電において実行可能な形式の情報に変換できる場合に、基準コマンドが埋め込まれていると判定される。分離された基準コマンドが家電リストの中のいずれかの家電において実行可能な形式の情報である場合も、基準コマンドが埋め込まれていると判定されてもよい。 That is, it is determined that the reference command is embedded when the separated reference command can be converted into information in a format that can be executed by any home appliance in the home appliance list. When the separated reference command is information in a format that can be executed by any home appliance in the home appliance list, it may be determined that the reference command is embedded.
　次に、表示装置１５は、家電設定コマンドに対応するマークを選択する（ステップＳ２３０５）。表示装置１５のマーク合成部１５１６は、マーク記憶部１５１５に記憶されているマークの中から、ステップＳ２３０４で家電リストから検索された電気機器に対応するマークを、設定マークとして選択する。 Next, the display device 15 selects a mark corresponding to the home appliance setting command (step S2305). The mark composition unit 1516 of the display device 15 selects a mark corresponding to the electrical device searched from the home appliance list in step S2304 as a setting mark from the marks stored in the mark storage unit 1515.
　次に、表示装置１５は、設定画像に設定マークを合成する（ステップＳ２３０６）。表示装置１５のマーク合成部１５１６は、ステップＳ２３０５で選択した設定マークを、設定画像に重畳するように合成する。 Next, the display device 15 synthesizes a setting mark with the setting image (step S2306). The mark combining unit 1516 of the display device 15 combines the setting mark selected in step S2305 so as to be superimposed on the setting image.
　次に、表示装置１５は、設定マークが合成された画像を表示する（ステップＳ２３０７）。表示装置１５の表示部１１２は、ステップＳ２３０５で設定マークを合成した画像を表示することで、ユーザに提示する。すなわち、設定マークを合成した画像が、ユーザへ提供される。 Next, the display device 15 displays an image in which the setting mark is combined (step S2307). The display unit 112 of the display device 15 presents to the user by displaying the image in which the setting marks are combined in step S2305. That is, an image obtained by combining setting marks is provided to the user.
　次に、表示装置１５は、ユーザによる画像の選択を受け付ける（ステップＳ２３０８）。表示装置１５の操作部１１４は、ユーザの操作による画像の選択を受け付ける。本ステップでの画像の表示は、例えば、図２３Ａの（ａ）のようになる。図２３Ａの（ａ）において、ユーザが保有する電気機器で処理することができる設定情報を含む画像２３０１には、設定マーク２３０２が付加されている。また、ユーザが保有する電気機器で処理することができない設定情報を含む画像２３１１には、通知マーク２３１２が付加されている。 Next, the display device 15 accepts selection of an image by the user (step S2308). The operation unit 114 of the display device 15 receives an image selection by a user operation. The image display in this step is as shown in (a) of FIG. 23A, for example. In FIG. 23A (a), a setting mark 2302 is added to an image 2301 including setting information that can be processed by an electric device owned by the user. In addition, a notification mark 2312 is added to an image 2311 that includes setting information that cannot be processed by an electric device owned by the user.
　次に、表示装置１５は、設定画像に埋め込みデータとして格納されている基準コマンドを、ユーザが保有する電気機器の設定コマンドに変換する（ステップＳ２３０９）。 Next, the display device 15 converts the reference command stored as the embedded data in the setting image into the setting command for the electric device held by the user (step S2309).
　次に、表示装置１５は、家電設定コマンドを端末機器３３に送信する（ステップＳ２３１０）。ここで、家電設定コマンドを送信するか否かをユーザに問い合わせるインタフェースを提供してもよい。本ステップでの画像の表示は、例えば、図２３Ａの（ｂ）のようになる。 Next, the display device 15 transmits a home appliance setting command to the terminal device 33 (step S2310). Here, you may provide the interface which inquires a user whether a household appliance setting command is transmitted. The image display in this step is as shown in (b) of FIG. 23A, for example.
　次に、端末機器３３は、ステップＳ２３１０で表示装置が送信した家電設定コマンドを受信し、物品に処理を施す（ステップＳ２３２１）。 Next, the terminal device 33 receives the home appliance setting command transmitted by the display device in step S2310, and performs processing on the article (step S2321).
　以上の処理により、蓄積サーバ４１に保存されている電気機器の設定情報を含む画像データを受信し、ユーザが保有する電気機器において、当該設定情報が示す処理を物品に施すことができる。 Through the above processing, the image data including the setting information of the electric device stored in the storage server 41 can be received, and the processing indicated by the setting information can be performed on the article in the electric device held by the user.
　次に、ステップＳ２３０４で、当該電気機器が家電リストの中に存在せず、基準コマンドが埋め込まれていないと判定された場合について、図２２を参照しながら説明する。 Next, the case where it is determined in step S2304 that the electric device does not exist in the home appliance list and the reference command is not embedded will be described with reference to FIG.
　表示装置１５は、設定画像の設定情報が示す処理を施すことができる電気機器に関する情報を取得する（ステップＳ２４０１）。表示装置１５の対応家電判定部１５１３は、設定画像に埋め込みデータとして格納されている設定情報が示す処理を施すことができる電気機器に関する情報を取得する。 The display device 15 acquires information on the electrical device that can perform the process indicated by the setting information of the setting image (step S2401). The compatible home appliance determination unit 1513 of the display device 15 acquires information about an electrical device that can be processed by the setting information stored as embedded data in the setting image.
　次に、表示装置１５は、画像データに設定情報が格納されている画像であることを示すマークを、通知マークとして取得する（ステップＳ２４０２）。表示装置１５のマーク記憶部１５１５は、画像データに設定情報が格納されている画像であることを示す通知マークを表示装置１５の外部から取得する。なお、当該通知マークがあらかじめマーク記憶部１５１５に記憶されている場合には、本ステップの処理は行われなくてもよい。 Next, the display device 15 acquires a mark indicating that the setting information is stored in the image data as a notification mark (step S2402). The mark storage unit 1515 of the display device 15 acquires a notification mark indicating that the image has setting information stored in the image data from the outside of the display device 15. If the notification mark is stored in advance in the mark storage unit 1515, the process of this step may not be performed.
　次に、表示装置１５は、ステップＳ２４０２で取得した通知マークを画像に合成する（ステップＳ２４０３）。表示装置１５のマーク合成部１５１６は、ステップＳ２４０２で取得した通知マークを画像に重畳するように合成する。 Next, the display device 15 combines the notification mark acquired in step S2402 with the image (step S2403). The mark combining unit 1516 of the display device 15 combines the notification mark acquired in step S2402 so as to be superimposed on the image.
　次に、表示装置１５は、通知マークが合成された画像を表示する（ステップＳ２４０４）。表示装置１５の表示部１１２は、ステップＳ２４０３で通知マークを合成した画像を表示することで、ユーザに提示する。すなわち、通知マークを合成した画像が、ユーザへ提供される。このとき、通知マークが合成された画像を含む画像に対してユーザの選択を受け付けるインタフェースを提供してもよい。本ステップでの画像の表示は、例えば、図２３Ａの（ａ）のようになる。 Next, the display device 15 displays an image in which the notification mark is combined (step S2404). The display unit 112 of the display device 15 presents the image to the user by displaying an image obtained by combining the notification marks in step S2403. That is, an image in which the notification mark is combined is provided to the user. At this time, an interface for accepting a user's selection may be provided for an image including an image in which a notification mark is combined. The image display in this step is as shown in (a) of FIG. 23A, for example.
　次に、表示装置１５は、ユーザによる画像の選択を受け付ける（ステップＳ２４０５）。表示装置１５の操作部１１４は、ユーザの操作による画像の選択を受け付ける。 Next, the display device 15 accepts selection of an image by the user (step S2405). The operation unit 114 of the display device 15 receives an image selection by a user operation.
　次に、表示装置１５は、ユーザにより選択された画像に関連する情報を表示する（ステップＳ２４０６）。表示装置１５の表示部１１２は、当該画像に埋め込みデータとして格納されている設定情報が示す処理を施すことができる電気機器の情報を表示する。本ステップでの画像の表示は、例えば、図２３Ａの（ｃ）のようになる。 Next, the display device 15 displays information related to the image selected by the user (step S2406). The display unit 112 of the display device 15 displays information on electrical devices that can be processed by the setting information stored as embedded data in the image. The image display in this step is, for example, as shown in (c) of FIG. 23A.
　図２３Ｂは、本実施の形態に係る表示装置の処理の第二の説明図である。図２３Ｂの（ａ）は、設定画像２３０１を所定の色の枠２３０３で囲んで表示する場合の表示例である。図２３Ｂの（ｂ）は、設定画像２３０１の隣に文字により構成されるマーク２３０４を表示する場合の表示例である。このようなマークによっても、画像が設定画像であることを示すことができる。 FIG. 23B is a second explanatory diagram of the process of the display device according to the present embodiment. FIG. 23B (a) shows a display example when the setting image 2301 is displayed surrounded by a frame 2303 of a predetermined color. FIG. 23B is a display example when a mark 2304 composed of characters is displayed next to the setting image 2301. Such a mark can also indicate that the image is a setting image.
　図２３Ｃは、本実施の形態に係る表示装置の処理の第三の説明図である。図２３Ｃは、図２３Ａに示される表示装置１５のユーザとは、家電リストが異なるユーザの表示装置１５における表示例である。家電リストが異なるユーザの表示装置１５では、異なる設定画像にマークが表示される。つまり、ユーザが保有する電気機器で処理することができる設定情報を含む画像２３２１には、設定マーク２３２２が付加されている。また、ユーザが保有する電気機器で処理することができない設定情報を含む画像２３３１には、通知マーク２３３２が付加されている。このように、表示装置１５は、ユーザの家電リストに応じて、設定画像にマークを付加することができる。なお、ユーザを識別するためには、例えば、ユーザが入力するログインＩＤを用いることができる。 FIG. 23C is a third explanatory diagram of processing of the display device according to the present embodiment. FIG. 23C is a display example on the display device 15 of a user whose home appliance list is different from the user of the display device 15 shown in FIG. 23A. On the display device 15 of a user with a different home appliance list, a mark is displayed on a different setting image. That is, the setting mark 2322 is added to the image 2321 including the setting information that can be processed by the electric device owned by the user. In addition, a notification mark 2332 is added to an image 2331 including setting information that cannot be processed by an electric device owned by the user. Thus, the display device 15 can add a mark to the setting image in accordance with the user's home appliance list. In order to identify the user, for example, a login ID input by the user can be used.
　以上の処理により、蓄積サーバ４１に保存されている電気機器の設定情報を含む画像データを受信し、その設定情報が示す処理を施すことができる電気機器の種別をユーザに通知することもできる。 Through the above processing, the image data including the setting information of the electric device stored in the storage server 41 can be received, and the user can be notified of the type of electric device that can be processed by the setting information.
　以上のように、本実施の形態に係る通信方法によれば、画像データに含まれる電気機器（第一電気機器）の設定情報に対応する処理が、ユーザが予め指定する電気機器（第二電気機器）で行うことができる場合に、当該画像データとともにマーク（第一のマーク）が表示される。ユーザは、画像データとともに第一のマークが表示された画像は、自身が指定した電気機器で処理できる設定情報が含まれていることを知ることができる。ここで、第一電気機器と第二電気機器とは同じ型式の電気機器であってもよいし、まったく同一の電気機器であってもよい。よって、ユーザは、物品が処理された時の電気機器の設定情報を含む画像を容易に視認することができる。 As described above, according to the communication method according to the present embodiment, the processing corresponding to the setting information of the electric device (first electric device) included in the image data is performed by the user in advance of the electric device (second electric device) designated by the user. If it can be performed by the device, a mark (first mark) is displayed together with the image data. The user can know that the image in which the first mark is displayed together with the image data includes setting information that can be processed by the electric device designated by the user. Here, the first electrical device and the second electrical device may be the same type of electrical device or may be exactly the same electrical device. Therefore, the user can easily visually recognize an image including setting information of the electric device when the article is processed.
　また、画像データに含まれる電気機器の設定情報を変換テーブルによりユーザが指定する電気機器の設定情報に変換できる場合に、ユーザは、第一のマークとともに表示された画像が、自身が指定する電気機器で処理できる設定情報が含まれていると知ることができる。 In addition, when the setting information of the electric device included in the image data can be converted into the setting information of the electric device specified by the user using the conversion table, the user displays the image displayed with the first mark as the electric device specified by the user. It can be known that setting information that can be processed by the device is included.
　また、画像データに含まれる電気機器の設定情報を汎用形式に変換できる場合に、ユーザは、第一のマークとともに表示された画像が、自身が指定する電気機器で処理できる設定情報が含まれていると知ることができる。 In addition, when the setting information of the electric device included in the image data can be converted into a general format, the user includes the setting information that the image displayed with the first mark can be processed by the electric device specified by the user. You can know that you are.
　また、ユーザに対応する家電リストに基づいて、画像データに含まれる電気機器の設定情報が、当該ユーザに対応する電気機器の設定情報に変換できるか否かが判定される。 Further, based on the home appliance list corresponding to the user, it is determined whether or not the setting information of the electric device included in the image data can be converted into the setting information of the electric device corresponding to the user.
　また、電気機器の設定情報が画像データに含まれている場合に、当該画像データとともにマーク（第二のマーク）が表示される。ユーザは、画像データとともに第二のマークが表示された画像が、電気機器の設定情報が含まれているが、自身が指定する電気機器で処理できない設定情報を含むことを知ることができる。よって、ユーザは、物品が処理された時の電気機器の設定情報を含む画像を容易に視認することができる。 In addition, when the setting information of the electric device is included in the image data, a mark (second mark) is displayed together with the image data. The user can know that the image on which the second mark is displayed together with the image data includes the setting information of the electric device, but includes setting information that cannot be processed by the electric device specified by the user. Therefore, the user can easily visually recognize an image including setting information of the electric device when the article is processed.
　また、第二のマークの形状が、電気機器に対応する形状のものとなる。これにより、ユーザは、直感的に処理する電気機器が何であるかを知ることができる。よって、ユーザは、物品が処理された時の電気機器の設定情報を含む画像を容易に視認することができる。 In addition, the shape of the second mark is a shape corresponding to the electrical device. Thereby, the user can know what the electric equipment to process intuitively. Therefore, the user can easily visually recognize an image including setting information of the electric device when the article is processed.
　また、第一のマークの形状が、電気機器に対応するものとなる。これにより、ユーザは、直感的に処理する電気機器が何であるかを知ることができる。よって、ユーザは、物品が処理された時の電気機器の設定情報を含む画像を容易に視認することができる。 In addition, the shape of the first mark corresponds to the electrical equipment. Thereby, the user can know what the electric equipment to process intuitively. Therefore, the user can easily visually recognize an image including setting information of the electric device when the article is processed.
　また、一般に画像データへの情報の埋め込みに用いられているＥｘｉｆ規格に準拠した形式で、電気機器の設定情報が画像データに埋め込まれる。よって、電気機器の設定情報が埋め込まれた画像が、電気機器の設定情報が埋め込まれていない一般の画像データと同じように取り扱われる。 Also, the setting information of the electric device is embedded in the image data in a format compliant with the Exif standard that is generally used for embedding information in the image data. Therefore, the image in which the setting information of the electric device is embedded is handled in the same manner as general image data in which the setting information of the electric device is not embedded.
　（実施の形態６）
　本実施の形態において、実施の形態５におけるマークの合成処理を、表示装置で行う代わりに処理サーバで行う例について説明する。なお、実施の形態５におけるものと同様の構成及び処理についての記述を省略する場合がある。 (Embodiment 6)
In the present embodiment, an example will be described in which the mark composition processing in the fifth embodiment is performed by the processing server instead of the display device. Note that description of the same configuration and processing as those in the fifth embodiment may be omitted.
　図２５は、本実施の形態に係る機器制御システム６の構成図である。 FIG. 25 is a configuration diagram of the device control system 6 according to the present embodiment.
　図２５に示されるように、機器制御システム６は、表示装置１６と、処理サーバ２３と、端末機器３３と、蓄積サーバ４１とを備える。ここで、実施の形態５における機器制御システム５と異なるのは、表示装置１６と、処理サーバ２３とである。これらについて説明する。 As shown in FIG. 25, the device control system 6 includes a display device 16, a processing server 23, a terminal device 33, and a storage server 41. Here, the display device 16 and the processing server 23 are different from the device control system 5 in the fifth embodiment. These will be described.
　表示装置１６は、近接無線通信を利用して端末機器３３と通信するとともに、ネットワークを介して処理サーバ２３と通信する。また、表示装置１６は、処理サーバ２３から設定画像の画像データ、又は、一般画像の画像データを受信する。処理サーバ２３から受信した画像データには、後述するマークが付加されている。機器制御装置１３は、近接無線通信インタフェースとネットワーク通信インタフェースとを搭載した携帯電話又はスマートフォン（高機能携帯電話）などで実現される。 The display device 16 communicates with the terminal device 33 using proximity wireless communication and also communicates with the processing server 23 via the network. Further, the display device 16 receives the image data of the setting image or the image data of the general image from the processing server 23. A mark to be described later is added to the image data received from the processing server 23. The device control device 13 is realized by a mobile phone or a smartphone (high performance mobile phone) equipped with a close proximity wireless communication interface and a network communication interface.
　処理サーバ２３は、ネットワークを介して、蓄積サーバ４１から電気機器の設定情報が埋め込まれた画像データ、又は、一般画像の画像データを受信する。また、表示装置１６のユーザが保有する電気機器のリスト（家電リスト）を取得し、電気機器の設定情報が埋め込まれた画像データのうち、ユーザが保有する電気機器によって当該設定情報が示す処理を行うことができる画像データにマークを合成する。そして、処理サーバ２３は、画像データを表示装置１６に送信する。なお、処理サーバ２３は、蓄積サーバ４１の一機能として実現されてもよい。その場合、蓄積サーバ４１が上記の処理を行い、画像データを表示装置１６に送信する、ともいえる。また、上記の「画像データにマークを合成する」とは、処理サーバ２３が画像データにマークを合成して新たな画像データを生成することを意味するだけでなく、画像データと当該画像データに付加されるマークのデータとが後で表示装置１６に一緒に表示されるように、処理サーバ２３が表示装置１６に送信することをも含む。つまり、処理サーバ２３は、マークが合成された画像データである合成画像を生成する代わりに、マークと画像データとを表示装置１６に送信してもよい。 The processing server 23 receives the image data in which the setting information of the electric device is embedded or the image data of the general image from the storage server 41 via the network. Moreover, the process which the setting information shows by the electric equipment which a user holds among the image data which acquires the list | wrist (electric appliance list) of the electric equipment which the user of the display apparatus 16 holds, and the setting information of the electric equipment was embedded. A mark is combined with image data that can be performed. Then, the processing server 23 transmits the image data to the display device 16. Note that the processing server 23 may be realized as a function of the storage server 41. In that case, it can be said that the storage server 41 performs the above processing and transmits the image data to the display device 16. Further, the above-mentioned “synthesize the mark with the image data” not only means that the processing server 23 synthesizes the mark with the image data to generate new image data, but also the image data and the image data. It also includes that the processing server 23 transmits to the display device 16 so that the mark data to be added is displayed on the display device 16 later. That is, the processing server 23 may transmit the mark and the image data to the display device 16 instead of generating a composite image that is image data in which the mark is combined.
　図２６Ａは、本実施の形態に係る表示装置１６の機能ブロック図の例である。 FIG. 26A is an example of a functional block diagram of the display device 16 according to the present embodiment.
　図２６Ａに示されるように、表示装置１６は、合成画像受信部１６１と、表示部１１２と、カメラ１１３と、操作部１１４と、近接無線通信部１１５と、近接無線通信アンテナ１１６と、制御部１６７と、移動網通信部１１８と、移動網通信アンテナ１１９とを備える。ここで、実施の形態５における表示装置１５と異なるのは、合成画像受信部１６１と、制御部１６７である。なお、カメラ１１３は必須の構成要素ではない。つまり、表示装置１６は、カメラ１１３を備えなくてもよい。 As shown in FIG. 26A, the display device 16 includes a composite image receiving unit 161, a display unit 112, a camera 113, an operation unit 114, a proximity wireless communication unit 115, a proximity wireless communication antenna 116, and a control unit. 167, a mobile network communication unit 118, and a mobile network communication antenna 119. Here, the composite image receiving unit 161 and the control unit 167 are different from the display device 15 in the fifth embodiment. The camera 113 is not an essential component. That is, the display device 16 may not include the camera 113.
　合成画像受信部１６１は、処理サーバ２３から電気機器の制御情報が埋め込まれた画像データ、又は、一般画像の画像データを受信する。すなわち、電気機器の制御情報が埋め込まれた画像データ、又は、一般画像が、ユーザが使用する表示装置１６へ提供される。 The composite image receiving unit 161 receives, from the processing server 23, image data in which control information on the electrical device is embedded or image data of a general image. That is, the image data in which the control information of the electrical device is embedded or the general image is provided to the display device 16 used by the user.
　制御部１６７は、表示装置１６における一連の情報処理の制御、及び、表示装置１６内の各機能ブロックの間の処理の受け渡しを行う。また、制御部１６７は、合成画像受信部１６１が受信した設定画像又は一般画像を表示部１１２に表示することで、ユーザに提示する。すなわち、受信した設定画像又は一般画像が、ユーザへ提供される。 The control unit 167 controls a series of information processing in the display device 16 and transfers processing between the functional blocks in the display device 16. In addition, the control unit 167 displays the setting image or the general image received by the composite image receiving unit 161 on the display unit 112 to present it to the user. That is, the received setting image or general image is provided to the user.
　図２６Ｂは、本実施の形態に係る処理サーバ２３の機能ブロック図の例である。 FIG. 26B is an example of a functional block diagram of the processing server 23 according to the present embodiment.
　図２６Ｂに示されるように、処理サーバ２３は、画像受信部２３１と、基準コマンド分離部２３２と、家電リスト取得部２３３と、対応家電判定部２３４と、マーク合成部２３５と、マーク記憶部２３６と、画像送信部２３７とを有する。 As illustrated in FIG. 26B, the processing server 23 includes an image receiving unit 231, a reference command separating unit 232, a home appliance list obtaining unit 233, a corresponding home appliance determining unit 234, a mark composition unit 235, and a mark storage unit 236. And an image transmission unit 237.
　画像受信部２３１は、蓄積サーバ４１から電気機器の設定情報が埋め込まれた画像データ、又は、一般画像の画像データを受信する。 The image receiving unit 231 receives the image data in which the setting information of the electrical device is embedded from the storage server 41 or the image data of the general image.
　基準コマンド分離部２３２は、画像受信部２３１が受信した画像データのうち、電気機器の設定情報が埋め込まれた画像データから、電気機器の設定情報を分離する（取り出す）。 The reference command separating unit 232 separates (takes out) the setting information of the electric device from the image data in which the setting information of the electric device is embedded in the image data received by the image receiving unit 231.
　家電リスト取得部２３３は、ユーザが保有している電気機器のリスト（家電リスト）を、取得または生成する。 The home appliance list acquisition unit 233 acquires or generates a list of electric devices (home appliance list) held by the user.
　対応家電判定部２３４は、家電リスト取得部２３３が取得した家電リストの中から、基準コマンド分離部２３２が分離した設定情報が示す処理を施すことができる電気機器を検索する。対応家電判定部２３４は、実施の形態５における表示装置１５の対応家電判定部１５１３と同様の処理を行う。 The compatible home appliance determination unit 234 searches the home appliance list acquired by the home appliance list acquisition unit 233 for an electrical device that can perform the process indicated by the setting information separated by the reference command separation unit 232. Corresponding home appliance determination unit 234 performs the same processing as corresponding home appliance determination unit 1513 of display device 15 in the fifth embodiment.
　マーク合成部２３５は、対応家電判定部２３４の判定結果に基づいて、設定画像にマークを重畳するように合成する。マーク合成部２３５は、実施の形態５における表示装置１５のマーク合成部１５１６と同様の処理を行う。 The mark composition unit 235 synthesizes the mark to be superimposed on the setting image based on the determination result of the corresponding home appliance determination unit 234. The mark composition unit 235 performs the same processing as the mark composition unit 1516 of the display device 15 in the fifth embodiment.
　マーク記憶部２３６は、設定画像に付加されるマークを保持する。マーク記憶部２３６は、実施の形態５における表示装置１５のマーク記憶部１５１５と同様の処理を行う。 The mark storage unit 236 holds a mark added to the setting image. The mark storage unit 236 performs the same processing as the mark storage unit 1515 of the display device 15 in the fifth embodiment.
　画像送信部２３７は、マーク合成部２３５がマークを合成した設定画像又は一般画像を表示装置１６に送信する。 The image transmitting unit 237 transmits the setting image or the general image obtained by combining the marks by the mark combining unit 235 to the display device 16.
　図２７は、本実施の形態に係る表示装置及び処理サーバの処理の例を示す第一のシーケンス図である。図２８は、本実施の形態に係る表示装置及び処理サーバの処理の例を示す第二のシーケンス図である。これらの図を参照しながら、本実施の形態に係る表示装置の処理について説明する。なお、図２７及び図２８において、ステップＳ２７０１、及び、ステップＳ２７２１からステップＳ２３０４までは、同一の処理が記述されている。ステップＳ２７２４の判定結果がＹＥＳの場合には、図２７におけるステップＳ２７２５以降の処理が行われる。また、ステップＳ２７２４の判定結果がＮＯの場合には、図２８におけるステップＳ２８２１以降の処理が行われる。 FIG. 27 is a first sequence diagram illustrating an example of processing of the display device and the processing server according to the present embodiment. FIG. 28 is a second sequence diagram illustrating an example of processing of the display device and the processing server according to the present embodiment. Processing of the display device according to the present embodiment will be described with reference to these drawings. 27 and 28, the same processing is described in step S2701 and steps S2721 to S2304. If the decision result in the step S2724 is YES, the processes after the step S2725 in FIG. 27 are performed. If the determination result of step S2724 is NO, the processes after step S2821 in FIG. 28 are performed.
　まず、表示装置１６は、ユーザによる画像一覧の取得の指示を受け付ける（ステップＳ２７０１）。表示装置１６の操作部１１４は、ユーザによる画像一覧の取得の指示を受け付けると、移動網通信部１１８及び移動網通信アンテナ１１９を通じて処理サーバ２３に対して当該指示を送信する。 First, the display device 16 receives an instruction to acquire an image list from the user (step S2701). When the operation unit 114 of the display device 16 receives an instruction to acquire an image list from the user, the operation unit 114 transmits the instruction to the processing server 23 through the mobile network communication unit 118 and the mobile network communication antenna 119.
　次に、処理サーバ２３は、蓄積サーバ４１から画像データを取得する（ステップＳ２７２１）。処理サーバ２３の画像受信部２３１は、移動網通信部１１８及び移動網通信アンテナ１１９を通じて蓄積サーバ４１から画像データを取得する。 Next, the processing server 23 acquires image data from the storage server 41 (step S2721). The image receiving unit 231 of the processing server 23 acquires image data from the storage server 41 through the mobile network communication unit 118 and the mobile network communication antenna 119.
　次に、処理サーバ２３は、設定画像の画像データの埋め込みデータから、基準コマンドおよび品番を取得する（ステップＳ２７２２）。処理サーバ２３の基準コマンド分離部２３２は、設定画像の埋め込みデータとして格納されている基準コマンドを分離する（取り出す）。 Next, the processing server 23 acquires a reference command and a product number from the embedded data of the image data of the setting image (step S2722). The reference command separation unit 232 of the processing server 23 separates (takes out) the reference command stored as embedded data of the setting image.
　次に、処理サーバ２３は、表示装置のユーザが保有する電気機器のリストである家電リストを取得する（ステップＳ２７２３）。 Next, the processing server 23 acquires a home appliance list that is a list of electrical devices owned by the user of the display device (step S2723).
　次に、処理サーバ２３は、設定画像の画像データに、ユーザが保有している電気機器に対応する基準コマンドが埋め込まれているか否かを判定する（ステップＳ２７２４）。処理サーバ２３の対応家電判定部２３４は、基準コマンド分離部２３２が分離した（取り出した）基準コマンドが示す処理を施すことができる電気機器を、家電リスト取得部２３３が取得した家電リストの中から検索する。その結果、当該電気機器が家電リストの中に存在する場合は、基準コマンドが埋め込まれていると判定され、ステップＳ２７２５の処理に移る。また、当該電気機器が家電リストの中に存在しない場合は、基準コマンドが埋め込まれていないと判定され、図２８のステップＳ２８２１の処理に移る。 Next, the processing server 23 determines whether or not a reference command corresponding to the electric device owned by the user is embedded in the image data of the setting image (step S2724). The corresponding home appliance determination unit 234 of the processing server 23 selects an electrical device that can perform the process indicated by the reference command separated (taken out) by the reference command separation unit 232 from the home appliance list acquired by the home appliance list acquisition unit 233. Search for. As a result, if the electrical device is present in the home appliance list, it is determined that the reference command is embedded, and the process proceeds to step S2725. If the electrical device does not exist in the home appliance list, it is determined that the reference command is not embedded, and the process proceeds to step S2821 in FIG.
　すなわち、分離された基準コマンドが家電リストの中のいずれかの家電において実行可能な形式の情報に変換できる場合に、基準コマンドが埋め込まれていると判定される。分離された基準コマンドが家電リストの中のいずれかの家電において実行可能な形式の情報である場合も、基準コマンドが埋め込まれていると判定されてもよい。 That is, it is determined that the reference command is embedded when the separated reference command can be converted into information in a format that can be executed by any home appliance in the home appliance list. When the separated reference command is information in a format that can be executed by any home appliance in the home appliance list, it may be determined that the reference command is embedded.
　次に、処理サーバ２３は、家電設定コマンドに対応するマークを選択する（ステップＳ２７２５）。処理サーバ２３のマーク合成部２３５は、マーク記憶部２３６に記憶されているマークの中から、ステップＳ２７２４で家電リストから検索された電気機器に対応するマークを、設定マークとして選択する。 Next, the processing server 23 selects a mark corresponding to the home appliance setting command (step S2725). The mark composition unit 235 of the processing server 23 selects a mark corresponding to the electrical device searched from the home appliance list in step S2724 as a setting mark from the marks stored in the mark storage unit 236.
　次に、処理サーバ２３は、設定画像に設定マークを合成する（ステップＳ２７２６）。処理サーバ２３のマーク合成部２３５は、ステップＳ２７２５で選択した設定マークを、設定画像に重畳するように合成する。 Next, the processing server 23 synthesizes a setting mark with the setting image (step S2726). The mark combining unit 235 of the processing server 23 combines the setting mark selected in step S2725 so as to be superimposed on the setting image.
　次に、処理サーバ２３は、設定マークが合成された画像を表示装置に送信する（ステップＳ２７２７）。 Next, the processing server 23 transmits the image in which the setting mark is combined to the display device (step S2727).
　次に、表示装置１６は、設定マークが合成された画像を処理サーバ２３から受信する（ステップＳ２７０２）。すなわち、設定マークが合成された画像が、ユーザが使用する表示装置１６へ提供される。 Next, the display device 16 receives an image in which the setting mark is combined from the processing server 23 (step S2702). That is, an image in which setting marks are combined is provided to the display device 16 used by the user.
　次に、表示装置１６は、設定マークが合成された画像を表示する（ステップＳ２７０３）。表示装置１６の表示部１１２は、ステップＳ２７２６で設定マークが合成された画像を表示することで、ユーザに提示する。すなわち、設定マークが合成された画像が、ユーザへ提供される。 Next, the display device 16 displays an image in which the setting mark is combined (step S2703). The display unit 112 of the display device 16 presents to the user by displaying the image in which the setting mark is combined in step S2726. That is, an image in which setting marks are combined is provided to the user.
　次に、表示装置１６は、ユーザによる画像の選択を受け付ける（ステップＳ２７０４）。表示装置１６の操作部１１４は、ユーザの操作による画像の選択を受け付ける。本ステップでの画像の表示は、例えば、図２３Ａの（ａ）のようになる。 Next, the display device 16 accepts selection of an image by the user (step S2704). The operation unit 114 of the display device 16 receives an image selection by a user operation. The image display in this step is as shown in (a) of FIG. 23A, for example.
　次に、表示装置１６は、設定画像に埋め込みデータとして格納されている基準コマンドを、ユーザが保有する電気機器の設定コマンドに変換する（ステップＳ２７０５）。 Next, the display device 16 converts the reference command stored as the embedded data in the setting image into the setting command for the electric device owned by the user (step S2705).
　次に、表示装置１６は、家電設定コマンドを端末機器３３に送信する（ステップＳ２７０６）。ここで、家電設定コマンドを送信するか否かをユーザに問い合わせるインタフェースを提供してもよい。本ステップでの画像の表示は、例えば、図２３Ａの（ｂ）のようになる。 Next, the display device 16 transmits a home appliance setting command to the terminal device 33 (step S2706). Here, you may provide the interface which inquires a user whether a household appliance setting command is transmitted. The image display in this step is as shown in (b) of FIG. 23A, for example.
　次に、端末機器３３は、ステップＳ２７０６で表示装置が送信した家電設定コマンドを受信し、物品に処理を施す（ステップＳ２７１１）。 Next, the terminal device 33 receives the home appliance setting command transmitted by the display device in step S2706, and performs processing on the article (step S2711).
　以上の処理により、蓄積サーバ４１に保存されている電気機器の設定情報を含む画像データを受信し、ユーザが保有する電気機器において、当該設定情報が示す処理を物品に施すことができる。 Through the above processing, the image data including the setting information of the electric device stored in the storage server 41 can be received, and the processing indicated by the setting information can be performed on the article in the electric device held by the user.
　次に、ステップＳ２７２４で、当該電気機器が家電リストの中に存在せず、基準コマンドが埋め込まれていないと判定された場合について、図２８を参照しながら説明する。 Next, the case where it is determined in step S2724 that the electric device does not exist in the home appliance list and the reference command is not embedded will be described with reference to FIG.
　処理サーバ２３は、設定画像の設定情報が示す処理を施すことができる電気機器に関する情報を取得する（ステップＳ２８２１）。処理サーバ２３の対応家電判定部２３４は、設定画像に埋め込みデータとして格納されている設定情報が示す処理を施すことができる電気機器に関する情報を取得する。 The processing server 23 acquires information about the electrical device that can perform the process indicated by the setting information of the setting image (step S2821). The compatible home appliance determination unit 234 of the processing server 23 acquires information about an electrical device that can perform the process indicated by the setting information stored as embedded data in the setting image.
　次に、処理サーバ２３は、画像データに設定情報が格納されている画像であることを示すマークを、通知マークとして取得する（ステップＳ２８２２）。処理サーバ２３のマーク記憶部２３６は、画像データに設定情報が格納されている画像であることを示す通知マークを処理サーバ２３の外部から取得する。なお、当該通知マークがあらかじめマーク記憶部２３６に記憶されている場合には、本ステップの処理は行われなくてもよい。 Next, the processing server 23 acquires a mark indicating that the setting information is stored in the image data as a notification mark (step S2822). The mark storage unit 236 of the processing server 23 acquires a notification mark indicating that the setting information is stored in the image data from the outside of the processing server 23. If the notification mark is stored in advance in the mark storage unit 236, the process of this step may not be performed.
　次に、処理サーバ２３は、ステップＳ２８２２で取得した通知マークを画像に合成する（ステップＳ２８２３）。処理サーバ２３のマーク合成部２３５は、ステップＳ２８２２で取得した通知マークを画像に重畳するように合成する。 Next, the processing server 23 combines the notification mark acquired in step S2822 with the image (step S2823). The mark combining unit 235 of the processing server 23 combines the notification mark acquired in step S2822 so as to be superimposed on the image.
　次に、処理サーバ２３は、通知マークが合成された画像を表示装置１６に送信する（ステップＳ２８２４）。 Next, the processing server 23 transmits the image combined with the notification mark to the display device 16 (step S2824).
　次に、表示装置１６は、通知マークが合成された画像を処理サーバ２３から取得する（ステップＳ２８０１）。すなわち、通知マークが合成された画像が、ユーザが使用する表示装置１６へ提供される。 Next, the display device 16 acquires from the processing server 23 an image in which the notification mark is combined (step S2801). That is, an image in which the notification mark is combined is provided to the display device 16 used by the user.
　次に、表示装置１６は、通知マークが合成された画像を表示する（ステップＳ２８０２）。表示装置１６の表示部１１２は、ステップＳ２８２３で通知マークが合成された画像を表示することで、ユーザに提示する。すなわち、通知マークが合成された画像が、ユーザへ提供される。このとき、通知マークが合成された画像を含む画像に対してユーザの選択を受け付けるインタフェースを提供してもよい。本ステップでの画像の表示は、例えば、図２３Ａの（ａ）のようになる。 Next, the display device 16 displays an image in which the notification mark is combined (step S2802). The display unit 112 of the display device 16 presents the image to the user by displaying the image with the notification mark combined in step S2823. That is, an image in which the notification mark is combined is provided to the user. At this time, an interface for accepting a user's selection may be provided for an image including an image in which a notification mark is combined. The image display in this step is as shown in (a) of FIG. 23A, for example.
　次に、表示装置１６は、ユーザによる画像の選択を受け付ける（ステップＳ２８０３）。表示装置１６の操作部１１４は、ユーザの操作による画像の選択を受け付ける。 Next, the display device 16 accepts selection of an image by the user (step S2803). The operation unit 114 of the display device 16 receives an image selection by a user operation.
　次に、表示装置１６は、ユーザにより選択された画像に関連する情報を表示する（ステップＳ２８０４）。表示装置１６の表示部１１２は、当該画像に埋め込みデータとして格納されている設定情報が示す処理を施すことができる電気機器の情報を表示する。本ステップでの画像の表示は、例えば、図２３Ａの（ｃ）のようになる。 Next, the display device 16 displays information related to the image selected by the user (step S2804). The display unit 112 of the display device 16 displays information on an electrical device that can perform processing indicated by setting information stored as embedded data in the image. The image display in this step is, for example, as shown in (c) of FIG. 23A.
　以上の処理により、蓄積サーバ４１に保存されている電気機器の設定情報を含む画像データを受信し、その設定情報が示す処理を施すことができる電気機器の種別をユーザに通知することもできる。 Through the above processing, the image data including the setting information of the electric device stored in the storage server 41 can be received, and the user can be notified of the type of electric device that can be processed by the setting information.
　以上のように、本実施の形態に係る通信方法によれば、画像とともに表示するマークを画像に付加する処理を、処理サーバにおいて行うことができる。当該処理には家電リストや変換テーブルが必要とされ、処理が複雑になる場合もある。処理サーバにおいて、当該処理を行うことにより、表示装置の処理負荷が増大するのを未然に防ぐことができる。 As described above, according to the communication method according to the present embodiment, the processing server can perform processing for adding a mark to be displayed together with an image to the image. The processing requires a home appliance list and a conversion table, and the processing may be complicated. By performing the processing in the processing server, it is possible to prevent an increase in the processing load on the display device.
　なお、上記各実施の形態において、各装置（実施の形態１及び２における通信装置、実施の形態３及び４における機器制御装置、並びに、実施の形態５及び６における表示装置）における処理のユーザインターフェースを提供するステップも、本発明の範囲に含まれる。すなわち、各装置とユーザとのインタフェースとなるインタフェース端末であって、各装置の表示部及び操作部と同等の機能と、各装置との通信を行う通信インタフェースとを備えるインタフェース端末がある。各装置がインタフェース端末に、インタフェース端末の表示部に表示するための表示データを送信する。また、インタフェース端末が各装置に、インタフェース端末の操作部が受け付けたユーザの操作を送信する。各装置が、このようなインタフェース端末にユーザとのインタフェースを提供するステップも、本発明の範囲に含まれる。 In each of the above embodiments, the user interface of processing in each device (the communication device in the first and second embodiments, the device control device in the third and fourth embodiments, and the display device in the fifth and sixth embodiments) Is also included in the scope of the present invention. That is, there is an interface terminal that serves as an interface between each device and a user, and includes a function equivalent to the display unit and the operation unit of each device and a communication interface that communicates with each device. Each device transmits display data to be displayed on the display unit of the interface terminal to the interface terminal. Further, the interface terminal transmits the user operation received by the operation unit of the interface terminal to each device. It is also within the scope of the present invention for each device to provide such an interface terminal with a user interface.
　なお、上記の各実施の形態における通信装置等（通信装置、機器制御装置、又は、表示装置）において実行されるプログラムをプログラムサーバに格納しておき、情報端末が当該プログラムをダウンロードして実行することによって、通信装置等として機能するようにしてもよい。つまり、図２９のように、情報端末１７がプログラムサーバ４２とネットワークを介して接続されている構成において、情報端末１７がプログラムサーバ４２からプログラムをダウンロードして実行することで、通信装置等として機能するようにしてもよい。さらに、上記のプログラムサーバは、記憶媒体に含まれる形態で実現されてもよい。 A program executed in the communication device or the like (communication device, device control device, or display device) in each of the above embodiments is stored in a program server, and the information terminal downloads and executes the program. Thus, it may function as a communication device or the like. That is, as shown in FIG. 29, when the information terminal 17 is connected to the program server 42 via the network, the information terminal 17 downloads and executes the program from the program server 42, thereby functioning as a communication device or the like. You may make it do. Furthermore, the program server may be realized in a form included in a storage medium.
　なお、上記各実施の形態において各装置（実施の形態１及び２における通信装置、実施の形態３及び４における機器制御装置、並びに、実施の形態５及び６における表示装置）が行うと説明した処理は、当該装置で行う代わりに、上記の他の装置によって実現されてもよいし、当該装置と上記の他の装置とにおいて実行される処理を組み合わせて実現されてもよい。つまり、各処理は、上記各実施の形態におけるどの装置で行われてもよい。 In the above embodiments, the processing described by each device (the communication device in the first and second embodiments, the device control device in the third and fourth embodiments, and the display device in the fifth and sixth embodiments) is performed. May be realized by the other device described above instead of being performed by the device, or may be realized by combining the processes executed by the device and the other device. That is, each process may be performed by any device in the above embodiments.
　なお、上記各実施の形態において、各構成要素は、専用のハードウェアで構成されるか、各構成要素に適したソフトウェアプログラムを実行することによって実現されてもよい。各構成要素は、ＣＰＵまたはプロセッサなどのプログラム実行部が、ハードディスクまたは半導体メモリなどの記録媒体に記録されたソフトウェアプログラムを読み出して実行することによって実現されてもよい。ここで、上記各実施の形態の通信装置又は機器制御装置などを実現するソフトウェアは、次のようなプログラムである。 In each of the above embodiments, each component may be configured by dedicated hardware or may be realized by executing a software program suitable for each component. Each component may be realized by a program execution unit such as a CPU or a processor reading and executing a software program recorded on a recording medium such as a hard disk or a semiconductor memory. Here, the software that realizes the communication device or the device control device according to each of the above-described embodiments is the following program.
　すなわち、このプログラムは、コンピュータに、第一電気機器に処理を施された物品を被写体とする画像の画像データであって、前記第一電気機器が前記処理を前記物品に施したときの第一設定情報を前記画像データの埋め込みデータとして含む画像データを受信する画像受信ステップと、前記画像受信ステップで受信した前記画像データに含まれる前記第一設定情報を、ユーザが保有する第二電気機器に適合する形式である第二設定情報に変換することができると判定される場合に、前記画像データに第一のマークを付加するマーク付加ステップと、前記マーク付加ステップで前記第一のマークを付加した後の前記画像データの画像を表示する表示ステップとを実行させる。 That is, the program is image data of an image having an object processed by the first electric device as a subject, and the first electric device when the first electric device performs the processing on the article. An image receiving step for receiving image data including setting information as embedded data of the image data, and the first setting information included in the image data received in the image receiving step are stored in a second electric device held by a user A mark adding step for adding a first mark to the image data, and adding the first mark in the mark adding step when it is determined that the second setting information can be converted into a conforming format; And a display step of displaying the image of the image data after being performed.
　以上、一つまたは複数の態様に係る表示装置について、実施の形態に基づいて説明したが、本発明は、この実施の形態に限定されるものではない。本発明の趣旨を逸脱しない限り、当業者が思いつく各種変形を本実施の形態に施したものや、異なる実施の形態における構成要素を組み合わせて構築される形態も、一つまたは複数の態様の範囲内に含まれてもよい。 As described above, the display device according to one or more aspects has been described based on the embodiment. However, the present invention is not limited to this embodiment. Unless it deviates from the gist of the present invention, various modifications conceived by those skilled in the art have been made in this embodiment, and forms constructed by combining components in different embodiments are also within the scope of one or more aspects. May be included.
　本発明にかかる画像表示方法等より、物品が処理されたときの電気機器の設定情報を含む画像をユーザに視認させることができる。 The image display method or the like according to the present invention allows a user to visually recognize an image including setting information of an electrical device when an article is processed.
　１、２、３、４、５、６　　機器制御システム
　１１、１２　　通信装置
　１３、１４　　機器制御装置
　１５、１６　　表示装置
　１７　　情報端末
　２１、２２、２３　　処理サーバ
　３１、３２、３３　　端末機器
　４１　　蓄積サーバ
　４２　　プログラムサーバ
　５１、５２　　パン（物品）
　１１１　　家電設定コマンド合成部
　１１２　　表示部
　１１３　　カメラ
　１１４　　操作部
　１１５　　近接無線通信部
　１１６　　近接無線通信アンテナ
　１１７、１２７、１３７、１４７、１５７、１６７　　制御部
　１１８　　移動網通信部
　１１９　　移動網通信アンテナ
　１２１　　家電設定コマンド合成部
　１３１、１４１　　家電設定コマンド取得部
　１５１　　マーク付加部
　１６１　　合成画像受信部
　２１２　　家電設定コマンド受信部
　２１３、２２２　　基準値生成部
　２１４　　識別情報生成部
　２１５、１４１４　　識別情報送信部
　２１６　　基準値記憶部
　２２１　　識別情報取得部
　２２３、１３１４　　家電設定コマンド変換部
　２２４　　家電設定コマンド送信部
　２２５　　基準値記憶部
　２２６　　変換テーブル記憶部
　２２７、２３３、１３１５、１５１４　　家電リスト取得部
　２３１、１５１１　　画像受信部
　２３２、１３１３、１５１２　　基準コマンド分離部
　２３４、１５１３　　対応家電判定部
　２３５、１５１６　　マーク合成部
　２３６、１５１５　　マーク記憶部
　２３７　　画像送信部
　１１１１、１２１１　　家電設定コマンド取得部
　１１１２　　基準値生成部
　１１１３、１２１３　　合成部
　１１１４、１２１４　　画像生成部
　１２１２　　識別情報取得部
　１３１１　　変換テーブル記憶部
　１３１２、１４１２　　画像取得部
　１４１１　　家電設定コマンド受信部
　１４１３　　識別情報分離部
　１５１３Ａ　登録家電判定部
　１５１３Ｂ　非登録家電表示選択部
　１５１３Ｃ　マーク画像決定部 1, 2, 3, 4, 5, 6 Device control system 11, 12 Communication device 13, 14 Device control device 15, 16 Display device 17 Information terminal 21, 22, 23 Processing server 31, 32, 33 Terminal device 41 Storage server 42 Program server 51, 52 Bread (goods)
111 Home Appliance Setting Command Compositing Unit 112 Display Unit 113 Camera 114 Operation Unit 115 Proximity Wireless Communication Unit 116 Proximity Wireless Communication Antenna 117, 127, 137, 147, 157, 167 Control Unit 118 Mobile Network Communication Unit 119 Mobile Network Communication Antenna 121 Home Appliance Setting Command composition unit 131, 141 Home appliance setting command acquisition unit 151 Mark addition unit 161 Composite image reception unit 212 Home appliance setting command reception unit 213, 222 Reference value generation unit 214 Identification information generation unit 215, 1414 Identification information transmission unit 216 Reference value storage unit 221 Identification information acquisition unit 223, 1314 Home appliance setting command conversion unit 224 Home appliance setting command transmission unit 225 Reference value storage unit 226 Conversion table storage unit 227, 233, 1315, 1514 Home appliance list acquisition unit 231, 15 1 Image reception unit 232, 1313, 1512 Reference command separation unit 234, 1513 Corresponding home appliance determination unit 235, 1516 Mark composition unit 236, 1515 Mark storage unit 237 Image transmission unit 1111, 1211 Home appliance setting command acquisition unit 1112 Reference value generation unit 1113 , 1213 Composition unit 1114, 1214 Image generation unit 1212 Identification information acquisition unit 1311 Conversion table storage unit 1312, 1412 Image acquisition unit 1411 Home appliance setting command reception unit 1413 Identification information separation unit 1513A Registered home appliance determination unit 1513B Unregistered home appliance display selection unit 1513C Mark image determination unit

Claims (20)

  1. 　物品を被写体とする画像の画像データと、前記物品に対して第一電気機器により施される処理を示す第一設定情報とを含む合成データを取得し、
    　取得された前記合成データに含まれる前記第一設定情報を、ユーザによって予め指定された第二電気機器が実行することが可能な形式の情報である第二設定情報に変換することができるか否かを判定し、
    　前記第一設定情報を前記第二設定情報に変換することができると判定される場合に、前記画像データの画像に付加する第一のマークを決定し、
    　決定された前記第一のマークが付加された、前記合成データに含まれる画像データの画像を表示する
    　画像表示方法。     Obtaining composite data including image data of an image having the article as a subject and first setting information indicating processing performed on the article by the first electric device;
    Whether or not the first setting information included in the acquired composite data can be converted into second setting information that is information in a format that can be executed by the second electrical device designated in advance by the user. Determine whether
    When it is determined that the first setting information can be converted into the second setting information, a first mark to be added to the image of the image data is determined;
    An image display method for displaying an image of image data included in the composite data to which the determined first mark is added.
  2. 　物品を被写体とする画像の画像データと、前記物品に対して第一電気機器により施される処理を示す第一設定情報とを含む合成データを取得し、
    　取得された前記合成データに含まれる前記第一設定情報が、ユーザによって予め指定された第二電気機器が実行することが可能な形式の情報である第二設定情報であるか否かを判定し、
    　前記第一設定情報が前記第二設定情報であると判定される場合に、前記画像データの画像に付加する第一のマークを決定し、
    　決定された前記第一のマークが付加された、前記合成データに含まれる画像データの画像を表示する
    　画像表示方法。     Obtaining composite data including image data of an image having the article as a subject and first setting information indicating processing performed on the article by the first electric device;
    It is determined whether or not the first setting information included in the acquired composite data is second setting information that is information in a format that can be executed by a second electrical device designated in advance by a user. ,
    When it is determined that the first setting information is the second setting information, a first mark to be added to the image of the image data is determined;
    An image display method for displaying an image of image data included in the composite data to which the determined first mark is added.
  3. 　前記画像表示方法では、さらに、
    　前記第一電気機器の所定機種の設定情報に対応付けて、前記第一電気機器の前記所定機種とは異なる機種の設定情報を示す変換テーブルを取得し、
    　前記第一設定情報を前記第二設定情報に変換することができるか否かを判定する際には、取得した前記変換テーブルを参照することで、前記第一設定情報を前記第二設定情報に変換することができるか否かを判定する
    　請求項１に記載の画像表示方法。     In the image display method, further,
    In association with the setting information of the predetermined model of the first electric device, obtain a conversion table indicating setting information of a model different from the predetermined model of the first electric device,
    When determining whether the first setting information can be converted into the second setting information, the first setting information is converted into the second setting information by referring to the acquired conversion table. The image display method according to claim 1, wherein it is determined whether or not conversion is possible.
  4. 　前記画像表示方法では、さらに、
    　電気機器の所定機種の設定情報と、汎用形式の設定情報である前記第一設定情報とを対応付ける変換テーブルを取得し、
    　前記第一設定情報を前記第二設定情報に変換することができるか否かを判定する際には、取得された前記変換テーブルを参照して、前記第一設定情報を前記第二設定情報に変換することができるか否かにより判定する
    　請求項１に記載の画像表示方法。     In the image display method, further,
    Obtaining a conversion table associating the setting information of the predetermined model of the electrical equipment with the first setting information which is the setting information of the general-purpose format;
    When determining whether or not the first setting information can be converted into the second setting information, the first setting information is converted into the second setting information with reference to the acquired conversion table. The image display method according to claim 1, wherein the determination is made based on whether or not conversion is possible.
  5. 　前記画像表示方法では、さらに、
    　前記ユーザを特定するユーザＩＤに対応するリストであって、予め指定される１つまたは複数の電気機器のリストである家電リストを取得し、
    　前記第一設定情報を前記第二設定情報に変換することができるか否かを判定する際には、取得された前記家電リストに含まれる電気機器のうち少なくとも１つの電気機器を前記第二電気機器とするときに前記第一設定情報を前記第二設定情報に変換することができる場合に前記第一設定情報を前記第二設定情報に変換することができると判定し、取得された前記家電リストに含まれる電気機器のいずれの電気機器を前記第二電気機器とするときにも前記第一設定情報を前記第二設定情報に変換することができない場合に前記第一設定情報を前記第二設定情報に変換することができないと判定する
    　請求項１に記載の画像表示方法。     In the image display method, further,
    A list corresponding to a user ID that identifies the user, and acquiring a home appliance list that is a list of one or more electrical devices specified in advance;
    When determining whether the first setting information can be converted into the second setting information, at least one electric device among the electric devices included in the acquired home appliance list is used as the second electric information. When the first setting information can be converted into the second setting information when the device is used, it is determined that the first setting information can be converted into the second setting information, and the acquired home appliance When any of the electric devices included in the list is the second electric device, the first setting information is changed to the second setting information when the first setting information cannot be converted into the second setting information. The image display method according to claim 1, wherein it is determined that the information cannot be converted into setting information.
  6. 　前記画像表示方法では、さらに、
    　前記ユーザを特定するユーザＩＤに対応するリストであって、予め指定される１つまたは複数の電気機器のリストである家電リストを取得し、
    　前記第一設定情報が前記第二設定情報であるか否かを判定する際には、取得された前記家電リストに含まれる電気機器のうち少なくとも１つの電気機器を前記第二電気機器とするときに前記第一設定情報が前記第二設定情報である場合に前記第一設定情報が前記第二設定情報であると判定し、取得された前記家電リストに含まれる電気機器のいずれの電気機器を前記第二電気機器とするときにも前記第一設定情報が前記第二設定情報ではない場合に前記第一設定情報が前記第二設定情報ではないと判定する
    　請求項２に記載の画像表示方法。     In the image display method, further,
    A list corresponding to a user ID that identifies the user, and acquiring a home appliance list that is a list of one or more electrical devices specified in advance;
    When determining whether the first setting information is the second setting information, when at least one electric device among the electric devices included in the acquired home appliance list is the second electric device When the first setting information is the second setting information, the first setting information is determined to be the second setting information, and any of the electric devices included in the acquired home appliance list is selected. The image display method according to claim 2, wherein the first setting information is determined not to be the second setting information when the first setting information is not the second setting information even when the second electric device is used. .
  7. 　前記画像表示方法では、さらに、
    　前記第一設定情報を前記第二設定情報に変換することができないと判定される場合に、前記画像データの画像に付加する前記第一のマークと異なる第二のマークを決定し、
    　決定された前記第二のマークを付加された、前記合成データに含まれる画像データの画像を表示する
    　請求項１、３～５のいずれか１項に記載の画像表示方法。     In the image display method, further,
    When it is determined that the first setting information cannot be converted into the second setting information, a second mark different from the first mark added to the image of the image data is determined,
    6. The image display method according to claim 1, wherein an image of the image data included in the composite data to which the determined second mark is added is displayed.
  8. 　前記画像表示方法では、さらに、
    　前記第一設定情報が前記第二設定情報ではないと判定される場合に、前記画像データの画像に付加する前記第一のマークと異なる第二のマークを決定し、
    　決定された前記第二のマークを付加された、前記合成データに含まれる画像データの画像を表示する
    　請求項２又は６に記載の画像表示方法。     In the image display method, further,
    When it is determined that the first setting information is not the second setting information, a second mark different from the first mark to be added to the image of the image data is determined,
    The image display method according to claim 2, wherein an image of the image data included in the composite data to which the determined second mark is added is displayed.
  9. 　前記第二のマークを決定する際には、
    　それぞれが電気機器に対応する少なくとも１つのマークのうち、前記第一電気機器に対応するマークを、前記第二のマークとして決定する
    　請求項７又は８に記載の画像表示方法。     When determining the second mark,
    The image display method according to claim 7 or 8, wherein a mark corresponding to the first electric device is determined as the second mark among at least one mark corresponding to each electric device.
  10. 　前記第一のマークを決定する際には、
    　それぞれが電気機器に対応する少なくとも１つのマークのうち、前記第二電気機器に対応するマークを、前記第一のマークとして決定する
    　請求項１～９のいずれか１項に記載の画像表示方法。     When determining the first mark,
    The image display method according to any one of claims 1 to 9, wherein a mark corresponding to the second electric device among at least one mark corresponding to the electric device is determined as the first mark.
  11. 　前記画像データは、Ｅｘｉｆ（Exchangeable image file format）規格に準拠した形式で埋め込まれた前記第一設定情報を含む画像データである
    　請求項１～１０のいずれか１項に記載の画像表示方法。     The image display method according to any one of claims 1 to 10, wherein the image data is image data including the first setting information embedded in a format conforming to an Exif (Exchangeable image file format) standard.
  12. 　表示装置に画像を表示させるための画像提供方法であって、
    　物品を被写体とする画像の画像データと、前記物品に対して第一電気機器により施される処理を示す第一設定情報を含む合成データを取得し、
    　取得された前記合成データに含まれる前記第一設定情報を、ユーザによって予め指定された第二電気機器が実行することが可能な形式である第二設定情報に変換することができるか否かを判定し、
    　前記第一設定情報を前記第二設定情報に変換することができると判定される場合に、前記画像データの画像に付加する第一のマークを決定し、
    　決定された前記第一のマークが付加された、前記合成データに含まれる画像データの画像を表示するインタフェースを提供する
    　画像提供方法。     An image providing method for displaying an image on a display device,
    Obtaining composite data including image data of an image having an article as a subject and first setting information indicating processing performed by the first electric device on the article;
    Whether or not the first setting information included in the acquired composite data can be converted into second setting information in a format that can be executed by a second electrical device designated in advance by the user. Judgment,
    When it is determined that the first setting information can be converted into the second setting information, a first mark to be added to the image of the image data is determined;
    An image providing method for providing an interface for displaying an image of image data included in the composite data to which the determined first mark is added.
  13. 　表示装置に画像を表示させるための画像提供方法であって、
    　物品を被写体とする画像の画像データと、前記物品に対して第一電気機器により施される処理を示す第一設定情報を含む合成データを取得するインタフェースを提供し、
    　取得された前記合成データに含まれる前記第一設定情報が、ユーザによって予め指定された第二電気機器が実行することが可能な形式である第二設定情報であるか否かを判定し、
    　前記第一設定情報が前記第二設定情報であると判定される場合に、前記画像データの画像に付加する第一のマークを決定し、
    　決定された前記第一のマークが付加された、前記合成データに含まれる画像データの画像を提供する
    　画像提供方法。     An image providing method for displaying an image on a display device,
    Providing an interface for acquiring composite data including image data of an image of an article as a subject and first setting information indicating processing performed by the first electric device on the article;
    Determining whether or not the first setting information included in the acquired composite data is second setting information in a format that can be executed by a second electrical device designated in advance by a user;
    When it is determined that the first setting information is the second setting information, a first mark to be added to the image of the image data is determined;
    An image providing method for providing an image of image data included in the composite data to which the determined first mark is added.
  14. 　前記画像提供方法は、さらに、
    　前記ユーザを特定するユーザＩＤに対応するリストであって、予め指定される１つまたは複数の電気機器のリストである家電リストを取得し、
    　前記第一設定情報を前記第二設定情報に変換することができるか否かを判定する際には、取得された前記家電リストに含まれる電気機器のうち少なくとも１つの電気機器を前記第二電気機器とするときに前記第一設定情報を前記第二設定情報に変換することができる場合に前記第一設定情報を前記第二設定情報に変換することができると判定し、取得された前記家電リストに含まれる電気機器のうちいずれの電気機器を前記第二電気機器とするときにも前記第一設定情報を前記第二設定情報に変換することができない場合に前記第一設定情報を前記第二設定情報に変換することができないと判定する
    　請求項１２に記載の画像提供方法。     The image providing method further includes:
    A list corresponding to a user ID that identifies the user, and acquiring a home appliance list that is a list of one or more electrical devices specified in advance;
    When determining whether the first setting information can be converted into the second setting information, at least one electric device among the electric devices included in the acquired home appliance list is used as the second electric information. When the first setting information can be converted into the second setting information when the device is used, it is determined that the first setting information can be converted into the second setting information, and the acquired home appliance When the first setting information cannot be converted into the second setting information when any of the electric devices included in the list is the second electric device, the first setting information is changed to the first setting information. The image providing method according to claim 12, wherein it is determined that the second setting information cannot be converted.
  15. 　前記画像提供方法は、さらに、
    　前記第一設定情報を前記第二設定情報に変換することができないと判定される場合に、前記画像データの画像に付加する前記第一のマークと異なる第二のマークを決定し、
    　決定された前記第二のマークを付加された前記合成データに含まれる画像データの画像を表示する
    　請求項１２又は１４に記載の画像提供方法。     The image providing method further includes:
    When it is determined that the first setting information cannot be converted into the second setting information, a second mark different from the first mark added to the image of the image data is determined,
    The image providing method according to claim 12 or 14, wherein an image of image data included in the synthesized data to which the determined second mark is added is displayed.
  16. 　物品を被写体とする画像の画像データと、前記物品に対して第一電気機器により施される処理を示す第一設定情報とを含む合成データを取得する画像取得部と、
    　取得された前記合成データに含まれる前記第一設定情報を、ユーザによって予め指定された第二電気機器が実行することが可能な形式の情報である第二設定情報に変換することができるか否かを判定する判定部と、
    　前記第一設定情報を前記第二設定情報に変換することができると判定される場合に、前記画像データの画像に付加する第一のマークを決定するマーク付加部と、
    　決定された前記第一のマークが付加された、前記合成データに含まれる画像データの画像を表示する表示部とを備える
    　画像表示装置。     An image acquisition unit that acquires composite data including image data of an image having an article as a subject and first setting information indicating processing performed by the first electric device on the article;
    Whether or not the first setting information included in the acquired composite data can be converted into second setting information that is information in a format that can be executed by the second electrical device designated in advance by the user. A determination unit for determining whether or not
    When it is determined that the first setting information can be converted into the second setting information, a mark adding unit that determines a first mark to be added to the image of the image data;
    An image display device comprising: a display unit configured to display an image of image data included in the composite data to which the determined first mark is added.
  17. 　物品を被写体とする画像の画像データと、前記物品に対して第一電気機器により施される処理を示す第一設定情報とを含む合成データを取得する画像取得部と、
    　取得された前記合成データに含まれる前記第一設定情報が、ユーザによって予め指定された第二電気機器が実行することが可能な形式の情報である第二設定情報であるか否かを判定する判定部と、
    　前記第一設定情報が前記第二設定情報であると判定される場合に、前記画像データの画像に付加する第一のマークを決定するマーク付加部と、
    　決定された前記第一のマークが付加された、前記合成データに含まれる画像データの画像を表示する表示部とを備える
    　画像表示装置。     An image acquisition unit that acquires composite data including image data of an image having an article as a subject and first setting information indicating processing performed by the first electric device on the article;
    It is determined whether or not the first setting information included in the acquired composite data is second setting information that is information in a format that can be executed by a second electrical device designated in advance by a user. A determination unit;
    A mark adding unit that determines a first mark to be added to an image of the image data when the first setting information is determined to be the second setting information;
    An image display device comprising: a display unit configured to display an image of image data included in the composite data to which the determined first mark is added.
  18. 　物品を被写体とする画像の画像データと、前記物品に対して第一電気機器により施される処理を示す第一設定情報とを含む合成データを取得するステップと、
    　取得された前記合成データに含まれる前記第一設定情報を、ユーザによって予め指定された第二電気機器が実行することが可能な形式の情報である第二設定情報に変換することができるか否かを判定するステップと、
    　前記第一設定情報を前記第二設定情報に変換することができると判定される場合に、前記画像データの画像に付加する第一のマークを決定するステップと、
    　決定された前記第一のマークが付加された、前記合成データに含まれる画像データの画像を表示するステップとを
    　コンピュータに実行させるためのプログラム。     Obtaining composite data including image data of an image having an article as a subject and first setting information indicating processing performed by the first electric device on the article;
    Whether or not the first setting information included in the acquired composite data can be converted into second setting information that is information in a format that can be executed by the second electrical device designated in advance by the user. Determining whether or not
    Determining the first mark to be added to the image of the image data when it is determined that the first setting information can be converted into the second setting information;
    A program for causing a computer to execute a step of displaying an image of image data included in the composite data to which the determined first mark is added.
  19. 　請求項１８に記載のプログラムが記憶されている記憶媒体。 A storage medium in which the program according to claim 18 is stored.
  20. 　ネットワークを介して接続された画像表示装置で実行されるプログラムを前記画像表示装置へ送信するサーバ装置であって、
    　プログラムを記憶する記憶部と、
    　前記画像表示装置から前記プログラムをダウンロードする要求を受けて、前記記憶部に記憶されている前記プログラムを前記画像表示装置へ送信する送信部とを備え、
    　前記プログラムは、前記画像表示装置に、
    　物品を被写体とする画像の画像データと、前記物品に対して第一電気機器により施される処理を示す第一設定情報とを含む合成データを取得させ、
    　取得された前記合成データに含まれる前記第一設定情報を、ユーザによって予め指定された第二電気機器が実行することが可能な形式の情報である第二設定情報に変換することができるか否かを判定させ、
    　前記第一設定情報を前記第二設定情報に変換することができると判定される場合に、前記画像データの画像に付加する第一のマークを決定させ、
    　決定された前記第一のマークが付加された、前記合成データに含まれる画像データの画像を表示させる
    　サーバ装置。
          A server device that transmits a program executed by an image display device connected via a network to the image display device,
    A storage unit for storing the program;
    A transmission unit that receives a request to download the program from the image display device and transmits the program stored in the storage unit to the image display device;
    The program is stored in the image display device.
    Obtaining composite data including image data of an image having an article as a subject and first setting information indicating processing performed on the article by a first electric device;
    Whether or not the first setting information included in the acquired composite data can be converted into second setting information that is information in a format that can be executed by the second electrical device designated in advance by the user. Determine whether
    When it is determined that the first setting information can be converted into the second setting information, the first mark to be added to the image of the image data is determined;
    A server device that displays an image of image data included in the composite data to which the determined first mark is added.
PCT/JP2013/005206 2012-10-02 2013-09-03 Image display method, image display apparatus, and image providing method WO2014054221A1 (en)

Priority Applications (3)

Application Number Priority Date Filing Date Title
CN201380003928.9A CN103959265B (en) 2012-10-02 2013-09-03 Image display method, image display apparatus, and image providing method
JP2014514270A JP6042881B2 (en) 2012-10-02 2013-09-03 Image display method, image display apparatus, and image providing method
US14/353,864 US9508323B2 (en) 2012-10-02 2013-09-03 Appliance control system and method for controlling an appliance based on processing done by another appliance

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2012220799 2012-10-02
JP2012-220799 2012-10-02

Publications (1)

Publication Number Publication Date
WO2014054221A1 true WO2014054221A1 (en) 2014-04-10

Family

ID=50434567

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2013/005206 WO2014054221A1 (en) 2012-10-02 2013-09-03 Image display method, image display apparatus, and image providing method

Country Status (4)

Country Link
US (1) US9508323B2 (en)
JP (1) JP6042881B2 (en)
CN (1) CN103959265B (en)
WO (1) WO2014054221A1 (en)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9460688B2 (en) * 2014-06-16 2016-10-04 Rod G. Kosann Electronic display locket and system
JP7242232B2 (en) * 2018-09-28 2023-03-20 キヤノン株式会社 Information processing device, information processing method, and program
CN112419999A (en) * 2019-08-21 2021-02-26 京东方科技集团股份有限公司 Image processing method and device, content sharing method and terminal equipment

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003307313A (en) * 2002-04-15 2003-10-31 Hitachi Ltd Heating cooking system and heating cooker
JP2008103900A (en) * 2006-10-18 2008-05-01 Canon Inc Image processor, method, and program
JP2011103548A (en) * 2009-11-10 2011-05-26 Panasonic Corp Electronic camera

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6661933B1 (en) * 1998-01-13 2003-12-09 Matsushita Electric Industrial Co., Ltd. Apparatus and method for image data processing
EP1271342A1 (en) * 2001-04-30 2003-01-02 Sun Microsystems, Inc. Method for accessing database table columns
JP2005250734A (en) * 2004-03-03 2005-09-15 Keiogijuku Generation method for ubiquitous environment information snapshot data, browsing method, generation device, browsing device, program, and data structure of ubiquitous environment information snapshot
NO323521B1 (en) * 2004-09-10 2007-06-04 Telenor Asa Location photo commentary on camera phones
JP4877013B2 (en) * 2007-03-30 2012-02-15 ブラザー工業株式会社 Scanner
US20100216441A1 (en) * 2009-02-25 2010-08-26 Bo Larsson Method for photo tagging based on broadcast assisted face identification

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003307313A (en) * 2002-04-15 2003-10-31 Hitachi Ltd Heating cooking system and heating cooker
JP2008103900A (en) * 2006-10-18 2008-05-01 Canon Inc Image processor, method, and program
JP2011103548A (en) * 2009-11-10 2011-05-26 Panasonic Corp Electronic camera

Also Published As

Publication number Publication date
JP6042881B2 (en) 2016-12-14
CN103959265A (en) 2014-07-30
JPWO2014054221A1 (en) 2016-08-25
CN103959265B (en) 2017-04-12
US9508323B2 (en) 2016-11-29
US20140292806A1 (en) 2014-10-02

Similar Documents

Publication Publication Date Title
US10237085B2 (en) System and method of providing control information to device regarding product
EP2528351A1 (en) Information terminal device, control method using an information terminal device, and program
WO2015182067A1 (en) Cooking recipe supply method and control program
US20210084098A1 (en) System for implementing cooking instructions
JP6042881B2 (en) Image display method, image display apparatus, and image providing method
JP6184402B2 (en) COMMUNICATION METHOD, COMMUNICATION DEVICE, DEVICE CONTROL METHOD, AND DEVICE CONTROL DEVICE
CN111580430A (en) Control method and device of cooking equipment, cooking equipment and cooking system
US10572200B2 (en) Information processing apparatus and non-transitory computer readable medium
JP2017021650A (en) Cooking recipe creation method and program
US20170070403A1 (en) User terminal, operator server, remote support method, and program for user terminal
JP2019097097A (en) Information processing device and program
JP2018106524A (en) Interactive device, interactive method, and program
CN112507175A (en) Electronic menu operation method and device, storage medium and electronic device
CN112099372A (en) Menu generation method and device, cooking equipment, mobile terminal and storage medium
JP6866615B2 (en) Menu generation system, menu generation method and menu generation program
JP4342117B2 (en) Cooking recipe information provision method
JP2012129860A (en) Setting input support system
JP5663968B2 (en) DEVICE INFORMATION PROVIDING DEVICE, COMMUNICATION RELAY DEVICE, DEVICE INFORMATION PROVIDING SYSTEM, DEVICE INFORMATION PROVIDING METHOD, AND COMPUTER PROGRAM
KR101347116B1 (en) System and Method for Controlling Home Appliance
JP2019097113A (en) Information processing device and program
JP2014225154A (en) Electronic apparatus, transmission device, and control program for electronic apparatus
JP2015060472A (en) User terminal, program, and method for introducing application of peripheral terminal to user
JP2006146405A (en) Information processing system, information processor, server system and information processing method

Legal Events

Date Code Title Description
ENP Entry into the national phase

Ref document number: 2014514270

Country of ref document: JP

Kind code of ref document: A

WWE Wipo information: entry into national phase

Ref document number: 14353864

Country of ref document: US

121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 13843967

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 13843967

Country of ref document: EP

Kind code of ref document: A1