JP5932724B2 - Information processing system, information processing apparatus, information processing method, and program - Google Patents

Information processing system, information processing apparatus, information processing method, and program Download PDF

Info

Publication number
JP5932724B2
JP5932724B2 JP2013144315A JP2013144315A JP5932724B2 JP 5932724 B2 JP5932724 B2 JP 5932724B2 JP 2013144315 A JP2013144315 A JP 2013144315A JP 2013144315 A JP2013144315 A JP 2013144315A JP 5932724 B2 JP5932724 B2 JP 5932724B2
Authority
JP
Japan
Prior art keywords
information
setting
input
input image
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2013144315A
Other languages
Japanese (ja)
Other versions
JP2015018359A (en
Inventor
正和 武内
正和 武内
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
NEC Fielding Ltd
Original Assignee
NEC Fielding Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by NEC Fielding Ltd filed Critical NEC Fielding Ltd
Priority to JP2013144315A priority Critical patent/JP5932724B2/en
Publication of JP2015018359A publication Critical patent/JP2015018359A/en
Application granted granted Critical
Publication of JP5932724B2 publication Critical patent/JP5932724B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • User Interface Of Digital Computer (AREA)

Description

本発明は、情報処理システム、情報処理装置、情報処理方法、及びプログラムに関する。   The present invention relates to an information processing system, an information processing apparatus, an information processing method, and a program.

アプリケーションプログラム（以下、アプリケーションと呼ぶ）等において、ユーザは、設定マニュアル等に従って、画面に表示される設定項目に、文字、数値等を入力する場合がある。   In an application program (hereinafter referred to as an application) or the like, a user may input characters, numerical values, and the like in setting items displayed on the screen according to a setting manual or the like.

特許文献１において、文字、及び線図の正誤を判断する技術が開示されている。具体的には、特許文献１に開示された技術においては、まず、入力画像から文字領域と、線図領域とを抽出する。そして、特許文献１に開示された技術においては、文字領域内の文字と、線図領域内の線図とが、予め定められた文字、線図であるか否かを判断する。   Patent Document 1 discloses a technique for determining whether characters and diagrams are correct or incorrect. Specifically, in the technique disclosed in Patent Document 1, first, a character region and a diagram region are extracted from an input image. In the technique disclosed in Patent Document 1, it is determined whether or not the character in the character region and the diagram in the diagram region are a predetermined character and diagram.

特開２０１３−０６１８８６号公報JP 2013-061886 A

なお、上記先行技術文献の開示を、本書に引用をもって繰り込むものとする。以下の分析は、本発明の観点からなされたものである。   The disclosure of the above prior art document is incorporated herein by reference. The following analysis has been made from the viewpoint of the present invention.

上述の通り、ユーザは、アプリケーションを使用する際に、設定マニュアル等に従って、予め定められた文字、数値等を入力する場合がある。その際、入力エラーとなる箇所は、特定の箇所に集中する場合がある。そのため、設定マニュアル等において、入力エラーが集中する箇所を強調する等、注意喚起することが好ましい。   As described above, the user may input predetermined characters, numerical values, and the like according to a setting manual or the like when using the application. In that case, the part which becomes an input error may concentrate on a specific part. Therefore, it is preferable to call attention in a setting manual or the like by highlighting a location where input errors are concentrated.

ここで、上述の通り、特許文献１に開示された技術は、入力画像内の文字、線図の正誤を判断する技術である。具体的には、特許文献１に開示された技術においては、化学構造式を入力画像とし、入力画像に基づいて、判断基準とするデータ（具体的には、化学構造式）を推測する。そして、特許文献１に開示された技術は、入力画像と、判断基準とするデータと、が一致するか否かを判断する。そのため、特許文献１に開示された技術は、入力確定前に、目的の情報（正解の文字、数値等）を予想することはできない。つまり、特許文献１に開示された技術では、ユーザに対して、予め、入力エラーの集中する箇所を注意喚起することはできない。   Here, as described above, the technique disclosed in Patent Document 1 is a technique for determining whether characters and diagrams in an input image are correct. Specifically, in the technique disclosed in Patent Document 1, a chemical structural formula is used as an input image, and data (specifically, chemical structural formula) that is used as a determination criterion is estimated based on the input image. The technique disclosed in Patent Document 1 determines whether or not the input image matches the data used as a determination criterion. Therefore, the technique disclosed in Patent Document 1 cannot predict target information (correct characters, numerical values, etc.) before input is confirmed. That is, with the technique disclosed in Patent Document 1, it is not possible to alert a user in advance to a location where input errors are concentrated.

そこで、本発明は、入力エラーを低減するように、設定マニュアルを更新することに貢献する情報処理システム、情報処理装置、情報処理方法、及びプログラムを提供することを目的とする。   Accordingly, an object of the present invention is to provide an information processing system, an information processing apparatus, an information processing method, and a program that contribute to updating a setting manual so as to reduce input errors.

本発明の第１の視点によれば、１又は２以上の情報処理装置と、１又は２以上の設定マニュアル情報を記憶する設定マニュアル情報データベースを備える情報管理装置と、を含む情報処理システムであって、前記各設定マニュアル情報は、１又は２以上の設定項目に対応する設定教師情報を含み、前記情報処理装置は、前記情報管理装置から前記設定マニュアル情報を取得する設定マニュアル情報取得部と、入力画像を取得する入力画像取得部と、前記入力画像からユーザ入力情報を抽出する入力画像処理部と、前記設定教師情報と、前記ユーザ入力情報と、が一致するか否かを判断する判断部と、を備え、前記情報管理装置は、前記設定項目に対応する入力エラー回数が、所定の閾値を超える場合、前記設定マニュアル情報に注意喚起情報を追加して、前記設定マニュアル情報データベースが記憶する前記設定マニュアル情報を更新する管理装置制御部をさらに備える情報処理システムが提供される。 According to a first aspect of the present invention, there is provided an information processing system including one or more information processing apparatuses and an information management apparatus including a setting manual information database that stores one or more setting manual information. Each setting manual information includes setting teacher information corresponding to one or more setting items, and the information processing apparatus includes a setting manual information acquisition unit that acquires the setting manual information from the information management apparatus; An input image acquisition unit that acquires an input image, an input image processing unit that extracts user input information from the input image, a determination unit that determines whether or not the setting teacher information and the user input information match And the information management device alerts the setting manual information when the number of input errors corresponding to the setting item exceeds a predetermined threshold. Add to, further comprising an information processing system managing device control unit that updates the setting manual information which the setting manual information database stores is provided.

本発明の第２の視点によれば、１又は２以上の設定マニュアル情報を記憶する設定マニュアル情報データベースを備える情報管理装置と接続する、情報処理装置であって、前記情報管理装置から、１又は２以上の設定項目に対応する設定教師情報を含む、設定マニュアル情報を取得する設定マニュアル情報取得部と、入力画像を取得する入力画像取得部と、前記入力画像からユーザ入力情報を抽出する入力画像処理部と、前記設定教師情報と、前記ユーザ入力情報と、が一致するか否かを判断する判断部と、を備え、前記設定項目に対応する入力エラー回数が、所定の閾値を超える場合、前記設定マニュアル情報データベースが記憶する前記設定マニュアル情報は、注意喚起情報を追加して更新される情報処理装置が提供される。 According to a second aspect of the present invention, there is provided an information processing apparatus connected to an information management apparatus including a setting manual information database for storing one or more setting manual information, from the information management apparatus, A setting manual information acquisition unit that acquires setting manual information, including setting teacher information corresponding to two or more setting items, an input image acquisition unit that acquires an input image, and an input image that extracts user input information from the input image A processing unit, and a determination unit that determines whether or not the setting teacher information and the user input information match, and the number of input errors corresponding to the setting item exceeds a predetermined threshold, An information processing apparatus is provided in which the setting manual information stored in the setting manual information database is updated by adding alert information .

本発明の第３の視点によれば、１又は２以上の設定マニュアル情報を記憶する設定マニュアル情報データベースを備える情報管理装置と接続する、情報処理装置が、
前記情報管理装置から、１又は２以上の設定項目に対応する設定教師情報を含む、設定マニュアル情報を取得する工程と、入力画像を取得する工程と、前記入力画像からユーザ入力情報を抽出する入力画像処理工程と、前記設定教師情報と、前記ユーザ入力情報と、が一致するか否かを判断する判断工程と、を含み、前記設定項目に対応する入力エラー回数が、所定の閾値を超える場合、前記設定マニュアル情報データベースが記憶する前記設定マニュアル情報は、注意喚起情報を追加して更新される情報処理方法が提供される。
なお、本方法は、情報の正誤を判断する情報処理装置という、特定の機械に結び付けられている。 According to a third aspect of the present invention, there is provided an information processing apparatus connected to an information management apparatus including a setting manual information database that stores one or more setting manual information.
A step of acquiring setting manual information including setting teacher information corresponding to one or more setting items, a step of acquiring an input image, and an input for extracting user input information from the input image from the information management device than the image processing step, and the setting instruction information, and the user input information, see containing a determining step, the which it is determined whether the matching input error count corresponding to the setting items, a predetermined threshold value In this case, an information processing method is provided in which the setting manual information stored in the setting manual information database is updated by adding alert information .
This method is linked to a specific machine called an information processing apparatus that determines whether information is correct or incorrect.

本発明の第４の視点によれば、１又は２以上の設定マニュアル情報を記憶する設定マニュアル情報データベースを備える情報管理装置と接続する、情報処理装置を制御するコンピュータに実行させるプログラムであって、前記情報管理装置から、１又は２以上の設定項目に対応する設定教師情報を含む、設定マニュアル情報を取得する処理と、入力画像を取得する処理と、前記入力画像からユーザ入力情報を抽出する入力画像処理と、前記設定教師情報と、前記ユーザ入力情報と、が一致するか否かを判断する判断処理と、を前記コンピュータに実行させ、前記設定項目に対応する入力エラー回数が、所定の閾値を超える場合、前記設定マニュアル情報データベースが記憶する前記設定マニュアル情報は、注意喚起情報を追加して更新されるプログラムが提供される。
なお、本プログラムは、コンピュータが読み取り可能な記憶媒体に記録することができる。記憶媒体は、半導体メモリ、ハードディスク、磁気記録媒体、光記録媒体等の非トランジェント（non-transient）なものとすることができる。本発明は、コンピュータプログラム製品として具現することも可能である。 According to a fourth aspect of the present invention, there is provided a program that is executed by a computer that controls an information processing apparatus connected to an information management apparatus including a setting manual information database that stores one or more setting manual information . A process of acquiring setting manual information including setting teacher information corresponding to one or more setting items, a process of acquiring an input image, and an input for extracting user input information from the input image from the information management device Image processing, determination processing for determining whether or not the setting teacher information matches the user input information are executed by the computer, and the number of input errors corresponding to the setting item is a predetermined threshold value. The setting manual information stored in the setting manual information database is updated by adding warning information. Program is provided.
The program can be recorded on a computer-readable storage medium. The storage medium may be non-transient such as a semiconductor memory, a hard disk, a magnetic recording medium, an optical recording medium, or the like. The present invention can also be embodied as a computer program product.

本発明の各視点によれば、入力エラーを低減するように、設定マニュアルを更新することに貢献する情報処理システム、情報処理装置、情報処理方法、及びプログラムが提供される。   According to each aspect of the present invention, an information processing system, an information processing apparatus, an information processing method, and a program that contribute to updating a setting manual so as to reduce input errors are provided.

一実施形態の概要を説明するための図である。It is a figure for demonstrating the outline | summary of one Embodiment. 情報処理システム１の全体構成の一例を示す図である。1 is a diagram illustrating an example of an overall configuration of an information processing system 1. FIG. 入力対象装置２、及び情報処理装置５の配置の一例を示す図である。3 is a diagram illustrating an example of an arrangement of an input target device 2 and an information processing device 5. FIG. 入力対象装置２の表示画像、及び設定マニュアル画像の一例を示す図である。It is a figure which shows an example of the display image of the input target apparatus 2, and a setting manual image. 入力対象装置２の内部構成の一例を示すブロック図である。3 is a block diagram illustrating an example of an internal configuration of an input target device 2. FIG. ビデオキャプチャ装置３の内部構成の一例を示すブロック図である。3 is a block diagram illustrating an example of an internal configuration of a video capture device 3. FIG. 情報管理装置４の内部構成の一例を示すブロック図である。2 is a block diagram illustrating an example of an internal configuration of an information management device 4. FIG. 情報処理装置５の内部構成の一例を示すブロック図である。3 is a block diagram illustrating an example of an internal configuration of an information processing device 5. FIG. 設定マニュアル情報、及びキャプチャ画像を取得する処理の一例を示すフローチャートである。It is a flowchart which shows an example of the process which acquires setting manual information and a captured image. ユーザ入力情報の正誤を判断する処理の一例を示すフローチャートである。It is a flowchart which shows an example of the process which judges the correctness of user input information. ユーザ入力情報が誤っている場合の処理の一例を示すフローチャートである。It is a flowchart which shows an example of a process when user input information is incorrect. 設定マニュアル画像の一例を示す図であるIt is a figure which shows an example of a setting manual image. エラー管理情報の一例を示す図である。It is a figure which shows an example of error management information. 設定マニュアル情報を更新する処理の一例を示すフローチャートである。It is a flowchart which shows an example of the process which updates setting manual information. 設定マニュアル画像の一例を示す図である。It is a figure which shows an example of a setting manual image.

初めに、図１を用いて一実施形態の概要について説明する。なお、この概要に付記した図面参照符号は、理解を助けるための一例として各要素に便宜上付記したものであり、この概要の記載はなんらの限定を意図するものではない。   First, an outline of an embodiment will be described with reference to FIG. Note that the reference numerals of the drawings attached to the outline are attached to the respective elements for convenience as an example for facilitating understanding, and the description of the outline is not intended to be any limitation.

上述の通り、入力エラーを低減するように、設定マニュアルを更新することに貢献する情報処理システムが望まれる。   As described above, an information processing system that contributes to updating the setting manual so as to reduce input errors is desired.

そこで、一例として、図１に示す情報処理システム１００を提供する。情報処理システム１００は、情報管理装置１０１と、１又は２以上の情報処理装置１０２と、を含んで構成される。情報管理装置１０１は、管理装置制御部１１１を含んで構成される。情報処理装置１０２は、設定マニュアル情報取得部１１２と、入力画像取得部１１３と、入力画像処理部１１４と、判断部１１５と、を含んで構成される。   Therefore, as an example, the information processing system 100 shown in FIG. 1 is provided. The information processing system 100 includes an information management apparatus 101 and one or more information processing apparatuses 102. The information management apparatus 101 includes a management apparatus control unit 111. The information processing apparatus 102 includes a setting manual information acquisition unit 112, an input image acquisition unit 113, an input image processing unit 114, and a determination unit 115.

情報管理装置１０１は、１又は２以上の設定マニュアル情報１２０を管理する。設定マニュアル情報１２０とは、１又は２以上の設定項目に対応する、設定教師情報を含む情報を意味する。また、設定教師情報とは、各設定項目に対応する、文字、数値、記号、図形等を意味する。以下の説明では、設定マニュアル情報を示す画像を、設定マニュアル画像と呼ぶ。   The information management apparatus 101 manages one or more setting manual information 120. The setting manual information 120 means information including setting teacher information corresponding to one or more setting items. The setting teacher information means characters, numerical values, symbols, figures, etc. corresponding to the setting items. In the following description, an image indicating setting manual information is referred to as a setting manual image.

情報処理装置１０２は、設定マニュアル情報１２０に基づいて、各設定項目に対して入力された情報の正誤を判断する。以下の説明では、設定項目に対して入力された情報を、ユーザ入力情報と呼ぶ。また、以下の説明では、ユーザ入力情報の入力された設定項目を含む画像を、入力画像と呼ぶ。   The information processing apparatus 102 determines whether the information input for each setting item is correct based on the setting manual information 120. In the following description, information input to a setting item is referred to as user input information. In the following description, an image including a setting item in which user input information is input is referred to as an input image.

具体的には、まず、設定マニュアル情報取得部１１２は、情報管理装置１０１から設定マニュアル情報１２０を取得する。また、入力画像取得部１１３は、入力画像を取得する。そして、入力画像処理部１１４は、入力画像からユーザ入力情報を抽出する。そして、判断部１１５は、設定教師情報と、ユーザ入力情報と、が一致するか否かを判断する。   Specifically, first, the setting manual information acquisition unit 112 acquires the setting manual information 120 from the information management apparatus 101. The input image acquisition unit 113 acquires an input image. Then, the input image processing unit 114 extracts user input information from the input image. Then, the determination unit 115 determines whether or not the setting teacher information matches the user input information.

判断部１１５は、設定教師情報と、ユーザ入力情報と、が一致する場合、ユーザ入力情報を正しいと判断する。一方、判断部１１５は、設定教師情報と、ユーザ入力情報と、が一致しない場合、ユーザ入力情報が誤っている（即ち、入力エラー）と判断する。   The determination unit 115 determines that the user input information is correct when the setting teacher information matches the user input information. On the other hand, when the setting teacher information and the user input information do not match, the determination unit 115 determines that the user input information is incorrect (that is, an input error).

そして、管理装置制御部１１１は、設定項目に対応する入力エラー回数が、所定の閾値を超える場合、設定マニュアル情報１２０に注意喚起情報（例えば、警告メッセージ等）を追加する。その結果、一の情報処理装置１０２の判断部１１５が入力エラーと判断した場合、他の情報処理装置１０２の設定マニュアル情報取得部１１２は、注意喚起情報を含めた設定マニュアル情報１２０を提示できる。そして、情報処理装置１０２は、注意喚起情報を含む設定マニュアル画像を、ユーザに提示することで、ユーザに注意喚起をすることができる。つまり、情報処理システム１００は、入力エラーを低減するように、設定マニュアルを更新することに貢献する。   And the management apparatus control part 111 adds alerting information (for example, warning message etc.) to the setting manual information 120, when the input error frequency corresponding to a setting item exceeds a predetermined threshold value. As a result, when the determination unit 115 of one information processing apparatus 102 determines that there is an input error, the setting manual information acquisition unit 112 of another information processing apparatus 102 can present the setting manual information 120 including the alert information. Then, the information processing apparatus 102 can alert the user by presenting the setting manual image including the alert information to the user. That is, the information processing system 100 contributes to updating the setting manual so as to reduce input errors.

［第１の実施形態］
第１の実施形態について、図面を用いてより詳細に説明する。 [First Embodiment]
The first embodiment will be described in more detail with reference to the drawings.

図２は、本実施形態に係る情報処理システム１の全体構成の一例を示す図である。情報処理装置１は、入力対象装置２と、ビデオキャプチャ装置３と、情報管理装置４と、１又は２以上の情報処理装置５と、を含んで構成される。各情報処理装置５は、ネットワーク６を介して、情報管理装置４と接続する。なお、図示しないが、各情報処理装置５は、夫々異なるビデオキャプチャ装置３を介して、夫々異なる入力対象装置２と接続しても良い。   FIG. 2 is a diagram illustrating an example of the overall configuration of the information processing system 1 according to the present embodiment. The information processing apparatus 1 includes an input target apparatus 2, a video capture apparatus 3, an information management apparatus 4, and one or more information processing apparatuses 5. Each information processing device 5 is connected to the information management device 4 via the network 6. Although not shown, each information processing device 5 may be connected to a different input target device 2 via a different video capture device 3.

入力対象装置２は、ユーザの操作を受け付けるとともに、ユーザの操作に基づいて、情報を設定する。   The input target device 2 accepts a user operation and sets information based on the user operation.

情報管理装置４は、設定マニュアル情報等を管理する。さらに、情報管理装置４は、情報処理装置５の要求に応じて、情報処理装置５に設定マニュアル情報を送信する。そして、情報処理装置５は、受信した設定マニュアル情報に基づいて、設定マニュアル画像を生成する。   The information management device 4 manages setting manual information and the like. Furthermore, the information management device 4 transmits setting manual information to the information processing device 5 in response to a request from the information processing device 5. Then, the information processing device 5 generates a setting manual image based on the received setting manual information.

情報処理装置５は、入力対象装置２において入力された情報の正誤を判断する。さらに、情報処理装置５は、ビデオキャプチャ装置３を介して、入力対象装置２から画像信号を取得する。そして、ビデオキャプチャ装置３は、取得した画像信号に基づいて、画像を生成する。そして、ビデオキャプチャ装置３は、生成した画像を情報処理装置５に送信する。なお、以下の説明では、ビデオキャプチャ装置３の生成する画像を、キャプチャ画像と呼ぶ。   The information processing device 5 determines whether the information input in the input target device 2 is correct or incorrect. Further, the information processing device 5 acquires an image signal from the input target device 2 via the video capture device 3. Then, the video capture device 3 generates an image based on the acquired image signal. Then, the video capture device 3 transmits the generated image to the information processing device 5. In the following description, an image generated by the video capture device 3 is referred to as a captured image.

例えば、顧客先で、アプリケーションの設定作業を行う際、作業員は、設定マニュアルを見ながら、顧客先のＰＣ（Personal Computer）に文字、数値等を入力して設定する場合がある。その際に、顧客先のＰＣにおいては、ネットワーク接続、他のＰＣ等への接続等が禁止されている場合がある。そこで、作業員は、設定マニュアルを表示するためのＰＣを顧客先に持参し、持参したＰＣの表示画面を見ながら、顧客先のＰＣ（Personal Computer）に文字、数値等を入力して設定する場合がある。   For example, when an application setting operation is performed at a customer site, an operator may input and set characters, numerical values, etc. on a customer computer (Personal Computer) while looking at a setting manual. At that time, the customer's PC may be prohibited from connecting to a network, connecting to another PC, or the like. Therefore, the worker brings a PC for displaying the setting manual to the customer, and inputs and sets characters, numerical values, etc. to the customer's PC (Personal Computer) while viewing the display screen of the brought PC. There is a case.

図３は、入力対象装置２、及び情報処理装置５の配置の一例を示す図である。具体的には、図３は、ビデオキャプチャ装置３を介して、入力対象装置２と、情報処理装置５とが接続することを示す図である。   FIG. 3 is a diagram illustrating an example of the arrangement of the input target device 2 and the information processing device 5. Specifically, FIG. 3 is a diagram illustrating that the input target device 2 and the information processing device 5 are connected via the video capture device 3.

例えば、図３の場合、入力対象装置２は、上述の顧客先のＰＣに相当するとする。また、ユーザ７は、顧客先でアプリケーションの設定作業を行う、上述の作業員に相当する。また、情報処理装置５は、作業員設定マニュアルを表示するために持参したＰＣに相当するとする。つまり、ユーザ７は、情報処理装置５に、アプリケーション等の設定マニュアルを表示し、情報処理装置５に表示された設定マニュアルを見ながら、入力対象装置２において、設定作業を行うとする。その場合、上述の通り、入力対象装置２は、ビデオキャプチャ装置３を介して、画像信号を情報処理装置５に送信する。そのため、入力対象装置２と、情報処理装置５は、相互に、各種設定項目の入力値等のデータを授受する必要はない。   For example, in the case of FIG. 3, it is assumed that the input target device 2 corresponds to the above-mentioned customer's PC. The user 7 corresponds to the above-mentioned worker who performs application setting work at the customer site. The information processing apparatus 5 corresponds to a PC brought to display the worker setting manual. That is, it is assumed that the user 7 displays a setting manual such as an application on the information processing apparatus 5 and performs a setting operation on the input target apparatus 2 while viewing the setting manual displayed on the information processing apparatus 5. In this case, as described above, the input target device 2 transmits an image signal to the information processing device 5 via the video capture device 3. Therefore, it is not necessary for the input target device 2 and the information processing device 5 to exchange data such as input values of various setting items.

図４は、入力対象装置２の表示画像、及び設定マニュアル画像の一例を示す図である。具体的には、図４（ａ）は、入力対象装置２の表示画像（以下、入力表示画像と呼ぶ）１１の一例を示す図である。また、図４（ｂ）は、設定マニュアル画像１２の一例を示す図である。なお、情報処理装置５は、アプリケーションに関する設定を提示する画像を表示しているとする。   FIG. 4 is a diagram illustrating an example of a display image of the input target device 2 and a setting manual image. Specifically, FIG. 4A is a diagram illustrating an example of a display image (hereinafter referred to as an input display image) 11 of the input target device 2. FIG. 4B is a diagram illustrating an example of the setting manual image 12. It is assumed that the information processing apparatus 5 displays an image that presents settings related to the application.

ここで、図３に示すように、入力対象装置２、情報処理装置５等が配置されたとする。その場合、まず、設定マニュアル画像１２に対応するアプリケーションを、ユーザ７は入力対象装置２において起動させる。そして、ユーザ７は、設定マニュアル画像１２を参考にして、入力対象装置２に文字、数値、記号、図形等を入力する。   Here, as illustrated in FIG. 3, it is assumed that the input target device 2, the information processing device 5, and the like are arranged. In that case, first, the user 7 activates the application corresponding to the setting manual image 12 in the input target device 2. Then, the user 7 refers to the setting manual image 12 and inputs characters, numerical values, symbols, figures, and the like to the input target device 2.

例えば、ユーザ７は、設定マニュアル画像１２内の“設定項目Ａ”の設定項目１００１を参考にして、入力表示画像１１の“設定項目Ａ”の設定項目１０１１に、“５０”を入力する。また、ユーザ７は、設定マニュアル画像１２内の“設定項目Ｂ”の設定項目１００２を参考にして、入力表示画像１１の“設定項目Ｂ”の設定項目１０１２において、“Ｐａｒａｍ１”を入力するとする。   For example, the user 7 refers to the setting item 1001 of “setting item A” in the setting manual image 12 and inputs “50” to the setting item 1011 of “setting item A” of the input display image 11. Further, it is assumed that the user 7 inputs “Param1” in the setting item 1012 of “setting item B” of the input display image 11 with reference to the setting item 1002 of “setting item B” in the setting manual image 12.

このように、本実施形態に係る情報処理システム１においては、ユーザは、情報処理装置５に設定マニュアル画像を表示させる。そして、ユーザは、設定マニュアル画像を参考にして、入力対象装置２に情報を入力する。   Thus, in the information processing system 1 according to the present embodiment, the user causes the information processing apparatus 5 to display the setting manual image. Then, the user inputs information to the input target device 2 with reference to the setting manual image.

図５は、入力対象装置２の内部構成の一例を示すブロック図である。入力対象装置２は、入力操作部２１０と、入力表示部２２０と、入力対象装置制御部２３０と、画像信号生成部２４０と、を含んで構成される。図５は、簡単のため、本実施形態に係る入力対象装置２に関係するモジュールを主に記載する。   FIG. 5 is a block diagram illustrating an example of the internal configuration of the input target device 2. The input target device 2 includes an input operation unit 210, an input display unit 220, an input target device control unit 230, and an image signal generation unit 240. FIG. 5 mainly describes modules related to the input target device 2 according to the present embodiment for the sake of simplicity.

入力操作部２１０は、ユーザの操作を受け付ける。例えば、入力操作部２１０は、操作キー等であっても良い。入力表示部２２０は、入力画像を表示する。入力表示部２２０は、液晶パネル、有機ＥＬ（Electro Luminescence）パネル等であっても良い。入力対象装置制御部２３０は、入力対象装置２の全体を制御すると共に、図５に示す各部を制御する。入力対象装置制御部２３０は、ユーザの操作に応じて、処理を実行する。入力対象装置制御部２３０は、入力対象装置２に搭載されたコンピュータに、そのハードウェアを用いて、入力対象装置２の処理を実行させるコンピュータプログラムにより実現することもできる。画像信号生成部２４０は、入力画像の画像信号を生成する。   The input operation unit 210 receives a user operation. For example, the input operation unit 210 may be an operation key or the like. The input display unit 220 displays an input image. The input display unit 220 may be a liquid crystal panel, an organic EL (Electro Luminescence) panel, or the like. The input target device control unit 230 controls the entire input target device 2 and controls each unit shown in FIG. The input target device control unit 230 executes processing according to a user operation. The input target device control unit 230 can also be realized by a computer program that causes a computer mounted on the input target device 2 to execute processing of the input target device 2 using its hardware. The image signal generation unit 240 generates an image signal of the input image.

図６は、ビデオキャプチャ装置３の内部構成の一例を示すブロック図である。ビデオキャプチャ装置３は、画像信号入力部３１０と、キャプチャ画像生成部３２０と、キャプチャ画像出力部３３０と、を含んで構成される。図６は、簡単のため、本実施形態に係るビデオキャプチャ装置３に関係するモジュールを主に記載する。   FIG. 6 is a block diagram showing an example of the internal configuration of the video capture device 3. The video capture device 3 includes an image signal input unit 310, a capture image generation unit 320, and a capture image output unit 330. For the sake of simplicity, FIG. 6 mainly describes modules related to the video capture device 3 according to the present embodiment.

画像信号入力部３１０は、キャプチャ画像を生成するための画像信号を入力する。具体的には、画像信号入力部３１０は、入力対象装置２から画像信号を取得する。そして、キャプチャ画像生成部３２０は、入力画像信号に基づいて、キャプチャ画像を生成する。そして、キャプチャ画像出力部３３０は、キャプチャ画像を出力する。   The image signal input unit 310 inputs an image signal for generating a capture image. Specifically, the image signal input unit 310 acquires an image signal from the input target device 2. Then, the capture image generation unit 320 generates a capture image based on the input image signal. Then, the captured image output unit 330 outputs a captured image.

図７は、情報管理装置４の内部構成の一例を示すブロック図である。情報管理装置４は、管理装置通信部４１０と、管理装置記憶部４２０と、管理装置制御部４３０と、を含んで構成される。図７は、簡単のため、本実施形態に係る情報管理装置４に関係するモジュールを主に記載する。   FIG. 7 is a block diagram illustrating an example of the internal configuration of the information management apparatus 4. The information management device 4 includes a management device communication unit 410, a management device storage unit 420, and a management device control unit 430. For simplicity, FIG. 7 mainly describes modules related to the information management apparatus 4 according to the present embodiment.

管理装置通信部４１０は、情報処理装置５との通信を制御する。具体的には、管理装置通信部４１０は、情報処理装置５の要求に応じて、設定マニュアル情報等を情報処理装置５に送信する。また、管理装置通信部４１０は、情報処理装置５から、入力エラーに関する情報（以下、入力エラー情報と呼ぶ）等を受信する。   The management device communication unit 410 controls communication with the information processing device 5. Specifically, the management device communication unit 410 transmits setting manual information and the like to the information processing device 5 in response to a request from the information processing device 5. Further, the management device communication unit 410 receives information related to input errors (hereinafter referred to as input error information) and the like from the information processing device 5.

管理装置記憶部４２０は、情報管理装置４の動作に必要な情報を記憶する。また、管理装置記憶部４２０は、設定マニュアル情報データベース４２１と、エラー管理情報データベース４２２と、を含んで構成される。   The management device storage unit 420 stores information necessary for the operation of the information management device 4. The management device storage unit 420 includes a setting manual information database 421 and an error management information database 422.

設定マニュアル情報データベース４２１は、１又は２以上の設定マニュアル情報を記憶する。なお、設定マニュアル情報とは、上述の通り、１又は２以上の設定教師情報を含む情報である。さらに、設定マニュアル情報は、各設定項目を識別するための情報（以下、設定項目識別情報と呼ぶ）を含むことが好ましい。例えば、設定項目識別情報は、設定項目を識別するための名称、番号等が好ましい。   The setting manual information database 421 stores one or more setting manual information. The setting manual information is information including one or more setting teacher information as described above. Further, the setting manual information preferably includes information for identifying each setting item (hereinafter referred to as setting item identification information). For example, the setting item identification information is preferably a name, number or the like for identifying the setting item.

エラー管理情報データベース４２２は、設定項目識別情報と、各設定項目に対応する入力エラー回数と、を対応付けて記憶する。ここで、また、入力エラー回数とは、入力対象装置２において、設定項目に対して、誤った文字、数値、記号、図形等が入力された回数を意味する。入力エラー回数の詳細は、後述する。なお、以下の説明では、設定項目識別情報と、各設定項目に対応する入力エラー回数とを対応付けた情報を、エラー管理情報と呼ぶ。   The error management information database 422 stores setting item identification information and the number of input errors corresponding to each setting item in association with each other. Here, the number of input errors means the number of times that an incorrect character, numerical value, symbol, figure, or the like is input to the setting item in the input target device 2. Details of the number of input errors will be described later. In the following description, information in which setting item identification information is associated with the number of input errors corresponding to each setting item is referred to as error management information.

管理装置制御部４３０は、情報管理装置４の全体を制御すると共に、図７に示す各部を制御する。管理装置制御部４３０は、情報管理装置４に搭載されたコンピュータに、そのハードウェアを用いて、情報管理装置４の処理を実行させるコンピュータプログラムにより実現することもできる。   The management device control unit 430 controls the entire information management device 4 and also controls each unit shown in FIG. The management device control unit 430 can also be realized by a computer program that causes a computer installed in the information management device 4 to execute the processing of the information management device 4 using its hardware.

管理装置制御部４３０は、設定項目に対応する入力エラー回数が、所定の閾値（例えば、３回）を超える場合、設定マニュアル情報に注意喚起情報を追加する。具体的には、管理装置制御部４３０は、一の設定項目に対応する入力エラー回数が、所定の閾値を超える場合、当該設定項目に注意喚起情報を対応させて、設定マニュアル情報を更新する。設定マニュアル情報を更新する処理の詳細については後述する。   When the number of input errors corresponding to the setting item exceeds a predetermined threshold (for example, 3 times), the management device control unit 430 adds alert information to the setting manual information. Specifically, when the number of input errors corresponding to one setting item exceeds a predetermined threshold, the management device control unit 430 updates the setting manual information by associating the alert information with the setting item. Details of the process of updating the setting manual information will be described later.

図８は、情報処理装置５の内部構成の一例を示すブロック図である。情報処理装置５は、処理装置表示部５１０と、処理装置通信部５２０と、入力画像取得部５３０と、処理装置制御部５４０と、を含んで構成される。処理装置制御部５４０は、設定マニュアル情報取得部５４１と、設定マニュアル情報制御部５４２と、入力画像処理部５４３と、判断部５４４と、入力エラー制御部５４５と、を含んで構成される。図８は、簡単のため、本実施形態に係る情報処理装置５に関係するモジュールを主に記載する。   FIG. 8 is a block diagram illustrating an example of the internal configuration of the information processing apparatus 5. The information processing device 5 includes a processing device display unit 510, a processing device communication unit 520, an input image acquisition unit 530, and a processing device control unit 540. The processing device control unit 540 includes a setting manual information acquisition unit 541, a setting manual information control unit 542, an input image processing unit 543, a determination unit 544, and an input error control unit 545. For simplicity, FIG. 8 mainly describes modules related to the information processing apparatus 5 according to the present embodiment.

処理装置表示部５１０は、設定マニュアル画像を表示する。例えば、処理装置表示部５１０は、液晶パネル、有機ＥＬパネル等であっても良い。具体的には、処理装置表示部５１０は、設定マニュアル情報に基づいて生成された、設定画面の画像を、設定マニュアル画像として表示する。そして、設定マニュアル画像内に配置された設定項目には、設定教師情報として示す文字、数値、記号、図形等が入力される。   The processing device display unit 510 displays a setting manual image. For example, the processing device display unit 510 may be a liquid crystal panel, an organic EL panel, or the like. Specifically, processing device display unit 510 displays an image of a setting screen generated based on setting manual information as a setting manual image. Characters, numerical values, symbols, graphics, and the like indicated as setting teacher information are input to the setting items arranged in the setting manual image.

処理装置通信部５２０は、情報管理装置４との通信を制御する。   The processing device communication unit 520 controls communication with the information management device 4.

入力画像取得部５３０は、入力画像を取得する。具体的には、入力画像取得部５３０は、ビデオキャプチャ装置３から、キャプチャ画像を入力画像として取得する。   The input image acquisition unit 530 acquires an input image. Specifically, the input image acquisition unit 530 acquires a capture image as an input image from the video capture device 3.

処理装置制御部５４０は、情報処理装置５の全体を制御すると共に、図８に示す各部を制御する。処理装置制御部５４０は、情報処理装置５に搭載されたコンピュータに、そのハードウェアを用いて、情報処理装置５の処理を実行させるコンピュータプログラムにより実現することもできる。   The processing device control unit 540 controls the entire information processing device 5 and controls each unit shown in FIG. The processing device control unit 540 can also be realized by a computer program that causes a computer mounted on the information processing device 5 to execute the processing of the information processing device 5 using its hardware.

設定マニュアル情報取得部５４１は、情報管理装置４から設定マニュアル情報を取得する。具体的には、設定マニュアル情報取得部５４１は、処理装置通信部５２０を介して、情報管理装置４に設定マニュアル情報を要求する。そして、設定マニュアル情報取得部５４１は、処理装置通信部５２０を介して、情報管理装置４から設定マニュアル情報を取得する。   The setting manual information acquisition unit 541 acquires setting manual information from the information management device 4. Specifically, the setting manual information acquisition unit 541 requests setting manual information from the information management device 4 via the processing device communication unit 520. Then, the setting manual information acquisition unit 541 acquires setting manual information from the information management device 4 via the processing device communication unit 520.

設定マニュアル情報制御部５４２は、設定マニュアル情報に基づいて、設定マニュアル画像を生成する。   The setting manual information control unit 542 generates a setting manual image based on the setting manual information.

入力画像処理部５４３は、入力画像からユーザ入力情報を抽出する。具体的には、入力画像処理部５４３は、入力画像を画像処理し、ユーザ入力情報を抽出する。ここで、入力画像処理部５４３は、設定項目毎に、文字、数値、記号、図形の少なくともいずれかを、ユーザ入力情報として抽出する。   The input image processing unit 543 extracts user input information from the input image. Specifically, the input image processing unit 543 performs image processing on the input image and extracts user input information. Here, the input image processing unit 543 extracts at least one of characters, numerical values, symbols, and figures as user input information for each setting item.

例えば、入力画像処理部５４３は、入力画像から、文字領域、画像領域等の領域を抽出してもよい。そして、入力画像処理部５４３は、抽出した各領域を、各設定項目の領域として決定しても良い。文字領域、画像領域等を抽出する方法は各種あるが、その詳細は問わない。   For example, the input image processing unit 543 may extract areas such as a character area and an image area from the input image. Then, the input image processing unit 543 may determine each extracted region as a region for each setting item. There are various methods for extracting a character area, an image area, etc., but the details are not limited.

そして、入力画像処理部５４３は、入力画像において、各設定項目の領域に含まれる文字等を識別し、ユーザ入力情報として抽出する。例えば、入力画像処理部５４３は、文字を識別する場合、予め、文字の形状を画像として登録した辞書を、情報処理装置５の記憶部（図示せず）が記憶しておいても良い。その場合、入力画像処理部５４３は、パターンマッチング等を用いて、辞書に登録された文字の形状と、入力画像内の画像と、を照合する。そして、入力画像処理部５４３は、照合結果に基づいて、文字を識別しても良い。なお、文字を識別する方法は各種あるが、その詳細は問わない。 Then, the input image processing unit 543 identifies characters and the like included in each setting item area in the input image and extracts them as user input information. For example, when identifying a character, the input image processing unit 543 may store a dictionary in which the shape of the character is registered as an image in advance in a storage unit (not shown) of the information processing device 5. In that case, the input image processing unit 543 collates the shape of the character registered in the dictionary with the image in the input image using pattern matching or the like. And the input image process part 543 may identify a character based on a collation result. There are various methods for identifying characters, but the details are not limited.

判断部５４４は、設定項目毎に、設定教師情報と、ユーザ入力情報と、が一致するか否かを判断する。判断部５４４は、設定項目毎に、設定教師情報と、ユーザ入力情報と、が一致する場合、ユーザ入力情報を正しいと判断する。一方、判断部５４４は、設定項目毎に、設定教師情報と、ユーザ入力情報と、が一致しない場合、ユーザ入力情報を誤っていると判断する。   The determination unit 544 determines whether the setting teacher information matches the user input information for each setting item. The determination unit 544 determines that the user input information is correct when the setting teacher information matches the user input information for each setting item. On the other hand, the determination unit 544 determines that the user input information is incorrect when the setting teacher information does not match the user input information for each setting item.

入力エラー制御部５４５は、設定教師情報に基づいて、ユーザ入力情報が誤っていると判断された場合、ユーザ入力情報が誤っていることを報知する。例えば、入力エラー制御部５４５は、設定マニュアル画像にエラーメッセージ等を追加して、ユーザ入力情報が誤っていることを報知しても良い。また、情報処理装置５が、スピーカ（図示せず）、ＬＥＤ（Light Emitting Diode、図示せず）等を備える場合、入力エラー制御部５４５は、音、光等を用いて、ユーザ入力情報が誤っていることを報知しても良い。なお、報知方法は各種あるが、その詳細は問わない。   When it is determined that the user input information is incorrect based on the setting teacher information, the input error control unit 545 notifies that the user input information is incorrect. For example, the input error control unit 545 may notify that the user input information is incorrect by adding an error message or the like to the setting manual image. In addition, when the information processing apparatus 5 includes a speaker (not shown), an LED (Light Emitting Diode, not shown), etc., the input error control unit 545 uses sound, light, etc., and the user input information is incorrect. You may notify that it is. There are various notification methods, but the details are not limited.

また、入力エラー制御部５４５は、設定教師情報と、ユーザ入力情報と、が一致しない場合、当該設定教師情報に対応する設定項目の入力エラー回数を増加させる。さらに、入力エラー制御部５４５は、注意喚起情報が設定項目に対応付けられているとともに、当該設定項目を含む設定マニュアル画像を、処理装置表示部５１０が表示する場合、注意喚起情報に基づいて、注意喚起を行う。   In addition, when the setting teacher information and the user input information do not match, the input error control unit 545 increases the number of input errors of the setting item corresponding to the setting teacher information. Furthermore, when the processing device display unit 510 displays the setting manual image including the setting item while the alerting information is associated with the setting item, the input error control unit 545 is based on the alerting information. Call attention.

次に、情報処理装置５の動作について説明する。   Next, the operation of the information processing apparatus 5 will be described.

図９は、設定マニュアル情報、及びキャプチャ画像を取得する処理の一例を示すフローチャートである。   FIG. 9 is a flowchart illustrating an example of processing for acquiring setting manual information and a captured image.

ステップＡ１において、設定マニュアル情報取得部５４１は、処理装置通信部５２０を介して、情報管理装置４に設定マニュアル情報を要求する。ここで、設定マニュアル情報取得部５４１は、情報処理装置５の操作キー等の操作部（図示せず）に対する、ユーザの操作に基づいて、設定マニュアル情報の要求を開始しても良い。そして、管理装置通信部４１０は、設定マニュアル情報の要求を受信する（ステップＡ２）。   In step A <b> 1, the setting manual information acquisition unit 541 requests setting manual information from the information management device 4 via the processing device communication unit 520. Here, the setting manual information acquisition unit 541 may start a request for setting manual information based on a user operation on an operation unit (not shown) such as an operation key of the information processing apparatus 5. Then, the management device communication unit 410 receives a request for setting manual information (step A2).

そして、管理装置制御部４３０は、設定マニュアル情報データベース４２１を検索し、要求された設定マニュアル情報を取得する。そして、ステップＡ３において、管理装置通信部４１０は、情報処理装置５に要求された設定マニュアル情報を送信する。そして、設定マニュアル情報取得部５４１は、処理装置通信部５２０を介して、設定マニュアル情報を取得する（ステップＡ４）。   Then, the management apparatus control unit 430 searches the setting manual information database 421 and acquires the requested setting manual information. In step A <b> 3, the management device communication unit 410 transmits the requested setting manual information to the information processing device 5. Then, the setting manual information acquisition unit 541 acquires setting manual information via the processing device communication unit 520 (step A4).

ステップＡ５において、設定マニュアル情報制御部５４２は、設定マニュアル情報に基づいて、設定マニュアル画像を生成する。そして、設定マニュアル情報制御部５４２は、処理装置表示部５１０に、設定マニュアル画像を表示させる（ステップＡ６）。そして、ステップＡ７に遷移する。   In step A5, the setting manual information control unit 542 generates a setting manual image based on the setting manual information. Then, the setting manual information control unit 542 displays the setting manual image on the processing device display unit 510 (step A6). And it changes to step A7.

また、ステップＢ１において、入力対象装置制御部２３０は、ユーザの操作に基づいて、ユーザ入力情報を設定する。ここで、ステップＢ１の処理は、ステップＡ１〜Ａ６の処理とは独立して実行される。つまり、ステップＢ１の処理は、ステップＡ１の処理以前に実行されても良い。または、ステップＢ１の処理は、ステップＡ１〜Ａ６の処理と並行して実行されても良い。あるいは、ステップＢ１の処理は、ステップＡ６の処理以降に実行されても良い。   In step B1, the input target device control unit 230 sets user input information based on a user operation. Here, the process of step B1 is executed independently of the processes of steps A1 to A6. That is, the process of step B1 may be executed before the process of step A1. Or the process of step B1 may be performed in parallel with the process of steps A1-A6. Or the process of step B1 may be performed after the process of step A6.

また、ステップＣ１において、キャプチャ画像の生成指示を受け付けたか否かを、キャプチャ画像生成部３２０は判断する。例えば、キャプチャ画像の操作部（図示せず）がユーザの操作を受け付けてもよい。その場合、キャプチャ画像の生成指示を受け付けたか否かを、ユーザの操作に基づいて、キャプチャ画像生成部３２０は判断しても良い。または、入力操作部２１０が所定のボタン等が押下される操作等を受け付けた場合、入力対象装置制御部２３０は、ビデオキャプチャ装置３にキャプチャ画像の生成を指示しても良い。   In step C1, the capture image generation unit 320 determines whether a capture image generation instruction has been accepted. For example, an operation unit (not shown) for a captured image may accept a user operation. In that case, the capture image generation unit 320 may determine whether or not a capture image generation instruction has been received based on a user operation. Alternatively, when the input operation unit 210 receives an operation of pressing a predetermined button or the like, the input target device control unit 230 may instruct the video capture device 3 to generate a captured image.

キャプチャ画像生成部３２０が、キャプチャ画像の生成指示を受け付けた場合（ステップＣ１のＹｅｓ分岐）には、ステップＣ２に遷移する。一方、キャプチャ画像生成部３２０が、キャプチャ画像の生成指示を受け付けていない場合（ステップＣ１のＮｏ分岐）には、キャプチャ画像生成部３２０は、キャプチャ画像の生成指示を受け付けたか否かの判断（ステップＣ１）を繰り返す。   When the capture image generation unit 320 receives a capture image generation instruction (Yes in step C1), the process proceeds to step C2. On the other hand, when the capture image generation unit 320 has not received a capture image generation instruction (No branch in step C1), the capture image generation unit 320 determines whether a capture image generation instruction has been received (step S1). Repeat C1).

ステップＣ２において、画像信号入力部３１０は、入力対象装置２から画像信号を取得する。そして、ステップＣ３において、キャプチャ画像生成部３２０は、キャプチャ画像を生成する。   In step C <b> 2, the image signal input unit 310 acquires an image signal from the input target device 2. In step C3, the capture image generation unit 320 generates a capture image.

ステップＣ４において、キャプチャ画像出力部３３０は、キャプチャ画像を出力する。   In step C4, the captured image output unit 330 outputs a captured image.

一方、ステップＡ７において、入力画像取得部５３０がキャプチャ画像を取得したか否かを、処理装置制御部５４０は判断する。入力画像取得部５３０がキャプチャ画像を取得した場合（ステップＡ７のＹｅｓ分岐）には、図１０に示すステップＡ１０１に遷移する。一方、入力画像取得部５３０がキャプチャ画像を取得していない場合（ステップＡ７のＮｏ分岐）には、処理装置制御部５４０は、キャプチャ画像を取得したか否かの判断（ステップＡ７）を繰り返す。   On the other hand, in step A7, the processing device control unit 540 determines whether or not the input image acquisition unit 530 has acquired a captured image. When the input image acquisition unit 530 acquires a capture image (Yes branch in step A7), the process proceeds to step A101 illustrated in FIG. On the other hand, if the input image acquisition unit 530 has not acquired a capture image (No branch in step A7), the processing device control unit 540 repeats the determination of whether or not a capture image has been acquired (step A7).

次に、ユーザ入力情報の正誤を判断する処理について説明する。   Next, a process for determining whether the user input information is correct or incorrect will be described.

図１０は、ユーザ入力情報の正誤を判断する処理の一例を示すフローチャートである。   FIG. 10 is a flowchart illustrating an example of processing for determining whether user input information is correct or incorrect.

ここで、入力画像取得部５３０がキャプチャ画像を取得した（ステップＡ７のＹｅｓ分岐）とする。その場合、ステップＡ１０１において、入力画像処理部５４３は、キャプチャ画像から設定項目の領域を抽出する。   Here, it is assumed that the input image acquisition unit 530 has acquired a capture image (Yes branch of step A7). In this case, in step A101, the input image processing unit 543 extracts a setting item area from the captured image.

ステップＡ１０２において、入力画像処理部５４３は、設定項目の領域内の文字等をユーザ入力情報として抽出する。   In step A102, the input image processing unit 543 extracts characters and the like in the setting item area as user input information.

ステップＡ１０３において、設定教師情報と、ユーザ入力情報と、が一致するか否かを、判断部５４４は判断する。設定教師情報と、ユーザ入力情報と、が一致する場合（ステップＡ１０３のＹｅｓ分岐）には、ステップＡ１０４に遷移する。一方、設定教師情報と、ユーザ入力情報と、が一致しない場合（ステップＡ１０３のＮｏ分岐）には、図１１に示すステップＡ２０１に遷移する。   In step A103, the determination unit 544 determines whether or not the setting teacher information matches the user input information. When the setting teacher information matches the user input information (Yes branch of step A103), the process proceeds to step A104. On the other hand, when the setting teacher information and the user input information do not match (No branch of step A103), the process proceeds to step A201 shown in FIG.

ステップＡ１０４において、全ての設定項目について判断したか否かを、判断部５４４は判断する。全ての設定項目について判断した場合（ステップＡ１０４のＹｅｓ分岐）には、図１４に示すステップＡ３０１に遷移する。一方、全ての設定項目について判断していない場合（ステップＡ１０４のＮｏ分岐）には、判断対象の設定項目を変更する（ステップＡ１０５）。そして、ステップＡ１０２に戻り、処理を継続する。   In step A104, the determination unit 544 determines whether all setting items have been determined. When all the setting items are determined (Yes branch of step A104), the process proceeds to step A301 shown in FIG. On the other hand, if all the setting items have not been determined (No branch at step A104), the setting item to be determined is changed (step A105). And it returns to step A102 and continues a process.

次に、ユーザ入力情報が誤っている場合の処理について説明する。   Next, processing when user input information is incorrect will be described.

図１１は、ユーザ入力情報が誤っている場合の処理の一例を示すフローチャートである。   FIG. 11 is a flowchart illustrating an example of processing when user input information is incorrect.

ここで、設定教師情報と、ユーザ入力情報と、が一致しない場合（図１０に示すステップＡ１０３のＮｏ分岐）とする。その場合、ステップＡ２０１において、入力エラー制御部５４５は、設定項目識別情報毎に入力エラー回数を計数する。そして、入力エラー制御部５４５は、処理装置通信部５２０を介して、情報管理装置４に設定項目識別情報と、入力エラー回数と、を対応付けて送信する（ステップＡ２０２）。   Here, it is assumed that the setting teacher information and the user input information do not match (No branch in step A103 shown in FIG. 10). In this case, in step A201, the input error control unit 545 counts the number of input errors for each setting item identification information. Then, the input error control unit 545 transmits the setting item identification information and the number of input errors in association with each other to the information management device 4 via the processing device communication unit 520 (step A202).

そして、入力エラー制御部５４５は、ユーザ入力情報が誤っていることを報知する（ステップＡ２０３）。そして、入力対象装置２は、ユーザ入力情報を設定可能な状態（図９に示すステップＢ１）に遷移する。また、情報処理装置５は、キャプチャ画像の取得待ちの状態（図９に示すステップＡ７）に遷移する。そして、情報処理装置５は、新たなキャプチャ画像を取得するまで、ユーザ入力情報の正誤を判断することを中断する。そのため、判断部５４４は、ユーザ入力情報を正しいと判断するまで、次の設定項目については、ユーザ入力情報の正誤を判断しない。   Then, the input error control unit 545 notifies that the user input information is incorrect (step A203). Then, the input target device 2 transitions to a state in which user input information can be set (step B1 shown in FIG. 9). Further, the information processing apparatus 5 transitions to a capture image acquisition wait state (step A7 shown in FIG. 9). Then, the information processing apparatus 5 stops judging whether the user input information is correct or not until a new captured image is acquired. Therefore, the determination unit 544 does not determine whether the user input information is correct for the next setting item until the user input information is determined to be correct.

図１２は、ユーザ入力情報の誤りを報知する設定マニュアル画像の一例を示す図である。具体的には、図１２（ａ）は、キャプチャ画像４１である。また、図１２（ｂ）は、図１２（ａ）に示すキャプチャ画像４１に対応する、設定マニュアル画像４２である。ここで、図１２（ａ）に示すキャプチャ画像４１において、“設定項目Ｂ”は“ＡＡＡＡＡ”である。一方、図１２（ｂ）に示す設定マニュアル画像４２において、“設定項目Ｂ”は“Ｐａｒａｍ１”である。そのため、判断部５４４は、“設定項目Ｂ”のユーザ入力情報を誤っていると判断するとする。その場合、図１２に示すように、入力エラー制御部５４５は、“設定項目の確認をしてください”等のメッセージを設定マニュアル画像４２に追加しても良い。なお、図１２の場合、“設定項目Ｂ”について、ユーザ入力情報が正しい、と判断部５４４が判断してから、判断部５４４は、次の設定項目（例えば、図１２（ａ）、（ｂ）に示す“設定項目Ｃ”）の正誤を判断しても良い。   FIG. 12 is a diagram illustrating an example of a setting manual image for reporting an error in user input information. Specifically, FIG. 12A shows a captured image 41. FIG. 12B is a setting manual image 42 corresponding to the capture image 41 shown in FIG. Here, in the captured image 41 shown in FIG. 12A, the “setting item B” is “AAAAA”. On the other hand, in the setting manual image 42 shown in FIG. 12B, “setting item B” is “Param1”. Therefore, the determination unit 544 determines that the user input information of “setting item B” is incorrect. In this case, as shown in FIG. 12, the input error control unit 545 may add a message such as “Please check the setting item” to the setting manual image 42. In the case of FIG. 12, after the determination unit 544 determines that the user input information is correct for “setting item B”, the determination unit 544 determines the next setting item (for example, FIGS. 12A and 12B). It is also possible to determine whether the “setting item C”) shown in FIG.

また、入力エラー制御部５４５は、情報管理装置４に設定項目識別情報と、入力エラー回数と、を対応付けて送信した場合（ステップＡ２０２）には、管理装置通信部４１０は、設定項目識別情報と、入力エラー回数と、を対応付けた情報を受信する（ステップＡ２１１）。そして、管理装置制御部４３０は、エラー管理情報を更新する。   When the input error control unit 545 transmits the setting item identification information and the number of input errors in association with each other to the information management device 4 (step A202), the management device communication unit 410 sets the setting item identification information. And the input error count are received (step A211). Then, the management device control unit 430 updates the error management information.

図１３は、エラー管理情報の一例を示す図である。具体的には、図１３は、設定マニュアル毎に、設定項目識別情報と、入力エラー回数と、の対応関係を示す。例えば、“ＡＡＡ設定マニュアル”の設定マニュアル情報において、設定項目識別情報が２００１の設定項目に関する入力エラー回数は、０回である。一方、“ＡＡＡ設定マニュアル”の設定マニュアル情報において、設定項目識別情報が２００３である、設定項目に関する入力エラー回数は、３回である。   FIG. 13 is a diagram illustrating an example of error management information. Specifically, FIG. 13 shows the correspondence between the setting item identification information and the number of input errors for each setting manual. For example, in the setting manual information “AAA setting manual”, the number of input errors relating to the setting item whose setting item identification information is 2001 is 0. On the other hand, in the setting manual information of “AAA setting manual”, the number of input errors related to the setting item whose setting item identification information is 2003 is three.

ここで、管理装置通信部４１０が“設定項目識別情報：２００３”と、“エラー回数：１回”と、を対応付けた情報を受信したとする。その場合、管理装置制御部４３０は、“設定項目識別情報：２００３”に対応する入力エラー回数を、４回に更新する。なお、上述の通り、情報管理装置４は、２以上の情報処理装置５と接続しても良い。その場合、管理装置制御部４３０は、各設定項目に関して、２以上の情報処理装置５から受信する、入力エラーの合計値を、エラー管理情報として管理できる。   Here, it is assumed that the management apparatus communication unit 410 receives information in which “setting item identification information: 2003” is associated with “number of errors: once”. In this case, the management apparatus control unit 430 updates the number of input errors corresponding to “setting item identification information: 2003” to four times. As described above, the information management device 4 may be connected to two or more information processing devices 5. In this case, the management device control unit 430 can manage the total value of input errors received from two or more information processing devices 5 as error management information for each setting item.

次に、設定マニュアル情報を更新する処理について説明する。   Next, processing for updating the setting manual information will be described.

図１４は、設定マニュアル情報を更新する処理の一例を示すフローチャートである。   FIG. 14 is a flowchart illustrating an example of processing for updating the setting manual information.

ここで、判断部５４４が、判断対象の設定マニュアル情報において、全ての設定項目識別情報について判断した（図１０に示すステップＡ１０４のＹｅｓ分岐）とする。その場合、処理装置制御部５４０は、処理装置通信部５２０を介して、判断に用いた設定マニュアルを識別するための情報を情報管理装置４に通知する（ステップＡ３０１）。なお、以下の説明では、設定マニュアルを識別するための情報を、設定マニュアル識別情報と呼ぶ。そして、管理装置通信部４１０は、判断に用いた設定マニュアル識別情報の通知を受信する（ステップＡ３０２）。   Here, it is assumed that the determination unit 544 determines all the setting item identification information in the setting manual information to be determined (Yes branch of step A104 shown in FIG. 10). In that case, the processing device control unit 540 notifies the information management device 4 of information for identifying the setting manual used for the determination via the processing device communication unit 520 (step A301). In the following description, information for identifying a setting manual is referred to as setting manual identification information. Then, the management apparatus communication unit 410 receives the notification of the setting manual identification information used for the determination (step A302).

ステップＡ３０３において、管理装置制御部４３０は、受信した設定マニュアル識別情報に対応するエラー管理情報を抽出する。具体的には、管理装置制御部４３０は、受信した設定マニュアル識別情報をキーとして、エラー管理情報データベース４２２を検索する。そして、管理装置制御部４３０は、検索キーである設定マニュアル識別情報に対応する、エラー管理情報を抽出する。   In step A303, the management apparatus control unit 430 extracts error management information corresponding to the received setting manual identification information. Specifically, the management device control unit 430 searches the error management information database 422 using the received setting manual identification information as a key. Then, the management device control unit 430 extracts error management information corresponding to the setting manual identification information that is a search key.

ステップＡ３０４において、管理装置制御部４３０は、エラー管理情報から、一の設定項目識別情報を選択する。ステップＡ３０５において、選択された設定項目識別情報に対応する入力エラー回数が、所定の閾値（例えば、３回）を超えるか否かを、管理装置制御部４３０は判断する。入力エラー回数が所定の閾値を超える場合（ステップＡ３０５のＹｅｓ分岐）には、ステップＡ３０６に遷移する。一方、入力エラー回数が所定の閾値を超えない場合（ステップＡ３０５のＮｏ分岐）には、ステップＡ３０７に遷移する。   In step A304, the management apparatus control unit 430 selects one setting item identification information from the error management information. In step A305, the management apparatus control unit 430 determines whether or not the number of input errors corresponding to the selected setting item identification information exceeds a predetermined threshold (for example, 3 times). When the number of input errors exceeds a predetermined threshold (Yes branch of step A305), the process proceeds to step A306. On the other hand, when the number of input errors does not exceed the predetermined threshold (No branch in step A305), the process proceeds to step A307.

ステップＡ３０６において、管理装置制御部４３０は、注意喚起するように、設定マニュアル情報を更新する。   In step A306, the management device control unit 430 updates the setting manual information so as to call attention.

図１５は、注意喚起のメッセージが表示された設定マニュアル画像の一例を示す図である。具体的には、図１５に示す設定マニュアル画像５２は、“誤入力が多発しています。注意して入力してください。”とのメッセージを含む。   FIG. 15 is a diagram illustrating an example of a setting manual image on which a warning message is displayed. Specifically, the setting manual image 52 shown in FIG. 15 includes a message “There are many erroneous inputs. Please input carefully.”.

そして、ステップＡ３０７において、抽出したエラー管理情報に含まれる、全ての設定項目識別情報について、注意喚起の要否を判断したか否かを、管理装置制御部４３０は判断する。全ての設定項目識別情報について、注意喚起の要否を判断した場合（ステップＡ３０７のＹｅｓ分岐）には、処理を終了する。一方、全ての設定項目識別情報について、注意喚起の要否を判断していない場合（ステップＡ３０７のＮｏ分岐）には、管理装置制御部４３０は、判断対象の設定項目識別情報を変更する。そして、ステップＡ３０５に戻り、処理を継続する。   In step A307, the management device control unit 430 determines whether or not it is necessary to call attention for all the setting item identification information included in the extracted error management information. When it is determined whether or not it is necessary to call attention for all the setting item identification information (Yes branch in step A307), the process ends. On the other hand, when the necessity of alerting is not determined for all the setting item identification information (No branch in step A307), the management device control unit 430 changes the setting item identification information to be determined. Then, the process returns to step A305 to continue the processing.

なお、管理装置制御部４３０は、所定の時間毎に、エラー管理情報データベース４２２に記憶される設定項目と、入力エラー回数との対応関係を消去しても良い。または、管理装置制御部４３０は、所定の時間毎に、エラー管理情報データベース４２２に記憶される入力回数を減少させても良い。   Note that the management device control unit 430 may delete the correspondence between the setting items stored in the error management information database 422 and the number of input errors every predetermined time. Or the management apparatus control part 430 may reduce the frequency | count of input memorize | stored in the error management information database 422 for every predetermined time.

以上のように、本実施形態に係る情報処理システム１は、設定項目の入力の正誤を判断する。さらに、本実施形態に係る情報処理システム１においては、情報管理装置４が入力エラーに関する情報を一括管理する。そして、本実施形態に係る情報処理システム１においては、２以上の情報処理装置５が、入力エラーに関する情報を共有できる。その結果、本実施形態に係る情報処理システム１は、２以上のユーザが入力エラーに関する情報を共有することに貢献する。   As described above, the information processing system 1 according to the present embodiment determines whether a setting item is input correctly. Furthermore, in the information processing system 1 according to the present embodiment, the information management device 4 collectively manages information related to input errors. In the information processing system 1 according to the present embodiment, two or more information processing apparatuses 5 can share information regarding input errors. As a result, the information processing system 1 according to the present embodiment contributes to two or more users sharing information regarding input errors.

また、本実施形態に係る情報処理システム１は、入力エラー回数が所定の閾値を超えた場合、設定マニュアル情報に注意喚起情報を追加して、設定マニュアル情報を更新する。そして、本実施形態に係る情報処理システム１においては、設定マニュアル情報に注意喚起情報が追加された場合、対応する設定項目を表示する際に、注意喚起のメッセージ等を表示する。そのため、情報処理システム１は、入力エラーを低減するように、設定マニュアルを更新することに貢献する。   In addition, when the number of input errors exceeds a predetermined threshold, the information processing system 1 according to the present embodiment adds alert information to the setting manual information and updates the setting manual information. In the information processing system 1 according to the present embodiment, when alert information is added to the setting manual information, an alert message or the like is displayed when the corresponding setting item is displayed. Therefore, the information processing system 1 contributes to updating the setting manual so as to reduce input errors.

また、本実施形態に係る情報処理システム１においては、入力対象装置２は、ネットワークに接続していなくても良い。そのため、入力対象装置２がネットワークに接続できない状態であっても、本実施形態に係る情報処理システム１は、上述の効果を奏することができる。   Further, in the information processing system 1 according to the present embodiment, the input target device 2 may not be connected to the network. Therefore, even in a state where the input target device 2 cannot be connected to the network, the information processing system 1 according to the present embodiment can achieve the above-described effects.

例えば、アプリケーション等の設定マニュアルとして、設定マニュアル情報を使用する場合を考える。その場合、情報管理装置４が設定マニュアル情報を更新した場合、ユーザは、更新直後から、更新された設定マニュアルを使用できる。   For example, consider a case where setting manual information is used as a setting manual for an application or the like. In this case, when the information management apparatus 4 updates the setting manual information, the user can use the updated setting manual immediately after the update.

また、本実施形態に係る情報処理システム１においては、利用状況に即して、設定マニュアル情報に注意喚起情報を追加する。そのため、本実施形態に係る情報処理システム１は、利用状況に即して、設定マニュアル情報を更新する。例えば、２以上のユーザが並行して、２以上のコンピュータにアプリケーション等の設定を行う場合を考える。その場合、本実施形態に係る情報処理システム１は、一のユーザが所定の回数を超えて入力エラーをした箇所を、他のユーザに対して注意喚起できるように、ユーザの作業中であっても、設定マニュアルを更新する。   Further, in the information processing system 1 according to the present embodiment, alert information is added to the setting manual information in accordance with the usage situation. Therefore, the information processing system 1 according to the present embodiment updates the setting manual information in accordance with the usage situation. For example, consider a case where two or more users perform application settings on two or more computers in parallel. In that case, the information processing system 1 according to the present embodiment is in the middle of a user's work so that one user can alert another user of an input error exceeding a predetermined number of times. Also update the configuration manual.

［第２の実施形態］
第２の実施形態について、図面を用いてより詳細に説明する。 [Second Embodiment]
The second embodiment will be described in more detail with reference to the drawings.

本実施形態は、設定マニュアル情報が、設定項目の位置に関する情報を含む形態である。なお、本実施形態における説明では、第１の実施形態と重複する部分の説明は省略する。さらに、本実施形態における説明では、第１の実施形態と同一の構成要素には、同一の符号を付し、その説明を省略する。   In the present embodiment, the setting manual information includes information regarding the position of the setting item. In the description of the present embodiment, the description of the same parts as those in the first embodiment is omitted. Further, in the description of the present embodiment, the same components as those in the first embodiment are denoted by the same reference numerals, and the description thereof is omitted.

本実施形態に係る情報処理システム１の全体構成は、第１の実施形態と同様であるため、詳細な説明は省略する。また、本実施形態に係る入力対象装置２、ビデオキャプチャ装置３、情報管理装置４、情報処理装置５の内部構成も、第１の実施形態と同様であるため、詳細な説明は省略する。   Since the overall configuration of the information processing system 1 according to the present embodiment is the same as that of the first embodiment, detailed description thereof is omitted. The internal configurations of the input target device 2, the video capture device 3, the information management device 4, and the information processing device 5 according to the present embodiment are the same as those in the first embodiment, and thus detailed description thereof is omitted.

本実施形態に係る設定マニュアル情報は、１又は２以上の設定項目に対応する設定項目位置情報を含む。ここで、設定項目位置情報とは、入力画像内での設定項目の位置（座標値）を示す情報を意味する。   The setting manual information according to the present embodiment includes setting item position information corresponding to one or more setting items. Here, the setting item position information means information indicating the position (coordinate value) of the setting item in the input image.

本実施形態に係る入力画像処理部５４３は、設定項目位置情報に基づいて、入力画像において、文字、数値、記号、図形等を抽出する領域を決定する。そして、入力画像処理部５４３は、決定された領域から抽出された文字、数値、記号、図形等を、ユーザ入力情報として決定する。   The input image processing unit 543 according to the present embodiment determines a region from which characters, numerical values, symbols, graphics, and the like are extracted from the input image based on the setting item position information. Then, the input image processing unit 543 determines characters, numerical values, symbols, graphics, and the like extracted from the determined area as user input information.

そのため、本実施形態に係る情報処理装置５は、ユーザの入力とは無関係な文字等を、入力画像から抽出することを防止できる。また、本実施形態に係る情報処理装置５は、文字、数値、記号、図形等を抽出するためのコスト（時間、計算量）を低減できる。なぜなら、本実施形態に係る情報処理装置５においては、ユーザの入力とは無関係な文字等に関して、正誤判断を行う必要がないからである。従って、本実施形態に係る情報処理システム１は、第１の実施形態に係る情報処理システム１と同様の効果を奏し、さらに、より一層、適切に入力エラーの有無を判断することに寄与する。   Therefore, the information processing apparatus 5 according to the present embodiment can prevent characters or the like unrelated to the user input from being extracted from the input image. Further, the information processing apparatus 5 according to the present embodiment can reduce the cost (time, amount of calculation) for extracting characters, numerical values, symbols, graphics, and the like. This is because in the information processing apparatus 5 according to the present embodiment, it is not necessary to make a correct / incorrect determination regarding characters or the like that are unrelated to user input. Therefore, the information processing system 1 according to the present embodiment has the same effect as the information processing system 1 according to the first embodiment, and further contributes to more appropriately determining the presence or absence of an input error.

なお、上記した実施形態においては、情報管理装置が設定マニュアル情報データベース、及びエラー管理情報データベースを備える形態について説明した。しかし、情報管理装置、設定マニュアル情報データベース、エラー管理情報データベースが、夫々、異なる装置であっても良い。   In the above-described embodiment, the configuration in which the information management apparatus includes the setting manual information database and the error management information database has been described. However, the information management device, the setting manual information database, and the error management information database may be different devices.

また、上記した実施形態においては、設定マニュアル情報データベース、エラー管理情報データベースが夫々、異なるデータベースであるとして説明した。しかし、設定マニュアル情報データベース、エラー管理情報データベースを統合したデータベースを用いても良い。   In the above-described embodiment, the setting manual information database and the error management information database are described as different databases. However, a database integrating a setting manual information database and an error management information database may be used.

上述の実施形態の一部又は全部は、以下の付記のようにも記載され得るが、以下には限られない。   A part or all of the above-described embodiment can be described as in the following supplementary notes, but is not limited thereto.

（付記１）上記第１の視点に係る情報処理システムの通りである。   (Additional remark 1) It is as the information processing system which concerns on a said 1st viewpoint.

（付記２）入力画像信号を生成する入力対象装置と、ビデオキャプチャ装置と、をさらに含み、前記ビデオキャプチャ装置は、前記入力画像信号に基づいて、キャプチャ画像を生成するキャプチャ画像生成部を備え、前記入力画像取得部は、前記キャプチャ画像を、前記入力画像として取得する付記１に記載の情報処理システム。   (Additional remark 2) It further includes the input object apparatus which produces | generates an input image signal, and a video capture apparatus, The said video capture apparatus is provided with the capture image generation part which produces | generates a capture image based on the said input image signal, The information processing system according to attachment 1, wherein the input image acquisition unit acquires the capture image as the input image.

（付記３）前記管理装置制御部は、一の前記設定項目に対応する前記入力エラー回数が、前記所定の閾値を超える場合、当該設定項目に前記注意喚起情報を対応付けて、前記設定マニュアル情報を更新する付記１又は２に記載の情報処理システム。   (Supplementary Note 3) When the number of input errors corresponding to one setting item exceeds the predetermined threshold, the management device control unit associates the alert information with the setting item, and sets the setting manual information. The information processing system according to appendix 1 or 2 for updating

（付記４）前記入力画像処理部は、前記入力画像を画像処理し、前記入力画像から前記ユーザ入力情報を抽出する付記１乃至３のいずれか一に記載の情報処理システム。   (Supplementary note 4) The information processing system according to any one of supplementary notes 1 to 3, wherein the input image processing unit performs image processing on the input image and extracts the user input information from the input image.

（付記５）前記判断部は、前記設定教師情報と、前記ユーザ入力情報と、が一致する場合、前記ユーザ入力情報が正しいと判断し、前記設定教師情報と、前記ユーザ入力情報と、が一致しない場合、前記ユーザ入力情報が誤っていると判断する付記１乃至４のいずれか一に記載の情報処理システム。   (Additional remark 5) When the said setting teacher information and the said user input information correspond, the said judgment part judges that the said user input information is correct, and the said setting teacher information and the said user input information correspond If not, the information processing system according to any one of appendices 1 to 4, wherein the user input information is determined to be incorrect.

（付記６）前記ユーザ入力情報が誤っていると判断された場合、前記ユーザ入力情報が誤っていることを報知する入力エラー制御部をさらに備える付記５に記載の情報処理システム。   (Additional remark 6) The information processing system of Additional remark 5 further provided with the input error control part which alert | reports that the said user input information is incorrect when it is judged that the said user input information is incorrect.

（付記７）前記入力画像処理部は、前記入力画像に含まれる文字、数値、記号、図形の少なくともいずれかを、前記ユーザ入力情報として抽出する付記１乃至６のいずれか一に記載の情報処理システム。 (Supplementary note 7) The information processing according to any one of supplementary notes 1 to 6, wherein the input image processing unit extracts at least one of a character, a numerical value, a symbol, and a graphic included in the input image as the user input information. system.

（付記８）１又は２以上の前記設定マニュアル情報を記憶する設定マニュアル情報データベースをさらに含む付記１乃至７のいずれか一に記載の情報処理システム。   (Supplementary note 8) The information processing system according to any one of supplementary notes 1 to 7, further including a setting manual information database storing one or more setting manual information.

（付記９）設定項目識別情報と、前記各設定項目に対応する前記入力エラー回数と、を対応付けて記憶するエラー管理情報データベースをさらに含む付記１乃至８のいずれか一に記載の情報処理システム。   (Supplementary note 9) The information processing system according to any one of supplementary notes 1 to 8, further including an error management information database that stores setting item identification information and the number of input errors corresponding to each setting item in association with each other. .

（付記１０）上記第２の視点に係る情報処理装置の通りである。   (Supplementary Note 10) As in the information processing apparatus according to the second viewpoint.

（付記１１）１又は２以上の設定マニュアル情報を管理する情報管理装置であって、前記設定項目に対応する入力エラー回数が、所定の閾値を超える場合、前記設定マニュアル情報に注意喚起情報を追加する管理装置制御部を備える情報管理装置。   (Supplementary Note 11) An information management apparatus that manages one or more setting manual information, and when the number of input errors corresponding to the setting item exceeds a predetermined threshold, alert information is added to the setting manual information An information management device comprising a management device control unit.

（付記１２）上記第３の視点に係る情報処理方法の通りである。   (Additional remark 12) It is as the information processing method concerning the said 3rd viewpoint.

（付記１３）前記入力画像処理工程において、前記入力画像を画像処理し、前記入力画像から前記ユーザ入力情報を抽出する付記１２に記載の情報処理方法。   (Supplementary note 13) The information processing method according to supplementary note 12, wherein in the input image processing step, the input image is subjected to image processing, and the user input information is extracted from the input image.

（付記１４）前記判断工程において、前記設定教師情報と、前記ユーザ入力情報と、が一致する場合、前記ユーザ入力情報が正しいと判断し、前記設定教師情報と、前記ユーザ入力情報と、が一致しない場合、前記ユーザ入力情報が誤っていると判断する付記１２又は１３に記載の情報処理方法。   (Supplementary Note 14) In the determination step, when the setting teacher information matches the user input information, the user input information is determined to be correct, and the setting teacher information matches the user input information. If not, the information processing method according to appendix 12 or 13, wherein the user input information is determined to be incorrect.

（付記１５）前記ユーザ入力情報が誤っていると判断された場合、前記ユーザ入力情報が誤っていることを報知する工程をさらに含む付記１４に記載の情報処理方法。   (Supplementary note 15) The information processing method according to supplementary note 14, further comprising a step of notifying that the user input information is incorrect when the user input information is determined to be incorrect.

（付記１６）上記第４の視点に係るプログラムの通りである。   (Additional remark 16) It is as the program concerning the said 4th viewpoint.

（付記１７）前記入力画像処理において、前記入力画像から前記ユーザ入力情報を抽出する付記１６に記載のプログラム。   (Supplementary note 17) The program according to supplementary note 16, wherein in the input image processing, the user input information is extracted from the input image.

（付記１８）前記判断処理において、前記設定教師情報と、前記ユーザ入力情報と、が一致する場合、前記ユーザ入力情報が正しいと判断し、前記設定教師情報と、前記ユーザ入力情報と、が一致しない場合、前記ユーザ入力情報が誤っていると判断する付記１６又は１７に記載のプログラム。   (Supplementary Note 18) In the determination process, when the setting teacher information matches the user input information, the user input information is determined to be correct, and the setting teacher information matches the user input information. If not, the program according to appendix 16 or 17, which determines that the user input information is incorrect.

（付記１９）前記ユーザ入力情報が誤っていると判断された場合、前記ユーザ入力情報が誤っていることを報知する処理をさらに実行する付記１４に記載の情報処理方法。   (Additional remark 19) The information processing method of Additional remark 14 which performs further the process which alert | reports that the said user input information is incorrect when it is judged that the said user input information is incorrect.

なお、引用した上述の特許文献の開示は、本書に引用をもって繰り込むものとする。本発明の全開示（請求の範囲を含む）の枠内において、さらにその基本的技術思想に基づいて、実施形態ないし実施例の変更・調整が可能である。また、本発明の請求の範囲の枠内において種々の示要素（各請求項の各要素、各実施形態ないし実施例の各要素、各図面の各要素等を含む）の多様な組み合わせ、ないし、選択が可能である。すなわち、本明は、請求の範囲を含む全開示、技術的思想にしたがって当業者であればなし得るであろう各種変形、修正を含むことは勿論である。特に、本書に記載した数値範囲については、当該範囲内に含まれる任意の数値ないし小範囲が、別段の記載のない場合でも具体的に記載されているものと解釈されるべきである。   The disclosure of the above-mentioned cited patent document is incorporated herein by reference. Within the scope of the entire disclosure (including claims) of the present invention, the embodiments and examples can be changed and adjusted based on the basic technical concept. In addition, various combinations of various indication elements (including each element of each claim, each element of each embodiment or example, each element of each drawing, etc.) within the scope of the claims of the present invention, Selection is possible. That is, the present disclosure naturally includes various variations and modifications that can be made by those skilled in the art according to the entire disclosure including the claims and the technical concept. In particular, with respect to the numerical ranges described in this document, any numerical value or small range included in the range should be construed as being specifically described even if there is no specific description.

１、１００ 情報処理システム
２ 入力対象装置
３ ビデオキャプチャ装置
４、１０１ 情報管理装置
５、１０２ 情報処理装置
６ ネットワーク
７ ユーザ
１１ 入力表示画像
１２、４２、５２ 設定マニュアル画像
４１ キャプチャ画像
１１１、４３０ 管理装置制御部
１１２、５４１ 設定マニュアル情報取得部
１１３、５３０ 入力画像取得部
１１４、５４３ 入力画像処理部
１１５、５４４ 判断部
１２０ 設定マニュアル情報
２１０ 入力操作部
２２０ 入力表示部
２３０ 入力対象装置制御部
２４０ 画像信号生成部
３１０ 画像信号入力部
３２０ キャプチャ画像生成部
３３０ キャプチャ画像出力部
４１０ 管理装置通信部
４２０ 管理装置記憶部
４２１ 設定マニュアル情報データベース
４２２ エラー管理情報データベース
５１０ 処理装置表示部
５２０ 処理装置通信部
５４０ 処理装置制御部
５４２ 設定マニュアル情報制御部
５４５ 入力エラー制御部
１００１、１００２、１０１１、１０１２ 設定項目 DESCRIPTION OF SYMBOLS 1,100 Information processing system 2 Input object apparatus 3 Video capture apparatus 4, 101 Information management apparatus 5, 102 Information processing apparatus 6 Network 7 User 11 Input display image 12, 42, 52 Setting manual image 41 Capture image 111, 430 Management apparatus Control unit 112, 541 Setting manual information acquisition unit 113, 530 Input image acquisition unit 114, 543 Input image processing unit 115, 544 Determination unit 120 Setting manual information 210 Input operation unit 220 Input display unit 230 Input target device control unit 240 Image signal Generation unit 310 Image signal input unit 320 Captured image generation unit 330 Captured image output unit 410 Management device communication unit 420 Management device storage unit 421 Setting manual information database 422 Error management information database 510 Processing device display unit 520 Apparatus communication unit 540 processing apparatus control unit 542 sets the manual information control unit 545 inputs the error control unit 1001,1002,1011,1012 setting items

Claims (10)

１又は２以上の情報処理装置と、
１又は２以上の設定マニュアル情報を記憶する設定マニュアル情報データベースを備える情報管理装置と、を含む情報処理システムであって、
前記各設定マニュアル情報は、１又は２以上の設定項目に対応する設定教師情報を含み、
前記情報処理装置は、
前記情報管理装置から前記設定マニュアル情報を取得する設定マニュアル情報取得部と、
入力画像を取得する入力画像取得部と、
前記入力画像からユーザ入力情報を抽出する入力画像処理部と、
前記設定教師情報と、前記ユーザ入力情報と、が一致するか否かを判断する判断部と、
を備え、
前記情報管理装置は、
前記設定項目に対応する入力エラー回数が、所定の閾値を超える場合、前記設定マニュアル情報に注意喚起情報を追加して、前記設定マニュアル情報データベースが記憶する前記設定マニュアル情報を更新する管理装置制御部をさらに備える情報処理システム。 One or more information processing devices;
An information management system comprising a setting manual information database for storing one or more setting manual information,
Each setting manual information includes setting teacher information corresponding to one or more setting items,
The information processing apparatus includes:
A setting manual information acquisition unit for acquiring the setting manual information from the information management device;
An input image acquisition unit for acquiring an input image;
An input image processing unit for extracting user input information from the input image;
A determination unit that determines whether or not the setting teacher information matches the user input information;
With
The information management device includes:
When the number of input errors corresponding to the setting item exceeds a predetermined threshold, a management device controller that adds alert information to the setting manual information and updates the setting manual information stored in the setting manual information database An information processing system further comprising: 入力画像信号を生成する入力対象装置と、
ビデオキャプチャ装置と、をさらに含み、
前記ビデオキャプチャ装置は、
前記入力画像信号に基づいて、キャプチャ画像を生成するキャプチャ画像生成部を備え、
前記入力画像取得部は、前記キャプチャ画像を、前記入力画像として取得する請求項１に記載の情報処理システム。 An input target device for generating an input image signal;
A video capture device, and
The video capture device includes:
A capture image generation unit that generates a capture image based on the input image signal,
The information processing system according to claim 1, wherein the input image acquisition unit acquires the capture image as the input image. 前記管理装置制御部は、一の前記設定項目に対応する前記入力エラー回数が、前記所定の閾値を超える場合、当該設定項目に前記注意喚起情報を対応付けて、前記設定マニュアル情報を更新する請求項１又は２に記載の情報処理システム。   When the number of input errors corresponding to one setting item exceeds the predetermined threshold, the management device control unit updates the setting manual information by associating the alert information with the setting item. Item 3. The information processing system according to item 1 or 2. 前記入力画像処理部は、前記入力画像を画像処理し、前記入力画像から前記ユーザ入力情報を抽出する請求項１乃至３のいずれか一に記載の情報処理システム。   The information processing system according to any one of claims 1 to 3, wherein the input image processing unit performs image processing on the input image and extracts the user input information from the input image. 前記判断部は、前記設定教師情報と、前記ユーザ入力情報と、が一致する場合、前記ユーザ入力情報が正しいと判断し、前記設定教師情報と、前記ユーザ入力情報と、が一致しない場合、前記ユーザ入力情報が誤っていると判断する請求項１乃至４のいずれか一に記載の情報処理システム。   The determination unit determines that the user input information is correct when the setting teacher information and the user input information match, and when the setting teacher information and the user input information do not match, The information processing system according to any one of claims 1 to 4, wherein the user input information is determined to be incorrect. 前記ユーザ入力情報が誤っていると判断された場合、前記ユーザ入力情報が誤っていることを報知する入力エラー制御部をさらに備える請求項５に記載の情報処理システム。   The information processing system according to claim 5, further comprising: an input error control unit that notifies that the user input information is incorrect when it is determined that the user input information is incorrect. 前記入力画像処理部は、前記入力画像に含まれる文字、数値、記号、図形の少なくともいずれかを、前記ユーザ入力情報として抽出する請求項１乃至５のいずれか一に記載の情報処理システム。   The information processing system according to any one of claims 1 to 5, wherein the input image processing unit extracts at least one of a character, a numerical value, a symbol, and a graphic included in the input image as the user input information. １又は２以上の設定マニュアル情報を記憶する設定マニュアル情報データベースを備える情報管理装置と接続する、情報処理装置であって、
前記情報管理装置から、１又は２以上の設定項目に対応する設定教師情報を含む、設定マニュアル情報を取得する設定マニュアル情報取得部と、
入力画像を取得する入力画像取得部と、
前記入力画像からユーザ入力情報を抽出する入力画像処理部と、
前記設定教師情報と、前記ユーザ入力情報と、が一致するか否かを判断する判断部と、
を備え、前記設定項目に対応する入力エラー回数が、所定の閾値を超える場合、前記設定マニュアル情報データベースが記憶する前記設定マニュアル情報は、注意喚起情報を追加して更新される情報処理装置。 An information processing apparatus connected to an information management apparatus comprising a setting manual information database for storing one or more setting manual information,
A setting manual information acquisition unit for acquiring setting manual information including setting teacher information corresponding to one or more setting items from the information management device ;
An input image acquisition unit for acquiring an input image;
An input image processing unit for extracting user input information from the input image;
A determination unit that determines whether or not the setting teacher information matches the user input information;
And the setting manual information stored in the setting manual information database is updated by adding alert information when the number of input errors corresponding to the setting item exceeds a predetermined threshold . １又は２以上の設定マニュアル情報を記憶する設定マニュアル情報データベースを備える情報管理装置と接続する、情報処理装置が、
前記情報管理装置から、１又は２以上の設定項目に対応する設定教師情報を含む、設定マニュアル情報を取得する工程と、
入力画像を取得する工程と、
前記入力画像からユーザ入力情報を抽出する入力画像処理工程と、
前記設定教師情報と、前記ユーザ入力情報と、が一致するか否かを判断する判断工程と、
を含み、
前記設定項目に対応する入力エラー回数が、所定の閾値を超える場合、前記設定マニュアル情報データベースが記憶する前記設定マニュアル情報は、注意喚起情報を追加して更新される情報処理方法。 An information processing apparatus connected to an information management apparatus including a setting manual information database that stores one or more setting manual information,
Obtaining setting manual information including setting teacher information corresponding to one or more setting items from the information management device ;
Obtaining an input image;
An input image processing step of extracting user input information from the input image;
A determination step of determining whether or not the setting teacher information and the user input information match;
Only including,
An information processing method in which, when the number of input errors corresponding to the setting item exceeds a predetermined threshold, the setting manual information stored in the setting manual information database is updated by adding alert information . １又は２以上の設定マニュアル情報を記憶する設定マニュアル情報データベースを備える情報管理装置と接続する、情報処理装置を制御するコンピュータに実行させるプログラムであって、
前記情報管理装置から、１又は２以上の設定項目に対応する設定教師情報を含む、設定マニュアル情報を取得する処理と、
入力画像を取得する処理と、
前記入力画像からユーザ入力情報を抽出する入力画像処理と、
前記設定教師情報と、前記ユーザ入力情報と、が一致するか否かを判断する判断処理と、
を前記コンピュータに実行させ、
前記設定項目に対応する入力エラー回数が、所定の閾値を超える場合、前記設定マニュアル情報データベースが記憶する前記設定マニュアル情報は、注意喚起情報を追加して更新されるプログラム。 A program that is executed by a computer that controls an information processing apparatus connected to an information management apparatus that includes a setting manual information database that stores one or more setting manual information ,
Processing for acquiring setting manual information including setting teacher information corresponding to one or more setting items from the information management device ;
Processing to acquire the input image;
Input image processing for extracting user input information from the input image;
A determination process for determining whether or not the setting teacher information and the user input information match;
To the computer ,
When the number of input errors corresponding to the setting item exceeds a predetermined threshold, the setting manual information stored in the setting manual information database is updated by adding alert information .
JP2013144315A 2013-07-10 2013-07-10 Information processing system, information processing apparatus, information processing method, and program Active JP5932724B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2013144315A JP5932724B2 (en) 2013-07-10 2013-07-10 Information processing system, information processing apparatus, information processing method, and program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2013144315A JP5932724B2 (en) 2013-07-10 2013-07-10 Information processing system, information processing apparatus, information processing method, and program

Publications (2)

Publication Number Publication Date
JP2015018359A JP2015018359A (en) 2015-01-29
JP5932724B2 true JP5932724B2 (en) 2016-06-08

Family

ID=52439304

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2013144315A Active JP5932724B2 (en) 2013-07-10 2013-07-10 Information processing system, information processing apparatus, information processing method, and program

Country Status (1)

Country Link
JP (1) JP5932724B2 (en)

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004133729A (en) * 2002-10-11 2004-04-30 Hitachi Ltd Terminal setting work support system
JP2006191413A (en) * 2005-01-07 2006-07-20 Seiko Epson Corp Image display device
JP4976954B2 (en) * 2007-08-08 2012-07-18 株式会社東芝 Maintenance work support system
JP2009230258A (en) * 2008-03-19 2009-10-08 Sky Co Ltd Restoration support system and program for the same
JP5353520B2 (en) * 2009-07-22 2013-11-27 ブラザー工業株式会社 Peripheral device
JP2011253375A (en) * 2010-06-02 2011-12-15 Sony Corp Information processing device, information processing method and program
JP5489974B2 (en) * 2010-12-17 2014-05-14 株式会社Ｎｔｔドコモ Server, remote assist system and method

Also Published As

Publication number Publication date
JP2015018359A (en) 2015-01-29

Similar Documents

Publication Publication Date Title
US11972438B2 (en) Interactive error user interface
US9824437B2 (en) System and method for tool mapping
US9736031B2 (en) Information system construction assistance device, information system construction assistance method, and information system construction assistance program
CA2927700C (en) Generating and providing a self-service demonstration to facilitate performance of a self-service task
US20210304126A1 (en) System to catalogue tracking data
JP5529351B1 (en) Engineering tools
US11416600B2 (en) Unlocking passwords in augmented reality based on look
JP2009134673A (en) Gui screen operation sequence verifying apparatus, method, and program
JP6496264B2 (en) Mobile terminal, information processing method, and program
JP5932724B2 (en) Information processing system, information processing apparatus, information processing method, and program
CN114666634B (en) Picture quality detection result display method, device, equipment and storage medium
EP3214517A1 (en) Electronic device, system and method
JP2020149556A (en) Work support system, work support method, and work support program
JP2015148990A (en) Management system, terminal apparatus, information management method and information management program
JP6818795B2 (en) Information processing equipment, information processing methods and computer programs
CN112749183A (en) Apparatus, method and computer program product for field device maintenance request management
JP6514310B1 (en) INFORMATION PROCESSING APPARATUS, INFORMATION PROCESSING METHOD, AND COMPUTER PROGRAM
JP2018106577A (en) Graph creation device and graph creation method
US8913079B2 (en) Apparatus, a method and a program thereof
JP2018190323A (en) Comparison program, comparison device and comparison method
CN108255904B (en) Table structure modeling method and server
JP2017194864A (en) Browsing support system
US20220397987A1 (en) Input display system, auxiliary information display method and program
JP2021057065A (en) Information processing system, information processing method, and computer program
JP2016134134A (en) Image searching device, image searching method, and image searching program

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20141110

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20150909

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20150915

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20151007

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20160112

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20160202

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20160405

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20160428

R150 Certificate of patent or registration of utility model

Ref document number: 5932724

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150