JP2019047398A - Image processing system, image processing device, terminal device, and program - Google Patents

Image processing system, image processing device, terminal device, and program Download PDF

Info

Publication number
JP2019047398A
JP2019047398A JP2017170370A JP2017170370A JP2019047398A JP 2019047398 A JP2019047398 A JP 2019047398A JP 2017170370 A JP2017170370 A JP 2017170370A JP 2017170370 A JP2017170370 A JP 2017170370A JP 2019047398 A JP2019047398 A JP 2019047398A
Authority
JP
Japan
Prior art keywords
information
language
image processing
terminal device
guidance information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2017170370A
Other languages
Japanese (ja)
Other versions
JP6992332B2 (en
Inventor
和也 姉崎
Kazuya Anezaki
和也 姉崎
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Konica Minolta Inc
Original Assignee
Konica Minolta Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Konica Minolta Inc filed Critical Konica Minolta Inc
Priority to JP2017170370A priority Critical patent/JP6992332B2/en
Publication of JP2019047398A publication Critical patent/JP2019047398A/en
Application granted granted Critical
Publication of JP6992332B2 publication Critical patent/JP6992332B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Abstract

To make it possible to guide various operations in a language a user can easily understand when an image processing device guides the various operations to the user via a terminal device.SOLUTION: An image processing system 1 includes an image processing device 2 for generating guidance information 72 on the basis of language information 70 on a language a user can use and a terminal device 3 for communicating with the image processing device 2 and transmitting the language information 70 to the image processing device 2. The image processing device 2 generates guidance information 72 on the basis of the language information 70 and transmits the guidance information 72 to the terminal device 3. The terminal device 3 gives the user guidance notice on the basis of the guidance information 72.SELECTED DRAWING: Figure 1

Description

本発明は、画像処理システム、画像処理装置、端末装置及びプログラムに関し、特に端末装置から画像処理装置を遠隔制御するための技術に関する。   The present invention relates to an image processing system, an image processing apparatus, a terminal device and a program, and more particularly to a technique for remotely controlling an image processing apparatus from a terminal device.

MFP(Multifunction Peripherals)などの画像処理装置は、ユーザーがジョブの設定操作などの各種操作を行うためのユーザーインタフェースとして操作パネルを備えており、その操作パネルに様々な操作画面を表示してユーザーによる操作入力を受け付ける。一方、近年のスマートフォンやタブレット端末などのユーザーがタッチ操作可能な端末装置の普及に伴い、画像処理装置が操作パネルに表示する操作画面を端末装置に送信して表示させることにより端末装置からの遠隔操作を受け付けることを可能にした技術が提案されている(例えば特許文献1)。   Image processing apparatuses such as MFPs (Multifunction Peripherals) are provided with an operation panel as a user interface for the user to perform various operations such as job setting operations, and various operation screens are displayed on the operation panel to allow the user to Accept operation input. On the other hand, with the spread of terminal devices that can be touch operated by users such as smart phones and tablet terminals in recent years, the image processing apparatus transmits the operation screen displayed on the operation panel to the terminal device to display it from the terminal device. There has been proposed a technology capable of accepting an operation (for example, Patent Document 1).

従来の遠隔操作技術では、端末装置において遠隔制御用のアプリケーションが起動されると、端末装置と画像処理装置との連携動作が開始される。画像処理装置は、端末装置との連携動作を開始すると、操作パネルに表示している操作画面に対応する画像データを生成し、その画像データを端末装置へ送信する。したがって、端末装置において表示される操作画面は、画像処理装置の設定言語に対応する画面となる。例えば、画像処理装置の設定言語が英語であれば、端末装置において英語の操作画面が表示されるのに対し、画像処理装置の設定言語が日本語であれば、端末装置において日本語の操作画面が表示される。   In the conventional remote control technology, when an application for remote control is activated in the terminal device, the cooperative operation between the terminal device and the image processing device is started. When the image processing apparatus starts the cooperative operation with the terminal device, the image processing device generates image data corresponding to the operation screen displayed on the operation panel, and transmits the image data to the terminal device. Therefore, the operation screen displayed on the terminal device is a screen corresponding to the setting language of the image processing apparatus. For example, if the setting language of the image processing apparatus is English, an English operation screen is displayed on the terminal device, whereas if the setting language of the image processing apparatus is Japanese, the Japanese operation screen on the terminal device Is displayed.

特開2014‐197361号公報JP, 2014-197361, A

ところで、ユーザーは、出張などで外国の事業所などを訪れた際、普段使用している言語とは異なる設定言語の画像処理装置を使用することがある。この場合、ユーザーの端末装置を画像処理装置と連携させると、ユーザーにとって理解できない言語や、理解し難い言語の操作画面が端末装置に表示されてしまうことがある。そのため、端末装置を用いて画像処理装置を遠隔操作する際の操作性が著しく低下してしまうという問題がある。   When a user visits a foreign business office or the like on a business trip, the user may use an image processing apparatus with a setting language different from the language usually used. In this case, when the user's terminal device is linked with the image processing apparatus, an operation screen of a language that the user can not understand or a language that is difficult to understand may be displayed on the terminal device. Therefore, there is a problem that the operability at the time of remotely controlling the image processing apparatus using the terminal device is significantly reduced.

そこで本発明は、従来の問題点を改善すべく、端末装置がユーザーの使用可能言語に関する言語情報を画像処理装置に送信することにより、画像処理装置がユーザーの理解しやすい言語で各種操作を案内できるようにした画像処理システム、画像処理装置、端末装置及びプログラムを提供することを目的とするものである。   Therefore, according to the present invention, in order to solve the conventional problems, the terminal device transmits the language information on the usable language of the user to the image processing device, and the image processing device guides various operations in the language easy for the user to understand. An object of the present invention is to provide an image processing system, an image processing device, a terminal device, and a program which can be performed.

上記目的を達成するため、請求項1に係る発明は、画像処理システムであって、画像処理装置と、前記画像処理装置と通信を行う端末装置と、を備える画像処理システムであって、前記端末装置は、ユーザーの使用可能言語に関する言語情報を前記画像処理装置へ送信する情報送信手段、を備え、前記画像処理装置は、前記端末装置から受信する前記言語情報に基づいてユーザーに操作を案内するための案内情報を生成する案内情報生成手段と、前記案内情報生成手段によって生成される前記案内情報を前記端末装置へ送信する案内情報送信手段と、を備えることを特徴とする構成である。   In order to achieve the above object, the invention according to claim 1 is an image processing system, which is an image processing system including an image processing apparatus and a terminal apparatus which communicates with the image processing apparatus, the terminal The apparatus comprises information transmitting means for transmitting, to the image processing apparatus, language information on a user's usable language, and the image processing apparatus guides an operation to the user based on the language information received from the terminal apparatus. And guidance information transmission means for transmitting the guidance information generated by the guidance information generation means to the terminal device.

請求項2に係る発明は、請求項1に記載の画像処理システムにおいて、前記言語情報には、ユーザーが使用可能な複数の言語に関する情報が含まれており、前記案内情報生成手段は、前記複数の言語の中に、前記画像処理装置において使用中の設定言語が含まれている場合には前記設定言語に対応する前記案内情報を生成することを特徴とする構成である。   In the invention according to claim 2, in the image processing system according to claim 1, the language information includes information on a plurality of languages usable by the user, and the guidance information generation unit When the setting language being used in the image processing apparatus is included in the language of (1), the guidance information corresponding to the setting language is generated.

請求項3に係る発明は、請求項1又は2に記載の画像処理システムにおいて、前記案内情報は、前記端末装置において表示可能な操作画面情報を含んでおり、前記端末装置は、前記案内情報に含まれる前記操作画面情報に基づいてユーザーが操作可能な操作画面を表示する表示手段と、前記操作画面に対するユーザーの操作に基づいて操作情報を生成する操作情報生成手段と、を更に備え、前記情報送信手段は、前記操作情報を前記画像処理装置へ送信することにより、前記画像処理装置を遠隔操作することを特徴とする構成である。   The invention according to claim 3 is the image processing system according to claim 1 or 2, wherein the guidance information includes operation screen information that can be displayed on the terminal device, and the terminal device uses the guidance information in the guidance information. The information processing apparatus further comprises: display means for displaying an operation screen operable by the user based on the operation screen information included; and operation information generating means for generating operation information based on the user's operation on the operation screen; The transmission means is configured to remotely control the image processing apparatus by transmitting the operation information to the image processing apparatus.

請求項4に係る発明は、請求項3に記載の画像処理システムにおいて、前記操作画面は、ユーザーによる操作に基づいて前記案内情報の言語を変更することが可能であり、前記案内情報生成手段は、前記操作画面において前記案内情報の言語が変更された場合、前記操作情報に基づいて前記案内情報の言語を変更することを特徴とする構成である。   In the invention according to claim 4, in the image processing system according to claim 3, the operation screen can change the language of the guidance information based on an operation by the user, and the guidance information generation unit When the language of the guidance information is changed on the operation screen, the language of the guidance information is changed based on the operation information.

請求項5に係る発明は、請求項1乃至4のいずれかに記載の画像処理システムにおいて、前記案内情報は、前記端末装置において再生可能な音声情報を含んでおり、前記端末装置は、前記案内情報に含まれる前記音声情報に基づいて音声出力を行う音声出力手段、を更に備えることを特徴とする構成である。   The invention according to claim 5 is the image processing system according to any one of claims 1 to 4, wherein the guidance information includes voice information reproducible in the terminal device, and the terminal device is the guidance. An audio output means for outputting an audio based on the audio information contained in the information is further provided.

請求項6に係る発明は、請求項1乃至5のいずれかに記載の画像処理システムにおいて、前記端末装置は、アプリケーションからユーザーの言語使用履歴情報を収集する情報収集手段と、前記言語使用履歴情報に基づいて前記言語情報を生成する言語情報生成手段と、を更に備え、前記情報送信手段は、前記言語情報生成手段によって生成される前記言語情報を前記画像処理装置へ送信することを特徴とする構成である。   The invention according to claim 6 is the image processing system according to any one of claims 1 to 5, wherein the terminal device is an information collecting means for collecting language use history information of a user from an application, and the language use history information Language information generating means for generating the language information on the basis of the information processing means, and the information transmitting means transmits the language information generated by the language information generating means to the image processing apparatus. It is a structure.

請求項7に係る発明は、請求項1乃至6のいずれかに記載の画像処理システムにおいて、前記案内情報は、前記端末装置において表示可能な操作画面情報と、前記端末装置において再生可能な音声情報と、を含んでおり、前記案内情報生成手段は、前記操作画面情報の言語と、前記音声情報の言語とを一致させることを特徴とする構成である。   The invention according to claim 7 is the image processing system according to any one of claims 1 to 6, wherein the guidance information is operation screen information that can be displayed on the terminal device, and audio information that can be reproduced on the terminal device. And the guidance information generation means matches the language of the operation screen information with the language of the voice information.

請求項8に係る発明は、請求項1乃至7のいずれかに記載の画像処理システムにおいて、前記端末装置は、ユーザーによる操作に基づいて処理速度優先処理と操作性優先処理とのいずれか一方を決定する優先処理決定手段、を更に備え、前記案内情報生成手段は、前記優先処理決定手段により処理速度優先処理が決定された場合には、前記言語情報に含まれる複数の言語の中から、前記画像処理装置において使用中の設定言語に対応する前記案内情報を生成し、前記優先処理決定手段により操作性優先処理が決定された場合には、前記言語情報に含まれる複数の言語の中から、ユーザーの使用頻度が相対的に高い言語を選択して当該言語に対応する前記案内情報を生成することを特徴とする構成である。   The invention according to claim 8 is the image processing system according to any one of claims 1 to 7, wherein the terminal device performs either one of processing speed priority processing and operability priority processing based on an operation by a user. The information processing apparatus further comprises a priority processing determination unit for determining, when the processing speed priority processing is determined by the priority processing determination unit, the guidance information generation unit is configured to select one of a plurality of languages included in the language information. When the guidance information corresponding to the setting language in use is generated in the image processing apparatus, and the operability priority processing is determined by the priority processing determination means, among the plurality of languages included in the language information, It is characterized in that a language with a relatively high frequency of use by the user is selected to generate the guidance information corresponding to the language.

請求項9に係る発明は、ユーザーに操作を案内するための案内情報を端末装置に送信する画像処理装置であって、前記端末装置から送信されるユーザーの使用可能言語に関する言語情報を受信する情報受信手段と、前記言語情報に基づいて前記案内情報を生成する案内情報生成手段と、前記案内情報生成手段によって生成される前記案内情報を前記端末装置へ送信する案内情報送信手段と、を備えることを特徴とする構成である。   The invention according to claim 9 is an image processing apparatus that transmits guidance information for guiding a user to an operation to a terminal device, and information that receives language information related to a usable language of the user transmitted from the terminal device. It comprises: receiving means; guidance information generation means for generating the guidance information based on the language information; and guidance information transmission means for transmitting the guidance information generated by the guidance information generation means to the terminal device. Is a configuration characterized by

請求項10に係る発明は、請求項9に記載の画像処理装置において、前記言語情報には、ユーザーが使用可能な複数の言語に関する情報が含まれており、前記案内情報生成手段は、前記複数の言語の中に、前記画像処理装置において使用中の設定言語が含まれている場合には前記設定言語に対応する前記案内情報を生成することを特徴とする構成である。   In the invention according to claim 10, in the image processing apparatus according to claim 9, the language information includes information on a plurality of languages usable by the user, and the guidance information generation unit When the setting language being used in the image processing apparatus is included in the language of (1), the guidance information corresponding to the setting language is generated.

請求項11に係る発明は、請求項9又は10に記載の画像処理装置において、前記案内情報は、前記端末装置において表示可能な操作画面情報を含んでおり、前記端末装置から送信される前記操作画面情報に基づく操作画面に対するユーザーの操作情報を受信することにより、操作情報に基づく処理を行う操作反映手段を更に備えることを特徴とする構成である。   The invention according to claim 11 is the image processing apparatus according to claim 9 or 10, wherein the guidance information includes operation screen information that can be displayed on the terminal device, and the operation transmitted from the terminal device The configuration is characterized by further including an operation reflection unit that performs processing based on the operation information by receiving operation information of the user on the operation screen based on the screen information.

請求項12に係る発明は、請求項11に記載の画像処理装置において、前記操作画面は、ユーザーによる操作に基づいて前記案内情報の言語を変更することが可能であり、前記案内情報生成手段は、前記操作画面において前記案内情報の言語が変更された場合、前記操作情報に基づいて前記案内情報の言語を変更することを特徴とする構成である。   In the invention according to claim 12, in the image processing apparatus according to claim 11, the operation screen can change the language of the guidance information based on an operation by the user, and the guidance information generation unit When the language of the guidance information is changed on the operation screen, the language of the guidance information is changed based on the operation information.

請求項13に係る発明は、請求項9乃至12のいずれかに記載の画像処理装置において、前記案内情報は、前記端末装置において表示可能な操作画面情報と、前記端末装置において再生可能な音声情報と、を含んでおり、前記案内情報生成手段は、前記操作画面情報の言語と、前記音声情報の言語とを一致させることを特徴とする構成である。   The invention according to claim 13 is the image processing apparatus according to any one of claims 9 to 12, wherein the guidance information is operation screen information that can be displayed on the terminal device, and audio information that can be reproduced on the terminal device. And the guidance information generation means matches the language of the operation screen information with the language of the voice information.

請求項14に係る発明は、請求項9乃至13のいずれかに記載の画像処理装置において、前記案内情報生成手段は、前記端末装置から送信される処理速度優先処理情報を受信した場合、前記言語情報に含まれる複数の言語の中から、当該画像処理装置において使用中の設定言語に対応する前記案内情報を作成し、前記端末装置から送信される操作性優先処理情報を受信した場合、前記言語情報に含まれる複数の言語の中から、ユーザーの使用頻度が相対的に高い言語を選択して当該言語に対応する前記案内情報を生成することを特徴とする構成である。   The invention according to claim 14 is the image processing apparatus according to any one of claims 9 to 13, wherein the guidance information generation unit receives the processing speed priority processing information transmitted from the terminal device. When the guidance information corresponding to the setting language being used in the image processing apparatus is created from a plurality of languages included in the information and the operability priority processing information transmitted from the terminal device is received, the language It is characterized in that a language having a relatively high frequency of use by the user is selected from a plurality of languages included in the information, and the guidance information corresponding to the language is generated.

請求項15に係る発明は、画像処理装置から送信されるユーザーに操作を案内するための案内情報に基づいた案内通知を行う端末装置であって、ユーザーの使用可能言語に関する言語情報を前記画像処理装置へ送信する情報送信手段と、前記画像処理装置から送信される前記案内情報を受信する案内情報受信手段と、を備えることを特徴とする構成である。   The invention according to claim 15 is a terminal device for performing guidance notification based on guidance information for guiding a user to an operation transmitted from an image processing apparatus, wherein the image processing is performed on the language information related to the usable language of the user It is characterized in that it comprises: information transmitting means for transmitting to the apparatus; and guidance information receiving means for receiving the guidance information transmitted from the image processing apparatus.

請求項16に係る発明は、請求項15に記載の端末装置において、前記言語情報には、ユーザーが使用可能な複数の言語に関する情報が含まれていることを特徴とする構成である。   The invention according to a sixteenth aspect is the terminal device according to the fifteenth aspect, wherein the language information includes information regarding a plurality of languages usable by the user.

請求項17に係る発明は、請求項15又は16に記載の端末装置において、前記案内情報に含まれる操作画面情報に基づいてユーザーが操作可能な操作画面を表示する表示手段と、前記操作画面に対するユーザーの操作に基づいて操作情報を生成する操作情報生成手段と、を備え、前記情報送信手段は、前記操作情報を前記画像処理装置へ送信することにより、前記画像処理装置を遠隔操作することを特徴とする構成である。   The invention according to claim 17 is the terminal device according to claim 15 or 16, wherein display means for displaying an operation screen operable by the user based on operation screen information included in the guidance information, and the operation screen Operation information generating means for generating operation information based on an operation of a user, wherein the information transmission means transmits the operation information to the image processing apparatus to remotely control the image processing apparatus It is a feature of the configuration.

請求項18に係る発明は、請求項17に記載の端末装置において、前記操作画面は、ユーザーによる操作に基づいて前記案内情報の言語を変更することが可能であることを特徴とする構成である。   The invention according to claim 18 is characterized in that, in the terminal device according to claim 17, the operation screen can change the language of the guidance information based on an operation by a user. .

請求項19に係る発明は、請求項15乃至18のいずれかに記載の端末装置において、前記案内情報は音声情報を含んでおり、前記案内情報に含まれる前記音声情報に基づいて音声出力を行う音声出力手段、を更に備えることを特徴とする構成である。   The invention according to claim 19 is the terminal device according to any one of claims 15 to 18, wherein the guidance information includes voice information, and voice output is performed based on the voice information included in the guidance information. And sound output means.

請求項20に係る発明は、請求項15乃至19のいずれかに記載の端末装置において、アプリケーションからユーザーの言語使用履歴情報を収集する情報収集手段と、前記言語使用履歴情報に基づいて前記言語情報を生成する言語情報生成手段と、を更に備え、前記情報送信手段は、前記言語情報生成手段によって生成される前記言語情報を前記画像処理装置へ送信することを特徴とする構成である。   The invention according to claim 20 is the terminal device according to any one of claims 15 to 19, wherein the language information based on the language use history information is information collection means for collecting language use history information of the user from an application. Language information generating means for generating the language information, and the information transmitting means transmits the language information generated by the language information generating means to the image processing apparatus.

請求項21に係る発明は、請求項15乃至20のいずれかに記載の端末装置において、前記画像処理装置において使用中の設定言語に対応した案内通知を行うことを優先する処理速度優先処理と、前記言語情報に含まれる複数の言語の中からユーザーの使用頻度が相対的に高い言語に対応した案内通知を行うことを優先する操作性優先処理とのいずれか一方を決定する優先処理決定手段、を更に備え、前記情報送信手段は、上記優先処理決定手段における決定情報を前記画像処理装置に送信し、前記画像処理装置に上記決定情報に対応する前記案内情報を作成させることを特徴とする構成である。   The invention according to claim 21 is the terminal device according to any one of claims 15 to 20, wherein processing speed priority processing giving priority to performing notification notification corresponding to the setting language being used in the image processing device; Priority processing determination means for determining one of the plurality of languages included in the language information and the operability priority processing for giving priority to notification notification corresponding to a language whose usage frequency is relatively high for the user; The information transmitting unit transmits the determination information in the priority processing determination unit to the image processing apparatus, and causes the image processing apparatus to create the guidance information corresponding to the determination information. It is.

請求項22に係る発明は、ユーザーに操作を案内するための案内情報を端末装置に送信する画像処理装置において実行されるプログラムであって、前記画像処理装置に、前記端末装置から送信されるユーザーの使用可能言語に関する言語情報を受信する情報受信ステップと、前記言語情報に基づいて前記案内情報を生成する案内情報生成ステップと、前記案内情報生成ステップによって生成される前記案内情報を前記端末装置へ送信する案内情報送信ステップと、を実行させることを特徴とする構成である。   The invention according to claim 22 is a program executed by an image processing apparatus for transmitting guidance information for guiding a user to an operation to a terminal apparatus, and a user transmitted from the terminal apparatus to the image processing apparatus. To the terminal apparatus, the information receiving step of receiving the language information related to the usable language of the information, the guidance information generating step of generating the guidance information based on the language information, and the guidance information generated by the guidance information generation step And transmitting the guidance information transmission step.

請求項23に係る発明は、請求項22に記載のプログラムにおいて、前記言語情報には、ユーザーが使用可能な複数の言語に関する情報が含まれており、前記案内情報生成ステップは、前記複数の言語の中に、前記画像処理装置において使用中の設定言語が含まれている場合には前記設定言語に対応する前記案内情報を生成することを特徴とする構成である。   The invention according to claim 23 is the program according to claim 22, wherein the language information includes information on a plurality of languages usable by the user, and the guidance information generation step includes the plurality of languages. If the setting language being used in the image processing apparatus is included in the information processing apparatus, the guidance information corresponding to the setting language is generated.

請求項24に係る発明は、画像処理装置から送信されるユーザーに操作を案内するための案内情報に基づいた案内通知を行う端末装置において実行されるプログラムであって、前記端末装置に、ユーザーの使用可能言語に関する言語情報を前記画像処理装置へ送信する情報送信ステップと、前記画像処理装置から送信される前記案内情報を受信する案内情報受信ステップと、を実行させることを特徴とする構成である。   The invention according to claim 24 is a program executed by a terminal device that performs guidance notification based on guidance information for guiding an operation to a user transmitted from an image processing apparatus, wherein the terminal device An information transmitting step of transmitting language information on an available language to the image processing apparatus, and a guidance information receiving step of receiving the guidance information transmitted from the image processing apparatus are executed. .

本発明によれば、ユーザーが使用可能な言語情報に基づき、画像処理装置が案内情報を生成するため、ユーザーが使用可能な言語でのみ、端末装置から案内通知を行うことが可能である。それ故、ユーザーが案内通知を理解できないことを無くすことができる。   According to the present invention, since the image processing apparatus generates guidance information based on language information that can be used by the user, it is possible to perform guidance notification from the terminal device only in a language that can be used by the user. Therefore, it is possible to eliminate the inability of the user to understand the guidance notice.

画像処理システムの構成概念を示す図である。It is a figure which shows the structural concept of an image processing system. 画像処理装置のハードウェア構成及び機能構成の一例を示す図である。FIG. 2 is a diagram illustrating an example of a hardware configuration and a functional configuration of an image processing apparatus. 端末装置のハードウェア構成及び機能構成の一例を示す図である。It is a figure which shows an example of the hardware constitutions of a terminal device, and a function structure. 画面データ及び画面パーツデータの一例を示す図である。It is a figure which shows an example of screen data and screen parts data. 優先処理選択の一例を示す図である。It is a figure which shows an example of priority processing selection. 言語情報生成部の機能構成の一例を示す図である。It is a figure which shows an example of a function structure of a language information generation part. 言語スコア算出基準の一例を示す図である。It is a figure which shows an example of a language score calculation reference | standard. 遠隔制御アプリ起動時の画像処理装置及び端末装置で行われる動作プロセスを示す図である。It is a figure which shows the operation | movement process performed with the image processing apparatus at the time of remote control application starting, and a terminal device. 画像処理装置で行われる初期操作画面生成処理の一例を示すフローチャートです。5 is a flowchart illustrating an example of initial operation screen generation processing performed by the image processing apparatus. (a)端末装置で行われる言語設定表示付加処理の一例を示すフローチャートである。(b)端末装置に表示される操作画面に言語設表示を付加した一例を示す図である。(A) It is a flowchart which shows an example of the language setting display addition process performed with a terminal device. (B) It is a figure which shows an example which added the language setting display to the operation screen displayed on a terminal device. ユーザー操作により設定言語変更がされた際の画像処理装置及び端末装置で行われる動作プロセスを示す図である。It is a figure which shows the operation | movement process performed with an image processing apparatus and a terminal device when setting language change is carried out by user operation. ユーザーによる操作が行われた際の画像処理装置及び端末装置で行われる動作プロセスを示す図である。It is a figure which shows the operation | movement process performed with an image processing apparatus and a terminal device when operation by a user is performed. ユーザーによる操作が行われた際の画像処理装置で行われる処理手順の一例を示すフローチャートである。5 is a flowchart illustrating an example of a processing procedure performed by the image processing apparatus when an operation is performed by a user. 端末装置で行われる言語情報生成処理の一例を示すフローチャートである。It is a flowchart which shows an example of the language information generation process performed by a terminal device.

以下、本発明の好ましい実施形態について図面を参照しつつ詳細に説明する。尚、以下において参照する各図面では互いに共通する要素に同一符号を付しており、それらについての重複する説明は省略する。   Hereinafter, preferred embodiments of the present invention will be described in detail with reference to the drawings. In the respective drawings referred to in the following, the elements common to each other are denoted by the same reference numerals, and the redundant description thereof will be omitted.

[1.画像処理システム1の構成]
[1.1.全体構成]
図1は、本発明の一実施形態である画像処理システム1の構成概念を示す図である。画像処理システム1は、MFPなどで構成される画像処理装置2と、パーソナルコンピュータ(PC)やタブレット端末、スマートフォンなどで構成される端末装置3とを備えている。画像処理装置2と端末装置3とは、LAN(Local Area Network)などのネットワークを介して、或いは、Bluetooth(登録商標)や、WiFi,NFC(Near Field Communication)などの無線通信手段を介して、互いにデータ通信を行うことができる構成である。
[1. Configuration of Image Processing System 1]
[1.1. overall structure]
FIG. 1 is a view showing a configuration concept of an image processing system 1 according to an embodiment of the present invention. The image processing system 1 includes an image processing apparatus 2 configured by an MFP or the like, and a terminal device 3 configured by a personal computer (PC), a tablet terminal, a smartphone or the like. The image processing device 2 and the terminal device 3 are connected via a network such as a LAN (Local Area Network) or via a wireless communication means such as Bluetooth (registered trademark), WiFi, NFC (Near Field Communication), etc. It is the structure which can communicate data mutually.

画像処理装置2は、例えばコピー機能やスキャン機能、プリント機能、FAX機能、BOX機能などの複数の機能を備えており、ユーザーによって選択された機能を動作させてジョブを実行する。尚、BOX機能とは、画像データやドキュメントデータなどを記憶しておくストレージ機能である。この画像処理装置2は、ユーザーが機能の選択操作やジョブの設定操作、ジョブの実行指示を行うためのユーザーインタフェースとなる操作パネル10を備えている。操作パネル10には、カラー液晶ディスプレイなどで構成される表示部11が設けられる。表示部11には、ユーザーが各種操作を行うための操作画面が表示される。そして画像処理装置2は、操作パネル10の表示部11にユーザーが操作可能な各種の操作画面を表示した状態でユーザーによる操作を受け付ける。画像処理装置2は、様々な言語に対応した操作画面を表示部11に表示することが可能であり、例えば管理者などによって予め指定された設定言語に対応する操作画面を表示部11に表示し、ユーザーによる操作を受け付ける。   The image processing apparatus 2 has a plurality of functions such as a copy function, a scan function, a print function, a fax function, and a BOX function, and operates the function selected by the user to execute the job. The BOX function is a storage function for storing image data, document data, and the like. The image processing apparatus 2 includes an operation panel 10 serving as a user interface for the user to perform a function selection operation, a job setting operation, and a job execution instruction. The operation panel 10 is provided with a display unit 11 configured of a color liquid crystal display or the like. The display unit 11 displays an operation screen for the user to perform various operations. Then, the image processing apparatus 2 receives an operation by the user in a state where various operation screens that can be operated by the user are displayed on the display unit 11 of the operation panel 10. The image processing apparatus 2 can display operation screens corresponding to various languages on the display unit 11, and displays, for example, an operation screen corresponding to a setting language designated in advance by a manager or the like on the display unit 11. , Accept user operations.

画像処理装置2は、端末装置3との通信を開始すると、端末装置3からユーザーの使用可能言語に関する言語情報70を受信する。言語情報70には、端末装置3のユーザーが使用可能な少なくとも1つの言語に関する情報が含まれている。例えば端末装置3のユーザーが日本語のみを使用可能であれば、言語情報70には日本語を示す情報が含まれる。また端末装置3のユーザーが英語と日本語の2言語を使用可能であれば、言語情報70には英語と日本語に関する情報が含まれる。そのため、画像処理装置2は、端末装置3から受信する言語情報70に基づいてユーザーが使用可能な言語を把握することができる。そして画像処理装置2は、ユーザーの使用可能言語に対応する案内情報72を生成し、端末装置3へ送信する。案内情報72は、ユーザーに対して画像処理装置2の操作を案内するための情報であり、例えば端末装置3において表示させるための画面データや、端末装置3において音声出力させるための音声データなどを含む情報である。   When the image processing device 2 starts communication with the terminal device 3, the image processing device 2 receives, from the terminal device 3, language information 70 related to the usable language of the user. The language information 70 includes information on at least one language available to the user of the terminal device 3. For example, if the user of the terminal device 3 can use only Japanese, the language information 70 includes information indicating Japanese. Further, if the user of the terminal device 3 can use two languages, English and Japanese, the language information 70 includes information on English and Japanese. Therefore, the image processing apparatus 2 can grasp the languages that can be used by the user based on the language information 70 received from the terminal device 3. Then, the image processing device 2 generates guidance information 72 corresponding to the usable language of the user, and transmits it to the terminal device 3. The guidance information 72 is information for guiding the user to the operation of the image processing apparatus 2 and, for example, screen data for display on the terminal device 3 or voice data for audio output on the terminal device 3 It is information that contains.

例えば画像処理装置2は、操作パネル10の表示部11に表示している操作画面に対応する画面データを端末装置3へ送信することにより、端末装置3に操作画面を表示させることができる。このとき、画像処理装置2は、ユーザーの使用可能言語に対応する操作画面を生成して端末装置3へ送信する。そして画像処理装置2は、端末装置3から操作画面に対する操作情報を受信すると、その操作情報に基づく処理を行う。また、画像処理装置2は、音声データを端末装置3へ送信することにより、端末装置3に音声ガイダンスを再生出力させることも可能である。このとき、画像処理装置2は、ユーザーの使用可能言語に対応する音声データを端末装置3へ送信する。このように画像処理装置2は、端末装置3に対してユーザーが使用可能な画面データや音声データなどの案内情報72を提供することにより、端末装置3を使用しているユーザーに案内情報72に基づく操作を案内することが可能である。   For example, the image processing apparatus 2 can cause the terminal device 3 to display the operation screen by transmitting screen data corresponding to the operation screen displayed on the display unit 11 of the operation panel 10 to the terminal device 3. At this time, the image processing device 2 generates an operation screen corresponding to the usable language of the user and transmits the operation screen to the terminal device 3. Then, when receiving the operation information for the operation screen from the terminal device 3, the image processing device 2 performs processing based on the operation information. The image processing device 2 can also cause the terminal device 3 to reproduce and output voice guidance by transmitting voice data to the terminal device 3. At this time, the image processing device 2 transmits, to the terminal device 3, audio data corresponding to the usable language of the user. As described above, the image processing device 2 provides the user using the terminal device 3 with the guidance information 72 by providing the terminal device 3 with the guidance information 72 such as screen data and voice data usable by the user. It is possible to guide based on the operation.

一方、端末装置3は、各種情報を表示するためのカラー液晶ディスプレイなどで構成される表示部40を有している。また端末装置3には、後述するように、画像処理装置2と通信を行って遠隔制御するための遠隔制御プログラム47(図3参照)が予めインストールされている。端末装置3は、その遠隔制御プログラム47を実行することにより、画像処理装置2との通信を行う。端末装置3は、画像処理装置2との通信を開始すると、ユーザーの使用可能言語に関する言語情報70を画像処理装置2へ送信する。これにより、端末装置3は、ユーザーの使用可能な言語に対応する案内情報72を取得することができる。   On the other hand, the terminal device 3 has a display unit 40 configured of a color liquid crystal display or the like for displaying various information. Further, as described later, a remote control program 47 (see FIG. 3) for performing remote control by communicating with the image processing apparatus 2 is installed in the terminal device 3 in advance. The terminal device 3 communicates with the image processing device 2 by executing the remote control program 47. When the terminal device 3 starts communication with the image processing device 2, the terminal device 3 transmits, to the image processing device 2, language information 70 related to the usable language of the user. Thereby, the terminal device 3 can acquire the guidance information 72 corresponding to the language usable by the user.

端末装置3は、画像処理装置2から画面データや音声データなどの案内情報72を受信すると、その案内情報72に基づいてユーザーに各種操作を案内する。例えば案内情報72に画面データが含まれる場合、端末装置3は、その画面データに基づく操作画面を表示部40に表示する。これにより、ユーザーは、端末装置3において表示される操作画面に対する操作を行うことで画像処理装置2の遠隔操作を行うことができる。   When the terminal device 3 receives the guidance information 72 such as screen data and voice data from the image processing device 2, the terminal device 3 guides the user to various operations based on the guidance information 72. For example, when screen data is included in the guidance information 72, the terminal device 3 displays an operation screen based on the screen data on the display unit 40. Thus, the user can remotely operate the image processing apparatus 2 by performing an operation on the operation screen displayed on the terminal device 3.

また案内情報72に音声データが含まれる場合、端末装置3は、その音声データに基づく音声ガイダンスを再生出力する。例えば、画像処理装置2において紙詰まりなどのエラーが発生した場合、画像処理装置2はそのエラーを解消するための手順などを示す案内情報72を音声データとして端末装置3へ送信する。これにより、ユーザーは、端末装置3の表示画面を見なくても、画像処理装置2のどの扉を開けば用紙を撤去することができるかを容易に把握することができるようになる。   When voice information is included in the guidance information 72, the terminal device 3 reproduces and outputs voice guidance based on the voice data. For example, when an error such as a paper jam occurs in the image processing device 2, the image processing device 2 transmits guidance information 72 indicating a procedure for eliminating the error as voice data to the terminal device 3. As a result, the user can easily grasp which door of the image processing apparatus 2 can be removed to open the sheet without looking at the display screen of the terminal device 3.

[1.2.画像処理装置2の構成]
図2は、画像処理装置2のハードウェア構成及び機能構成の一例を示す図である。画像処理装置2は、操作パネル10と、ネットワークインタフェース13と、無線通信部14と、記憶部15と、スキャナ部16と、プリンタ部17と、FAX部18と、制御部19とを備えている。
[1.2. Configuration of Image Processing Device 2]
FIG. 2 is a diagram showing an example of the hardware configuration and the functional configuration of the image processing apparatus 2. The image processing apparatus 2 includes an operation panel 10, a network interface 13, a wireless communication unit 14, a storage unit 15, a scanner unit 16, a printer unit 17, a FAX unit 18, and a control unit 19. .

操作パネル10は、上述した表示部11の他、操作部12を備えている。操作部12は、例えば表示部11の表示画面上に配置されるタッチパネルキーと、表示部11の表示画面の周囲に配置される押しボタンキーとによって構成され、ユーザーによる操作を受け付ける。   The operation panel 10 includes an operation unit 12 in addition to the display unit 11 described above. The operation unit 12 includes, for example, touch panel keys arranged on the display screen of the display unit 11 and push button keys arranged around the display screen of the display unit 11, and receives an operation by the user.

ネットワークインタフェース13は、画像処理装置2をLANなどのネットワークに接続するものである。無線通信部14は、Bluetooth(登録商標)や、WiFi、NFC(Near Field Communication)などの無線通信を行うものであり、例えば端末装置3と1対1の通信を行うことができる。   The network interface 13 connects the image processing apparatus 2 to a network such as a LAN. The wireless communication unit 14 performs wireless communication such as Bluetooth (registered trademark), WiFi, NFC (Near Field Communication), etc., and can perform, for example, one-to-one communication with the terminal device 3.

記憶部15は、ハードディスクドライブ(HDD)やソリッドステートドライブ(SSD)などによって構成される不揮発性の記憶装置である。この記憶部15は、様々なプログラムやデータなどを記憶しておくものである。例えば記憶部15には、図2に示すように画像処理装置2において実行されるプログラム20、操作パネル10の表示部11で表示する操作画面に関する画面データ21、画面データ21を生成するための画面構成パーツ(コンテンツ)である画面パーツデータ22などが記憶される。   The storage unit 15 is a non-volatile storage device configured by a hard disk drive (HDD), a solid state drive (SSD), or the like. The storage unit 15 stores various programs, data, and the like. For example, as shown in FIG. 2, the storage unit 15 includes a program 20 executed by the image processing apparatus 2, screen data 21 related to an operation screen displayed on the display unit 11 of the operation panel 10, and a screen Screen part data 22 etc. which are constituent parts (content) are stored.

画面パーツデータ22には、それぞれ異なる言語である複数の画面パーツデータ22a,22b,22cが含まれる。これらの画面パーツデータ22a,22b,22cは、画像処理装置2において設定可能な言語ごとに予め用意されているデータである。例えば画面パーツデータ22aは日本語の画面データ21を作成するために用いられるデータであり、画面パーツデータ22bは英語の画面データ21を作成するために用いられるパーツデータであり、さらに画面パーツデータ22cは中国語の画面データ21を作成するために用いられるパーツデータである。尚、記憶部15には、さらに他の言語の画面パーツデータが記憶されていても良い。   The screen parts data 22 includes a plurality of screen parts data 22a, 22b and 22c in different languages. These screen part data 22 a, 22 b and 22 c are data prepared in advance for each language settable in the image processing apparatus 2. For example, the screen part data 22a is data used to create the screen data 21 in Japanese, the screen parts data 22b is parts data used to create the screen data 21 in English, and the screen parts data 22c Is part data used to create Chinese screen data 21. The storage unit 15 may further store screen parts data of another language.

そして画像処理装置2は、管理者によって設定される設定言語に基づき、その設定言語に対応する操作画面の画面データ21を予め生成して記憶部15に保存している。例えば、管理者によって英語が設定言語として設定されている場合、画像処理装置2は、予め英語の画面パーツデータ22bを組み合わせて、コピー機能、キャン機能、プリント機能、FAX機能、BOX機能などの各種機能を操作するための英語の操作画面を予め生成し、それらの操作画面に対応する画面データ21を記憶部15に保存する。   Then, the image processing apparatus 2 generates screen data 21 of the operation screen corresponding to the setting language in advance based on the setting language set by the administrator, and stores the screen data 21 in the storage unit 15. For example, when English is set as the setting language by the administrator, the image processing apparatus 2 combines the screen part data 22b in English in advance to obtain various functions such as a copy function, a scan function, a print function, a fax function, and a BOX function. English operation screens for operating the functions are generated in advance, and screen data 21 corresponding to the operation screens is stored in the storage unit 15.

これに対し、画像処理装置2は、設定言語とは異なる言語の操作画面を予め生成しない。これにより、記憶部15の記憶領域が、使用されない操作画面の画面データによって占有されることを防止することができる。そのため、設定言語とは異なる言語に対応する操作画面については画面データ21として記憶部15に予め格納されるのではなく、各画面の構成要素が画面パーツデータ22a,22b,22cとして記憶部15に保持されることになる。   On the other hand, the image processing apparatus 2 does not generate in advance an operation screen of a language different from the setting language. As a result, it is possible to prevent the storage area of the storage unit 15 from being occupied by screen data of an operation screen that is not used. Therefore, the operation screen corresponding to a language different from the setting language is not stored in advance in the storage unit 15 as the screen data 21 but the components of each screen are stored in the storage unit 15 as the screen part data 22a, 22b, 22c. It will be held.

また記憶部15には、端末装置3の音声出力部42で再生される音声ガイダンス用のデータであって、画像処理装置2の設定言語に対応する音声データ23と、それぞれ異なる言語である複数の音声データ24a,24b,24cを含む音声データ群24とが記憶される。例えば、画像処理装置2の設定言語に対応する音声データ23はそのまま再生可能な状態で記憶部15に保存されるのに対し、音声データ群24に含まれる複数の音声データ24a,24b,24cは圧縮された状態で記憶部15に保存される。尚、図2では、音声データ群24に、日本語、英語及び中国語の3つの言語に対応する音声データ24a,24b,24cが含まれる場合を例示しているが、これら以外の言語の音声データが含まれるものであっても構わない。   The storage unit 15 is data for voice guidance to be reproduced by the voice output unit 42 of the terminal device 3, and a plurality of voice data 23 corresponding to the setting language of the image processing device 2 and different languages. A voice data group 24 including voice data 24a, 24b, 24c is stored. For example, while the audio data 23 corresponding to the setting language of the image processing apparatus 2 is stored in the storage unit 15 in a reproducible state as it is, the plurality of audio data 24a, 24b, 24c included in the audio data group 24 are It is stored in the storage unit 15 in a compressed state. Although FIG. 2 exemplifies a case where the voice data group 24 includes voice data 24a, 24b and 24c corresponding to three languages of Japanese, English and Chinese, voices of languages other than these are illustrated. Data may be included.

上述したように画面データ21は、画面パーツデータ22を組み合わせることにより、操作画面の設定言語に対応する画面データとして生成されている。例えば画像処理装置2の管理者などによって予め設定される操作画面の設定言語が英語である場合の画面データ21は図4(a)のようなものとなる。この画面データ21は、例えば画面枠を規定する基本画面21aの所定位置に、設定言語である英語の画面パーツデータ22bが配置された構成の画像として生成されるデータである。すなわち、基本画面21aは、設定言語に依存せず、どのような言語にも共通して利用される画像である。これに対し、画面パーツデータ22a,22b,22cは、操作キーなどの画面パーツに対して画像処理装置2の設定言語に応じた文字列等が付与された画像データである。そのため、設定言語が英語であれば、英語の画面パーツデータ22bが基本画面21aに配置された画面データ21が予め生成され、記憶部15に保存されることになる。   As described above, the screen data 21 is generated as screen data corresponding to the setting language of the operation screen by combining the screen parts data 22. For example, the screen data 21 when the setting language of the operation screen set in advance by the administrator of the image processing apparatus 2 is English is as shown in FIG. 4A. The screen data 21 is, for example, data generated as an image having a configuration in which screen part data 22b in English, which is a set language, is arranged at a predetermined position of a basic screen 21a defining a screen frame. That is, the basic screen 21a is an image commonly used for any language regardless of the setting language. On the other hand, the screen part data 22a, 22b, 22c is image data in which a character string or the like corresponding to the setting language of the image processing apparatus 2 is added to the screen parts such as operation keys. Therefore, if the setting language is English, the screen data 21 in which the screen part data 22b in English is arranged on the basic screen 21a is generated in advance and stored in the storage unit 15.

ここで、操作画面の設定言語が管理者によって英語から日本語に変更された場合、後述する案内情報生成部31は、記憶部15に保存されている画面パーツデータ22から日本語の画面パーツデータ22aを読み出し、その画面パーツデータ22aを基本画面21aに配置して日本語に対応する新たな画面データ21を生成する。例えば図4(a)に示す英語の画面パーツデータ22bを日本語の画面パーツデータ22aに置き換えていくことにより、図4(b)に示す日本語に対応した画面データ21を生成するようにしても良い。したがって、操作画面の設定言語が変更された場合には、案内情報生成部31が新たな操作画面を生成するための処理時間が発生する。   Here, when the setting language of the operation screen is changed from English to Japanese by the administrator, the guidance information generation unit 31 to be described later outputs screen part data of Japanese from the screen parts data 22 stored in the storage unit 15 22a is read out, the screen part data 22a is arranged on the basic screen 21a, and new screen data 21 corresponding to Japanese is generated. For example, by replacing the screen part data 22b in English shown in FIG. 4A with screen part data 22a in Japanese, screen data 21 corresponding to Japanese shown in FIG. 4B is generated. Also good. Therefore, when the setting language of the operation screen is changed, processing time for the guidance information generation unit 31 to generate a new operation screen occurs.

スキャナ部16は、ユーザーによってコピー機能、スキャン機能、FAX送信機能などが選択された場合に動作し、ユーザーによってセットされた原稿の画像を光学的に読み取って画像データを生成するものである。プリンタ部17は、ユーザーによってコピー機能又はプリント機能が選択された場合、或いは、FAX部18が公衆電話回線からFAXデータを受信した場合に動作し、入力する画像データに基づいて印刷用紙などに画像形成を行って印刷出力するものである。FAX部18は、公衆電話回線を介してFAXデータの送受信を行うものである。   The scanner unit 16 operates when the copy function, the scan function, the FAX transmission function, and the like are selected by the user, and optically reads an image of a document set by the user to generate image data. The printer unit 17 operates when the copy function or the print function is selected by the user, or when the FAX unit 18 receives FAX data from a public telephone line, and an image is printed on a printing sheet based on the input image data. It forms and prints out. The FAX unit 18 transmits and receives FAX data via a public telephone line.

制御部19は、図示を省略するCPUやメモリなどを備えて構成され、CPUがプログラム20を読み出して実行することにより、上述した各部の動作を制御する。特に本実施形態では、CPUがプログラム20を実行することにより、制御部19は、ネットワークインタフェース13又は無線通信部14を介して端末装置3と通信を行い、端末装置3を使用しているユーザーに対して各種操作を案内するように構成される。例えば制御部19は、端末装置3からユーザーの使用可能言語に関する言語情報を取得し、その言語情報に基づいてユーザーに各種操作を案内するときの言語を決定する。そして制御部19は、その決定した言語に対応する案内情報72を生成して端末装置3へ送信することにより、ユーザーが容易に案内情報72によって案内される操作内容を把握できるようにする。一例を挙げると、制御部19は、操作パネル10の表示部11に表示している操作画面に対応する画面データ21を生成して端末装置3へ送信するとき、表示部11に表示している操作画面の言語がユーザーの使用可能言語であるか否かを判定し、ユーザーの使用可能言語でない場合にはユーザーの使用可能言語に対応する操作画面を生成する。   The control unit 19 includes a CPU, a memory, and the like (not shown), and the CPU reads and executes the program 20 to control the operations of the above-described units. In particular, in the present embodiment, when the CPU executes the program 20, the control unit 19 communicates with the terminal device 3 through the network interface 13 or the wireless communication unit 14, and the user using the terminal device 3 It is configured to guide various operations. For example, the control unit 19 acquires language information on the usable language of the user from the terminal device 3, and determines the language for guiding the user to various operations based on the language information. Then, the control unit 19 generates guidance information 72 corresponding to the determined language and transmits it to the terminal device 3 so that the user can easily grasp the operation content guided by the guidance information 72. For example, when the control unit 19 generates screen data 21 corresponding to the operation screen displayed on the display unit 11 of the operation panel 10 and transmits the screen data 21 to the terminal device 3, the control unit 19 displays the screen data 21 on the display unit 11. It is determined whether the language of the operation screen is the user's available language, and if it is not the user's available language, an operation screen corresponding to the user's available language is generated.

このような制御部19は、CPUがプログラム20を実行することにより、情報受信部30、案内情報生成部31、案内情報送信部32、操作位置特定部33及びジョブ制御部34として機能する。これら各処理部は、例えば画像処理装置2が端末装置3との通信を開始することによって機能する。   The control unit 19 functions as an information reception unit 30, a guidance information generation unit 31, a guidance information transmission unit 32, an operation position specification unit 33, and a job control unit 34 when the CPU executes the program 20. Each of these processing units functions when, for example, the image processing device 2 starts communication with the terminal device 3.

情報受信部30は、ネットワークインタフェース13又は無線通信部14を介して端末装置3から送信される情報を受信する処理部である。画像処理装置2は、端末装置3との通信を開始すると、端末装置3からユーザーの使用可能言語に関する言語情報70を受信する。また画像処理装置2は、言語情報70と共に、後述する優先処理情報71を受信することもある。情報受信部30は、端末装置3から言語情報70や優先処理情報71を受信すると、それらの情報を案内情報生成部31へ出力する。また画像処理装置2が端末装置3に対して操作画面の画面データを含む案内情報72を送信した後に端末装置3から操作画面に対する操作情報74を受信すると、情報受信部30は、操作情報74を操作位置特定部33へ出力する。   The information receiving unit 30 is a processing unit that receives information transmitted from the terminal device 3 via the network interface 13 or the wireless communication unit 14. When the image processing device 2 starts communication with the terminal device 3, the image processing device 2 receives, from the terminal device 3, language information 70 related to the usable language of the user. The image processing apparatus 2 may also receive priority processing information 71 described later along with the language information 70. When receiving the language information 70 and the priority process information 71 from the terminal device 3, the information receiving unit 30 outputs the information to the guidance information generating unit 31. When the image processing device 2 transmits the guidance information 72 including the screen data of the operation screen to the terminal device 3 and then receives the operation information 74 for the operation screen from the terminal device 3, the information receiving unit 30 receives the operation information 74. Output to the operation position specifying unit 33.

案内情報生成部31は、端末装置3に送信するための案内情報72を生成する処理部である。案内情報生成部31は、端末装置3から受信する言語情報70に基づき、ユーザーの使用可能言語を判別し、端末装置3に対して送信すべき案内情報72の言語を決定する。言語情報70にユーザーが使用可能な複数の言語に関する情報が含まれる場合、案内情報生成部31は、それら複数の言語のうちのいずれか1つの言語を案内情報72の言語として決定する。そして案内情報生成部31は、決定した言語に対応する案内情報72を生成する。   The guidance information generation unit 31 is a processing unit that generates the guidance information 72 to be transmitted to the terminal device 3. The guidance information generation unit 31 determines the usable language of the user based on the language information 70 received from the terminal device 3 and determines the language of the guidance information 72 to be transmitted to the terminal device 3. When the language information 70 includes information on a plurality of languages usable by the user, the guidance information generation unit 31 determines one of the plurality of languages as the language of the guidance information 72. Then, the guidance information generation unit 31 generates the guidance information 72 corresponding to the determined language.

例えば端末装置3において表示すべき操作画面を案内情報72として送信する場合、案内情報生成部31は、操作パネル10の表示部11に表示している操作画面と同じ内容の操作画面であって、ユーザーが使用可能な言語に対応する操作画面を生成する。このとき操作パネル10の表示部11に表示している操作画面の言語が、案内情報72のために決定した言語と同じである場合、案内情報生成部31は、記憶部15に保存されている画面データ21を読み出し、その画面データ21を含む案内情報72を生成する。そのため、画像処理装置2の設定言語が案内情報72の言語と同じであれば、端末装置3に対して送信すべき案内情報72を案内情報生成部31が速やかに取得することができる。これに対し、記憶部15に保存されている画面データ21の言語が案内情報72のために決定された言語と異なる場合、案内情報生成部31は、画面パーツデータ22の中から案内情報72の言語に対応するデータを読み出して新たな画面データ21を生成する。したがって、記憶部15に保存されている画面データ21の言語が案内情報72の言語と異なる場合には、案内情報生成部31が端末装置3に対して送信すべき案内情報72を準備するまでに一定の時間を要することになる。   For example, when the operation screen to be displayed on the terminal device 3 is transmitted as the guidance information 72, the guidance information generation unit 31 is an operation screen having the same content as the operation screen displayed on the display unit 11 of the operation panel 10. Generate an operation screen corresponding to the languages available to the user. At this time, when the language of the operation screen displayed on the display unit 11 of the operation panel 10 is the same as the language determined for the guidance information 72, the guidance information generation unit 31 is stored in the storage unit 15. The screen data 21 is read out, and guidance information 72 including the screen data 21 is generated. Therefore, when the setting language of the image processing device 2 is the same as the language of the guidance information 72, the guidance information generation unit 31 can quickly acquire the guidance information 72 to be transmitted to the terminal device 3. On the other hand, when the language of the screen data 21 stored in the storage unit 15 is different from the language determined for the guidance information 72, the guidance information generation unit 31 selects the guidance information 72 from the screen parts data 22. Data corresponding to the language is read out to generate new screen data 21. Therefore, when the language of the screen data 21 stored in the storage unit 15 is different from the language of the guidance information 72, the guidance information generation unit 31 prepares the guidance information 72 to be transmitted to the terminal device 3. It will take a certain amount of time.

また案内情報生成部31は、端末装置3において音声ガイダンスとして出力すべき音声データを案内情報72として送信する場合、記憶部15に記憶されている音声データ23の言語が案内情報72の言語と同じであれば、記憶部15に記憶されている音声データ23を読み出し、その音声データ23を含む案内情報72を生成する。これに対し、記憶部15に記憶されている音声データ23の言語が案内情報72の言語と異なる場合、案内情報生成部31は、音声データ群24の中から案内情報72の言語に対応する圧縮状態の音声データを読み出して復元することにより、端末装置3に対して送信すべき新たな音声データ23を生成する。したがって、記憶部15に保存されている音声データ23の言語が案内情報72の言語と異なる場合には、案内情報生成部31が端末装置3に対して送信すべき音声データ23を準備するまでに一定の時間を要することになる。   When the guidance information generation unit 31 transmits voice data to be output as voice guidance in the terminal device 3 as the guidance information 72, the language of the voice data 23 stored in the storage unit 15 is the same as the language of the guidance information 72. If so, the voice data 23 stored in the storage unit 15 is read out, and the guidance information 72 including the voice data 23 is generated. On the other hand, when the language of the voice data 23 stored in the storage unit 15 is different from the language of the guidance information 72, the guidance information generation unit 31 compresses the voice data group 24 corresponding to the language of the guidance information 72. By reading out and restoring the voice data of the state, new voice data 23 to be transmitted to the terminal device 3 is generated. Therefore, when the language of the voice data 23 stored in the storage unit 15 is different from the language of the guidance information 72, by the time the guidance information generation unit 31 prepares the voice data 23 to be transmitted to the terminal device 3. It will take a certain amount of time.

案内情報生成部31は、上記のようにして端末装置3に送信すべき案内情報72を生成すると、その案内情報72を案内情報送信部32へ送信する。案内情報送信部32は、ネットワークインタフェース13又は無線通信部14を介して案内情報72を端末装置3に送信する処理部である。例えば、案内情報生成部31によって生成される案内情報72に、端末装置3において表示すべき操作画面の画面データ21が含まれている場合、案内情報送信部32は、画面データ21を含む案内情報72を送信し、端末装置3にユーザーが操作することが可能な操作画面を表示させる。また案内情報生成部31によって生成される案内情報72に、端末装置3において再生出力すべき音声データ23が含まれている場合、案内情報送信部32は、音声データ23を含む案内情報72を送信し、端末装置3に音声ガイダンスを行わせる。   When the guidance information generation unit 31 generates the guidance information 72 to be transmitted to the terminal device 3 as described above, the guidance information generation unit 31 transmits the guidance information 72 to the guidance information transmission unit 32. The guidance information transmission unit 32 is a processing unit that transmits the guidance information 72 to the terminal device 3 via the network interface 13 or the wireless communication unit 14. For example, when the guidance information 72 generated by the guidance information generation unit 31 includes the screen data 21 of the operation screen to be displayed on the terminal device 3, the guidance information transmission unit 32 includes guidance information including the screen data 21. 72 is sent to display an operation screen on which the user can operate the terminal device 3. When the guidance information 72 generated by the guidance information generation unit 31 includes the voice data 23 to be reproduced and output on the terminal device 3, the guidance information transmission unit 32 transmits the guidance information 72 including the voice data 23. And the terminal device 3 to give voice guidance.

操作位置特定部33は、端末装置3から受信する操作情報74に基づいて端末装置3のユーザーがタッチ操作などを行った操作位置を特定する処理部である。すなわち、操作情報74には、端末装置3のユーザーがタッチ操作などを行った位置の座標情報が含まれており、操作位置特定部33は、その座標情報に基づいて操作画面内における操作位置を特定する。そして操作位置特定部33は、その操作位置にある操作キーなどを特定し、ジョブ制御部34又は案内情報生成部31に対して操作キーが操作されたことを通知する。   The operation position specifying unit 33 is a processing unit that specifies an operation position at which the user of the terminal device 3 has performed a touch operation or the like based on the operation information 74 received from the terminal device 3. That is, the operation information 74 includes coordinate information of the position where the user of the terminal device 3 has performed a touch operation or the like, and the operation position specifying unit 33 determines the operation position in the operation screen based on the coordinate information. Identify. Then, the operation position specifying unit 33 specifies an operation key or the like at the operation position, and notifies the job control unit 34 or the guidance information generation unit 31 that the operation key is operated.

案内情報生成部31は、操作位置特定部33によって端末装置3のユーザーが行った操作に関する通知を受信すると、ユーザーの操作に応じて案内情報72を更新する必要があるか否かを判別する。例えばユーザーの操作に応じて操作画面を更新する必要がある場合、案内情報生成部31は、案内情報72を更新する必要があると判断する。そして案内情報生成部31は、ユーザーの操作に応じた新たな操作画面の画面データ21を生成し、新たな案内情報72を案内情報送信部32へ出力する。案内情報送信部32は、案内情報生成部31によって新たな案内情報72が生成される都度、その案内情報72を端末装置3へ送信する。   When the guidance information generation unit 31 receives the notification about the operation performed by the user of the terminal device 3 by the operation position identification unit 33, the guidance information generation unit 31 determines whether or not the guidance information 72 needs to be updated according to the user operation. For example, when it is necessary to update the operation screen according to the user's operation, the guidance information generation unit 31 determines that the guidance information 72 needs to be updated. Then, the guidance information generation unit 31 generates screen data 21 of a new operation screen according to the user's operation, and outputs the new guidance information 72 to the guidance information transmission unit 32. The guidance information transmission unit 32 transmits the guidance information 72 to the terminal device 3 each time a new guidance information 72 is generated by the guidance information generation unit 31.

また画像処理装置2において紙詰まりなどのエラーが発生している場合において、ユーザーが開閉扉などを開いた場合、制御部19は図示を省略するセンサーなどによって下位へ扉が開放されたことを検知する。そのような場合、案内情報生成部31は、次にユーザーが行うべき操作を示す音声データ23を生成し、その音声データ23を含む案内情報72を案内情報送信部32へ出力する。案内情報送信部32は、案内情報生成部31によって音声データ23を含む案内情報72が生成される都度、その案内情報72を端末装置3へ送信する。したがって、画像処理装置2において紙詰まりなどのエラーが発生しているときには、ユーザーが画像処理装置2に対してエラーを解消するための手順を1つ進める度に、端末装置3から次の手順が音声ガイダンスとして出力されるようになる。   When an error such as a paper jam occurs in the image processing apparatus 2 and the user opens the open / close door, the control unit 19 detects that the door is opened downward by a sensor (not shown) or the like. Do. In such a case, the guidance information generation unit 31 generates voice data 23 indicating an operation to be performed by the user next, and outputs the guidance information 72 including the voice data 23 to the guidance information transmission unit 32. The guidance information transmission unit 32 transmits the guidance information 72 to the terminal device 3 each time the guidance information generation unit 31 generates the guidance information 72 including the voice data 23. Therefore, when an error such as a paper jam has occurred in the image processing apparatus 2, every time the user advances the procedure for eliminating the error to the image processing apparatus 2, the following procedure is performed from the terminal device 3 It will be output as voice guidance.

ジョブ制御部34は、画像処理装置2におけるジョブの実行を制御するものである。ジョブ制御部34は、ユーザーによって行われた操作がジョブの実行開始を指示するものである場合に機能し、スキャナ部16、プリンタ部17及びFAX部18のそれぞれを駆動し、ユーザーによって指定されたジョブの実行を制御する。   The job control unit 34 controls the execution of a job in the image processing apparatus 2. The job control unit 34 functions when the operation performed by the user instructs to start the execution of a job, and drives each of the scanner unit 16, the printer unit 17, and the FAX unit 18, and is designated by the user. Control job execution.

[1.3.端末装置3の構成]
図3は、端末装置3のハードウェア構成及び機能構成の一例を示す図である。端末装置3は、表示部40と、操作部41と、音声出力部42と、ネットワークインタフェース43と、無線通信部44と、制御部45と、記憶部46とを備えている。操作部41は、例えば表示部40の表示画面上に配置されるタッチパネルによって構成され、ユーザーによる操作を受け付ける。記憶部46は、ハードディスクドライブ(HDD)やソリッドステートドライブ(SSD)などによって構成される不揮発性の記憶装置であり、端末装置3に予めインストールされる遠隔制御プログラム47や各種のアプリケーションプログラム48を記憶する。ネットワークインタフェース43は、端末装置3をLANなどのネットワークに接続するものである。無線通信部44は、Bluetooth(登録商標)やWiFi、NFC(Near Field Communication)などの無線通信を行うものであり、例えば画像処理装置2と1対1の通信を行う。
[1.3. Configuration of Terminal Device 3]
FIG. 3 is a diagram showing an example of the hardware configuration and the functional configuration of the terminal device 3. The terminal device 3 includes a display unit 40, an operation unit 41, an audio output unit 42, a network interface 43, a wireless communication unit 44, a control unit 45, and a storage unit 46. The operation unit 41 is formed of, for example, a touch panel disposed on the display screen of the display unit 40, and receives an operation by the user. The storage unit 46 is a non-volatile storage device configured by a hard disk drive (HDD), a solid state drive (SSD), or the like, and stores the remote control program 47 and various application programs 48 installed in advance in the terminal device 3 Do. The network interface 43 connects the terminal device 3 to a network such as a LAN. The wireless communication unit 44 performs wireless communication such as Bluetooth (registered trademark), WiFi, NFC (Near Field Communication), etc., and performs, for example, one-to-one communication with the image processing apparatus 2.

制御部45は、図示を省略するCPUやメモリなどを備えて構成される。制御部45は、端末装置3の電源投入時にオペレーティングシステム49を起動させる。そしてオペレーティングシステム49の起動中にユーザーが遠隔制御プログラム47の実行を指示すると、CPUが遠隔制御プログラム47を読み出して実行する。これにより、制御部45は、オペレーティングシステム49上において画像処理装置2を遠隔制御するための遠隔制御アプリケーション50を機能させる。   The control unit 45 includes a CPU, a memory, and the like which are not shown. The control unit 45 activates the operating system 49 when the terminal device 3 is powered on. Then, when the user instructs to execute the remote control program 47 while the operating system 49 is activated, the CPU reads out and executes the remote control program 47. Thereby, the control unit 45 causes the remote control application 50 for remotely controlling the image processing apparatus 2 on the operating system 49 to function.

また制御部45は、ユーザーの指示に基づいて各種のアプリケーションプログラム48を実行することもできる。制御部45においてアプリケーションプログラム48が実行されることにより、端末装置3においてメールアプリケーションや音声入力アプリケーション、チャットアプリケーション、Webブラウザアプリケーションなどが起動し、ユーザーがそれらのアプリケーションによる機能を利用することができるようになる。   The control unit 45 can also execute various application programs 48 based on the user's instruction. By executing the application program 48 in the control unit 45, a mail application, a voice input application, a chat application, a web browser application and the like are activated in the terminal device 3 so that the user can use the function of these applications. become.

遠隔制御アプリケーション50は、ネットワークインタフェース13又は無線通信部14を介して画像処理装置2と通信を行い、画像処理装置2と連携した動作を行う。すなわち、遠隔制御アプリケーション50は、制御部45において起動すると、まずネットワークインタフェース43又は無線通信部44を介して通信可能な画像処理装置2を検索し、その検索結果に基づいて一の画像処理装置2との通信を開始する。検索によって複数の画像処理装置2が検出された場合、遠隔制御アプリケーション50は、例えばそれら複数の画像処理装置2のうちから通信対象となる画像処理装置2をユーザーに選択させ、ユーザーによって選択された一の画像処理装置2と通信を開始する。   The remote control application 50 communicates with the image processing apparatus 2 via the network interface 13 or the wireless communication unit 14, and performs an operation in cooperation with the image processing apparatus 2. That is, when the remote control application 50 is activated in the control unit 45, first, the communicable image processing device 2 is searched via the network interface 43 or the wireless communication unit 44, and one image processing device 2 is searched based on the search result. Start communicating with When a plurality of image processing apparatuses 2 are detected by the search, the remote control application 50 causes the user to select an image processing apparatus 2 to be communicated from among the plurality of image processing apparatuses 2, for example, and the user selects Communication with one image processing apparatus 2 is started.

遠隔制御アプリケーション50は、画像処理装置2との通信を開始すると、まず端末装置3のユーザーの使用可能言語に関する言語情報70を画像処理装置2へ送信する。そして遠隔制御アプリケーション50は、画像処理装置2からユーザーの使用可能な言語に対応する案内情報72を受信すると、その案内情報72に基づいてユーザーが行う操作を案内する。例えば、画像処理装置2から受信する案内情報72に操作画面の画面データ21が含まれている場合、遠隔制御アプリケーション50は、その画面データ21に基づいて表示部40にユーザーが操作可能な操作画面を表示する。そしてユーザーが操作画面に対する操作を行った場合、遠隔制御アプリケーション50は、ユーザーの操作に基づく操作情報74を生成し、その操作情報74を画像処理装置2へ送信する。このような遠隔制御アプリケーション50は、案内情報受信部51、優先処理決定部52、情報収集部53、言語情報生成部54、出力制御部55、操作情報生成部56、情報送信部57を備えている。   When communication with the image processing device 2 is started, the remote control application 50 first transmits, to the image processing device 2, language information 70 related to the usable language of the user of the terminal device 3. Then, when receiving the guidance information 72 corresponding to the user usable language from the image processing apparatus 2, the remote control application 50 guides the operation performed by the user based on the guidance information 72. For example, when the guidance information 72 received from the image processing apparatus 2 includes the screen data 21 of the operation screen, the remote control application 50 can operate the operation screen on which the user can operate the display unit 40 based on the screen data 21. Display Then, when the user performs an operation on the operation screen, the remote control application 50 generates operation information 74 based on the user's operation, and transmits the operation information 74 to the image processing apparatus 2. The remote control application 50 includes a guidance information receiving unit 51, a priority process determining unit 52, an information collecting unit 53, a language information generating unit 54, an output control unit 55, an operation information generating unit 56, and an information transmitting unit 57. There is.

言語情報生成部54は、端末装置3のユーザーが使用可能な言語に関する言語情報70を生成する処理部である。例えば遠隔制御アプリケーション50が起動すると、言語情報生成部54は、ユーザーによって予め設定されている端末装置3の設定言語をオペレーティングシステム49から取得し、その設定言語に基づいて言語情報70を生成する。   The language information generation unit 54 is a processing unit that generates the language information 70 related to languages that can be used by the user of the terminal device 3. For example, when the remote control application 50 is activated, the language information generation unit 54 acquires the setting language of the terminal device 3 preset by the user from the operating system 49, and generates the language information 70 based on the setting language.

ただし、端末装置3の設定言語は1つであることが一般的である。そのため、ユーザーが複数の言語を使用可能である場合に、端末装置3の設定言語だけに基づいて言語情報70を生成してしまうと、言語情報70に対してユーザーの使用可能言語が正確に反映されず、漏れが生じてしまうことになる。そこで本実施形態では、情報収集部53がユーザーの使用可能言語に関する情報を収集して言語情報生成部54へ通知するように構成される。   However, it is general that the setting language of the terminal device 3 is one. Therefore, when the language information 70 is generated based only on the setting language of the terminal device 3 when the user can use a plurality of languages, the user's usable language is accurately reflected on the language information 70. It will not be leaked. Therefore, in the present embodiment, the information collection unit 53 is configured to collect information on the usable language of the user and notify the language information generation unit 54 of the information.

情報収集部53は、ユーザーが利用するメールアプリケーションや音声入力アプリケーション、チャットアプリケーション、Webブラウザアプリケーションなどの他のアプリケーションの使用履歴情報を収集する処理部である。   The information collecting unit 53 is a processing unit that collects usage history information of other applications such as a mail application, a voice input application, a chat application, and a web browser application used by the user.

例えば端末装置3においてメールアプリケーションが起動して電子メールの送受信が行われると、メールアプリケーションは、電子メールの宛先、差出人、件名、本文などを履歴情報として記憶部46に保存する。また音声入力アプリケーションが起動してユーザーによる音声入力が行われると、音声入力アプリケーションは、ユーザーによる入力音声を認識し、入力音声の言語に対応したテキスト変換などを行う。そして音声入力アプリケーションは、その後の認識効率を高めるため、ユーザーの入力音声と認識結果とを対応付けた履歴情報を生成して記憶部46に保存する。またチャットアプリケーションが起動してユーザーによるチャット入力が行われると、チャットアプリケーションは、ユーザーによって入力されたテキストなどの情報を履歴情報として記憶部46に保存する。さらにWebブラウザアプリケーションが起動してユーザーがWebページの閲覧を行うと、Webブラウザアプリケーションは、ユーザーが閲覧したWebページの言語などを履歴情報として記憶部46に保存する。   For example, when the mail application is activated in the terminal device 3 and transmission / reception of electronic mail is performed, the mail application stores the destination, the sender, the subject, the text, etc. of the electronic mail in the storage unit 46 as history information. Further, when the voice input application is activated and the user performs voice input, the voice input application recognizes the user's input voice and performs text conversion corresponding to the language of the input voice. Then, the voice input application generates history information in which the user's input voice is associated with the recognition result, and stores the history information in the storage unit 46 in order to improve the recognition efficiency thereafter. In addition, when the chat application is activated and a chat input is performed by the user, the chat application stores information such as text input by the user in the storage unit 46 as history information. Furthermore, when the web browser application is activated and the user browses the web page, the web browser application stores the language of the web page browsed by the user in the storage unit 46 as history information.

情報収集部53は、上記のように各アプリケーションが記憶部46に保存している履歴情報を収集し、ユーザーが各アプリケーションで使用した言語に関する情報を含む使用履歴情報を生成する。したがって、ユーザーが各アプリケーションで端末装置3の設定言語とは異なる他の言語を使用した場合には、そのような他の言語に関する情報が使用履歴情報に含まれることとなる。そして情報収集部53は、その使用履歴情報を言語情報生成部54へ出力する。これにより、言語情報生成部54は、情報収集部53から出力される使用履歴情報を参照することにより、ユーザーが各アプリケーションを利用する際に使用した言語に基づいてユーザーの使用可能言語を特定することができるようになる。   The information collection unit 53 collects the history information stored in the storage unit 46 by each application as described above, and generates usage history information including information on the language used by the user in each application. Therefore, when the user uses another language different from the setting language of the terminal device 3 in each application, information on such another language is included in the usage history information. Then, the information collection unit 53 outputs the use history information to the language information generation unit 54. Thereby, the language information generation unit 54 specifies the usable language of the user based on the language used when the user uses each application by referring to the usage history information output from the information collection unit 53. Will be able to

図5は、そのような言語情報生成部54の詳細な構成例を示す図である。図5に示すように言語情報生成部54は、言語判別部61と、スコア算出部62と、使用可能言語判断部63と、閾値設定部65とを有している。   FIG. 5 is a view showing a detailed configuration example of such a language information generation unit 54. As shown in FIG. As shown in FIG. 5, the language information generation unit 54 includes a language determination unit 61, a score calculation unit 62, an available language determination unit 63, and a threshold setting unit 65.

言語判別部61は、情報収集部53から出力される使用履歴情報75に基づき、ユーザーが各アプリケーションを利用する際に使用した言語を判別する処理部である。例えば、言語判別部61は、メールアプリケーションの履歴情報に基づき、ユーザーが送受信した電子メールの言語を1つずつ判別していく。つまり、言語判別部61は、各アプリケーションの履歴情報に記録されている全ての情報から、ユーザーが使用した言語を判別するのである。そして言語判別部61は、ユーザーが使用した言語の判別結果をスコア算出部62へ出力する。   The language determination unit 61 is a processing unit that determines the language used when the user uses each application based on the use history information 75 output from the information collection unit 53. For example, the language determination unit 61 determines the languages of the e-mails transmitted and received by the user one by one based on the history information of the e-mail application. That is, the language determination unit 61 determines the language used by the user from all the information recorded in the history information of each application. Then, the language determination unit 61 outputs the determination result of the language used by the user to the score calculation unit 62.

スコア算出部62は、ユーザーが使用した言語ごとにリーディングスコアとリスニングスコアとを算出する処理部である。リーディングスコアとは、ある言語をユーザーがどの程度読み取ることができるかを示すスコアである。またリスニングスコアとは、ある言語をユーザーがどの程度聞き取ることができるかを示すスコアである。   The score calculation unit 62 is a processing unit that calculates a reading score and a listening score for each language used by the user. The reading score is a score indicating how much the user can read a certain language. The listening score is a score indicating how much the user can hear a certain language.

図6は、アプリケーションごとのリーディングスコアとリスニングスコアの算出ルールを示す図である。例えばメールアプリケーションの場合、スコア算出部62は、電子メールの受信のみであれば、その電子メールに用いられている言語のリーディングスコアを加点しない。これに対し、ユーザーが送信した電子メールに対する返信メールを受信した場合、或いは、ユーザーが受信した電子メールに対して返信メールを送信している場合は、電子メールの送受信回数に応じて、その電子メールに用いられている言語のリーディングスコアを加点する。またチャットアプリケーションの場合、ユーザーがテキストチャットを投稿していれば、その投稿量に応じてその言語のリーディングスコアを加点する。またユーザーがボイスチャットを投稿していれば、その投稿量に応じてその言語のリスニングスコアを加点する。またWebブラウザアプリケーションの場合、ユーザーが掲示板やSNS等への書き込み履歴に応じて、ユーザーが書き込んだ言語のリーディングスコアを加点する。さらに音声入力アプリケーションの場合、ユーザーの音声入力回数に応じて、ユーザーが入力した言語のリスニングスコアを加点する。このようにスコア算出部62は、ユーザーが複数の言語を使用する場合、各言語の使用頻度に応じたリーディングスコアとリスニングスコアとを算出する。スコア算出部62は、言語ごとのリーディングスコアとリスニングスコアとを算出すると、それらを使用可能言語判断部63へ出力する。   FIG. 6 is a diagram showing rules for calculating a reading score and a listening score for each application. For example, in the case of a mail application, the score calculation unit 62 does not add the leading score of the language used for the electronic mail if only receiving the electronic mail. On the other hand, when the reply mail to the e-mail sent by the user is received, or when the reply mail is sent to the e-mail received by the user, the electronic mail according to the number of transmission and reception of the electronic mail Add a reading score for the language used in the email. In the case of a chat application, if the user has posted a text chat, the leading score of the language is added according to the amount of the posting. Also, if the user has posted a voice chat, the listening score of the language is added according to the amount of posting. In the case of a web browser application, the user adds a reading score of the language written by the user according to the writing history on the bulletin board or SNS. Furthermore, in the case of a voice input application, the listening score of the language input by the user is added in accordance with the number of voice inputs of the user. As described above, when the user uses a plurality of languages, the score calculation unit 62 calculates a reading score and a listening score according to the frequency of use of each language. When the score calculation unit 62 calculates the reading score and the listening score for each language, the score calculation unit 62 outputs them to the usable language determination unit 63.

使用可能言語判断部63は、言語ごとのリーディングスコア及びリスニングスコアに基づき、ユーザーの使用可能言語を判断する処理部である。使用可能言語判断部63は、閾値設定部65において予め設定されている閾値76を取得し、各言語について算出されたリーディングスコア及びリスニングスコアのそれぞれが閾値76で定められるスコア以上であるか否かを判断する。そしてリーディングスコア及びリスニングスコアの少なくとも一方が閾値76で定められるスコア以上である言語を、ユーザーの使用可能言語として判断する。つまり、使用可能言語判断部63は、ユーザーが複数の言語を使用している場合、使用頻度が高い言語をユーザーの使用可能言語として特定し、使用頻度の低い言語をユーザーの使用可能言語として特定しないようにしている。そのため、リーディングスコア及びリスニングスコアの少なくとも一方が閾値76で定められるスコア以上となる言語が存在しない場合、使用可能言語判断部63は、各アプリケーションの使用履歴情報からユーザーの使用可能言語を特定することができない結果となる。   The usable language determining unit 63 is a processing unit that determines the usable language of the user based on the reading score and the listening score for each language. The usable language determining unit 63 acquires the threshold 76 preset in the threshold setting unit 65, and determines whether each of the reading score and the listening score calculated for each language is equal to or higher than the score defined by the threshold 76. To judge. Then, a language in which at least one of the reading score and the listening score is equal to or higher than the score defined by the threshold 76 is determined as the available language of the user. That is, when the user uses a plurality of languages, the available language determining unit 63 identifies the frequently used language as the available language of the user and identifies the less frequently used language as the available language of the user. I try not to. Therefore, when there is no language in which at least one of the reading score and the listening score is equal to or higher than the score defined by the threshold 76, the available language determining unit 63 identifies the usable language of the user from the usage history information of each application. Results can not be

そして使用可能言語判断部63は、リーディングスコア及びリスニングスコアのそれぞれに基づいて判断されるユーザーの使用可能言語と、オペレーティングシステム49から取得する設定言語77とに基づいて言語情報70を生成し、その言語情報70を情報送信部57へ出力する。したがって、言語情報70には、少なくともオペレーティングシステム49において保持されている端末装置3の設定言語77に関する情報が含まれることになる。   Then, the available language determining unit 63 generates the language information 70 based on the available language of the user determined based on each of the reading score and the listening score and the setting language 77 acquired from the operating system 49 The language information 70 is output to the information transmission unit 57. Therefore, the language information 70 includes at least information on the setting language 77 of the terminal device 3 held in the operating system 49.

図3に戻り、情報送信部57は、ネットワークインタフェース43又は無線通信部44を介して画像処理装置2に各種情報を送信する処理部である。例えば、情報送信部57は、言語情報生成部54から言語情報70を取得すると、その言語情報70を画像処理装置2へ送信する。また情報送信部57は、優先処理決定部52から優先処理情報を取得した場合には、その優先処理情報を画像処理装置2へ送信する。   Returning to FIG. 3, the information transmission unit 57 is a processing unit that transmits various types of information to the image processing apparatus 2 via the network interface 43 or the wireless communication unit 44. For example, when acquiring the language information 70 from the language information generation unit 54, the information transmission unit 57 transmits the language information 70 to the image processing apparatus 2. When the information transmission unit 57 acquires the priority processing information from the priority processing determination unit 52, the information transmission unit 57 transmits the priority processing information to the image processing apparatus 2.

優先処理決定部52は、画像処理装置2の案内情報生成部31において案内情報72の言語が決定されるときの優先度を決定するための処理部である。この優先処理決定部52は、例えばユーザーによって指定された場合に機能する。例えば画像処理装置2が自機の設定言語に対応する案内情報72を生成するときには、画面データ21を新たに生成したり、圧縮された音声データを復元したりする必要がないため、処理速度が向上する。これに対し、画像処理装置2が自機の設定言語とは異なる言語であって、端末装置3の設定言語77に対応する案内情報72を生成するときには、画面データ21を新たに生成したり、圧縮された音声データを復元したりする必要があるため、処理速度が低下する。その反面、ユーザーにとっては端末装置3の設定言語77と同一の言語の案内情報72であれば、理解し易く、操作性が向上する。そのため、優先処理決定部52は、処理速度優先処理と操作性優先処理とのいずれか一方をユーザーに選択させるようにしている。   The priority processing determination unit 52 is a processing unit for determining the priority when the language of the guidance information 72 is determined in the guidance information generation unit 31 of the image processing device 2. The priority processing determination unit 52 functions, for example, when specified by the user. For example, when the image processing device 2 generates the guidance information 72 corresponding to the setting language of the own device, there is no need to newly generate the screen data 21 or restore the compressed audio data, so the processing speed is improves. On the other hand, when the guidance information 72 corresponding to the setting language 77 of the terminal device 3 is generated and the image processing device 2 is a language different from the setting language of the own device, the screen data 21 is newly generated, Processing speed is reduced because compressed audio data needs to be restored. On the other hand, it is easy for the user to understand and use the guidance information 72 in the same language as the setting language 77 of the terminal device 3. Therefore, the priority process determination unit 52 causes the user to select one of the processing speed priority process and the operability priority process.

図7は、優先処理決定部52が機能した場合に端末装置3の表示部40に表示される設定画面の一例を示す図である。この画面では、処理速度優先処理と操作性優先処理とのいずれか一方をユーザーが選択することができるようになっている。そして優先処理決定部52は、ユーザーによる選択結果に基づいて優先処理情報を情報送信部57へ出力する。この優先処理情報には、処理速度優先処理と操作性優先処理とのいずれか一方を指定する情報が含まれる。情報送信部57は、優先処理決定部52から優先処理情報を受信すると、その優先処理情報を画像処理装置2へ送信する。   FIG. 7 is a view showing an example of a setting screen displayed on the display unit 40 of the terminal device 3 when the priority process determination unit 52 functions. In this screen, the user can select one of the processing speed priority processing and the operability priority processing. Then, the priority process determination unit 52 outputs the priority process information to the information transmission unit 57 based on the selection result by the user. The priority processing information includes information for specifying either processing speed priority processing or operability priority processing. When the information transmission unit 57 receives the priority processing information from the priority processing determination unit 52, the information transmission unit 57 transmits the priority processing information to the image processing apparatus 2.

画像処理装置2は、端末装置3から優先処理情報を受信した場合、その優先処理情報を案内情報生成部31へ通知する。そして案内情報生成部31は、端末装置3から送信される優先処理情報を取得すると、その優先処理情報に基づいて案内情報72の言語を決定する。   When the image processing device 2 receives the priority processing information from the terminal device 3, the image processing device 2 notifies the guidance information generation unit 31 of the priority processing information. Then, upon acquiring the priority processing information transmitted from the terminal device 3, the guidance information generation unit 31 determines the language of the guidance information 72 based on the priority processing information.

例えば優先処理情報において処理速度優先処理が指定されている場合、案内情報生成部31は、ユーザーの使用可能言語の中に、画像処理装置2の設定言語が含まれているか否かを判断し、画像処理装置2の設定言語が含まれていれば、画像処理装置2の設定言語に対応する案内情報72を生成する。これに対し、ユーザーの使用可能言語の中に、画像処理装置2の設定言語が含まれていない場合、案内情報生成部31は、端末装置3の設定言語77に対応する案内情報72を生成する。   For example, when the processing speed priority processing is designated in the priority processing information, the guidance information generation unit 31 determines whether the setting language of the image processing apparatus 2 is included in the usable languages of the user, If the setting language of the image processing device 2 is included, the guidance information 72 corresponding to the setting language of the image processing device 2 is generated. On the other hand, when the setting language of the image processing device 2 is not included in the usable languages of the user, the guidance information generation unit 31 generates the guidance information 72 corresponding to the setting language 77 of the terminal device 3 .

また優先処理情報において操作性優先処理が指定されている場合、案内情報生成部31は、言語情報70に含まれる端末装置3の設定言語77に対応する案内情報72を生成する。このとき、端末装置3の設定言語77が画像処理装置2の設定言語と一致すれば、処理効率を低下させることなく、端末装置3に案内情報72を提供することができるようになる。   When operability priority processing is designated in the priority processing information, the guidance information generation unit 31 generates guidance information 72 corresponding to the setting language 77 of the terminal device 3 included in the language information 70. At this time, if the setting language 77 of the terminal device 3 matches the setting language of the image processing device 2, the guidance information 72 can be provided to the terminal device 3 without reducing the processing efficiency.

案内情報受信部51は、画像処理装置2から送信される案内情報72を受信する処理部である。案内情報受信部51は、画像処理装置2から案内情報72を受信すると、その案内情報72を出力制御部55へ出力する。出力制御部55は、案内情報受信部51によって受信された案内情報72を表示部40又は音声出力部42へ出力する処理部である。   The guidance information receiving unit 51 is a processing unit that receives the guidance information 72 transmitted from the image processing device 2. When the guidance information receiving unit 51 receives the guidance information 72 from the image processing device 2, the guidance information receiving unit 51 outputs the guidance information 72 to the output control unit 55. The output control unit 55 is a processing unit that outputs the guidance information 72 received by the guidance information receiving unit 51 to the display unit 40 or the voice output unit 42.

例えば案内情報72に画面データ21が含まれている場合、出力制御部55は、その画面データ21を表示部40へ出力することにより、画面データ21に対応する操作画面を表示部40に表示させる。このとき、表示部40に表示される操作画面は、ユーザーの使用可能言語で表示される画面となる。したがって、ユーザーは、表示部40に表示される操作画面に対して速やかに操作を行うことができる。   For example, when the screen data 21 is included in the guidance information 72, the output control unit 55 causes the display unit 40 to display the operation screen corresponding to the screen data 21 by outputting the screen data 21 to the display unit 40. . At this time, the operation screen displayed on the display unit 40 is a screen displayed in the language available to the user. Therefore, the user can operate the operation screen displayed on the display unit 40 promptly.

また案内情報72に音声データ23が含まれている場合、出力制御部55は、その音声データ23を音声出力部42へ出力することにより、音声データ23に対応する音声ガイダンスを行わせる。このとき、端末装置3から出力される音声ガイダンスは、ユーザーの使用可能言語で行われる。そのため、ユーザーは、端末装置3から出力される音声ガイダンスを容易に理解することができる。   When the guidance information 72 includes the voice data 23, the output control unit 55 outputs the voice data 23 to the voice output unit 42 to cause voice guidance corresponding to the voice data 23. At this time, the voice guidance output from the terminal device 3 is performed in the usable language of the user. Therefore, the user can easily understand the voice guidance output from the terminal device 3.

操作情報生成部56は、操作部41がユーザーの操作を受け付けた場合に機能し、ユーザーの操作に基づく操作情報を生成する処理部である。操作情報生成部56が操作情報を生成すると、その操作情報は情報送信部57へ出力される。情報送信部57は、操作情報生成部56から操作情報を受信すると、その操作情報を画像処理装置2へ送信する。これにより、ユーザーの操作に応じた新たな案内情報72を画像処理装置2から取得することができる。   The operation information generation unit 56 is a processing unit that functions when the operation unit 41 receives an operation of the user, and generates operation information based on the operation of the user. When the operation information generation unit 56 generates operation information, the operation information is output to the information transmission unit 57. When the information transmission unit 57 receives the operation information from the operation information generation unit 56, the information transmission unit 57 transmits the operation information to the image processing apparatus 2. Thereby, new guidance information 72 corresponding to the user's operation can be acquired from the image processing apparatus 2.

[2.画像処理システム1の動作]
次に上記のような画像処理システム1で行われる動作について説明する。図8は、画像処理装置2及び端末装置3で行われる動作プロセスを示す図である。まず端末装置3は、ユーザーによる指示操作に基づいて遠隔制御プログラム47を実行し、遠隔制御アプリケーション50を起動させる(プロセスP1)。端末装置3は、遠隔制御アプリケーション50を起動させると、画像処理装置2との通信状態CNを確立させる(プロセスP2)。端末装置3は、画像処理装置2との通信状態CNを確立させると、言語情報生成部54を機能させ、ユーザーの使用可能言語に関する言語情報70を生成する。そして端末装置3は、画像処理装置2に言語情報70を送信する(プロセスP3)。端末装置3は、言語情報70を画像処理装置2に送信すると、ユーザーによる操作に基づいて優先処理決定部52を機能させ、処理速度優先処理と操作性優先処理のいずれか一方を決定する。そして端末装置3は、情報送信部57を機能させ、優先処理情報71を送信する(プロセスP4)。尚、ユーザーによって処理速度優先処理と操作性優先処理のいずれか一方が選択されなかった場合、端末装置3は、操作性優先処理を指定した優先処理情報71を自動送信するようにしても良い。
[2. Operation of Image Processing System 1]
Next, an operation performed by the image processing system 1 as described above will be described. FIG. 8 is a diagram showing an operation process performed by the image processing device 2 and the terminal device 3. First, the terminal device 3 executes the remote control program 47 based on an instruction operation by the user, and activates the remote control application 50 (process P1). When the terminal device 3 activates the remote control application 50, the terminal device 3 establishes a communication state CN with the image processing device 2 (process P2). When establishing the communication state CN with the image processing apparatus 2, the terminal device 3 causes the language information generation unit 54 to function, and generates language information 70 related to the usable language of the user. Then, the terminal device 3 transmits the language information 70 to the image processing device 2 (process P3). When transmitting the language information 70 to the image processing apparatus 2, the terminal device 3 causes the priority processing determination unit 52 to function based on the operation by the user, and determines one of the processing speed priority processing and the operability priority processing. Then, the terminal device 3 causes the information transmission unit 57 to function, and transmits the priority processing information 71 (process P4). If one of the processing speed priority processing and the operability priority processing is not selected by the user, the terminal device 3 may automatically transmit the priority processing information 71 specifying the operability priority processing.

画像処理装置2は、端末装置3との通信を開始した後に端末装置3から言語情報70と優先処理情報71を受信すると、案内情報生成部31を機能させ、ユーザーの使用可能言語に対応する操作画面を生成する(プロセスP5)。   When the image processing device 2 receives the language information 70 and the priority processing information 71 from the terminal device 3 after starting communication with the terminal device 3, the image processing device 2 causes the guidance information generation unit 31 to function and the operation corresponding to the usable language of the user Generate a screen (process P5).

操作画面生成(プロセスP5)における、案内情報生成部31の具体的な動作について説明する。図9は、案内情報生成部31で行われる処理手順の一例を示すフローチャートである。案内情報生成部31は、この処理を開始すると、まず言語情報70から端末装置3の設定言語77を読み出して特定する(ステップS10)。案内情報生成部31は、端末装置3の設定言語77を特定すると、画像処理装置2の設定言語が端末装置3の設定言語77と同一であるか否かを判断する(ステップS11)。その結果、画像処理装置2の設定言語が端末装置3の設定言語77と同一である場合(ステップS11でYES)、案内情報生成部31は、画像処理装置2の設定言語を案内情報72の言語に決定する(ステップS14)。   A specific operation of the guidance information generation unit 31 in the operation screen generation (process P5) will be described. FIG. 9 is a flowchart showing an example of the processing procedure performed by the guidance information generation unit 31. When the guidance information generation unit 31 starts this processing, first, the setting language 77 of the terminal device 3 is read out from the language information 70 and specified (step S10). When the setting language 77 of the terminal device 3 is specified, the guidance information generating unit 31 determines whether the setting language of the image processing device 2 is the same as the setting language 77 of the terminal device 3 (step S11). As a result, when the setting language of the image processing device 2 is the same as the setting language 77 of the terminal device 3 (YES in step S11), the guidance information generation unit 31 sets the setting language of the image processing device 2 to the language of the guidance information 72. (Step S14).

これに対し、画像処理装置2の設定言語が端末装置3の設定言語77と異なる場合(ステップS11でNO)、案内情報生成部31は、画像処理装置2の設定言語が言語情報70に含まれているか否かを判断する(ステップS12)。その結果、画像処理装置2の設定言語が言語情報70に含まれている場合(ステップS12でYES)、案内情報生成部31は、処理速度優先処理であるか否かを判断する(ステップS13)。その結果、処理速度優先処理である場合(ステップS13でYES)、案内情報生成部31は、画像処理装置2の設定言語を案内情報72の言語に決定する(ステップS14)。   On the other hand, when the setting language of the image processing device 2 is different from the setting language 77 of the terminal device 3 (NO in step S11), the guidance information generation unit 31 includes the setting language of the image processing device 2 in the language information 70. It is determined whether or not it is (step S12). As a result, when the setting language of the image processing apparatus 2 is included in the language information 70 (YES in step S12), the guidance information generation unit 31 determines whether the processing speed priority process is performed (step S13). . As a result, when the processing speed priority processing is performed (YES in step S13), the guidance information generation unit 31 determines the setting language of the image processing device 2 as the language of the guidance information 72 (step S14).

また画像処理装置2の設定言語が言語情報70に含まれていない場合(ステップS12でNO)、或いは、処理速度優先処理ではなかった場合(ステップS13でNO)、案内情報生成部31は、端末装置3の設定言語77を案内情報72の言語に決定する(ステップS15)。   Further, when the setting language of the image processing device 2 is not included in the language information 70 (NO in step S12) or when the processing speed priority process is not performed (NO in step S13), the guidance information generation unit 31 The setting language 77 of the device 3 is determined to be the language of the guidance information 72 (step S15).

続いて案内情報生成部31は、案内情報72の言語が画像処理装置2の設定言語に決定されたか否かを判断する(ステップS16)。案内情報72の言語が画像処理装置2の設定言語に決定された場合(ステップS16でYES)、案内情報生成部31は、記憶部15から端末装置3において表示すべき操作画面に対応する画面データ21を読み出す(ステップS17)。この場合、案内情報生成部31が画面データ21を取得するまでの時間は短い。これに対し、案内情報72の言語が端末装置3の設定言語77に決定された場合(ステップS16でNO)、案内情報生成部31は、記憶部15に記憶されている画面パーツデータ22を組み合わせることにより、端末装置3において表示すべき操作画面に対応する画面データ21を新たに生成する(ステップS18)。すなわち、案内情報生成部31は、端末装置3の設定言語77に対応する操作画面の画面データ21を生成するのである。この場合、案内情報生成部31が画面データ21を取得するまでの時間は長くなる。そして案内情報生成部31は、ステップS17又はS18で取得した画面データ21を端末装置3へ送信する(ステップS19)。このような処理により、ユーザーが使用可能な言語に対応する操作画面の画面データ21が端末装置3へ送信されることになる。   Subsequently, the guidance information generation unit 31 determines whether the language of the guidance information 72 has been determined as the setting language of the image processing device 2 (step S16). When the language of the guidance information 72 is determined to be the setting language of the image processing device 2 (YES in step S16), the guidance information generation unit 31 generates screen data corresponding to the operation screen to be displayed on the terminal device 3 from the storage unit 15. 21 is read out (step S17). In this case, the time until the guidance information generation unit 31 acquires the screen data 21 is short. On the other hand, when the language of the guidance information 72 is determined to be the setting language 77 of the terminal device 3 (NO in step S16), the guidance information generation unit 31 combines the screen parts data 22 stored in the storage unit 15. Thus, the screen data 21 corresponding to the operation screen to be displayed on the terminal device 3 is newly generated (step S18). That is, the guidance information generation unit 31 generates the screen data 21 of the operation screen corresponding to the setting language 77 of the terminal device 3. In this case, the time until the guidance information generation unit 31 acquires the screen data 21 becomes long. And guidance information generation part 31 transmits screen data 21 acquired at Step S17 or S18 to terminal unit 3 (Step S19). Through such processing, the screen data 21 of the operation screen corresponding to the language that can be used by the user is transmitted to the terminal device 3.

図8に戻り、画像処理装置2は、上記のようにして操作画面の画面データ21を生成すると、画面データ21を含む案内情報72を端末装置3へ送信する(プロセスP6)。したがって、端末装置3は、画像処理装置2から受信する画面データ21に基づき、画像処理装置2を遠隔操作するための操作画面を表示することができる。   Returning to FIG. 8, when the screen data 21 of the operation screen is generated as described above, the image processing device 2 transmits the guidance information 72 including the screen data 21 to the terminal device 3 (process P6). Accordingly, the terminal device 3 can display an operation screen for remotely operating the image processing device 2 based on the screen data 21 received from the image processing device 2.

ここで、画像処理装置2から端末装置3に送信される画面データ21は、例えばビットマップ画像などのようなデータである。そのため、端末装置3は、画像処理装置2から取得した画面データ21に基づいて操作画面を表示したとしても、その操作画面がどのような言語で表示されているかを把握することができない。そこで、画像処理装置2は、端末装置3に対して案内情報72を送信することに伴い、その案内情報72がどのような言語であるかを示すべく、端末装置3に対して案内言語情報73を送信する(プロセスP7)。この案内言語情報73には、案内情報72の言語に関する情報が含まれる。そのため、端末装置3は、案内言語情報73を解析することにより、画像処理装置2から受信した案内情報72がどのような言語であるかを特定することができるようになる。尚、このような案内言語情報73は、案内情報72のヘッダー部分などに付加しても良い。   Here, the screen data 21 transmitted from the image processing device 2 to the terminal device 3 is data such as, for example, a bitmap image. Therefore, even if the terminal device 3 displays the operation screen based on the screen data 21 acquired from the image processing device 2, the terminal device 3 can not understand in what language the operation screen is displayed. Therefore, as the image processing device 2 transmits the guidance information 72 to the terminal device 3, the language information 73 for the terminal device 3 is used to indicate what language the guidance information 72 is. Is sent (process P7). The guidance language information 73 includes information on the language of the guidance information 72. Therefore, the terminal device 3 can identify what kind of language the guidance information 72 received from the image processing device 2 is by analyzing the guidance language information 73. Such guidance language information 73 may be added to the header portion of the guidance information 72 or the like.

端末装置3は、画像処理装置2から受信する案内言語情報73に基づき、案内情報72の言語を特定すると、言語設定表示付加判断を行う(プロセスP8)。つまり、端末装置3は、出力制御部55を機能させ、表示部40において表示されている操作画面の言語が端末装置3の設定言語77と異なる場合に、ユーザーが操作画面の言語を設定変更できるようにするか否かを判断するのである。   When the terminal device 3 specifies the language of the guidance information 72 based on the guidance language information 73 received from the image processing device 2, the terminal device 3 makes a language setting display addition determination (process P8). That is, when the terminal device 3 causes the output control unit 55 to function and the language of the operation screen displayed on the display unit 40 is different from the setting language 77 of the terminal device 3, the user can change the language of the operation screen It is determined whether or not to do so.

言語設定表示付加判断(プロセスP8)における、出力制御部55の具体的な動作について説明する。図10(a)は、出力制御部55で行われる処理手順の一例を示すフローチャートである。出力制御部55は、この処理を開始すると、端末装置3の設定言語77と案内情報72の言語が同一であるか否かを判断する(ステップS20)。その結果、端末装置3の設定言語77と案内情報72の言語が同一でなかった場合(ステップS20でNO)、出力制御部55は言語設定表示を操作画面に付加する(ステップS21)。図10(b)は、端末装置3の設定言語77が日本語であり、案内情報72に基づいて表示されている操作画面の言語が英語である場合に言語設定表示が付加された操作画面の一例である。この例では、操作画面の隅にユーザーが操作可能な操作キーとして、言語設定表示80が表示されている。ユーザーによって言語設定表示80が操作されると、出力制御部55は、例えば操作画面の言語を端末装置3の設定言語77に変更することが可能なサブウィンドウを表示する。この場合、ユーザーは、サブウィンドウに対する操作を行うことにより、操作画面の言語を、端末装置3の設定言語77に変更することができる。またユーザーは、端末装置3の設定言語77以外の所望の言語に変更することも可能である。   A specific operation of the output control unit 55 in the language setting display addition determination (process P8) will be described. FIG. 10A is a flowchart illustrating an example of the processing procedure performed by the output control unit 55. When the output control unit 55 starts this processing, the output control unit 55 determines whether the language of the setting language 77 of the terminal device 3 and the language of the guidance information 72 are the same (step S20). As a result, when the language of the setting language 77 of the terminal device 3 and the language of the guidance information 72 are not the same (NO in step S20), the output control unit 55 adds a language setting display to the operation screen (step S21). FIG. 10B is an operation screen to which a language setting display is added when the setting language 77 of the terminal device 3 is Japanese and the language of the operation screen displayed based on the guidance information 72 is English. It is an example. In this example, the language setting display 80 is displayed at the corner of the operation screen as an operation key that can be operated by the user. When the user operates the language setting display 80, the output control unit 55 displays, for example, a subwindow in which the language of the operation screen can be changed to the setting language 77 of the terminal device 3. In this case, the user can change the language of the operation screen to the setting language 77 of the terminal device 3 by performing an operation on the sub window. The user can also change to a desired language other than the setting language 77 of the terminal device 3.

ユーザーが言語設定表示80を操作して操作画面の設定言語を変更した際の、画像処理システム1で行われる動作について説明する。図11は、画像処理装置2及び端末装置3で行われる動作プロセスを示す図である。ユーザーが言語設定表示80を操作して操作画面の言語を変更すると(プロセスP9)、端末装置3は、操作情報生成部56を機能させ、操作画面の言語を変更する操作情報74を作成する(プロセスP10)。操作情報74が生成されると、端末装置3は情報送信部57を機能させ、操作情報74を画像処理装置2に送信する(プロセスP11)。画像処理装置2は、操作情報74を受信すると、案内情報生成部31を機能させ、ユーザーによって指定された操作画面の言語に対応した操作画面を新たに生成する(プロセスP12)。操作画面の設定言語に対応した操作画面が生成されると、画像処理装置2は、新たに生成した操作画面の画面データ21を含む案内情報72を生成し、その案内情報72を端末装置3に送信する(プロセスP13)。   An operation performed by the image processing system 1 when the user operates the language setting display 80 to change the setting language of the operation screen will be described. FIG. 11 is a diagram showing an operation process performed by the image processing device 2 and the terminal device 3. When the user operates the language setting display 80 to change the language of the operation screen (process P9), the terminal device 3 causes the operation information generation unit 56 to function and creates operation information 74 for changing the language of the operation screen ( Process P10). When the operation information 74 is generated, the terminal device 3 causes the information transmission unit 57 to function, and transmits the operation information 74 to the image processing device 2 (process P11). When receiving the operation information 74, the image processing apparatus 2 causes the guidance information generation unit 31 to function, and newly generates an operation screen corresponding to the language of the operation screen specified by the user (process P12). When the operation screen corresponding to the setting language of the operation screen is generated, the image processing device 2 generates the guidance information 72 including the screen data 21 of the newly generated operation screen, and transmits the guidance information 72 to the terminal device 3. Send (process P13).

尚、上記においては、言語設定表示付加判断(図8内プロセスP8)の処理を行い、表示部40において表示されている操作画面の言語が端末装置3の設定言語77と異なる場合に、言語設定表示80を表示させる場合を例示した。しかし、これに限られるものではなく、言語設定表示付加判断の処理を行わずに、全ての操作画面に対して言語設定表示80を表示させるものとしてもよい。   In the above, the language setting display addition determination (process P8 in FIG. 8) is performed, and the language setting is performed when the language of the operation screen displayed on the display unit 40 is different from the setting language 77 of the terminal device 3 The case where the display 80 is displayed is illustrated. However, the present invention is not limited to this, and the language setting display 80 may be displayed on all operation screens without performing the language setting display addition determination process.

次に、ユーザーが操作画面を操作した際の、画像処理システム1で行われる動作について説明する。図12は、画像処理装置2及び端末装置3で行われる動作プロセスを示す図である。ユーザーが操作画面を操作すると(プロセスP14)、端末装置3は、操作情報生成部56を機能させ、操作情報74を生成する(プロセスP15)。操作情報74が生成されると、端末装置3は情報送信部57を機能させ、操作情報74を画像処理装置2に送信する(プロセスP16)。画像処理装置2は、操作情報74を受信すると、案内情報生成部31を機能させ、操作画面を生成する(プロセスP17)。操作画面が生成されると、画像処理装置2は、その操作画面の画面データ21を含む案内情報72を生成し、その案内情報72を端末装置3に送信する(プロセスP18)。   Next, an operation performed by the image processing system 1 when the user operates the operation screen will be described. FIG. 12 is a diagram showing an operation process performed by the image processing device 2 and the terminal device 3. When the user operates the operation screen (process P14), the terminal device 3 causes the operation information generation unit 56 to function, and generates operation information 74 (process P15). When the operation information 74 is generated, the terminal device 3 causes the information transmission unit 57 to function, and transmits the operation information 74 to the image processing device 2 (process P16). When receiving the operation information 74, the image processing apparatus 2 causes the guidance information generation unit 31 to function and generates an operation screen (process P17). When the operation screen is generated, the image processing device 2 generates the guidance information 72 including the screen data 21 of the operation screen, and transmits the guidance information 72 to the terminal device 3 (process P18).

案内情報生成部31が、操作情報74に対応した操作画面を生成する際(プロセスP17)における、画像処理装置2の具体的な動作について説明する。図13は、画像処理装置2が操作情報74を受信した後の画像処理装置2の処理手順の一例を示すフローチャートである。画像処理装置2は、操作位置特定部33を機能させ、操作情報74に基づいて操作画面内におけるユーザーの操作位置を特定する(ステップS10)。これにより、端末装置3のユーザーが行った操作がどのような操作であるかが特定される。そして、画像処理装置2は、端末装置3において表示している操作画面を他の操作画面に画面更新するか否かを判断する(ステップS11)。画面更新する場合には(ステップS11でYES)、画像処理装置2は案内情報生成部31を機能させ、操作情報74に基づいて操作画面のレイアウトを決定する(ステップS12)。一方、画面更新しない場合には(ステップS11でNO)、画像処理装置2は処理を終了させる。   A specific operation of the image processing apparatus 2 when the guidance information generation unit 31 generates an operation screen corresponding to the operation information 74 (process P17) will be described. FIG. 13 is a flowchart illustrating an example of a processing procedure of the image processing apparatus 2 after the image processing apparatus 2 receives the operation information 74. The image processing apparatus 2 causes the operation position specifying unit 33 to function, and specifies the operation position of the user in the operation screen based on the operation information 74 (step S10). Thereby, it is specified what kind of operation the operation performed by the user of the terminal device 3 is. Then, the image processing apparatus 2 determines whether to update the operation screen displayed on the terminal device 3 with another operation screen (step S11). When the screen is updated (YES in step S11), the image processing apparatus 2 causes the guidance information generation unit 31 to function, and determines the layout of the operation screen based on the operation information 74 (step S12). On the other hand, when the screen is not updated (NO in step S11), the image processing apparatus 2 ends the process.

操作画面のレイアウトが決定すると、案内情報生成部31は、決定したレイアウトに基づき、画像処理装置2の設定言語に対応する操作画面を生成する(ステップS13)。次に案内情報生成部31は端末装置3の設定言語と操作画面の言語が同一であるか否かを判断する(ステップS14)。その結果、端末装置の設定言語と操作画面の言語が同一でない場合(ステップS14でNO)、案内情報生成部31は、その操作画面に対して音声ガイダンスが付くか否かを判断する(ステップS15)。例えば操作画面を表示するときに音声ガイダンスを出力することをユーザーが指定した場合には、操作画面に対して音声ガイダンスが付加される。そのため、案内情報生成部31は、操作画面に対して音声ガイダンスを付加すべきか否かを判断するのである。操作画面に音声ガイダンスが付くものである場合(ステップS15でYES)、案内情報生成部31は、画像処理装置2の設定言語の音声ガイダンスをユーザーが聞き取り可能であるか否かを判断する。(ステップS16)。この判断は、例えば、言語情報70に含まれる言語であってユーザーのリスニングスコアが所定の閾値76以上であると判定された言語の中に、画像処理装置2の設定言語が含まれるか否かを判断することにより行われる。画像処理装置2の設定言語に対応するリスニングスコアが所定の閾値76に対応するスコア以上であれば、ユーザーは画像処理装置2の設定言語で生成された音声ガイダンスを聞き取り可能である、と判断される。そして画像処理装置2の設定言語の音声ガイダンスをユーザーが聞き取り可能でない場合(ステップS16でNO)、案内情報生成部31は、操作画面の設定言語を端末装置3の設定言語77に変更する(ステップS17)。次に案内情報生成部31は、操作画面の言語と画像処理装置2の設定言語が同一であるか否かを判断する(ステップS18)。なお、ステップS14でYES、ステップS15でNO、ステップS16でYESのいずれかであった場合も、案内情報生成部31は、操作画面の言語と画像処理装置2の設定言語が同一であるか否かを判断する(ステップS18)。その結果、操作画面の言語と画像処理装置2の設定言語が同一でない場合(ステップS18でNO)、案内情報生成部31は端末装置3の設定言語77で新たに操作画面を生成する(ステップS19)。つまり、ステップS17で端末装置3の設定言語77が操作画面の言語に変更された場合、ステップS19において端末装置3の設定言語77に対応する操作画面が生成されるのである。   When the layout of the operation screen is determined, the guidance information generation unit 31 generates an operation screen corresponding to the setting language of the image processing apparatus 2 based on the determined layout (step S13). Next, the guidance information generation unit 31 determines whether the setting language of the terminal device 3 and the language of the operation screen are the same (step S14). As a result, when the setting language of the terminal device and the language of the operation screen are not the same (NO in step S14), the guidance information generation unit 31 determines whether or not the voice guidance is attached to the operation screen (step S15). ). For example, when the user designates to output the voice guidance when displaying the operation screen, the voice guidance is added to the operation screen. Therefore, the guidance information generation unit 31 determines whether or not voice guidance should be added to the operation screen. If voice guidance is attached to the operation screen (YES in step S15), the guidance information generation unit 31 determines whether the user can hear the voice guidance of the setting language of the image processing apparatus 2. (Step S16). This determination is, for example, whether the language included in the language information 70 and the language for which the user's listening score is determined to be a predetermined threshold 76 or more includes the setting language of the image processing apparatus 2 or not. It is done by judging. If the listening score corresponding to the setting language of the image processing device 2 is equal to or higher than the score corresponding to the predetermined threshold 76, it is determined that the user can hear the voice guidance generated in the setting language of the image processing device 2. Ru. When the user can not hear the voice guidance of the setting language of the image processing device 2 (NO in step S16), the guidance information generation unit 31 changes the setting language of the operation screen to the setting language 77 of the terminal device 3 (step S17). Next, the guidance information generation unit 31 determines whether the language of the operation screen and the setting language of the image processing device 2 are the same (step S18). Even in the case of YES in step S14, NO in step S15, or YES in step S16, the guidance information generation unit 31 determines whether the language of the operation screen and the setting language of the image processing apparatus 2 are the same. It is determined (step S18). As a result, when the language of the operation screen and the setting language of the image processing apparatus 2 are not the same (NO in step S18), the guidance information generation unit 31 newly generates an operation screen in the setting language 77 of the terminal device 3 (step S19). ). That is, when the setting language 77 of the terminal device 3 is changed to the language of the operation screen in step S17, an operation screen corresponding to the setting language 77 of the terminal device 3 is generated in step S19.

図14は、端末装置3において言語情報70を生成するための詳細な処理手順の一例を示すフローチャートである。端末装置3において遠隔制御アプリケーション50が起動されると(ステップS20)、遠隔制御アプリケーション50は言語情報生成部54を機能させる。そして言語情報生成部54は、オペレーティングシステム49から端末装置3の設定言語77を取得し(ステップS41)、その設定言語77を含む言語情報70を生成する(ステップS42)。次に遠隔制御アプリケーション50は、情報収集部53を機能させ、他のアプリケーションによって記録されている履歴情報を収集する(ステップS43)。そして言語情報生成部54は、情報収集部53によって収集された履歴情報を解析し、各言語のリーディングスコア及びリスニングスコアを算出する(ステップS45)。リーディングスコア及びリスニングスコアを算出すると、言語情報生成部54は、各言語のリーディングスコア及びリスニングスコアが所定の閾値76に対応するスコア以上であるか否かを判断する(ステップS46)。その結果、所定の閾値76に対応するスコア以上の言語が存在する場合(ステップS46でYES)、言語情報生成部54は、その言語に関する情報を言語情報70に追加する(ステップS47)。尚、、所定の閾値76に対応するスコア以上の言語が存在しない場合(ステップS46でYES)、言語情報生成部54は、言語情報70に対する追加を行わない。その後、遠隔制御アプリケーション50は、情報送信部57を機能させ、言語情報生成部54によって生成された言語情報70を画像処理装置2へ送信する(ステップS48)。   FIG. 14 is a flowchart showing an example of a detailed processing procedure for generating the language information 70 in the terminal device 3. When the remote control application 50 is activated in the terminal device 3 (step S20), the remote control application 50 causes the language information generation unit 54 to function. Then, the language information generation unit 54 acquires the setting language 77 of the terminal device 3 from the operating system 49 (step S41), and generates the language information 70 including the setting language 77 (step S42). Next, the remote control application 50 causes the information collection unit 53 to function, and collects history information recorded by another application (step S43). Then, the language information generation unit 54 analyzes the history information collected by the information collection unit 53, and calculates the reading score and the listening score of each language (step S45). After calculating the reading score and the listening score, the language information generation unit 54 determines whether the reading score and the listening score of each language are equal to or higher than the score corresponding to the predetermined threshold 76 (step S46). As a result, when there is a language having a score or more corresponding to the predetermined threshold 76 (YES in step S46), the language information generation unit 54 adds information on the language to the language information 70 (step S47). When no language equal to or higher than the score corresponding to the predetermined threshold value 76 exists (YES in step S46), the language information generation unit 54 does not add the language information 70. Thereafter, the remote control application 50 causes the information transmission unit 57 to function, and transmits the language information 70 generated by the language information generation unit 54 to the image processing apparatus 2 (step S48).

尚、遠隔制御アプリケーション50は、言語情報70を画像処理装置2へ送信してから一定時間が経過した後、他のアプリケーションによって記録される履歴情報が更新されたか否かを判断し、履歴情報が更新されていれば、ステップS43〜S48の処理を繰り返し行うようにしても良い。この場合、言語情報70が更新されれば、新たな言語情報70が画像処理装置2に送信されることになる。また言語情報70が更新されなければ、言語情報70を送信する必要はない。   The remote control application 50 determines whether the history information recorded by another application has been updated or not after a predetermined time has elapsed since the language information 70 was transmitted to the image processing apparatus 2. If updated, the processing of steps S43 to S48 may be repeated. In this case, when the language information 70 is updated, the new language information 70 is transmitted to the image processing apparatus 2. If the language information 70 is not updated, there is no need to transmit the language information 70.

また遠隔制御アプリケーション50は、起動時に生成した言語情報70を記憶部15に保存して管理しておき、次回起動時には前回生成した言語情報70を画像処理装置2へ送信するようにしても良い。このような処理を行えば、次回起動時に言語情報70を速やかに画像処理装置2へ送信することが可能となる。   The remote control application 50 may store the language information 70 generated at the time of activation in the storage unit 15 and manage the language information 70 at the next activation, and may transmit the language information 70 generated last time to the image processing apparatus 2. If such processing is performed, the language information 70 can be promptly transmitted to the image processing apparatus 2 at the next activation.

以上のように本実施形態の画像処理システム1では、端末装置3は、ユーザーが使用可能である言語情報70を収集し、言語情報70を画像処理装置2に送信する。画像処理装置2は、言語情報70に基づきユーザーが使用可能な言語に対応する操作画面を生成し、端末装置3に送信する構成である。この構成によれば、端末装置3に表示される操作画面が、ユーザーが理解できないような言語で表示されることがない。したがって、ユーザーは確実に操作画面に表示される文字を理解することができる。また、音声ガイダンスについても同様である。   As described above, in the image processing system 1 of the present embodiment, the terminal device 3 collects the language information 70 that can be used by the user, and transmits the language information 70 to the image processing device 2. The image processing device 2 is configured to generate an operation screen corresponding to a language that can be used by the user based on the language information 70 and transmit the operation screen to the terminal device 3. According to this configuration, the operation screen displayed on the terminal device 3 is not displayed in a language that the user can not understand. Therefore, the user can surely understand the characters displayed on the operation screen. The same applies to voice guidance.

更に、本実施形態の画像処理システム1においては、画像処理装置2の設定言語が言語情報70に含まれる場合には、可能な限り画像処理装置2の設定言語に対応する操作画面が端末装置3に表示されることとなる。すなわち、画像処理装置2が、画像処理装置2の設定言語以外の言語に対応する操作画面を新たに生成する処理負担を可能な限り低減している。したがって、画像処理装置2の処理負担が軽減され、処理時間の短縮、ジョブの実行効率などを向上させることができるようになる。   Furthermore, in the image processing system 1 of the present embodiment, when the setting language of the image processing apparatus 2 is included in the language information 70, the operation screen corresponding to the setting language of the image processing apparatus 2 is as much as possible the terminal device 3 Will be displayed. That is, the processing burden of newly generating an operation screen corresponding to a language other than the setting language of the image processing apparatus 2 is reduced as much as possible. Therefore, the processing load on the image processing apparatus 2 is reduced, and processing time can be shortened, job execution efficiency and the like can be improved.

(変形例)
以上、本発明の一実施形態について説明したが、本発明は上記実施形態で説明した内容のものに限定されるものではなく、種々の変形例を適用することが可能である。
(Modification)
As mentioned above, although one Embodiment of this invention was described, this invention is not limited to the thing of the content demonstrated by the said embodiment, It is possible to apply a various modification.

例えば、上記実施形態では、画像処理装置2がコピー機能やスキャン機能、プリント機能、FAX機能、BOX機能などの複数の機能を備えるMFPである場合を例示したが、画像処理装置2は必ずしもMFPに限られない。すなわち、画像処理装置2は、コピー機能、スキャン機能、プリント機能、FAX機能、BOX機能などの複数の機能のうち少なくとも1つの機能を有し、ユーザーによる操作に基づいてジョブの設定や実行を行うものであれば良い。   For example, although in the above embodiment, the image processing apparatus 2 is an MFP having a plurality of functions such as a copy function, a scan function, a print function, a fax function, and a BOX function, the image processing apparatus 2 is not limited to the MFP. It is not limited. That is, the image processing apparatus 2 has at least one function among a plurality of functions such as a copy function, a scan function, a print function, a fax function, and a BOX function, and performs job setting and execution based on an operation by the user. Anything is fine.

また上記実施形態では、端末装置3が画像処理装置2へ言語情報70を送信するとき、端末装置3の設定言語77以外に、ユーザーが各種アプリケーションを使用したときの言語に関する情報を言語情報70に含めることを例示した。しかし、これに限られるものでもない。すなわち、端末装置3は、端末装置3の設定言語77だけを含む言語情報70を生成して画像処理装置2へ送信するようにしても良い。   In the above embodiment, when the terminal device 3 transmits the language information 70 to the image processing apparatus 2, in addition to the setting language 77 of the terminal device 3, information on the language when the user uses various applications is added to the language information 70. It was illustrated to include. However, it is not limited to this. That is, the terminal device 3 may generate the language information 70 including only the setting language 77 of the terminal device 3 and transmit the language information 70 to the image processing device 2.

1 画像処理システム
2 画像処理装置
3 端末装置
30 情報受信部(情報受信手段)
31 案内情報生成部(案内情報生成手段)
32 案内情報送信部(案内情報送信手段)
33 操作位置特定部(操作反映手段)
40 表示部(表示手段)
42 音声出力部(音声出力手段)
51 案内情報受信部(案内情報受信手段)
52 優先処理決定部(優先処理決定手段)
53 情報収集部(情報収集手段)
54 言語情報生成部(言語情報生成手段)
56 操作情報生成部(操作情報生成手段)
57 情報送信部(情報送信手段)
1 image processing system 2 image processing apparatus 3 terminal device 30 information receiving unit (information receiving means)
31 Guidance information generator (guidance information generator)
32 Guidance information transmission unit (guidance information transmission means)
33 Operation position identification unit (operation reflection means)
40 Display (Display Means)
42 Audio output unit (audio output means)
51 Guidance information receiver (guidance information reception means)
52 Priority processing decision unit (priority processing decision means)
53 Information Collection Unit (Information Collection Means)
54 Language Information Generator (Language Information Generator)
56 Operation Information Generator (Operation Information Generator)
57 Information Transmission Unit (Information Transmission Means)

Claims (24)

画像処理装置と、
前記画像処理装置と通信を行う端末装置と、
を備える画像処理システムであって、
前記端末装置は、
ユーザーの使用可能言語に関する言語情報を前記画像処理装置へ送信する情報送信手段、
を備え、
前記画像処理装置は、
前記端末装置から受信する前記言語情報に基づいてユーザーに操作を案内するための案内情報を生成する案内情報生成手段と、
前記案内情報生成手段によって生成される前記案内情報を前記端末装置へ送信する案内情報送信手段と、
を備えることを特徴とする画像処理システム。
An image processing device,
A terminal device that communicates with the image processing device;
An image processing system comprising
The terminal device is
An information transmitting means for transmitting language information on a user usable language to the image processing apparatus;
Equipped with
The image processing apparatus is
Guidance information generation means for generating guidance information for guiding the user to the operation based on the language information received from the terminal device;
Guidance information transmission means for transmitting the guidance information generated by the guidance information generation means to the terminal device;
An image processing system comprising:
前記言語情報には、ユーザーが使用可能な複数の言語に関する情報が含まれており、
前記案内情報生成手段は、前記複数の言語の中に、前記画像処理装置において使用中の設定言語が含まれている場合には前記設定言語に対応する前記案内情報を生成することを特徴とする請求項1に記載の画像処理システム。
The language information includes information on a plurality of languages available to the user,
The guidance information generation means generates the guidance information corresponding to the setting language when the setting language being used in the image processing apparatus is included in the plurality of languages. The image processing system according to claim 1.
前記案内情報は、前記端末装置において表示可能な操作画面情報を含んでおり、
前記端末装置は、
前記案内情報に含まれる前記操作画面情報に基づいてユーザーが操作可能な操作画面を表示する表示手段と、
前記操作画面に対するユーザーの操作に基づいて操作情報を生成する操作情報生成手段と、
を更に備え、
前記情報送信手段は、前記操作情報を前記画像処理装置へ送信することにより、前記画像処理装置を遠隔操作することを特徴とする請求項1又は2に記載の画像処理システム。
The guidance information includes operation screen information that can be displayed on the terminal device,
The terminal device is
Display means for displaying an operation screen operable by the user based on the operation screen information included in the guidance information;
Operation information generation means for generating operation information based on the user's operation on the operation screen;
And further
The image processing system according to claim 1, wherein the information transmission unit remotely operates the image processing apparatus by transmitting the operation information to the image processing apparatus.
前記操作画面は、ユーザーによる操作に基づいて前記案内情報の言語を変更することが可能であり、
前記案内情報生成手段は、前記操作画面において前記案内情報の言語が変更された場合、前記操作情報に基づいて前記案内情報の言語を変更することを特徴とする請求項3に記載の画像処理システム。
The operation screen can change the language of the guidance information based on an operation by a user.
The image processing system according to claim 3, wherein the guidance information generation unit changes the language of the guidance information based on the operation information when the language of the guidance information is changed on the operation screen. .
前記案内情報は、前記端末装置において再生可能な音声情報を含んでおり、
前記端末装置は、
前記案内情報に含まれる前記音声情報に基づいて音声出力を行う音声出力手段、
を更に備えることを特徴とする請求項1乃至4のいずれかに記載の画像処理システム。
The guidance information includes audio information reproducible on the terminal device,
The terminal device is
Voice output means for performing voice output based on the voice information included in the guidance information;
The image processing system according to any one of claims 1 to 4, further comprising:
前記端末装置は、
アプリケーションからユーザーの言語使用履歴情報を収集する情報収集手段と、
前記言語使用履歴情報に基づいて前記言語情報を生成する言語情報生成手段と、
を更に備え、
前記情報送信手段は、前記言語情報生成手段によって生成される前記言語情報を前記画像処理装置へ送信することを特徴とする請求項1乃至5のいずれかに記載の画像処理システム。
The terminal device is
Information collection means for collecting user's language usage history information from the application;
Language information generation means for generating the language information based on the language usage history information;
And further
The image processing system according to any one of claims 1 to 5, wherein the information transmission unit transmits the language information generated by the language information generation unit to the image processing apparatus.
前記案内情報は、前記端末装置において表示可能な操作画面情報と、前記端末装置において再生可能な音声情報と、を含んでおり、
前記案内情報生成手段は、前記操作画面情報の言語と、前記音声情報の言語とを一致させることを特徴とする請求項1乃至6のいずれかに記載の画像処理システム。
The guidance information includes operation screen information that can be displayed on the terminal device, and audio information that can be reproduced on the terminal device,
The image processing system according to any one of claims 1 to 6, wherein the guidance information generation unit matches the language of the operation screen information with the language of the voice information.
前記端末装置は、
ユーザーによる操作に基づいて処理速度優先処理と操作性優先処理とのいずれか一方を決定する優先処理決定手段、
を更に備え、
前記案内情報生成手段は、前記優先処理決定手段により処理速度優先処理が決定された場合には、前記言語情報に含まれる複数の言語の中から、前記画像処理装置において使用中の設定言語に対応する前記案内情報を生成し、前記優先処理決定手段により操作性優先処理が決定された場合には、前記言語情報に含まれる複数の言語の中から、ユーザーの使用頻度が相対的に高い言語を選択して当該言語に対応する前記案内情報を生成することを特徴とする請求項1乃至7のいずれかに記載の画像処理システム。
The terminal device is
Priority processing determination means for determining either processing speed priority processing or operability priority processing based on an operation by the user;
And further
When the processing speed priority processing is determined by the priority processing determination unit, the guidance information generation unit corresponds to the setting language being used in the image processing apparatus from a plurality of languages included in the language information. The guidance information is generated, and when operability priority processing is determined by the priority processing determination means, a language having a relatively high frequency of use of the user among a plurality of languages included in the language information is selected. The image processing system according to any one of claims 1 to 7, wherein the guidance information corresponding to the language is selected and generated.
ユーザーに操作を案内するための案内情報を端末装置に送信する画像処理装置であって、
前記端末装置から送信されるユーザーの使用可能言語に関する言語情報を受信する情報受信手段と、
前記言語情報に基づいて前記案内情報を生成する案内情報生成手段と、
前記案内情報生成手段によって生成される前記案内情報を前記端末装置へ送信する案内情報送信手段と、
そ備えることを特徴とする画像処理装置。
An image processing apparatus that transmits, to a terminal device, guidance information for guiding a user to an operation.
An information receiving means for receiving the language information on the usable language of the user transmitted from the terminal device;
Guidance information generation means for generating the guidance information based on the language information;
Guidance information transmission means for transmitting the guidance information generated by the guidance information generation means to the terminal device;
An image processing apparatus comprising the same.
前記言語情報には、ユーザーが使用可能な複数の言語に関する情報が含まれており、
前記案内情報生成手段は、前記複数の言語の中に、前記画像処理装置において使用中の設定言語が含まれている場合には前記設定言語に対応する前記案内情報を生成することを特徴とする請求項9に記載の画像処理装置。
The language information includes information on a plurality of languages available to the user,
The guidance information generation means generates the guidance information corresponding to the setting language when the setting language being used in the image processing apparatus is included in the plurality of languages. The image processing apparatus according to claim 9.
前記案内情報は、前記端末装置において表示可能な操作画面情報を含んでおり、
前記端末装置から送信される前記操作画面情報に基づく操作画面に対するユーザーの操作情報を受信することにより、操作情報に基づく処理を行う操作反映手段を更に備えることを特徴とする請求項9又は10に記載の画像処理装置。
The guidance information includes operation screen information that can be displayed on the terminal device,
11. The apparatus according to claim 9, further comprising an operation reflection unit that performs processing based on operation information by receiving operation information of a user on the operation screen based on the operation screen information transmitted from the terminal device. Image processing apparatus as described.
前記操作画面は、ユーザーによる操作に基づいて前記案内情報の言語を変更することが可能であり、
前記案内情報生成手段は、前記操作画面において前記案内情報の言語が変更された場合、前記操作情報に基づいて前記案内情報の言語を変更することを特徴とする請求項11に記載の画像処理装置。
The operation screen can change the language of the guidance information based on an operation by a user.
12. The image processing apparatus according to claim 11, wherein the guidance information generation unit changes the language of the guidance information based on the operation information when the language of the guidance information is changed on the operation screen. .
前記案内情報は、前記端末装置において表示可能な操作画面情報と、前記端末装置において再生可能な音声情報と、を含んでおり、
前記案内情報生成手段は、前記操作画面情報の言語と、前記音声情報の言語とを一致させることを特徴とする請求項9乃至12のいずれかに記載の画像処理装置。
The guidance information includes operation screen information that can be displayed on the terminal device, and audio information that can be reproduced on the terminal device,
The image processing apparatus according to any one of claims 9 to 12, wherein the guidance information generation unit matches the language of the operation screen information with the language of the voice information.
前記案内情報生成手段は、前記端末装置から送信される処理速度優先処理情報を受信した場合、前記言語情報に含まれる複数の言語の中から、当該画像処理装置において使用中の設定言語に対応する前記案内情報を作成し、前記端末装置から送信される操作性優先処理情報を受信した場合、前記言語情報に含まれる複数の言語の中から、ユーザーの使用頻度が相対的に高い言語を選択して当該言語に対応する前記案内情報を生成することを特徴とする請求項9乃至13のいずれかに記載の画像処理装置。   When the guidance information generation unit receives processing speed priority processing information transmitted from the terminal device, the guidance information generation unit corresponds to a setting language being used in the image processing apparatus from a plurality of languages included in the language information. When the guidance information is created and the operability priority processing information transmitted from the terminal device is received, a language with a relatively high user usage frequency is selected from a plurality of languages included in the language information. The image processing apparatus according to any one of claims 9 to 13, wherein the guidance information corresponding to the language is generated. 画像処理装置から送信されるユーザーに操作を案内するための案内情報に基づいた案内通知を行う端末装置であって、
ユーザーの使用可能言語に関する言語情報を前記画像処理装置へ送信する情報送信手段と、
前記画像処理装置から送信される前記案内情報を受信する案内情報受信手段と、
を備えることを特徴とする端末装置。
A terminal apparatus that performs guidance notification based on guidance information for guiding a user to an operation transmitted from an image processing apparatus,
Information transmitting means for transmitting language information on a user usable language to the image processing apparatus;
Guidance information receiving means for receiving the guidance information transmitted from the image processing apparatus;
A terminal device comprising:
前記言語情報には、ユーザーが使用可能な複数の言語に関する情報が含まれていることを特徴とする請求項15に記載の端末装置。   The terminal device according to claim 15, wherein the language information includes information on a plurality of languages usable by the user. 前記案内情報に含まれる操作画面情報に基づいてユーザーが操作可能な操作画面を表示する表示手段と、
前記操作画面に対するユーザーの操作に基づいて操作情報を生成する操作情報生成手段と、
を備え、
前記情報送信手段は、前記操作情報を前記画像処理装置へ送信することにより、前記画像処理装置を遠隔操作することを特徴とする請求項15又は16に記載の端末装置。
Display means for displaying an operation screen operable by the user based on operation screen information included in the guidance information;
Operation information generation means for generating operation information based on the user's operation on the operation screen;
Equipped with
17. The terminal apparatus according to claim 15, wherein the information transmission unit remotely operates the image processing apparatus by transmitting the operation information to the image processing apparatus.
前記操作画面は、ユーザーによる操作に基づいて前記案内情報の言語を変更することが可能であることを特徴とする請求項17に記載の端末装置。   The terminal device according to claim 17, wherein the operation screen is capable of changing the language of the guidance information based on an operation by a user. 前記案内情報は音声情報を含んでおり、
前記案内情報に含まれる前記音声情報に基づいて音声出力を行う音声出力手段、
を更に備えることを特徴とする請求項15乃至18のいずれかに記載の端末装置。
The guidance information includes voice information,
Voice output means for performing voice output based on the voice information included in the guidance information;
The terminal device according to any one of claims 15 to 18, further comprising:
アプリケーションからユーザーの言語使用履歴情報を収集する情報収集手段と、
前記言語使用履歴情報に基づいて前記言語情報を生成する言語情報生成手段と、
を更に備え、
前記情報送信手段は、前記言語情報生成手段によって生成される前記言語情報を前記画像処理装置へ送信することを特徴とする請求項15乃至19のいずれかに記載の端末装置。
Information collection means for collecting user's language usage history information from the application;
Language information generation means for generating the language information based on the language usage history information;
And further
The terminal device according to any one of claims 15 to 19, wherein the information transmission unit transmits the language information generated by the language information generation unit to the image processing apparatus.
前記画像処理装置において使用中の設定言語に対応した案内通知を行うことを優先する処理速度優先処理と、前記言語情報に含まれる複数の言語の中からユーザーの使用頻度が相対的に高い言語に対応した案内通知を行うことを優先する操作性優先処理とのいずれか一方を決定する優先処理決定手段、
を更に備え、
前記情報送信手段は、上記優先処理決定手段における決定情報を前記画像処理装置に送信し、前記画像処理装置に上記決定情報に対応する前記案内情報を作成させることを特徴とする請求項15乃至20のいずれかに記載の端末装置。
Processing speed priority processing giving priority to notification notification corresponding to the setting language in use in the image processing apparatus, and language in which the frequency of use of the user is relatively high among a plurality of languages included in the language information Priority processing determination means for determining any one of operability priority processing in which priority is given to performing corresponding notification and notification;
And further
21. The information processing method according to claim 15, wherein the information transmission unit transmits the determination information in the priority processing determination unit to the image processing apparatus, and causes the image processing apparatus to create the guidance information corresponding to the determination information. The terminal device according to any of the above.
ユーザーに操作を案内するための案内情報を端末装置に送信する画像処理装置において実行されるプログラムであって、前記画像処理装置に、
前記端末装置から送信されるユーザーの使用可能言語に関する言語情報を受信する情報受信ステップと、
前記言語情報に基づいて前記案内情報を生成する案内情報生成ステップと、
前記案内情報生成ステップによって生成される前記案内情報を前記端末装置へ送信する案内情報送信ステップと、
を実行させることを特徴とするプログラム。
A program executed by an image processing apparatus for transmitting guidance information for guiding an operation to a user to a terminal device, the image processing apparatus comprising:
An information receiving step of receiving the language information on the available language of the user transmitted from the terminal device;
Guidance information generation step of generating the guidance information based on the language information;
A guidance information transmission step of transmitting the guidance information generated by the guidance information generation step to the terminal device;
A program characterized by causing
前記言語情報には、ユーザーが使用可能な複数の言語に関する情報が含まれており、
前記案内情報生成ステップは、前記複数の言語の中に、前記画像処理装置において使用中の設定言語が含まれている場合には前記設定言語に対応する前記案内情報を生成することを特徴とする請求項22に記載のプログラム。
The language information includes information on a plurality of languages available to the user,
The guidance information generation step is characterized in that the guidance information corresponding to the setting language is generated when the setting language being used in the image processing apparatus is included in the plurality of languages. The program according to claim 22.
画像処理装置から送信されるユーザーに操作を案内するための案内情報に基づいた案内通知を行う端末装置において実行されるプログラムであって、前記端末装置に、
ユーザーの使用可能言語に関する言語情報を前記画像処理装置へ送信する情報送信ステップと、
前記画像処理装置から送信される前記案内情報を受信する案内情報受信ステップと、
を実行させることを特徴とするプログラム。
A program executed by a terminal device that performs guidance notification based on guidance information for guiding an operation to a user transmitted from an image processing device, the terminal device comprising:
An information transmitting step of transmitting language information on a user usable language to the image processing apparatus;
A guidance information receiving step of receiving the guidance information transmitted from the image processing apparatus;
A program characterized by causing
JP2017170370A 2017-09-05 2017-09-05 Image processing system, image processing device, terminal device and program Active JP6992332B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2017170370A JP6992332B2 (en) 2017-09-05 2017-09-05 Image processing system, image processing device, terminal device and program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2017170370A JP6992332B2 (en) 2017-09-05 2017-09-05 Image processing system, image processing device, terminal device and program

Publications (2)

Publication Number Publication Date
JP2019047398A true JP2019047398A (en) 2019-03-22
JP6992332B2 JP6992332B2 (en) 2022-01-13

Family

ID=65814843

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2017170370A Active JP6992332B2 (en) 2017-09-05 2017-09-05 Image processing system, image processing device, terminal device and program

Country Status (1)

Country Link
JP (1) JP6992332B2 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2021117785A (en) * 2020-01-27 2021-08-10 京セラドキュメントソリューションズ株式会社 Image forming apparatus and communication system

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002251261A (en) * 2001-02-23 2002-09-06 Canon Inc Picture outputting device and information processor and data processing method and storage medium
JP2008126565A (en) * 2006-11-22 2008-06-05 Ricoh Printing Systems Ltd Printer
JP2012181634A (en) * 2011-02-28 2012-09-20 Brother Ind Ltd Communication apparatus
JP2017080900A (en) * 2015-10-22 2017-05-18 キヤノン株式会社 Information processing device and control method and program thereof

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002251261A (en) * 2001-02-23 2002-09-06 Canon Inc Picture outputting device and information processor and data processing method and storage medium
JP2008126565A (en) * 2006-11-22 2008-06-05 Ricoh Printing Systems Ltd Printer
JP2012181634A (en) * 2011-02-28 2012-09-20 Brother Ind Ltd Communication apparatus
JP2017080900A (en) * 2015-10-22 2017-05-18 キヤノン株式会社 Information processing device and control method and program thereof

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2021117785A (en) * 2020-01-27 2021-08-10 京セラドキュメントソリューションズ株式会社 Image forming apparatus and communication system
JP7456167B2 (en) 2020-01-27 2024-03-27 京セラドキュメントソリューションズ株式会社 Image forming device and communication system

Also Published As

Publication number Publication date
JP6992332B2 (en) 2022-01-13

Similar Documents

Publication Publication Date Title
US8964206B2 (en) Printing device, management device and management method
KR101227077B1 (en) Image processing apparatus, method of controlling the same, and storage medium
US9648180B2 (en) Information processing system performing operation based on tag information, information processing device, portable terminal and non-transitory computer readable recording medium
KR101545378B1 (en) Information processing apparatus that carries out remote operation, control method therefor, and storage medium
CN103581475A (en) Image processing cooperative system and image processing cooperative method
JP2019135814A (en) Image forming apparatus, method therefor, and program
JP2011059958A (en) Information processing apparatus, information processing system, image forming apparatus and program
JP2007142912A (en) Operation panel and customizing system thereof
US20080036779A1 (en) Method and system for managing apparatus
US10708450B2 (en) Image processing apparatus, control method therefor, and storage medium
JP5800788B2 (en) COMMUNICATION TERMINAL DEVICE, FAX COMMUNICATION SYSTEM, AND DATA TRANSMISSION PROGRAM
JP5754904B2 (en) Printing apparatus, printing apparatus control method, and program
JP6992332B2 (en) Image processing system, image processing device, terminal device and program
JP6016352B2 (en) COMMUNICATION DEVICE, COMMUNICATION DEVICE CONTROL METHOD, PROGRAM
US20100195145A1 (en) Image processing apparatus, control method for image processing apparatus, and storage medium storing control program therefor
US10015351B2 (en) Instruction apparatus, processing apparatus, and processing system
JP2020038348A (en) Voice interactive device, its control method, and program
CN105446668B (en) Image forming apparatus and method of changing print setting
US20200304655A1 (en) Information Processing Apparatus, Software Keyboard Display Method, and Program
US20230053390A1 (en) Information processing system, information processing apparatus, and method therefor
JP6911682B2 (en) Information processing equipment, information processing system, setting change method and program
US10187535B2 (en) Instruction apparatus, processing apparatus, and processing system
JP2017027321A (en) Information processing terminal, program, and control method
JP6390131B2 (en) Process execution system, process execution device, and process execution program
JP2021122128A (en) Image processing device, control method thereof, and program

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20200721

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20210416

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20210518

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210712

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20211109

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20211122

R150 Certificate of patent or registration of utility model

Ref document number: 6992332

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150