JP5708205B2 - Operation information providing system, portable terminal and control program - Google Patents

Operation information providing system, portable terminal and control program Download PDF

Info

Publication number
JP5708205B2
JP5708205B2 JP2011099133A JP2011099133A JP5708205B2 JP 5708205 B2 JP5708205 B2 JP 5708205B2 JP 2011099133 A JP2011099133 A JP 2011099133A JP 2011099133 A JP2011099133 A JP 2011099133A JP 5708205 B2 JP5708205 B2 JP 5708205B2
Authority
JP
Japan
Prior art keywords
mark
operation information
image
unit
providing system
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2011099133A
Other languages
Japanese (ja)
Other versions
JP2012231361A (en
Inventor
孝彦 亘理
孝彦 亘理
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Brother Industries Ltd
Original Assignee
Brother Industries Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Brother Industries Ltd filed Critical Brother Industries Ltd
Priority to JP2011099133A priority Critical patent/JP5708205B2/en
Publication of JP2012231361A publication Critical patent/JP2012231361A/en
Application granted granted Critical
Publication of JP5708205B2 publication Critical patent/JP5708205B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Telephonic Communication Services (AREA)
  • Facsimiles In General (AREA)

Description

本発明は、操作対象装置の不具合発生時やメンテナンス時に必要な操作に関する情報をユーザに提供する、操作情報提供システム、携帯端末及び制御プログラムに関する。   The present invention relates to an operation information providing system, a portable terminal, and a control program for providing a user with information related to an operation required when a problem occurs in an operation target device or during maintenance.

プリンタ等の印刷装置で紙詰まり等の不具合が発生した場合、ユーザは、印刷装置の状態を把握し、その状態に応じた適切な操作を行う必要がある。このような場合、従来では、ユーザが、印刷装置の表示部に表示された操作情報を見ながら必要な操作を行っていたが、表示部と操作対象部分とは離れているのが通常であるため、当該操作の作業性が悪いという問題があった。
特許文献１に記載された先行技術は、携帯電話で撮像した被写体画像とプリンタの記憶部に予め記憶したモデル画像とを比較し、モデル画像に被写体画像と同一又は近似の画像が含まれている場合に、そのモデル画像の示すパーツに関する情報を被写体画像に関する情報として携帯電話の表示部に表示させるものである。この先行技術によれば、携帯電話の表示部を被写体の近傍に配置することができるので、ユーザは、表示部を見ながら被写体（プリンタ）を速やかに操作することができる。 When a problem such as a paper jam occurs in a printing apparatus such as a printer, the user needs to grasp the state of the printing apparatus and perform an appropriate operation according to the state. In such a case, conventionally, the user performs a necessary operation while viewing the operation information displayed on the display unit of the printing apparatus, but the display unit and the operation target part are usually separated from each other. Therefore, there is a problem that the workability of the operation is poor.
The prior art described in Patent Document 1 compares a subject image captured by a mobile phone with a model image stored in advance in a storage unit of a printer, and the model image includes an image that is the same as or approximate to the subject image. In this case, information on the part indicated by the model image is displayed on the display unit of the mobile phone as information on the subject image. According to this prior art, since the display unit of the mobile phone can be arranged in the vicinity of the subject, the user can quickly operate the subject (printer) while looking at the display unit.

特開２００６−６６９６７号公報JP 2006-66967 A

しかし、この先行技術では、被写体に関する一般的なパーツ情報を表示させていたに過ぎないので、被写体の状態に応じて取るべき操作が異なる場合には、ユーザは、被写体の状態に対応した操作情報を容易に知ることができなかった。   However, in this prior art, only general part information about the subject is displayed, so that if the operation to be taken differs according to the state of the subject, the user can operate information corresponding to the state of the subject. Could not know easily.

本発明は、操作対象装置の状態に応じて取るべき操作が異なる場合でも、その状態に対応した操作情報を適切に提供することができる、操作情報提供システム、携帯端末及び制御プログラムを提供することを目的とする。   The present invention provides an operation information providing system, a portable terminal, and a control program that can appropriately provide operation information corresponding to the state even when the operation to be performed differs depending on the state of the operation target device. With the goal.

上記課題を解決するために、本発明に係る操作情報提供システムは、操作対象装置の操作方法に関する操作情報を提供する操作情報提供システムであって、前記操作対象装置の第１部分に形成された少なくとも１つの第１マークと、前記操作対象装置の第２部分に形成された少なくとも１つの第２マークと、情報表示手段と前記操作対象装置を撮像する撮像手段とを有する撮像装置と、前記操作対象装置に関する画像であって前記第１マークと前記第２マークとがそれぞれ１つ以上画像内に含まれている複数のモデル画像と、前記複数のモデル画像のそれぞれに対応して用意された複数の操作情報とを記憶する記憶手段と、前記撮像装置で撮像された撮像画像と、前記記憶手段に記憶された前記複数のモデル画像とを比較することによって、前記撮像画像に最も近似した最近似モデル画像を特定する特定手段と、前記特定手段にて特定された前記最近似モデル画像に対応する前記操作情報を表示させるように前記情報表示手段を制御する表示制御手段とを備え、前記特定手段は、前記複数のモデル画像から、前記撮像画像に撮像されている第１マーク及び第２マークと同じ種類の第１マーク及び第２マークを含むモデル画像のみを選択する第１選択処理を実行する第１選択処理実行手段と、前記第１選択処理で選択されたモデル画像から、第１マークと第２マークとの相対位置関係が前記撮像画像に撮像されている第１マークと第２マークとの相対位置関係と最も近似するモデル画像を選択する第２選択処理を実行する第２選択処理実行手段とを含み、前記第２選択処理実行手段にて選択されたモデル画像を前記最近似モデル画像として特定することを特徴とする。   In order to solve the above problems, an operation information providing system according to the present invention is an operation information providing system that provides operation information related to an operation method of an operation target device, and is formed in a first portion of the operation target device. An imaging device having at least one first mark, at least one second mark formed on a second portion of the operation target device, an information display unit, and an imaging unit configured to image the operation target device; and the operation A plurality of model images each including one or more of the first mark and the second mark in an image relating to a target device, and a plurality of model images prepared corresponding to each of the plurality of model images By comparing the storage unit that stores the operation information, the captured image captured by the imaging device, and the plurality of model images stored in the storage unit, Specifying means for specifying the most approximate model image closest to the captured image, and display for controlling the information display means to display the operation information corresponding to the most approximate model image specified by the specifying means Control means, and the specifying means only includes a model image including a first mark and a second mark of the same type as the first mark and the second mark captured in the captured image from the plurality of model images. A relative positional relationship between the first mark and the second mark is captured in the captured image from the first selection process executing means for executing the first selection process to be selected and the model image selected in the first selection process. A second selection process executing means for executing a second selection process for selecting a model image that most closely approximates the relative positional relationship between the first mark and the second mark, and the second selection process executing means includes And identifies the selected model image as the nearest model image.

この構成では、第１マークと第２マークとの相対的な位置関係により現在の操作対象装置の状態に最も近い状態のモデル画像を選択し、当該状態に対応する操作情報を撮像装置に表示させるようにしているので、第１部分又は第２部分の状態が、これらの相対的な位置関係が変化したり、第１部分に別部材が積載されたりすることで変わる場合でも、現在の操作対象装置の状態に対応した操作情報を適切に提供することができる。   In this configuration, a model image in a state closest to the current state of the operation target device is selected based on the relative positional relationship between the first mark and the second mark, and operation information corresponding to the state is displayed on the imaging device. Therefore, even if the state of the first part or the second part changes due to a change in the relative positional relationship between these parts or when another member is loaded on the first part, the current operation target Operation information corresponding to the state of the apparatus can be appropriately provided.

上記課題を解決するために、本発明に係る携帯端末は、上記のいずれかの操作情報提供システムにおける少なくとも撮像装置として機能する。   In order to solve the above problems, a mobile terminal according to the present invention functions as at least an imaging device in any one of the above operation information providing systems.

上記課題を解決するために、本発明に係る制御プログラムは、上記のいずれかの操作情報提供システムにおける少なくとも特定手段としてコンピュータを機能させる。   In order to solve the above problems, a control program according to the present invention causes a computer to function as at least specifying means in any one of the above operation information providing systems.

本発明によれば、上記の構成によって、操作対象装置の状態に応じて取るべき操作が異なる場合でも、その状態に対応した操作情報を適切に提供することができる。   According to the present invention, even if the operation to be taken differs depending on the state of the operation target device, the operation information corresponding to the state can be appropriately provided by the above configuration.

実施形態に係る操作情報提供システムが適用される多機能装置（操作対象装置）の構成を示す斜視図である。1 is a perspective view illustrating a configuration of a multi-function device (operation target device) to which an operation information providing system according to an embodiment is applied. 多機能装置の構成を示す側面図である。It is a side view which shows the structure of a multifunction apparatus. 多機能装置におけるプリンタ部の概略構成を示す側面図である。FIG. 3 is a side view illustrating a schematic configuration of a printer unit in the multi-function device. 多機能装置におけるプリンタ部の概略構成を示す平面図である。3 is a plan view illustrating a schematic configuration of a printer unit in the multi-function device. FIG. 実施形態に係る操作情報提供システムを示す概念図である。It is a conceptual diagram which shows the operation information provision system which concerns on embodiment. 図６（Ａ）は携帯端末の要部構成を示すブロック図であり、図６（Ｂ）は画像処理サーバの要部構成を示すブロック図である。FIG. 6A is a block diagram illustrating a main configuration of the mobile terminal, and FIG. 6B is a block diagram illustrating a main configuration of the image processing server. 携帯端末における端末制御部の制御動作を示すフロー図である。It is a flowchart which shows the control operation of the terminal control part in a portable terminal. 画像処理サーバにおけるサーバ制御部の制御動作を示すフロー図である。It is a flowchart which shows the control operation of the server control part in an image processing server. キャリッジの周辺部における紙詰まり処理に関する撮像画像及び操作情報を示す図であり、図９（Ａ）は第１マークがキャリッジで被覆されたときの撮像画像を示す図であり、図９（Ｂ）はキャリッジの操作に関する操作情報が表示された撮像画像を示す図である。FIG. 9A is a diagram illustrating a captured image and operation information related to a paper jam processing in the peripheral portion of the carriage, and FIG. 9A is a diagram illustrating a captured image when the first mark is covered with the carriage, and FIG. FIG. 4 is a diagram illustrating a captured image on which operation information regarding the operation of the carriage is displayed. キャリッジの周辺部における紙詰まり処理に関する撮像画像及び操作情報を示す図であり、図１０（Ａ）はキャリッジの操作を完了した後の撮像画像を示す図であり、図１０（Ｂ）は用紙の除去に関する操作情報が表示された撮像画像を示す図である。FIG. 10A is a diagram illustrating a captured image and operation information related to a paper jam processing in a peripheral portion of the carriage, FIG. 10A is a diagram illustrating a captured image after completion of the operation of the carriage, and FIG. It is a figure which shows the picked-up image on which the operation information regarding removal was displayed. 図１１（Ａ）〜（Ｃ）は、図９（Ａ）及び図１０（Ａ）のそれぞれの撮像画像に対応する３つのモデル画像及び操作情報を示す図である。11A to 11C are diagrams illustrating three model images and operation information corresponding to the captured images of FIGS. 9A and 10A. 搬送路における紙詰まり処理に関する撮像画像を示す図であり、図１２（Ａ）は紙詰まりが無いときの撮像画像を示す図であり、図１２（Ｂ）は一部の第１マークが紙詰まりした用紙で被覆されたときの撮像画像を示す図である。FIG. 12A is a diagram illustrating a captured image related to paper jam processing in the conveyance path, FIG. 12A is a diagram illustrating a captured image when there is no paper jam, and FIG. 12B is a diagram illustrating a case where some first marks are jammed. It is a figure which shows the picked-up image when it coat | covers with the done paper. 図１３（Ａ）〜（Ｃ）は、図１２（Ｂ）の撮像画像に対応する３つのモデル画像を示す図である。FIGS. 13A to 13C are diagrams illustrating three model images corresponding to the captured image of FIG. 搬送方向変換部における紙詰まり処理に関する撮像画像及び操作情報を示す図であり、図１４（Ａ）は第１マークが紙詰まりした用紙で被覆されたときの撮像画像を示す図であり、図１４（Ｂ）は操作情報が表示された撮像画像を示す図である。FIG. 14A is a diagram illustrating a captured image and operation information related to paper jam processing in the transport direction conversion unit, and FIG. 14A is a diagram illustrating a captured image when the first mark is covered with a paper jammed paper. (B) is a diagram showing a captured image on which operation information is displayed. インクカートリッジの操作に関する撮像画像及び操作情報を示す図であり、図１５（Ａ）は第１マークがユーザの手指で被覆されたときの撮像画像を示す図であり、図１５（Ｂ）は操作情報が表示された撮像画像を示す図である。FIG. 15A is a diagram illustrating a captured image and operation information related to the operation of the ink cartridge, and FIG. 15A is a diagram illustrating a captured image when the first mark is covered with a user's finger, and FIG. It is a figure which shows the captured image on which information was displayed. ガイド部の操作に関する撮像画像及び操作情報を示す図であり、図１６（Ａ）は第１マークが露出したときの撮像画像を示す図であり、図１６（Ｂ）は操作情報が表示された撮像画像を示す図である。FIG. 16A is a diagram illustrating a captured image and operation information regarding the operation of the guide unit, FIG. 16A is a diagram illustrating a captured image when the first mark is exposed, and FIG. 16B is a diagram illustrating operation information displayed. It is a figure which shows a captured image. 回動部分を撮像した撮像画像を示す図である。It is a figure which shows the captured image which imaged the rotation part. 図１８（Ａ）〜（Ｃ）は、図１７の撮像画像に対応する３つのモデル画像を示す図である。18A to 18C are diagrams illustrating three model images corresponding to the captured image of FIG.

以下に、本発明に係る操作情報提供システム、携帯端末及び制御プログラムの好ましい実施形態について、図面を参照しながら説明する。   Hereinafter, preferred embodiments of an operation information providing system, a mobile terminal, and a control program according to the present invention will be described with reference to the drawings.

［多機能装置の構成］
図５に示す本実施形態の操作情報提供システム１０は、図１及び図２に示す多機能装置１２（操作対象装置）の操作情報を提供するものである。多機能装置１２は、印刷機能、スキャナ機能、コピー機能及びファクシミリ機能を併有する複合機であり、印刷機能、コピー機能及びファクシミリ機能を発揮する際に、インク吐出ヘッド４６から用紙Ｐに対してインクが吐出される。つまり、本実施形態の多機能装置１２では、画像が記録される「記録媒体」として用紙Ｐが用いられ、「液体」としてインクが用いられる。また、「印刷ヘッド」又は「液体吐出ヘッド」としてインク吐出ヘッド４６が用いられ、「記録媒体搬送手段」として用紙搬送機構３８が用いられる。 [Configuration of multi-function device]
An operation information providing system 10 according to the present embodiment illustrated in FIG. 5 provides operation information of the multi-function device 12 (operation target device) illustrated in FIGS. 1 and 2. The multi-function device 12 is a multifunction machine having both a printing function, a scanner function, a copying function, and a facsimile function. When performing the printing function, the copying function, and the facsimile function, the multi-function device 12 inks the paper P from the ink ejection head 46. Is discharged. That is, in the multi-function device 12 of this embodiment, the paper P is used as a “recording medium” on which an image is recorded, and ink is used as a “liquid”. Further, the ink discharge head 46 is used as a “print head” or “liquid discharge head”, and the paper transport mechanism 38 is used as a “recording medium transport unit”.

図１及び図２に示すように、多機能装置１２は、筐体１４と、プリンタ部１６と、スキャナ部１８と、各種の制御動作を実行する制御部２０と、各種の情報を入力又は出力（表示）する操作パネル２２とを有している。   As shown in FIGS. 1 and 2, the multi-function device 12 is configured to input or output a casing 14, a printer unit 16, a scanner unit 18, a control unit 20 that executes various control operations, and various types of information. And an operation panel 22 for displaying.

図２に示すように、筐体１４は、各種の機器を収容する収容空間を構成する箱状の部材である。図１に示すように、筐体１４の前面１４ａには、第１開口部２４と第２開口部２６とが幅方向に並べて設けられており、第２開口部２６には、蓋体２８が開閉自在に取り付けられている。また、図２に示すように、筐体１４の後面１４ｂには、点検窓３０が設けられており、点検窓３０には、蓋体３２が開閉自在に取り付けられている。そして、筐体１４の内部に、プリンタ部１６及び制御部２０が設けられており、筐体１４の上部に、枢軸部（図示省略）を介してスキャナ部１８が回動自在に設けられている。   As shown in FIG. 2, the housing 14 is a box-shaped member that constitutes an accommodation space for accommodating various devices. As shown in FIG. 1, a first opening 24 and a second opening 26 are arranged in the width direction on the front surface 14 a of the housing 14, and a lid 28 is provided in the second opening 26. It can be opened and closed freely. As shown in FIG. 2, an inspection window 30 is provided on the rear surface 14 b of the housing 14, and a lid 32 is attached to the inspection window 30 so as to be freely opened and closed. A printer unit 16 and a control unit 20 are provided inside the housing 14, and a scanner unit 18 is rotatably provided above the housing 14 via a pivot (not shown). .

図３に示すように、プリンタ部１６は、筐体１４の内部の底部に配置された給紙トレイ３４と、筐体１４の内部における給紙トレイ３４の上方に配置された画像形成部３６と、給紙トレイ３４に収容された用紙Ｐを画像形成部３６に搬送する用紙搬送機構３８と、用紙Ｐの搬送方向における画像形成部３６の下流側であって、かつ、給紙トレイ３４の上方に配置された箱状（又は板状）の排紙トレイ４０とを有している。また、図４に示すように、プリンタ部１６は、複数色（本実施形態では４色）のインクのそれぞれを貯留する「液体カートリッジ」としての複数（本実施形態では４つ）のインクカートリッジ４２ａ〜４２ｄと、インクカートリッジ４２ａ〜４２ｄを着脱自在に保持するカートリッジ保持部４４とを有している。   As shown in FIG. 3, the printer unit 16 includes a paper feed tray 34 disposed at the bottom inside the housing 14, and an image forming unit 36 disposed above the paper feed tray 34 inside the housing 14. A paper transport mechanism 38 for transporting the paper P stored in the paper feed tray 34 to the image forming unit 36, and on the downstream side of the image forming unit 36 in the transport direction of the paper P and above the paper feed tray 34. And a box-shaped (or plate-shaped) paper discharge tray 40 disposed in the box. As shown in FIG. 4, the printer unit 16 includes a plurality (four in this embodiment) of ink cartridges 42 a as “liquid cartridges” that store each of a plurality of colors (four in this embodiment) of ink. To 42d, and a cartridge holding portion 44 that detachably holds the ink cartridges 42a to 42d.

図３に示すように、給紙トレイ３４は、複数の用紙Ｐを積層させた状態で収容する容器であり、図１に示すように、第１開口部２４から筐体１４の内部に着脱自在に挿し込まれている。   As shown in FIG. 3, the paper feed tray 34 is a container that accommodates a plurality of stacked sheets P, and is detachable from the first opening 24 into the housing 14 as shown in FIG. 1. Is inserted.

図４に示すように、画像形成部３６は、用紙Ｐ（図３）の表面に画像を形成する部分であり、インクを吐出する複数のノズル（図示省略）が設けられたノズル面４６ａ（図３）を有するインク吐出ヘッド４６と、インク吐出ヘッド４６を保持するキャリッジ４８と、キャリッジ４８を用紙Ｐの搬送方向に対して直交する方向に往復移動させる駆動部５０とを有している。駆動部５０は、キャリッジ４８をガイドする２つのガイドレール５２ａ，５２ｂと、一方のガイドレール５２ａの上面に互いに離間して設けられた一対のプーリ５４ａ，５４ｂと、一対のプーリ５４ａ，５４ｂ間に掛け渡されたタイミングベルト５６と、一方のプーリ５４ａに回転力を付与する駆動モータ５８とを有しており、タイミングベルト５６に対してキャリッジ４８が固定されている。   As shown in FIG. 4, the image forming unit 36 is a part that forms an image on the surface of the paper P (FIG. 3), and is provided with a nozzle surface 46 a (FIG. 3), a carriage 48 that holds the ink discharge head 46, and a drive unit 50 that reciprocates the carriage 48 in a direction orthogonal to the conveyance direction of the paper P. The drive unit 50 includes two guide rails 52a and 52b that guide the carriage 48, a pair of pulleys 54a and 54b that are spaced apart from each other on the upper surface of one guide rail 52a, and a pair of pulleys 54a and 54b. A timing belt 56 is provided, and a drive motor 58 that applies a rotational force to one pulley 54 a is provided. A carriage 48 is fixed to the timing belt 56.

そして、インク吐出ヘッド４６のインク流路（図示省略）と、インクカートリッジ４２ａ〜４２ｄのそれぞれとがインクチューブ６０ａ〜６０ｄを介して連通されており、インク吐出ヘッド４６のアクチュエータ（図示省略）と制御部２０（図２）とが、フレキシブル配線基板（図示省略）を介して電気的に接続されている。さらに、駆動モータ５８と制御部２０（図２）とが電気配線（図示省略）を介して電気的に接続されている。   The ink flow path (not shown) of the ink discharge head 46 and each of the ink cartridges 42a to 42d communicate with each other via the ink tubes 60a to 60d, and control with an actuator (not shown) of the ink discharge head 46 is performed. The part 20 (FIG. 2) is electrically connected via a flexible wiring board (not shown). Further, the drive motor 58 and the control unit 20 (FIG. 2) are electrically connected via electrical wiring (not shown).

図３に示すように、用紙搬送機構３８は、インク吐出ヘッド４６のノズル面４６ａと対向する印刷領域Ｑに向けて用紙Ｐを搬送する搬送路Ｒと、搬送路Ｒの上流側端部に近接して設けられ、給紙トレイ３４に収容された用紙Ｐを搬送路Ｒに供給する給紙ローラ６４と、給紙トレイ３４に収容された用紙Ｐを１枚ずつ分離する分離傾斜板６６とを有している。また、用紙搬送機構３８は、印刷領域Ｑに配置されたプラテン６８と、印刷領域Ｑの上流側に設けられ、所定のタイミングで用紙Ｐを印刷領域Ｑに送り出す一対の駆動ローラ７０ａ及び押さえローラ７０ｂと、印刷領域Ｑの下流側に設けられ、用紙Ｐを排紙トレイ４０に排出する一対の排紙ローラ７２ａ及び押さえローラ７２ｂとを有している。搬送路Ｒは、用紙Ｐを略Ｕ字状に曲げながら搬送して当該用紙Ｐの搬送方向を変換する搬送方向変換部７４を有しており、搬送方向変換部７４より上流側では、用紙Ｐが前方から後方に向けて搬送され、搬送方向変換部７４より下流側では、用紙Ｐが後方から前方に向けて搬送されるようになっている。なお、本実施形態の説明では、図２に示された多機能装置１２の左側を「前」とし、右側を「後」とする。   As shown in FIG. 3, the paper transport mechanism 38 is close to the transport path R that transports the paper P toward the printing area Q facing the nozzle surface 46 a of the ink discharge head 46, and the upstream end of the transport path R. A paper feed roller 64 that supplies the paper P stored in the paper feed tray 34 to the transport path R, and a separation inclined plate 66 that separates the paper P stored in the paper feed tray 34 one by one. Have. The paper transport mechanism 38 is provided on the upstream side of the platen 68 disposed in the printing area Q and the printing area Q, and a pair of driving rollers 70a and pressing rollers 70b that send the paper P to the printing area Q at a predetermined timing. And a pair of paper discharge rollers 72 a and a pressing roller 72 b that are provided on the downstream side of the printing area Q and discharge the paper P to the paper discharge tray 40. The conveyance path R includes a conveyance direction conversion unit 74 that converts the conveyance direction of the paper P by conveying the paper P while bending the paper P in a substantially U shape, and on the upstream side of the conveyance direction conversion unit 74, the paper P Are conveyed from the front to the rear, and the sheet P is conveyed from the rear to the front on the downstream side of the conveyance direction conversion unit 74. In the description of the present embodiment, the left side of the multi-function device 12 shown in FIG. 2 is “front” and the right side is “rear”.

図３に示すように、用紙搬送機構３８では、用紙Ｐが印刷領域Ｑを通過するときや、用紙Ｐが搬送路Ｒの水平な部分（以下、「水平部」という。）Ｔを移動するときや、用紙Ｐが搬送方向変換部７４を通過するときに紙詰まりが生じる恐れがある。そして、図２に示すように、印刷領域Ｑ及び水平部Ｔで詰まった用紙Ｐについては、スキャナ部１８を持ち上げたときに開かれる開口部７６からこれを除去することができ、搬送方向変換部７４で詰まった用紙Ｐについては、点検窓３０からこれを除去することができる。本実施形態に係る操作情報提供システム１０（図５）は、これらの紙詰まりを生じた用紙Ｐを除去する際に、操作に関する必要な情報をユーザに対して提供することができる。   As shown in FIG. 3, in the paper transport mechanism 38, when the paper P passes through the printing region Q or when the paper P moves on a horizontal portion (hereinafter referred to as “horizontal portion”) T of the transport path R. In addition, a paper jam may occur when the paper P passes through the transport direction changing unit 74. As shown in FIG. 2, the paper P jammed in the printing area Q and the horizontal portion T can be removed from the opening 76 that is opened when the scanner unit 18 is lifted, and the conveyance direction conversion unit The paper P jammed at 74 can be removed from the inspection window 30. The operation information providing system 10 (FIG. 5) according to the present embodiment can provide necessary information regarding the operation to the user when removing the paper P in which the paper jam has occurred.

図１に示すように、インクカートリッジ４２ａ〜４２ｄ及びカートリッジ保持部４４は、第２開口部２６の奥側に位置する筐体１４の下部に配置されており、カートリッジ保持部４４（図４）は、インクカートリッジ４２ａ〜４２ｄが装着されたときに、インクカートリッジ４２ａ〜４２ｄに係合される係止部（図示省略）を有している。当該係止部は、インクカートリッジ４２ａ〜４２ｄの上面を押し下げることによって係止状態が解除されるように構成されており、係止状態が解除された後は、インクカートリッジ４２ａ〜４２ｄを手前に引くことで、これらを第２開口部２６から引き出すことができる。本実施形態に係る操作情報提供システム１０（図５）は、カートリッジ保持部４４からインクカートリッジ４２ａ〜４２ｄを取り外す際に、操作に関する必要な情報をユーザに対して提供することができる。   As shown in FIG. 1, the ink cartridges 42 a to 42 d and the cartridge holding portion 44 are disposed at the lower part of the housing 14 located on the back side of the second opening 26, and the cartridge holding portion 44 (FIG. 4) When the ink cartridges 42a to 42d are mounted, there are engaging portions (not shown) that are engaged with the ink cartridges 42a to 42d. The locking portion is configured so that the locked state is released by pushing down the upper surfaces of the ink cartridges 42a to 42d. After the locked state is released, the ink cartridges 42a to 42d are pulled forward. Thus, these can be pulled out from the second opening 26. The operation information providing system 10 (FIG. 5) according to the present embodiment can provide necessary information regarding the operation to the user when removing the ink cartridges 42 a to 42 d from the cartridge holding unit 44.

図１及び図２に示すように、スキャナ部１８は、画像を読み取る画像読み取り部８０と、画像読み取り部８０に原稿Ｗを自動供給する自動供給装置８２とを有している。画像読み取り部８０は、原稿Ｗが載置される原稿台８０ａ（図２）と、原稿台８０ａを覆うカバー８０ｂと、原稿台８０ａに載置された原稿Ｗ、或いは、自動供給装置８２から自動供給された原稿Ｗから画像を読み取るイメージセンサ（図示省略）とを有している。また、図１に示すように、スキャナ部１８は、原稿Ｗのサイズに応じて位置調整可能に構成され、自動供給装置８２に供給される原稿Ｗの供給方向に対して直交する方向の端部に沿って配置される一対のガイド部８４を有している。一対のガイド部８４のそれぞれは、原稿Ｗの端部をガイドするガイド壁８４ａと、ガイド壁８４ａにおける内側の面の下部に設けられ、原稿Ｗの端部を受ける板状の原稿受け部８４ｂと、ガイド壁８４ａにおける内側の面の上下方向中央部に設けられ、画像読み取り部８０から排出された原稿Ｗを受ける板状の原稿排出部８４ｃとを有している。   As shown in FIGS. 1 and 2, the scanner unit 18 includes an image reading unit 80 that reads an image, and an automatic supply device 82 that automatically supplies a document W to the image reading unit 80. The image reading unit 80 is automatically supplied from a document table 80a (FIG. 2) on which the document W is placed, a cover 80b covering the document table 80a, the document W placed on the document table 80a, or the automatic supply device 82. And an image sensor (not shown) for reading an image from the supplied document W. Further, as shown in FIG. 1, the scanner unit 18 is configured to be position-adjustable according to the size of the document W, and has an end portion in a direction orthogonal to the supply direction of the document W supplied to the automatic supply device 82. Has a pair of guide portions 84 arranged along. Each of the pair of guide portions 84 includes a guide wall 84 a that guides the end portion of the document W, and a plate-shaped document receiving portion 84 b that is provided at a lower portion of the inner surface of the guide wall 84 a and receives the end portion of the document W. The guide wall 84a has a plate-like document discharge portion 84c that is provided at the center in the vertical direction on the inner surface of the guide wall 84a and receives the document W discharged from the image reading portion 80.

図１に示すように、自動供給装置８２を用いて画像読み取り部８０（図２）に原稿Ｗを自動供給する際には、一対のガイド部８４間の間隔を調整して、ガイド壁８４ａを原稿Ｗの端部に沿うように位置決めし、カバー８０ｂの上面における一対のガイド部８４間に原稿Ｗを載置する。このとき、ガイド壁８４ａが原稿Ｗの端部から離間して配置されていると、ガイド部８４のガイド機能が損なわれ、原稿Ｗが斜行して画像読み取り部８０に供給される恐れがある。本実施形態に係る操作情報提供システム１０（図５）は、一対のガイド部８４間の間隔を適正に調整する際に、操作に関する必要な情報をユーザに対して提供することができる。   As shown in FIG. 1, when automatically supplying the document W to the image reading unit 80 (FIG. 2) using the automatic supply device 82, the distance between the pair of guide portions 84 is adjusted to adjust the guide wall 84a. The document W is positioned along the end of the document W, and the document W is placed between the pair of guide portions 84 on the upper surface of the cover 80b. At this time, if the guide wall 84 a is disposed away from the end of the document W, the guide function of the guide unit 84 is impaired, and the document W may be skewed and supplied to the image reading unit 80. . The operation information providing system 10 (FIG. 5) according to the present embodiment can provide necessary information regarding the operation to the user when appropriately adjusting the distance between the pair of guide portions 84.

［操作情報提供システムの構成］
図５は、実施形態に係る操作情報提供システム１０を示す概念図である。図６は、携帯端末９４及び画像処理サーバ９８の要部構成を示すブロック図である。図７は、携帯端末９４における端末制御部９４ｄの制御動作を示すフロー図であり、図８は、画像処理サーバ９８におけるサーバ制御部９８ｃの制御動作を示すフロー図である。 [Configuration of operation information provision system]
FIG. 5 is a conceptual diagram showing the operation information providing system 10 according to the embodiment. FIG. 6 is a block diagram showing a main configuration of the portable terminal 94 and the image processing server 98. FIG. 7 is a flowchart showing the control operation of the terminal control unit 94d in the portable terminal 94, and FIG. 8 is a flowchart showing the control operation of the server control unit 98c in the image processing server 98.

操作情報提供システム１０は、「操作対象装置」としての多機能装置１２の操作方法に関する操作情報を提供するシステムであり、多機能装置１２の複数の操作対象部分の「第１部分」に形成された少なくとも１つの第１マーク９０１，９０２，９０３，９０４，９０５，９０６（図９〜図１８参照）と、当該複数の操作対象部分の「第２部分」に形成された少なくとも１つの第２マーク９２１，９２２，９２３，９２４，９２５，９２６（図９〜図１８参照）と、「撮像装置」としての携帯端末９４と、インターネット、ＬＡＮ、無線回線及び電話回線等のような通信回線９６と、画像処理サーバ９８と、通信回線９６と携帯端末９４との間の無線通信を行う無線通信装置９７とを備えている。第１マーク９０１，９０２，９０３，９０４，９０５，９０６のそれぞれは、互いに異なる種類として区別できるように形成されており、例えば、色及び形状の少なくとも一方が互いに異なるように形成されている。また、第２マーク９２１，９２２，９２３，９２４，９２５，９２６のそれぞれは、互いに異なる種類として区別できるように形成されており、例えば、色及び形状の少なくとも一方が互いに異なるように形成されている。   The operation information providing system 10 is a system that provides operation information related to an operation method of the multi-function device 12 as an “operation target device”, and is formed in a “first portion” of a plurality of operation target portions of the multi-function device 12. Further, at least one first mark 901, 902, 903, 904, 905, 906 (see FIGS. 9 to 18) and at least one second mark formed on the “second portion” of the plurality of operation target portions. 921, 922, 923, 924, 925, 926 (see FIGS. 9 to 18), a portable terminal 94 as an “imaging device”, a communication line 96 such as the Internet, a LAN, a wireless line, and a telephone line, An image processing server 98 and a wireless communication device 97 that performs wireless communication between the communication line 96 and the portable terminal 94 are provided. Each of the first marks 901, 902, 903, 904, 905, and 906 is formed so as to be distinguished from each other, for example, at least one of color and shape is different from each other. Each of the second marks 921, 922, 923, 924, 925, and 926 is formed so as to be distinguished from each other, and for example, is formed so that at least one of color and shape is different from each other. .

なお、以下の説明において、複数の第１マーク９０１を互いに区別する場合には、第１マーク９０１ａ，９０１ｂ，９０１ｃ…のように表示し、複数の第２マーク９２１を互いに区別する場合には、第２マーク９２１ａ，９２１ｂ，９２１ｃ…のように表示する。他の種類の第１マーク９０２〜９０６及び第２マーク９２２〜９２６についても同様に表示する。   In the following description, when the plurality of first marks 901 are distinguished from each other, the first marks 901a, 901b, 901c,... Are displayed, and when the plurality of second marks 921 are distinguished from each other, The second marks 921a, 921b, 921c,... Are displayed. Other types of first marks 902 to 906 and second marks 922 to 926 are displayed in the same manner.

図５及び図６（Ａ）に示すように、携帯端末９４は撮像部９４ａ、通信部９４ｂ、表示部９４ｃ、端末制御部９４ｄを有している。撮像部９４ａは被写体を撮像する機能を有し、多機能装置１２を撮像する「撮像手段」として機能する。具体的には、既知の携帯端末のカメラ部などが撮像部９４ａに該当する。通信部９４ｂは各種の情報（操作情報を含む。）を画像処理サーバ９８との間で無線通信装置９７及び通信回線９６を介してやり取りするものである。具体的には、既知の無線ＬＡＮ用通信インターフェース装置や赤外線通信用の外部出力用通信インターフェース装置などが通信部９４ｂに該当する。表示部９４ｃは多機能装置１２の撮像画像及び多機能装置１２の操作方法に関する操作情報を表示する「情報表示手段」として機能するものである。具体的には、既知の携帯端末におけるディスプレイ装置などが表示部９４ｃに該当する。端末制御部９４ｄは撮像部９４ａ、通信部９４ｂ、表示部９４ｃの制御動作を実行するものである。端末制御部９４ｄは、１又は複数のコンピュータからなり、各コンピュータはＣＰＵ（Central Processing Unit）、ＣＰＵが実行するプログラムやプログラムで使用されるデータを書き替え可能に記憶するＲＯＭ（Read Only Memory）、ＣＰＵがプログラムを実行する際にデータを一時的に記憶するＲＡＭ、及びこれらを接続する内部経路等を備えている（これらについて図示省略）。ＣＰＵが実行するプログラムは、フレキシブルディスク、ＣＤ−ＲＯＭ、メモリカード等の各種記憶媒体に記憶されており、これらの記憶媒体からＲＯＭにインストールされる。そして、このプログラムがＣＰＵで実行されることにより、端末制御部９４ｄの機能が実現される。さらに、端末制御部９４ｄは、表示部９４ｃの動作を制御する「表示制御手段」としての表示制御部９４ｅを有している。   As shown in FIGS. 5 and 6A, the portable terminal 94 includes an imaging unit 94a, a communication unit 94b, a display unit 94c, and a terminal control unit 94d. The imaging unit 94 a has a function of imaging a subject and functions as an “imaging unit” that images the multi-function device 12. Specifically, a camera unit or the like of a known portable terminal corresponds to the imaging unit 94a. The communication unit 94 b exchanges various types of information (including operation information) with the image processing server 98 via the wireless communication device 97 and the communication line 96. Specifically, a known wireless LAN communication interface device, an external output communication interface device for infrared communication, and the like correspond to the communication unit 94b. The display unit 94 c functions as an “information display unit” that displays the captured image of the multi-function device 12 and operation information regarding the operation method of the multi-function device 12. Specifically, a display device in a known portable terminal corresponds to the display unit 94c. The terminal control unit 94d performs control operations of the imaging unit 94a, the communication unit 94b, and the display unit 94c. The terminal control unit 94d includes one or a plurality of computers, and each computer has a CPU (Central Processing Unit), a ROM (Read Only Memory) that stores a program executed by the CPU and data used in the program in a rewritable manner, A RAM that temporarily stores data when the CPU executes a program, an internal path that connects them, and the like (not shown) are provided. Programs executed by the CPU are stored in various storage media such as a flexible disk, a CD-ROM, and a memory card, and are installed in the ROM from these storage media. And the function of the terminal control part 94d is implement | achieved by running this program by CPU. Further, the terminal control unit 94d has a display control unit 94e as “display control means” for controlling the operation of the display unit 94c.

図５及び図６（Ｂ）に示すように、画像処理サーバ９８は、「記憶手段」としての記憶部９８ａと、通信部９８ｂと、サーバ制御部９８ｃとを有している。記憶部９８ａは、複数の操作対象部分のそれぞれに対応する複数のモデル画像と、複数のモデル画像のそれぞれに対応して用意された複数の操作情報とを記憶するものである。つまり、記憶部９８ａには、全ての操作対象部分に関する複数のモデル画像及び複数の操作情報が記憶されている。記憶部９８ａに記憶された複数のモデル画像のそれぞれには、第１マーク９０１〜９０６のいずれかと第２マーク９２１〜９２６のいずれかとが含まれている。通信部９８ｂは、各種の情報（操作情報を含む。）を携帯端末９４との間で通信回線９６及び無線通信装置９７を介してやり取りするものである。具体的には、既知の外部出力用の通信インターフェース装置などが通信部９８ｂに該当する。サーバ制御部９８ｃは、通信部９８ｂの制御動作を実行する機能を有している。また、サーバ制御部９８ｃは、特定部９８ｄ（特定手段に相当）を有しており、この特定部９８ｄは、「撮像装置」としての携帯端末９４で撮像された撮像画像と、「記憶手段」としての記憶部９８ａに記憶された複数のモデル画像とを比較することによって、撮像画像に最も近似した最近似モデル画像を特定する機能を有している。   As shown in FIGS. 5 and 6B, the image processing server 98 includes a storage unit 98a as a “storage unit”, a communication unit 98b, and a server control unit 98c. The storage unit 98a stores a plurality of model images corresponding to each of a plurality of operation target portions and a plurality of operation information prepared corresponding to each of the plurality of model images. That is, the storage unit 98a stores a plurality of model images and a plurality of operation information related to all operation target portions. Each of the plurality of model images stored in the storage unit 98a includes one of the first marks 901 to 906 and one of the second marks 921 to 926. The communication unit 98 b exchanges various types of information (including operation information) with the mobile terminal 94 via the communication line 96 and the wireless communication device 97. Specifically, a known communication interface device for external output corresponds to the communication unit 98b. The server control unit 98c has a function of executing the control operation of the communication unit 98b. Further, the server control unit 98c includes a specifying unit 98d (corresponding to specifying unit). The specifying unit 98d includes a captured image captured by the portable terminal 94 serving as an “imaging device”, and a “storage unit”. And a plurality of model images stored in the storage unit 98a are compared to specify the most approximate model image closest to the captured image.

サーバ制御部９８ｃは、１又は複数のコンピュータからなり、各コンピュータはＣＰＵ（Central Processing Unit）、ＣＰＵが実行するプログラムやプログラムで使用されるデータを書き替え可能に記憶するＲＯＭ（Read Only Memory）、ＣＰＵがプログラムを実行する際にデータを一時的に記憶するＲＡＭ、及びこれらを接続する内部経路等を備えている（これらについて図示省略）。ＣＰＵが実行するプログラムは、フレキシブルディスク、ＣＤ−ＲＯＭ、メモリカード等の各種記憶媒体に記憶されており、これらの記憶媒体からＲＯＭにインストールされる。そして、このプログラムがＣＰＵで実行されることにより、サーバ制御部９８ｃの各機能が実現される。サーバ制御部９８ｃの特定部９８ｄは、さらに第１選択処理実行部９８ｅ及び第２選択処理実行部９８ｆを有している。これらの機能については後述する。   The server control unit 98c includes one or a plurality of computers, and each computer is a CPU (Central Processing Unit), a ROM (Read Only Memory) that stores a program executed by the CPU and data used in the program in a rewritable manner, A RAM that temporarily stores data when the CPU executes a program, an internal path that connects them, and the like (not shown) are provided. Programs executed by the CPU are stored in various storage media such as a flexible disk, a CD-ROM, and a memory card, and are installed in the ROM from these storage media. Each function of the server control unit 98c is realized by executing this program by the CPU. The specifying unit 98d of the server control unit 98c further includes a first selection process execution unit 98e and a second selection process execution unit 98f. These functions will be described later.

無線通信装置９７は、画像処理サーバ９８のサーバ制御部９８ｃから発信されたデータを、通信回線９６を介して受信するとともに、当該データを無線通信により携帯端末９４に送信し、かつ、携帯端末９４から発信されたデータを、無線通信により受信するとともに、当該データを通信回線９６を介してサーバ制御部９８ｃに送信する機能を有している。具体的には、既知の無線ＬＡＮ用通信インターフェース装置や赤外線通信用の外部出力用通信インターフェース装置などが無線通信装置９７に該当する。   The wireless communication device 97 receives data transmitted from the server control unit 98c of the image processing server 98 via the communication line 96, transmits the data to the portable terminal 94 by wireless communication, and the portable terminal 94. In addition to receiving the data transmitted from the wireless communication, the data is transmitted to the server control unit 98c via the communication line 96. Specifically, a known wireless LAN communication interface device, an external output communication interface device for infrared communication, and the like correspond to the wireless communication device 97.

本実施形態に係る操作情報提供システム１０は、複数の操作対象部分のそれぞれについて、必要な操作情報を提供することができるように構成されており、複数の操作対象部分のそれぞれには、異なる種類の第１マーク９０１〜９０６と、異なる種類の第２マーク９２１〜９２６とが形成されている。そこで、以下には、操作対象部分のそれぞれで必要となる操作ごとに操作情報提供システム１０の動作を説明する。   The operation information providing system 10 according to the present embodiment is configured to be able to provide necessary operation information for each of a plurality of operation target parts, and each of the plurality of operation target parts has a different type. First marks 901 to 906 and different types of second marks 921 to 926 are formed. Therefore, the operation of the operation information providing system 10 will be described below for each operation required for each operation target portion.

（キャリッジの周辺部における紙詰まり処理１）
図９は、キャリッジ４８の周辺部における紙詰まり処理に関する撮像画像及び操作情報を示す図であり、図９（Ａ）は第１マーク９０１ｅがキャリッジ４８で被覆されたときの撮像画像Ｘ１を示す図であり、図９（Ｂ）はキャリッジ４８の操作に関する操作情報１０２ａが表示された撮像画像Ｘ１を示す図である。図１０は、キャリッジ４８の周辺部における紙詰まり処理に関する撮像画像及び操作情報を示す図であり、図１０（Ａ）はキャリッジ４８の操作を完了した後の撮像画像Ｘ２を示す図であり、図１０（Ｂ）は用紙Ｐの除去に関する操作情報１０２ｃが表示された撮像画像Ｘ２を示す図である。そして、図１１（Ａ）〜（Ｃ）は、図９（Ａ）及び図１０（Ａ）のそれぞれの撮像画像Ｘ１，Ｘ２に対応する３つのモデル画像１００ａ〜１００ｃ及び操作情報１０２ａ〜１０２ｃを示す図である。モデル画像１００ａ〜１００ｃと操作情報１０２ａ〜１０２ｃとは互いに関連付けられている。 (Paper jam handling at the periphery of the carriage 1)
FIG. 9 is a diagram illustrating a captured image and operation information related to a paper jam processing in the peripheral portion of the carriage 48, and FIG. 9A is a diagram illustrating a captured image X1 when the first mark 901e is covered with the carriage 48. FIG. 9B shows the captured image X1 on which operation information 102a regarding the operation of the carriage 48 is displayed. FIG. 10 is a diagram illustrating a captured image and operation information related to a paper jam processing in the peripheral portion of the carriage 48, and FIG. 10A is a diagram illustrating a captured image X2 after the operation of the carriage 48 is completed. 10B is a diagram illustrating the captured image X2 on which the operation information 102c regarding the removal of the paper P is displayed. 11A to 11C show three model images 100a to 100c and operation information 102a to 102c corresponding to the captured images X1 and X2 in FIGS. 9A and 10A, respectively. FIG. The model images 100a to 100c and the operation information 102a to 102c are associated with each other.

図９（Ａ）に示すように、本実施形態では、キャリッジ４８をガイドするガイドレール５２ｂの第１部分に少なくとも１つ（本実施形態では６つ）の第１マーク９０１ａ〜９０１ｆが形成されており、当該ガイドレール５２ｂの第２部分に少なくとも１つ（本実施形態では１つ）の第２マーク９２１が形成されている。第１部分及び第２部分は共に固定部であり、第１部分はガイドレール５２ｂのほぼ全長に亘る領域に位置しており、第２部分はガイドレール５２ｂの長手方向端部に位置している。つまり、本実施形態では、複数の第１マーク９０１ａ〜９０１ｆのうち少なくとも１つが、用紙搬送機構３８により搬送される用紙Ｐが搬送不良状態となったときに、その用紙Ｐによって被覆されると想定される位置（第１部分）に形成されている。また、第２マーク９２１が、用紙搬送機構３８により搬送される用紙Ｐが搬送不良状態となったときに、その用紙Ｐによって被覆されることがないと想定される位置（第２部分）に形成されている。   As shown in FIG. 9A, in this embodiment, at least one (six in this embodiment) first marks 901a to 901f are formed on the first portion of the guide rail 52b that guides the carriage 48. In addition, at least one (one in this embodiment) second mark 921 is formed on the second portion of the guide rail 52b. The first part and the second part are both fixed parts, the first part is located in a region extending almost the entire length of the guide rail 52b, and the second part is located at the longitudinal end of the guide rail 52b. . In other words, in the present embodiment, it is assumed that at least one of the plurality of first marks 901a to 901f is covered with the paper P when the paper P transported by the paper transport mechanism 38 is in a poor transport state. It is formed in the position (1st part) to be done. Further, the second mark 921 is formed at a position (second portion) that is assumed not to be covered by the paper P when the paper P transported by the paper transport mechanism 38 is in a poorly transported state. Has been.

図７は、携帯端末９４における端末制御部９４ｄの制御動作を示すフロー図である。操作情報提供システム１０を用いて多機能装置１２の操作情報を取得する際には、まず、ユーザが携帯端末９４（図５）を操作することにより、操作情報を取得しようとする操作対象部分の撮像が行われる（ステップＳ１）。このステップＳ１では、操作対象部分に形成された第１マーク９０１及び第２マーク９２１が共に撮像画像Ｘ１に含まれるように、ユーザによって携帯端末９４（図５）が操作され、携帯端末９４の撮像部９４ａ（図６（Ａ））によって撮像画像Ｘ１のデータを取得（撮像）する撮像動作が実行される。図９（Ａ）に示すように、ステップＳ１で撮像された撮像画像Ｘ１には、５つの第１マーク９０１ａ〜９０１ｄ，９０１ｆと１つの第２マーク９２１とが含まれており、第１マーク９０１ｅがキャリッジ４８で被覆されている。   FIG. 7 is a flowchart showing the control operation of the terminal control unit 94d in the portable terminal 94. When acquiring operation information of the multi-function device 12 using the operation information providing system 10, first, the user operates the portable terminal 94 (FIG. 5) to determine the operation target portion for which operation information is to be acquired. Imaging is performed (step S1). In step S1, the mobile terminal 94 (FIG. 5) is operated by the user so that both the first mark 901 and the second mark 921 formed in the operation target portion are included in the captured image X1, and the mobile terminal 94 is imaged. An imaging operation for acquiring (imaging) data of the captured image X1 is executed by the unit 94a (FIG. 6A). As shown in FIG. 9A, the captured image X1 captured in step S1 includes five first marks 901a to 901d, 901f and one second mark 921, and the first mark 901e. Is covered with a carriage 48.

次に、ユーザの操作により、又はステップＳ１の撮像動作に連動することにより、携帯端末９４で撮像された撮像画像Ｘ１（図９（Ａ））のデータが画像処理サーバ９８（図５）に送信される（ステップＳ３）。このステップＳ３では、携帯端末９４の端末制御部９４ｄ（図６（Ａ））で通信部９４ｂ（図６（Ａ））が制御されることによって、撮像画像Ｘ１のデータが無線通信装置９７及び通信回線９６（図５）を介して画像処理サーバ９８（図５）に送信される。そして、画像処理サーバ９８の通信部９８ｂで撮像画像Ｘ１のデータが受信される。画像処理サーバ９８では、撮像画像Ｘ１に対応する操作情報１０２ａ（図１１（Ａ））が後述する方法により適宜選択され、選択された操作情報１０２ａのデータが携帯端末９４に向けて送信される。この操作情報１０２ａのデータが通信部９４ｂによって受信されると（ステップＳ５）、表示制御部９４ｅは、表示部９４ｃに既に表示された撮像画像Ｘ１の上に操作情報１０２ａを重ねて表示するよう表示部９４ｃを制御する（ステップＳ７）。図９（Ｂ）に示すように、本実施形態の操作情報１０２ａは、手の画像とキャリッジ４８の操作方向を示す矢印の画像であり、撮像画像Ｘ１及び操作情報１０２ａを見たユーザは、キャリッジ４８を矢印方向（右側）に移動させればよいことが分かる。   Next, the data of the captured image X1 (FIG. 9A) captured by the portable terminal 94 is transmitted to the image processing server 98 (FIG. 5) by the user's operation or in conjunction with the imaging operation of step S1. (Step S3). In step S3, the communication unit 94b (FIG. 6A) is controlled by the terminal control unit 94d (FIG. 6A) of the portable terminal 94, whereby the data of the captured image X1 is transmitted to the wireless communication device 97 and the communication. It is transmitted to the image processing server 98 (FIG. 5) via the line 96 (FIG. 5). Then, the data of the captured image X1 is received by the communication unit 98b of the image processing server 98. In the image processing server 98, operation information 102a (FIG. 11A) corresponding to the captured image X1 is appropriately selected by a method described later, and data of the selected operation information 102a is transmitted to the portable terminal 94. When the data of the operation information 102a is received by the communication unit 94b (step S5), the display control unit 94e displays the operation information 102a so as to overlap the captured image X1 already displayed on the display unit 94c. The unit 94c is controlled (step S7). As shown in FIG. 9B, the operation information 102a of the present embodiment is a hand image and an arrow image indicating the operation direction of the carriage 48, and the user who viewed the captured image X1 and the operation information 102a It can be seen that 48 may be moved in the direction of the arrow (right side).

ユーザがキャリッジ４８を右側に移動させる操作（第１段階の操作）を完了すると、図１０（Ａ）に示すように、多機能装置１２（キャリッジ４８の周辺部分）の状態が変わるので、続いて、用紙Ｐを除去する操作（第２段階の操作）を実行する必要がある。そこで、図７のステップＳ９では、「ＮＯ」すなわち用紙Ｐを除去する操作に関する情報の表示を終了しないと判断され、ステップＳ１〜Ｓ７までの動作が再び実行される。第２段階の操作に関するステップＳ７では、図１０（Ｂ）に示すように、表示部９４ｃによって表示された撮像画像Ｘ２の上に第２段階の操作に関する操作情報１０２ｃが重ねて表示される。この操作情報１０２ｃは、手の画像と用紙Ｐの移動方向を示す矢印の画像であり、撮像画像Ｘ２及び操作情報１０２ｃを見たユーザは、用紙Ｐを矢印方向に除去すればよいことが分かる。用紙Ｐを除去する操作を完了すると、図７のステップＳ９において「ＹＥＳ」と判断され、携帯端末９４の制御動作が終了される。なお、第１段階の操作から第２段階の操作にスムーズに移行するためには、撮像部９４ａによる多機能装置１２の撮像を継続的又は間欠的に行うことが望ましい。   When the user completes the operation of moving the carriage 48 to the right (the first stage operation), the state of the multi-function device 12 (the peripheral portion of the carriage 48) changes as shown in FIG. Then, it is necessary to execute an operation (second stage operation) for removing the paper P. Therefore, in step S9 in FIG. 7, it is determined that “NO”, that is, the display of information related to the operation of removing the paper P is not finished, and the operations from steps S1 to S7 are executed again. In step S7 related to the second-stage operation, as shown in FIG. 10B, operation information 102c related to the second-stage operation is displayed over the captured image X2 displayed by the display unit 94c. The operation information 102c is an image of a hand and an arrow indicating the moving direction of the paper P, and the user who sees the captured image X2 and the operation information 102c can remove the paper P in the arrow direction. When the operation of removing the paper P is completed, “YES” is determined in Step S9 in FIG. 7, and the control operation of the portable terminal 94 is ended. In order to smoothly transition from the first stage operation to the second stage operation, it is desirable to continuously or intermittently image the multi-function device 12 by the imaging unit 94a.

図８は、画像処理サーバ９８におけるサーバ制御部９８ｃの制御動作を示すフロー図である。画像処理サーバ９８（図６（Ｂ））では、まず、ステップＳ１１において、通信部９８ｂによって撮像画像Ｘ１（図９（Ａ））のデータが受信される。続いて、特定部９８ｄの第１選択処理実行部９８ｅにより、「第１選択処理」が実行される（ステップＳ１３）。つまり、特定部９８ｄ（特定手段）における第１選択処理実行部９８ｅは、記憶部９８ａに記憶されている複数のモデル画像から、撮像画像Ｘ１に撮像されている第１マーク９０１及び第２マーク９２１と同じ種類の第１マーク９０１及び第２マーク９２１を含むモデル画像１００ａ〜１００ｃのみを選択する「第１選択処理」を実行する。   FIG. 8 is a flowchart showing the control operation of the server control unit 98 c in the image processing server 98. In the image processing server 98 (FIG. 6B), first, in step S11, data of the captured image X1 (FIG. 9A) is received by the communication unit 98b. Subsequently, the “first selection process” is executed by the first selection process execution unit 98e of the specifying unit 98d (step S13). That is, the first selection processing execution unit 98e in the specifying unit 98d (specifying unit) includes the first mark 901 and the second mark 921 captured in the captured image X1 from the plurality of model images stored in the storage unit 98a. The “first selection process” is executed to select only the model images 100a to 100c including the first mark 901 and the second mark 921 of the same type.

ここで、第１選択処理実行部９８ｅ（図６（Ｂ））の同種第２マーク選択処理実行部９８ｈは、記憶部９８ａに記憶されている複数のモデル画像から、撮像画像Ｘ１に撮像されている第２マーク９２１と同じ種類の第２マーク９２１を含むモデル画像のみを選択する同種第２マーク選択処理を実行する「同種第２マーク選択処理実行手段」として機能する。また、第１選択処理実行部９８ｅの同種第１マーク選択処理実行部９８ｇは、同種第２マーク選択処理で選択されたモデル画像から、撮像画像Ｘ１に撮像されている第１マーク９０１と同じ種類の第１マーク９０１を含むモデル画像１００ａ〜１００ｃのみを選択する同種第１マーク選択処理を実行する「同種第１マーク選択処理実行手段」として機能する。つまり、「特定手段」が有する「第１選択処理実行手段」が、さらに「同種第２マーク選択処理実行手段」と「同種第１マーク選択処理実行手段」とを有している。このように、まず、第２マーク９２１に着目してモデル画像を大まかに選択し、その後、第１マーク９０１に着目してモデル画像１００ａ〜１００ｃを細かく選択するようにしているので、モデル画像１００ａ〜１００ｃを速やかに選択することができる。   Here, the same-type second mark selection process execution unit 98h of the first selection process execution unit 98e (FIG. 6B) is captured in the captured image X1 from a plurality of model images stored in the storage unit 98a. It functions as “same type second mark selection process execution means” for executing the same type second mark selection process for selecting only model images including the second type of the second mark 921 of the same type. The same type first mark selection process execution unit 98g of the first selection process execution unit 98e is the same type as the first mark 901 captured in the captured image X1 from the model image selected in the same type second mark selection process. It functions as “same type first mark selection process execution means” for executing the same type first mark selection process for selecting only the model images 100 a to 100 c including the first mark 901. That is, the “first selection process execution unit” included in the “specifying unit” further includes “same type second mark selection process execution unit” and “same type first mark selection process execution unit”. Thus, first, a model image is roughly selected by paying attention to the second mark 921, and then the model images 100a to 100c are finely selected by paying attention to the first mark 901. Therefore, the model image 100a ~ 100c can be selected quickly.

「第１選択処理」が完了すると、ステップＳ１５において「第２選択処理」が実行される。つまり、ステップＳ１５において、特定部９８ｄの第２選択処理実行部９８ｆは、「第１選択処理」で選択されたモデル画像１００ａ〜１００ｃ（図１１（Ａ）〜（Ｃ））から、第１マーク９０１と第２マーク９２１との相対位置関係が撮像画像Ｘ１に撮像されている第１マーク９０１と第２マーク９２１との相対位置関係と最も近似するモデル画像１００ａ（図１１（Ａ））を選択する「第２選択処理」を実行する「第２選択処理実行手段」として機能する。また、特定部９８ｄの第２選択処理実行部９８ｆ（又はその他の所定部分）は、「第２選択処理」で選択されたモデル画像１００ａを最近似モデル画像として特定する「最近似モデル画像特定手段」として機能する。次のステップＳ１７では、サーバ制御部９８ｃによって、操作情報１０２ａ（図１１（Ａ））のデータを通信部９８ｂ、通信回線９６及び無線通信装置９７を介して携帯端末９４に送信する送信処理が実行される。   When the “first selection process” is completed, the “second selection process” is executed in step S15. That is, in step S15, the second selection process execution unit 98f of the specifying unit 98d performs the first mark from the model images 100a to 100c (FIGS. 11A to 11C) selected in the “first selection process”. A model image 100a (FIG. 11A) in which the relative positional relationship between 901 and the second mark 921 is most similar to the relative positional relationship between the first mark 901 and the second mark 921 captured in the captured image X1 is selected. It functions as “second selection processing execution means” for executing “second selection processing”. Further, the second selection processing execution unit 98f (or other predetermined portion) of the specifying unit 98d specifies “the most approximate model image specifying unit” that specifies the model image 100a selected in the “second selection process” as the most approximate model image. ”. In the next step S17, the server control unit 98c executes transmission processing for transmitting the data of the operation information 102a (FIG. 11A) to the portable terminal 94 via the communication unit 98b, the communication line 96, and the wireless communication device 97. Is done.

以上は、キャリッジ４８を右側に移動させる操作（第１段階の操作）に関するサーバ制御部９８ｃの制御動作であり、ステップＳ１７の段階で終了したのでは、用紙Ｐの除去に関する操作情報を取得することができない。そこで、ステップＳ１９では、「ＮＯ」すなわち終了しないと判断され、ステップＳ１１〜Ｓ１７までの動作が再び実行される。用紙Ｐを除去する操作（第２段階の操作）に関するステップＳ１３，Ｓ１５では、最近似モデル画像としてモデル画像１００ｃ（図１１（Ｃ））が選択され、ステップＳ１７では、サーバ制御部９８ｃによって、操作情報１０２ｃ（図１１（Ｃ））のデータを通信部９８ｂ、通信回線９６及び無線通信装置９７を介して携帯端末９４に送信する送信処理が実行される。第２段階の操作が完了すると、図８のステップＳ１９において「ＹＥＳ」と判断され、画像処理サーバ９８の制御動作が終了される。   The above is the control operation of the server control unit 98c regarding the operation of moving the carriage 48 to the right side (first-stage operation). When the operation ends in the step S17, the operation information regarding the removal of the paper P is acquired. I can't. Therefore, in step S19, it is determined that “NO”, that is, not finished, and the operations from step S11 to S17 are executed again. In steps S13 and S15 relating to the operation of removing the paper P (second stage operation), the model image 100c (FIG. 11C) is selected as the most approximate model image. In step S17, the server control unit 98c performs the operation. Transmission processing for transmitting data of the information 102c (FIG. 11C) to the portable terminal 94 via the communication unit 98b, the communication line 96, and the wireless communication device 97 is executed. When the second-stage operation is completed, “YES” is determined in step S19 in FIG. 8, and the control operation of the image processing server 98 is ended.

以上のように、本実施形態に係る操作情報提供システム１０によれば、多機能装置１２におけるキャリッジ４８の周辺部分の操作情報（キャリッジ４８の操作及び用紙Ｐの除去に関する操作情報）を、第１マーク９０１と第２マーク９２１との相対的な位置関係に基づいて容易に取得することができる。   As described above, according to the operation information providing system 10 according to the present embodiment, the operation information (operation information regarding the operation of the carriage 48 and the removal of the paper P) of the peripheral portion of the carriage 48 in the multi-function device 12 is the first. It can be easily acquired based on the relative positional relationship between the mark 901 and the second mark 921.

（キャリッジの周辺部における紙詰まり処理２）
本実施形態では、上述のように、キャリッジ４８をガイドするガイドレール５２ｂの第１部分（固定部）に少なくとも１つ（本実施形態では６つ）の第１マーク９０１ａ〜９０１ｆが形成されており、当該ガイドレール５２ｂの第２部分（固定部）に少なくとも１つ（本実施形態では１つ）の第２マーク９２１が形成されているが、他の実施形態では、少なくとも１つの第１マークが、キャリッジ４８又はインク吐出ヘッド４６（可動部）に形成されてもよい。この場合には、キャリッジ４８又はインク吐出ヘッド４６（可動部）に形成された第１マークと、第２部分（固定部）に形成された第２マークとの相対位置関係が変動するので、図８のステップＳ１３，１５では、当該相対位置関係と最も近似する最近似モデル画像を特定し、図７のステップＳ７では、当該最近似モデル画像に対応する操作情報を表示させる。これにより、ユーザは、当該相対位置関係に応じた操作情報を容易に知ることができる。例えば、キャリッジ４８がホームポジションに位置するか、或いは、搬送路Ｒの上方に位置するかによって取るべき操作が異なる場合でも、ユーザは、上記操作情報に従って取るべき操作を適切に行うことができる。 (Paper jam handling at the periphery of the carriage 2)
In the present embodiment, as described above, at least one (six in this embodiment) first marks 901a to 901f are formed on the first portion (fixed portion) of the guide rail 52b that guides the carriage 48. At least one (one in this embodiment) second mark 921 is formed on the second portion (fixed portion) of the guide rail 52b. In other embodiments, at least one first mark is provided. Further, it may be formed on the carriage 48 or the ink discharge head 46 (movable part). In this case, the relative positional relationship between the first mark formed on the carriage 48 or the ink ejection head 46 (movable portion) and the second mark formed on the second portion (fixed portion) varies. In Steps S13 and S15 of FIG. 8, the most approximate model image that most closely approximates the relative positional relationship is specified. In Step S7 of FIG. 7, operation information corresponding to the most approximate model image is displayed. Thereby, the user can easily know operation information corresponding to the relative positional relationship. For example, even when the operation to be taken differs depending on whether the carriage 48 is located at the home position or above the conveyance path R, the user can appropriately perform the operation to be taken according to the operation information.

（搬送路における紙詰まり処理）
図１２は、搬送路Ｒ（水平部Ｔ）における紙詰まり処理に関する撮像画像を示す図であり、図１２（Ａ）は紙詰まりが無いときの撮像画像Ｘ３を示す図であり、図１２（Ｂ）は一部の第１マーク９０２ｂが紙詰まりを生じた用紙Ｐで被覆されたときの撮像画像Ｘ４を示す図である。図１３（Ａ）〜（Ｃ）は、図１２（Ｂ）の撮像画像Ｘ４に対応する３つのモデル画像１０４ａ〜１０４ｃを示す図である。 (Paper jam in the transport path)
FIG. 12 is a diagram illustrating a captured image related to the paper jam processing in the transport path R (horizontal portion T), and FIG. 12A is a diagram illustrating the captured image X3 when there is no paper jam, and FIG. ) Is a diagram illustrating a captured image X4 when a part of the first marks 902b is covered with the paper P in which a paper jam has occurred. FIGS. 13A to 13C are diagrams illustrating three model images 104a to 104c corresponding to the captured image X4 of FIG.

本実施形態では、搬送路Ｒにおける水平部Ｔの表面又はその近傍（第１部分，固定部）に少なくとも１つ（本実施形態では４つ）の第１マーク９０２ａ〜９０２ｄが形成されており、水平部Ｔの側部又はその近傍（第２部分，固定部）に少なくとも１つ（本実施形態では１つ）の第２マーク９２２が形成されている。したがって、水平部Ｔで用紙Ｐの紙詰まりが生じると、紙詰まりを生じた用紙Ｐによって第１マーク９０２ａ〜９０２ｄの一部又は全部が被覆される。そこで、操作情報提供システム１０によって、図７及び図８に示した方法と同様の方法により、紙詰まり処理に関する操作情報が提供される。なお、この紙詰まり処理に関して用いられる撮像画像は、紙詰まりを生じた用紙Ｐを含む撮像画像Ｘ４（図１２（Ｂ））である。   In the present embodiment, at least one (four in the present embodiment) first marks 902a to 902d are formed on the surface of the horizontal portion T in the transport path R or in the vicinity thereof (first portion, fixed portion). At least one (one in this embodiment) second mark 922 is formed on the side of the horizontal portion T or in the vicinity thereof (second portion, fixed portion). Accordingly, when a paper jam occurs in the horizontal portion T, a part or all of the first marks 902a to 902d are covered with the paper P in which the paper jam has occurred. Therefore, the operation information providing system 10 provides operation information related to the paper jam processing by a method similar to the method shown in FIGS. Note that the captured image used for the paper jam processing is the captured image X4 (FIG. 12B) including the paper P in which the paper jam has occurred.

図１２及び図１３に示すように、本実施形態において、３つのモデル画像１０４ａ〜１０４ｃのうち、第１マーク９０２と第２マーク９２２との相対位置関係が、撮像画像Ｘ４（図１２（Ｂ））に撮像されている第１マーク９０２と第２マーク９２２との相対位置関係と最も近似するモデル画像は、モデル画像１０４ｂ（図１３（Ｂ））である。そこで、図８のステップＳ１３，Ｓ１５では、最近似モデル画像としてモデル画像１０４ｂが選択され、ステップＳ７では、「表示制御手段」としての表示制御部９４ｅによって、モデル画像１０４ｂに対応する操作情報（図示省略）を表示部９４ｃに表示させるように表示処理が実行される。   As shown in FIGS. 12 and 13, in the present embodiment, among the three model images 104a to 104c, the relative positional relationship between the first mark 902 and the second mark 922 is the captured image X4 (FIG. 12B). The model image that most closely approximates the relative positional relationship between the first mark 902 and the second mark 922 captured in () is the model image 104b (FIG. 13B). Therefore, in steps S13 and S15 in FIG. 8, the model image 104b is selected as the most approximate model image, and in step S7, operation information (illustrated) corresponding to the model image 104b is displayed by the display control unit 94e as “display control means”. The display process is executed so that (omitted) is displayed on the display unit 94c.

（搬送方向変換部における紙詰まり処理）
図１４は、搬送方向変換部７４における紙詰まり処理に関する撮像画像及び操作情報を示す図であり、図１４（Ａ）は第１マーク９０３ａ〜９０３ｄが紙詰まりを生じた用紙Ｐで被覆されたときの撮像画像Ｘ５を示す図であり、図１４（Ｂ）は操作情報１０６が表示された撮像画像Ｘ５を示す図である。 (Paper jam handling at the transport direction changer)
FIG. 14 is a diagram illustrating a captured image and operation information related to a paper jam process in the transport direction conversion unit 74. FIG. 14A illustrates a case where the first marks 903a to 903d are covered with a paper P in which a paper jam has occurred. FIG. 14B is a diagram illustrating the captured image X5 on which the operation information 106 is displayed.

搬送方向変換部７４では、搬送方向変換部７４又はその近傍（第１部分，固定部）に少なくとも１つ（本実施形態では４つ）の第１マーク９０３ａ〜９０３ｄが形成されており、搬送方向変換部７４の側部又は搬送方向変換部７４から外れた部分（第２部分，固定部）に少なくとも１つ（本実施形態では１つ）の第２マーク９２３が形成されている。したがって、搬送方向変換部７４で用紙Ｐの紙詰まりが生じると、紙詰まりを生じた用紙Ｐによって第１マーク９０３ａ〜９０３ｄの一部又は全部が被覆される。そこで、操作情報提供システム１０によって、図７及び図８に示した方法と同様の方法により、紙詰まり処理に関する操作情報が提供される。   In the transport direction conversion unit 74, at least one (four in the present embodiment) first marks 903a to 903d are formed in the transport direction conversion unit 74 or in the vicinity thereof (first portion, fixed portion), and the transport direction At least one (one in the present embodiment) second mark 923 is formed on a side portion of the conversion portion 74 or a portion (second portion, fixed portion) deviated from the conveyance direction conversion portion 74. Accordingly, when the paper P is jammed in the transport direction conversion unit 74, a part or all of the first marks 903a to 903d are covered with the paper P in which the paper jam has occurred. Therefore, the operation information providing system 10 provides operation information related to the paper jam processing by a method similar to the method shown in FIGS.

図１４（Ａ）に示すように、この紙詰まり処理に関して、ステップＳ１（図７）で撮像された撮像画像Ｘ５は、全ての第１マーク９０３ａ〜９０３ｄが用紙Ｐで被覆された画像である。また、図１４（Ｂ）に示すように、ステップＳ７（図７）で表示される操作情報１０６は、２つの手の画像と用紙Ｐの操作方向を示す矢印の画像である。したがって、撮像画像Ｘ５及び操作情報１０６を見たユーザは、用紙Ｐの幅方向両端部を手で持って、用紙Ｐを矢印方向に除去すればよいことが分かる。   As shown in FIG. 14A, regarding this paper jam processing, the captured image X5 captured in step S1 (FIG. 7) is an image in which all the first marks 903a to 903d are covered with the paper P. Further, as shown in FIG. 14B, the operation information 106 displayed in step S7 (FIG. 7) is an image of two hands and an arrow image indicating the operation direction of the paper P. Therefore, it can be seen that the user who sees the captured image X5 and the operation information 106 may remove the paper P in the direction of the arrow by holding both ends of the paper P in the width direction by hand.

（インクカートリッジの操作）
図１５は、インクカートリッジ４２ａ〜４２ｄの操作に関する撮像画像及び操作情報を示す図であり、図１５（Ａ）は第１マーク９０４ｄがユーザの手指で被覆されたときの撮像画像Ｘ６を示す図であり、図１５（Ｂ）は操作情報１０８が表示された撮像画像Ｘ６を示す図である。 (Ink cartridge operation)
FIG. 15 is a diagram illustrating captured images and operation information relating to operations of the ink cartridges 42a to 42d, and FIG. 15A is a diagram illustrating a captured image X6 when the first mark 904d is covered with the user's fingers. FIG. 15B is a diagram illustrating the captured image X6 on which the operation information 108 is displayed.

インクカートリッジ４２ａ〜４２ｄでは、これらの上面（第１部分，固定部）に第１マーク９０４ａ〜９０４ｄが形成されており、インクカートリッジ４２ａ〜４２ｄから外れた部分（第２部分，固定部）に少なくとも１つ（本実施形態では１つ）の第２マーク９２４が形成されている。したがって、インクカートリッジ４２ａ〜４２ｄのいずれかを手指で押し下げて取り外す際には、第１マーク９０４ａ〜９０４ｄのいずれかが手指で被覆される。そこで、操作情報提供システム１０によって、図７及び図８に示した方法と同様の方法により、インクカートリッジ４２ａ〜４２ｄの取り外しに関する操作情報が提供される。   In the ink cartridges 42a to 42d, the first marks 904a to 904d are formed on the upper surfaces (first portion, fixed portion), and at least the portions (second portion, fixed portion) removed from the ink cartridges 42a to 42d. One (in this embodiment, one) second mark 924 is formed. Therefore, when one of the ink cartridges 42a to 42d is pushed down and removed, one of the first marks 904a to 904d is covered with the finger. Therefore, the operation information providing system 10 provides operation information related to the removal of the ink cartridges 42a to 42d by a method similar to the method shown in FIGS.

図１５（Ａ）に示すように、このインクカートリッジの操作に関して、ステップＳ１（図７）で撮像された撮像画像Ｘ６は、第１マーク９０４ｄが手指で被覆された画像である。また、図１５（Ｂ）に示すように、ステップＳ７（図７）で表示される操作情報１０８は、インクカートリッジ４２ｄの移動方向を示す画像である。したがって、撮像画像Ｘ６及び操作情報１０８を見たユーザは、インクカートリッジ４２ｄを手前に移動させればよいことが分かる。   As shown in FIG. 15A, regarding the operation of the ink cartridge, the captured image X6 captured in step S1 (FIG. 7) is an image in which the first mark 904d is covered with fingers. As shown in FIG. 15B, the operation information 108 displayed in step S7 (FIG. 7) is an image showing the moving direction of the ink cartridge 42d. Therefore, the user who sees the captured image X6 and the operation information 108 can move the ink cartridge 42d to the front.

なお、インクカートリッジ４２ａ〜４２ｄの装着状態を確認する場合、第１マーク９０４ａ〜９０４ｄが形成されるインクカートリッジ４２ａ〜４２ｄの上面（第１部分）は「可動部」となり、インクカートリッジ４２ａ〜４２ｄのいずれかが確実に装着されていない場合には、それに対応する第１マーク９０４ａ〜９０４ｄと、インクカートリッジ４２ａ〜４２ｄから外れた部分（第２部分，固定部）に形成された第２マーク９２４との相対位置関係が変動する。そこで、操作情報提供システム１０では、当該相対位置関係に関する複数のモデル画像が用意され、当該相対位置関係に応じて、インクカートリッジ４２ａ〜４２ｄを確実に装着するための操作情報が提供される。   When checking the mounting state of the ink cartridges 42a to 42d, the upper surfaces (first portions) of the ink cartridges 42a to 42d on which the first marks 904a to 904d are formed are “movable parts”, and the ink cartridges 42a to 42d If any one of them is not securely attached, the corresponding first marks 904a to 904d and the second mark 924 formed on the part (second part, fixing part) that is removed from the ink cartridges 42a to 42d, The relative positional relationship of fluctuates. Therefore, in the operation information providing system 10, a plurality of model images relating to the relative positional relationship are prepared, and operation information for reliably mounting the ink cartridges 42a to 42d is provided according to the relative positional relationship.

（ガイド部の操作）
図１６は、ガイド部８４の操作に関する撮像画像及び操作情報を示す図であり、図１６（Ａ）は第１マーク９０５ａ，９０５ｂが露出したときの撮像画像Ｘ７を示す図であり、図１６（Ｂ）は操作情報１１０が表示された撮像画像Ｘ７を示す図である。 (Guide section operation)
FIG. 16 is a diagram illustrating a captured image and operation information regarding the operation of the guide unit 84, and FIG. 16A is a diagram illustrating the captured image X7 when the first marks 905a and 905b are exposed. B) is a diagram illustrating a captured image X7 on which the operation information 110 is displayed.

本実施形態では、一対のガイド部８４のそれぞれにおける原稿受け部８４ｂの上面（第１部分，可動部）に、第１マーク９０５ａ，９０５ｂが形成されており、自動供給装置８２の上面（第２部分，固定部）に、少なくとも１つ（本実施形態では１つ）の第２マーク９２５が形成されている。したがって、用紙Ｐのサイズに応じてガイド部８４間の間隔が適正に調整されていない場合には、第１マーク９０５ａ及び９０５ｂの少なくとも一方が露出し、ガイド部８４間の間隔が適正に調整されているときには、用紙Ｐによって第１マーク９０５ａ及び９０５ｂの両方が被覆される。そこで、操作情報提供システム１０によって、図７及び図８に示した方法と同様の方法により、ガイド部８４の操作に関する操作情報が提供される。   In the present embodiment, first marks 905 a and 905 b are formed on the upper surface (first portion, movable portion) of the document receiving portion 84 b in each of the pair of guide portions 84, and the upper surface (second portion) of the automatic feeder 82. At least one (one in this embodiment) second mark 925 is formed on the portion and the fixed portion. Therefore, when the interval between the guide portions 84 is not properly adjusted according to the size of the paper P, at least one of the first marks 905a and 905b is exposed, and the interval between the guide portions 84 is appropriately adjusted. The first marks 905a and 905b are both covered with the paper P. Therefore, the operation information providing system 10 provides operation information related to the operation of the guide unit 84 by a method similar to the method illustrated in FIGS. 7 and 8.

図１６（Ａ）に示すように、このガイド部の操作に関して、ステップＳ１（図７）で撮像された撮像画像Ｘ７は、全ての第１マーク９０５ａ，９０５ｂが露出した画像である。また、図１６（Ｂ）に示すように、ステップＳ７（図７）で表示される操作情報１１０は、２つの手の画像とガイド部８４の移動方向を示す矢印の画像である。したがって、撮像画像Ｘ７及び操作情報１１０を見たユーザは、矢印方向（ガイド部８４間の間隔を狭くする方向）にガイド部８４を移動させればよいことが分かる。   As shown in FIG. 16A, regarding the operation of the guide unit, the captured image X7 captured in step S1 (FIG. 7) is an image in which all the first marks 905a and 905b are exposed. Further, as shown in FIG. 16B, the operation information 110 displayed in step S7 (FIG. 7) is an image of two hands and an arrow image indicating the moving direction of the guide unit 84. Therefore, it can be seen that the user who has seen the captured image X7 and the operation information 110 has only to move the guide portion 84 in the direction of the arrow (the direction in which the interval between the guide portions 84 is reduced).

なお、ステップＳ１（図７）で撮像された撮像画像Ｘ７は、全ての第１マーク９０５ａ，９０５ｂが用紙Ｐで被覆された画像であってもよい。この場合、ステップＳ１３，１５（図８）では、多機能装置１２の状態が適正であることを示す情報を含む操作情報（以下、「適正情報」という。）が複数の操作情報の中から特定され、ステップＳ７（図７）では、当該適正情報が携帯端末９４の表示部９４ｃに表示される。この場合の適正情報は、操作をする必要がないことを示す情報であってもよい。また、多機能装置１２は、受信装置を備えるとともに、当該適正情報を受信したときに、通常の動作を開始するように構成されてもよいし、当該適正情報を操作パネル２２に表示するように構成されてもよい。さらに、このような適正情報を提供する動作は、他の操作対象部分において操作情報を提供する場面で実行されてもよい。表示部９４ｃ又は操作パネル２２に適正情報を表示することにより、ユーザは、多機能装置１２の状態が適正であることを容易に確認することができる。   Note that the captured image X7 captured in step S1 (FIG. 7) may be an image in which all the first marks 905a and 905b are covered with the paper P. In this case, in steps S13 and S15 (FIG. 8), operation information including information indicating that the state of the multi-function device 12 is appropriate (hereinafter referred to as “appropriate information”) is specified from the plurality of operation information. In step S7 (FIG. 7), the appropriate information is displayed on the display unit 94c of the portable terminal 94. The appropriate information in this case may be information indicating that there is no need to perform an operation. The multi-function device 12 includes a receiving device, and may be configured to start a normal operation when the appropriate information is received, or to display the appropriate information on the operation panel 22. It may be configured. Furthermore, such an operation for providing appropriate information may be executed in a scene in which operation information is provided in another operation target portion. By displaying appropriate information on the display unit 94c or the operation panel 22, the user can easily confirm that the state of the multi-function device 12 is appropriate.

（回動部分の操作）
図１７は、回動部分１２０を撮像した撮像画像Ｘ８を示す図であり、図１８（Ａ）〜（Ｃ）は、図１７の撮像画像Ｘ８に対応する３つのモデル画像１２４ａ〜１２４ｃを示す図である。 (Operation of the rotating part)
17 is a diagram illustrating a captured image X8 obtained by capturing the rotating portion 120. FIGS. 18A to 18C are diagrams illustrating three model images 124a to 124c corresponding to the captured image X8 in FIG. It is.

「操作対象装置」の種類によっては、回動軸を中心として回動される回動部分１２０を有する場合があり、この回動部分１２０の状態（回動角度等）に応じて、取るべき操作が異なる場合がある。そこで、操作情報提供システム１０によって、図７及び図８に示した方法と同様の方法により、回動部分１２０の状態（回動角度等）に応じた必要な操作情報が提供される。   Depending on the type of the “operation target device”, there may be a rotation portion 120 that is rotated about a rotation axis, and an operation to be performed depending on the state (rotation angle, etc.) of the rotation portion 120. May be different. Therefore, the operation information providing system 10 provides necessary operation information according to the state (rotation angle, etc.) of the rotating portion 120 by the same method as the method shown in FIGS.

図１７に示すように、本実施形態では、回動部分１２０（第１部分，可動部）に第１マーク９０６が形成され、他の部分１２２（第２部分，固定部）に第２マーク９２６が形成されている。したがって、回動部分１２０を回転させると、第１マーク９０６と第２マーク９２６との相対位置関係が変動する。   As shown in FIG. 17, in the present embodiment, the first mark 906 is formed on the rotating portion 120 (first portion, movable portion), and the second mark 926 is formed on the other portion 122 (second portion, fixed portion). Is formed. Therefore, when the rotating portion 120 is rotated, the relative positional relationship between the first mark 906 and the second mark 926 changes.

図１７及び図１８に示すように、本実施形態において、３つのモデル画像１２４ａ〜１２４ｃのうち、第１マーク９０６と第２マーク９２６との相対位置関係が、撮像画像Ｘ８に撮像されている第１マーク９０６と第２マーク９２６との相対位置関係と最も近似するモデル画像は、モデル画像１２４ａ（図１８（Ａ））である。そこで、図８のステップＳ１３，Ｓ１５では、最近似モデル画像としてモデル画像１２４ａが選択され、ステップＳ７では、「表示制御手段」としての表示制御部９４ｅによって、モデル画像１２４ａに対応する操作情報（図示省略）を表示部９４ｃに表示させるように表示処理が実行される。例えば、回動部分１２０を所定角度で回動させた後にこれを引っ張る必要がある場合には、引っ張る方向を示す矢印等が操作情報として表示部９４ｃに表示される。   As shown in FIGS. 17 and 18, in the present embodiment, among the three model images 124a to 124c, the relative positional relationship between the first mark 906 and the second mark 926 is captured in the captured image X8. The model image that most closely approximates the relative positional relationship between the first mark 906 and the second mark 926 is the model image 124a (FIG. 18A). Therefore, in steps S13 and S15 of FIG. 8, the model image 124a is selected as the most approximate model image, and in step S7, the operation information (illustrated) corresponding to the model image 124a is displayed by the display control unit 94e as “display control means”. The display process is executed so that (omitted) is displayed on the display unit 94c. For example, when it is necessary to pull the rotating part 120 after rotating it at a predetermined angle, an arrow indicating the pulling direction is displayed on the display unit 94c as operation information.

（その他の実施形態）
上述の実施形態では、「操作対象装置」としてインクを吐出するインク吐出ヘッド４６を有する多機能装置１２を用いているが、他の実施形態では、「操作対象装置」として、処理液を吐出する処理液吐出ヘッドを有する装置を用いてもよいし、プリンタ、コピー機、スキャナー装置及びファクシミリ装置等のような単機能装置を用いてもよい。すなわち、「操作対象装置」となる装置は、どのような装置であってもよい。 (Other embodiments)
In the above-described embodiment, the multi-function device 12 having the ink discharge head 46 that discharges ink is used as the “operation target device”. However, in other embodiments, the processing liquid is discharged as the “operation target device”. An apparatus having a treatment liquid discharge head may be used, or a single function apparatus such as a printer, a copier, a scanner apparatus, a facsimile apparatus, or the like may be used. In other words, the device that becomes the “operation target device” may be any device.

上述の実施形態では、操作情報が図形画像（手の画像及び矢印の画像）の構成であるが、他の実施形態では、操作の内容に関する文字情報を操作情報に含めてもよい。また、他の画像を操作情報に含めてもよい。   In the above-described embodiment, the operation information is a configuration of a graphic image (an image of a hand and an image of an arrow). However, in other embodiments, character information regarding the content of the operation may be included in the operation information. Further, other images may be included in the operation information.

上述の実施形態では、撮像画像の上に操作情報の表示を重ねているが、操作情報の重ね方を特別なものとしてもよい。例えば、第１マーク及び第２マークの少なくとも一方の見え方の変化（傾き、角度、形状、大きさの変化等）を解析し、立体化した操作情報をリアルタイムに撮像画像に重ね合わせてもよい。この技術は、ＡＲ（Augmented Reality）技術に関するものということができる。   In the above-described embodiment, the display of the operation information is superimposed on the captured image, but the operation information may be superimposed in a special way. For example, a change in appearance (change in inclination, angle, shape, size, etc.) of at least one of the first mark and the second mark may be analyzed, and the three-dimensional operation information may be superimposed on the captured image in real time. . This technology can be said to relate to AR (Augmented Reality) technology.

上述の実施形態では、第１マークや第２マークを特別に設けた構成となっているが、第１マーク及び第２マークは、操作対象装置の各部位の表面に描かれた模様であってもよい。また、判断を用意とするために、第１マーク及び第２マークをバーコードなどの特定し易いものとしてもよい。   In the above-described embodiment, the first mark and the second mark are specially provided. However, the first mark and the second mark are patterns drawn on the surface of each part of the operation target device. Also good. In order to prepare for the determination, the first mark and the second mark may be easily specified such as a barcode.

上述の実施形態では、第１マークを含むモデル画像や第２マークを含むモデル画像を選択する構成となっているが、第１マークや第２マークを共通性のない模様（例えば、バーコードなど）とすれば、第１マークや第２マークのみで撮像画像の特定が可能である。つまり、第１マークや第２マークそのものをモデル画像として取り扱ってもよい。その場合に第１マーク及び第２マークの大きさや傾き、変形度合いを解析し、撮像画像の範囲や立体的な位置を特定してもよい。   In the above-described embodiment, the model image including the first mark and the model image including the second mark are selected. However, the first mark and the second mark have no common pattern (for example, a barcode or the like). ), It is possible to specify a captured image using only the first mark and the second mark. That is, the first mark or the second mark itself may be handled as a model image. In that case, the size and inclination of the first mark and the second mark, and the degree of deformation may be analyzed to specify the range and three-dimensional position of the captured image.

また、上述の実施形態では、モデル画像と操作画像とを記憶する「記憶手段」と、最近似画像を特定する「特定手段」とが、画像処理サーバ９８において実現されているが、これらの少なくとも１つは、「操作対象装置」としての多機能装置１２で実現されてもよいし、「撮像装置」としての携帯端末９４で実現されてもよい。これらの少なくとも１つが多機能装置１２で実現される場合、多機能装置１２が、携帯端末９４と通信する「通信手段」を備えることになる。   In the above-described embodiment, the “storage unit” that stores the model image and the operation image and the “specifying unit” that specifies the most approximate image are realized in the image processing server 98. One may be realized by the multi-function device 12 as the “operation target device”, or may be realized by the portable terminal 94 as the “imaging device”. When at least one of these is realized by the multi-function device 12, the multi-function device 12 includes “communication means” that communicates with the mobile terminal 94.

Ｐ… 用紙
Ｑ… 印刷領域
Ｒ… 搬送路
Ｔ… 水平部
Ｗ… 原稿
Ｘ１〜Ｘ８… 撮像画像
１０… 操作情報提供システム
１２… 多機能装置
３８… 用紙搬送機構
４２ａ〜４２ｄ… インクカートリッジ
４６ａ… ノズル面
４６… インク吐出ヘッド
４８… キャリッジ
７４… 搬送方向変換部
８４… ガイド部
９０１〜９０６ …第１マーク
９２１〜９２６… 第２マーク
９４… 携帯端末（撮像装置）
９４ａ… 撮像部（撮像手段）
９４ｃ… 表示部（情報表示手段）
９４ｄ… 端末制御部
９４ｅ… 表示制御部（表示制御手段）
９８… 画像処理サーバ
９８ａ… 記憶部（記憶手段）
９８ｃ… サーバ制御部（特定手段）
１００，１０４，１２４… モデル画像
１０２，１０６，１０８，１１０… 操作情報 P ... Paper Q ... Printing area R ... Transport path T ... Horizontal part W ... Originals X1-X8 ... Captured image 10 ... Operation information providing system 12 ... Multi-function device 38 ... Paper transport mechanism 42a-42d ... Ink cartridge 46a ... Nozzle surface 46 ... Ink discharge head 48 ... Carriage 74 ... Conveyance direction conversion unit 84 ... Guide units 901-906 ... First mark 921-926 ... Second mark 94 ... Mobile terminal (imaging device)
94a ... Imaging unit (imaging means)
94c ... Display section (information display means)
94d ... Terminal control unit 94e ... Display control unit (display control means)
98 ... Image processing server 98a ... Storage section (storage means)
98c ... Server control unit (specifying means)
100, 104, 124 ... Model images 102, 106, 108, 110 ... Operation information

Claims (12)

操作対象装置の操作方法に関する操作情報を提供する操作情報提供システムであって、
前記操作対象装置の第１部分に形成された少なくとも１つの第１マークと、
前記操作対象装置の第２部分に形成された少なくとも１つの第２マークと、
情報表示手段と前記操作対象装置を撮像する撮像手段とを有する撮像装置と、
前記操作対象装置に関する画像であって前記第１マークと前記第２マークとがそれぞれ１つ以上画像内に含まれている複数のモデル画像と、前記複数のモデル画像のそれぞれに対応して用意された複数の操作情報とを記憶する記憶手段と、
前記撮像装置で撮像された撮像画像と、前記記憶手段に記憶された前記複数のモデル画像とを比較することによって、前記撮像画像に最も近似した最近似モデル画像を特定する特定手段と、
前記特定手段にて特定された前記最近似モデル画像に対応する前記操作情報を表示させるように前記情報表示手段を制御する表示制御手段とを備え、
前記特定手段は、
前記複数のモデル画像から、前記撮像画像に撮像されている第１マーク及び第２マークと同じ種類の第１マーク及び第２マークを含むモデル画像のみを選択する第１選択処理を実行する第１選択処理実行手段と、
前記第１選択処理で選択されたモデル画像から、第１マークと第２マークとの相対位置関係が前記撮像画像に撮像されている第１マークと第２マークとの相対位置関係と最も近似するモデル画像を選択する第２選択処理を実行する第２選択処理実行手段とを含み、
前記第２選択処理実行手段にて選択されたモデル画像を前記最近似モデル画像として特定する、ことを特徴とする操作情報提供システム。 An operation information providing system for providing operation information related to an operation method of an operation target device,
At least one first mark formed on the first portion of the operation target device;
At least one second mark formed on the second portion of the operation target device;
An imaging device having information display means and imaging means for imaging the operation target device;
A plurality of model images each including one or more of the first mark and the second mark, which are images related to the operation target device, and are prepared corresponding to each of the plurality of model images. Storage means for storing a plurality of operation information;
A specifying unit that identifies a most approximate model image closest to the captured image by comparing the captured image captured by the imaging device with the plurality of model images stored in the storage unit;
Display control means for controlling the information display means so as to display the operation information corresponding to the most approximate model image specified by the specifying means,
The specifying means is:
A first selection process is executed for selecting only a model image including a first mark and a second mark of the same type as the first mark and the second mark captured in the captured image from the plurality of model images. A selection process execution means;
From the model image selected in the first selection process, the relative positional relationship between the first mark and the second mark is the closest to the relative positional relationship between the first mark and the second mark captured in the captured image. Second selection processing execution means for executing a second selection processing for selecting a model image,
An operation information providing system, characterized in that the model image selected by the second selection processing execution means is specified as the most approximate model image. 前記第１部分は可動部であり、
前記第２部分は固定部である、請求項１に記載の操作情報提供システム。 The first part is a movable part;
The operation information providing system according to claim 1, wherein the second part is a fixed part. 前記第１選択処理実行手段は、
前記複数のモデル画像から、前記撮像画像に撮像されている第２マークと同じ種類の第２マークを含むモデル画像のみを選択する同種第２マーク選択処理を実行する同種第２マーク選択処理実行手段と、
前記同種第２マーク選択処理で選択されたモデル画像から、前記撮像画像に撮像されている第１マークと同じ種類の第１マークを含むモデル画像のみを選択する同種第１マーク選択処理を実行する同種第１マーク選択処理実行手段と、を有することを特徴とする請求項２に記載の操作情報提供システム。 The first selection process execution means includes:
Same-type second mark selection processing execution means for executing a same-type second mark selection process for selecting only a model image including a second mark of the same type as the second mark captured in the captured image from the plurality of model images. When,
The same-type first mark selection process for selecting only model images that include the first mark of the same type as the first mark captured in the captured image from the model image selected in the same-type second mark selection process is executed. The operation information providing system according to claim 2, further comprising: a first mark selection process execution unit of the same kind. 前記操作対象装置は、液体を吐出するノズルが設けられたノズル面を有する液体吐出ヘッドと、前記液体吐出ヘッドを保持するキャリッジと、前記ノズル面と対向する印刷領域に向けて記録媒体を搬送する搬送路と、前記キャリッジを記録媒体の搬送方向に対して直交する方向に往復移動させる駆動部とを有し、
前記第１マークは、前記キャリッジ又は前記液体吐出ヘッドに設けられる、請求項２又は３に記載の操作情報提供システム。 The operation target device transports a recording medium toward a printing area facing the nozzle surface, a liquid ejection head having a nozzle surface provided with a nozzle for ejecting liquid, a carriage that holds the liquid ejection head, and the nozzle surface. A conveyance path, and a drive unit that reciprocates the carriage in a direction orthogonal to the conveyance direction of the recording medium,
The operation information providing system according to claim 2, wherein the first mark is provided on the carriage or the liquid ejection head. 前記操作対象装置は、用紙を搬送する用紙搬送手段と、その用紙搬送手段によって搬送される用紙に対して印刷を行う印刷ヘッドとを有し、
前記第１部分及び前記第２部分は共に固定部であり、
前記第２マークは、前記用紙搬送手段により搬送される用紙が搬送不良状態となったときに、その用紙によって被覆されることがないと想定される位置に形成され、
前記第１マークは、前記第１部分に複数形成され、
複数の前記第１マークのうち少なくとも１つは、前記用紙搬送手段により搬送される用紙が搬送不良状態となったときに、その用紙によって被覆されると想定される位置に形成されていることを特徴とする、請求項１に記載の操作情報提供システム。 The operation target device includes a sheet conveying unit that conveys a sheet, and a print head that performs printing on the sheet conveyed by the sheet conveying unit.
The first part and the second part are both fixed parts,
The second mark is formed at a position that is assumed not to be covered by the sheet when the sheet conveyed by the sheet conveying unit is in a conveyance failure state,
A plurality of the first marks are formed in the first portion,
At least one of the plurality of first marks is formed at a position that is supposed to be covered by the sheet when the sheet conveyed by the sheet conveying unit is in a conveyance failure state. The operation information providing system according to claim 1, wherein 前記用紙搬送手段は、用紙を略Ｕ字状に曲げながら搬送して、当該用紙の搬送方向を変換する搬送方向変換部を有し、
複数の前記第１マークは、前記搬送方向変換部又はその近傍に設けられる、請求項５に記載の操作情報提供システム。 The paper transport means includes a transport direction converting unit that transports the paper while bending the paper in a substantially U shape, and converts the transport direction of the paper.
The operation information providing system according to claim 5, wherein the plurality of first marks are provided in the transport direction changing portion or in the vicinity thereof. 前記操作対象装置は、液体を吐出するノズルが設けられたノズル面を有する液体吐出ヘッドと、前記液体吐出ヘッドに供給される液体を貯留する液体カートリッジと、前記液体カートリッジを着脱自在に保持するカートリッジ保持部とを有し、
前記第１マークは、前記液体カートリッジに設けられる、請求項２又は３に記載の操作情報提供システム。 The operation target device includes a liquid discharge head having a nozzle surface provided with a nozzle for discharging liquid, a liquid cartridge for storing liquid supplied to the liquid discharge head, and a cartridge for detachably holding the liquid cartridge Holding part,
The operation information providing system according to claim 2, wherein the first mark is provided on the liquid cartridge. 前記操作対象装置は、画像を読み取る画像読み取り部と、前記画像読み取り部に原稿を自動供給する自動供給装置と、原稿のサイズに応じて位置調整可能に構成され、前記自動供給装置に供給される原稿の供給方向に対して直交する方向の端部に沿って配置されるガイド部とを有し、
前記ガイド部は、前記原稿の端部を受ける原稿受け部を有しており、
前記第１マークは、前記原稿受け部の上面に設けられる、請求項２又は３に記載の操作情報提供システム。 The operation target device includes an image reading unit that reads an image, an automatic supply device that automatically supplies a document to the image reading unit, a position that can be adjusted according to the size of the document, and is supplied to the automatic supply device A guide portion disposed along an end portion in a direction perpendicular to the document supply direction,
The guide portion has a document receiving portion that receives an end portion of the document,
The operation information providing system according to claim 2 or 3, wherein the first mark is provided on an upper surface of the document receiving portion. 複数の前記モデル画像の少なくとも１つは、前記操作対象装置の状態が適正であるときの適正画像であり、
前記適正画像に対応して用意された前記操作情報は、前記操作対象装置の状態が適正であることを示す情報を含む、請求項１ないし８のいずれかに記載の操作情報提供システム。 At least one of the plurality of model images is an appropriate image when the state of the operation target device is appropriate,
The operation information providing system according to claim 1, wherein the operation information prepared corresponding to the appropriate image includes information indicating that the state of the operation target device is appropriate. 前記操作対象装置は、
前記特定手段が前記最近似モデル画像として前記適正画像を特定したときに、前記操作対象装置の状態が適正であることを知らせる報知手段を有する、請求項９に記載の操作情報提供システム。 The operation target device is:
The operation information providing system according to claim 9, further comprising a notifying unit that notifies that the state of the operation target device is appropriate when the specifying unit specifies the appropriate image as the most approximate model image. 請求項１ないし１０のいずれかに記載の操作情報提供システムにおける少なくとも前記撮像装置として機能する、携帯端末。   A portable terminal that functions as at least the imaging device in the operation information providing system according to claim 1. 請求項１ないし１０のいずれかに記載の操作情報提供システムにおける少なくとも前記特定手段としてコンピュータを機能させる、制御プログラム。   11. A control program for causing a computer to function as at least the specifying means in the operation information providing system according to claim 1.
JP2011099133A 2011-04-27 2011-04-27 Operation information providing system, portable terminal and control program Active JP5708205B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2011099133A JP5708205B2 (en) 2011-04-27 2011-04-27 Operation information providing system, portable terminal and control program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2011099133A JP5708205B2 (en) 2011-04-27 2011-04-27 Operation information providing system, portable terminal and control program

Publications (2)

Publication Number Publication Date
JP2012231361A JP2012231361A (en) 2012-11-22
JP5708205B2 true JP5708205B2 (en) 2015-04-30

Family

ID=47432538

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2011099133A Active JP5708205B2 (en) 2011-04-27 2011-04-27 Operation information providing system, portable terminal and control program

Country Status (1)

Country Link
JP (1) JP5708205B2 (en)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6638687B2 (en) * 2017-04-05 2020-01-29 京セラドキュメントソリューションズ株式会社 Display device
WO2020162081A1 (en) * 2019-02-05 2020-08-13 京セラドキュメントソリューションズ株式会社 Image forming device

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4774257B2 (en) * 2005-09-12 2011-09-14 株式会社リコー Image processing apparatus and support support system
JP2008211295A (en) * 2007-02-23 2008-09-11 Konica Minolta Business Technologies Inc Image forming apparatus and program for the same
JP4362578B2 (en) * 2007-05-10 2009-11-11 シャープ株式会社 Operating procedure display system
JP2009143141A (en) * 2007-12-14 2009-07-02 Sharp Corp Image forming device
JP2012220803A (en) * 2011-04-12 2012-11-12 Sharp Corp Guide system and guide program

Also Published As

Publication number Publication date
JP2012231361A (en) 2012-11-22

Similar Documents

Publication Publication Date Title
JP5930824B2 (en) Image forming apparatus
JP2021146553A (en) Image recording device, system and program
JP2020179982A (en) Recording device
JP2005051313A (en) Medium reader and medium reading method
JP2021069077A (en) Automatic document feeding device and image processing device
JP4577029B2 (en) Inkjet recording device
JP5708205B2 (en) Operation information providing system, portable terminal and control program
JP2006218650A (en) Image recorder
JP7098420B2 (en) Recording device and control method of recording device
JP4405872B2 (en) Image forming apparatus
JP2010284887A (en) Image printing system and control method of image printing system
JP6079727B2 (en) Sheet post-processing apparatus and image forming system
JP4525669B2 (en) RECORDING APPARATUS, LIQUID EJECTING APPARATUS, AND CONTROL METHOD AND CONTROL PROGRAM FOR CONVEYING UNIT
JP2010105199A (en) Printing apparatus and printing method
JP2021054018A (en) Recorder
JP4453563B2 (en) Image recording device
JP6819485B2 (en) Sorting device and image forming device
JP2006205377A (en) Inkjet recording device
JP4054665B2 (en) Recording device
JP2007039234A (en) Printer
JP2005089033A (en) Printing device
JP3397714B2 (en) Recording device and image processing device
JP2020179981A (en) Recording device
JP2013035134A (en) Printing control apparatus, printing apparatus, and printing control program
JP2010287100A (en) Photograph processing system

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20140408

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20150129

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20150203

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20150216

R150 Certificate of patent or registration of utility model

Ref document number: 5708205

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150