JP2015194866A - Portable information processing device - Google Patents

Portable information processing device Download PDF

Info

Publication number
JP2015194866A
JP2015194866A JP2014072078A JP2014072078A JP2015194866A JP 2015194866 A JP2015194866 A JP 2015194866A JP 2014072078 A JP2014072078 A JP 2014072078A JP 2014072078 A JP2014072078 A JP 2014072078A JP 2015194866 A JP2015194866 A JP 2015194866A
Authority
JP
Japan
Prior art keywords
maintenance
image
unit
area
display
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2014072078A
Other languages
Japanese (ja)
Inventor
康夫 名倉
Yasuo Nagura
康夫 名倉
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hitachi Systems Ltd
Original Assignee
Hitachi Systems Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hitachi Systems Ltd filed Critical Hitachi Systems Ltd
Priority to JP2014072078A priority Critical patent/JP2015194866A/en
Publication of JP2015194866A publication Critical patent/JP2015194866A/en
Pending legal-status Critical Current

Links

Images

Landscapes

  • Debugging And Monitoring (AREA)
  • Image Processing (AREA)

Abstract

PROBLEM TO BE SOLVED: To provide a portable information processing device in a maintenance work support system capable of inhibiting from erroneously performing maintenance work of an object other than a maintenance work target during maintenance work without needing an electric I/F and an RDID tag.SOLUTION: A maintenance work support system includes a portable information processing device having an image photographing function, and a sound generation function. The portable information processing device has an image processing function part for determining whether the hands of a maintenance worker are within the maintenance area of a maintenance target device, and sounding an alarm sound to the maintenance worker in the case of moving from the inside of the maintenance area to the outside of the maintenance area or in the case of being outside the maintenance area as a result of the determination.

Description

本発明は、画像撮影機能、音声発生機能、を有する携帯型情報処理装置をもってラックなどに搭載された機器の保守作業を支援するシステムに適用される携帯型情報処理装置に関する。   The present invention relates to a portable information processing apparatus that is applied to a system that supports maintenance work of equipment mounted on a rack or the like with a portable information processing apparatus having an image capturing function and a sound generation function.

本技術分野の背景技術として、特開2011−175494号公報(特許文献1)がある。当該特許文献1には、「保守対象機器及び当該保守対象機器上で動作するソフトウェア(以降インストールプログラムと称呼する)の保守管理業務を行うための保守作業支援システムであって、保守対象機器と通信可能に接続するための機器インタフェース部と、保守対象機器及びインストールプログラムの構成を判定する条件を記憶する機器条件判定情報記憶部と、保守対象機器に用いられている部品及び該部品と互換性を持つ他の部品を示す互換情報、及びインストールプログラムのアップデートファイルの情報を記憶する部品判定情報記憶部と、保守対象機器の保守作業の手順を記憶する作業手順情報記憶部と、保守対象機器の更新や動作チェック等を行う保守作業支援実行部と、画像の表示や入出力を行うための表示・入出力部と、を備え前記保守作業支援実行部は、前記機器インタフェース部に接続された保守対象機器から、保守対象機器及びインストールプログラムの構成情報を取得して前記機器条件判定情報記憶部に記憶される情報と照合し、判定された保守対象機器及びインストールプログラムの構成情報から、前記部品判定情報記憶部と照合して部品情報を取得し、保守対象機器及びインストールプログラムの保守手順を前記作業手順情報記憶部から取得し、保守作業の手順のガイダンスを前記表示・入出力部に表示することを特徴とする保守作業支援システム」をもって「保守作業の際の作業ミスや作業漏れを低減することができる保守作業支援システムを提供する」との記載がある。   As background art of this technical field, there is JP 2011-175494 A (Patent Document 1). The patent document 1 discloses a maintenance work support system for performing maintenance management work of a maintenance target device and software (hereinafter referred to as an installation program) that operates on the maintenance target device, and communicates with the maintenance target device. A device interface unit for enabling connection, a device condition determination information storage unit for storing conditions for determining the configuration of the maintenance target device and the installation program, components used in the maintenance target device, and compatibility with the components Compatibility information indicating other parts possessed, and a component determination information storage unit that stores information of an update file of an installation program, a work procedure information storage unit that stores a maintenance work procedure of the maintenance target device, and an update of the maintenance target device Maintenance work support execution unit that performs and operation check, display / input / output unit for image display and input / output, The maintenance work support execution unit includes the configuration information of the maintenance target device and the installation program from the maintenance target device connected to the device interface unit, and collates with the information stored in the device condition determination information storage unit. The component information is obtained by collating with the component determination information storage unit from the determined maintenance target device and installation program configuration information, and the maintenance procedure of the maintenance target device and the installation program is acquired from the work procedure information storage unit. "Maintenance work support system characterized by displaying maintenance work procedure guidance on said display / input / output unit" Is provided. "

特開2011−175494号公報JP 2011-175494 A

前記特許文献1には、保守対象装置を、当該装置に装着した電気的I/Fからの情報をもって識別することが開示されている。また、従来にあっては、RFIDタグをもって保守対象装置を識別するものもある。しかし、このように電気的I/FやRDIDタグを必要とするものにあっては、保守対象機器に対して、予め電気的I/FやRDIDタグなどを機器に取り付けるなどの準備作業が必要となり、また、その管理も必要である。また、RFIDタグなどを取り付けていない機器に対しては適用できない、のみならず複数のメーカの機器の保守に適用することが難しく、汎用性にかける嫌いがある。   Patent Document 1 discloses that a maintenance target device is identified by information from an electrical I / F attached to the device. Conventionally, there is also one that identifies an apparatus to be maintained with an RFID tag. However, for devices that require an electrical I / F or RDID tag as described above, preparatory work such as attaching an electrical I / F or RDID tag to the device in advance is required for the maintenance target device. It is also necessary to manage it. In addition, it cannot be applied to a device not attached with an RFID tag or the like, and it is difficult to apply it to maintenance of devices of a plurality of manufacturers, and there is a dislike for versatility.

そこで、本発明は、電気的I/FやRDIDタグを必要とせず、保守対象機器を特定することができる携帯型情報処理装置を提供する。   Therefore, the present invention provides a portable information processing apparatus that can specify a maintenance target device without requiring an electrical I / F or an RDID tag.

また、保守作業時に誤って保守作業対象外に対する保守作業を行ってしまうことを抑止することができる携帯型情報処理装置を提供する。   In addition, a portable information processing apparatus that can prevent a maintenance work from being out of the maintenance work by mistake during the maintenance work is provided.

そのために本発明は、画像撮影機能、音声発生機能、を有する携帯型情報処理装置を有し、当該携帯型情報処理装置は、保守作業員の手が保守対象機器の保守エリア内にあるか否かを判定し、当該結果、保守エリア内から外に移動した場合、又は保守エリア外にある場合、保守作業員に警告音(警報音)を鳴らす画像処理機能部を有する。   Therefore, the present invention includes a portable information processing device having an image capturing function and a sound generation function, and the portable information processing device is configured to check whether the maintenance worker's hand is within the maintenance area of the maintenance target device. The image processing function part which sounds a warning sound (alarm sound) to a maintenance worker when it moves outside from the maintenance area as a result, or when it is outside the maintenance area as a result.

例えば、本発明の携帯型情報処理装置は、
複数の機器及び保守作業員を撮影するカメラ部を操作する画像撮影機能を有するカメラ操作部、警告音を鳴動する音声発生機能を有する警報部、前記カメラ部により撮影した画像情報を受けて表示する表示機能を有するディスプレイを含む表示部、前記複数の機器から保守対象機器の保守内エリア及び/又は保守外エリアを指定するエリア指定機能を有するエリア指定部、前記カメラ部により撮影した画像を処理する画像処理機能を有する制御部、を有し、
前記画像処理機能部は、
前記カメラ部から保守対象機器を含む複数の機器の静止画像を受けて前記ディスプレイに表示するように制御し、また前記カメラ部から機器及び当該機器の保守作業員を含む動画像を受けて前記ディスプレイに出力表示するように制御する手段、
前記静止画像の表示状態において、前記保守エリア指定部からの保守エリア指定に基づいて前記複数の機器の中から保守対象の機器を特定する保守エリア指定枠画像を生成して前記ディスプレイに出力表示するように制御する手段、
前記動画像の表示状態において、前記保守対象機器の保守内エリアを示す枠画像と保守作業員の手の位置を示す手画像との位置関係を監視する手段、
前記手画像の位置が前記保守内エリアから外れたか否かを判定する手段、
前記判定する手段による判定結果、前記手画像の位置が前記保守内エリアから外れた場合、前記警報部を制御して保守作業員に対して警告する警告音(警報音)を鳴動する手段、
を有することを特徴とする。
For example, the portable information processing apparatus of the present invention
A camera operation unit having an image shooting function for operating a camera unit for shooting a plurality of devices and maintenance workers, an alarm unit having a sound generation function for sounding a warning sound, and receiving and displaying image information taken by the camera unit A display unit including a display having a display function, an area designating unit having an area designating function for designating a maintenance internal area and / or a non-maintenance area of a maintenance target device from the plurality of devices, and processing an image captured by the camera unit A control unit having an image processing function,
The image processing function unit
Control is performed so that still images of a plurality of devices including a maintenance target device are received from the camera unit and displayed on the display, and a moving image including a device and a maintenance worker of the device is received from the camera unit. Means for controlling the output to be displayed on
In the display state of the still image, a maintenance area designation frame image for identifying a maintenance target device is generated from the plurality of devices based on the maintenance area designation from the maintenance area designation unit, and is output and displayed on the display. Means to control,
Means for monitoring a positional relationship between a frame image indicating a maintenance internal area of the maintenance target device and a hand image indicating a position of a maintenance worker's hand in the moving image display state;
Means for determining whether the position of the hand image is out of the maintenance area;
As a result of the determination by the determining means, when the position of the hand image is out of the maintenance area, a means for sounding a warning sound (alarm sound) for controlling the alarm unit to warn a maintenance worker;
It is characterized by having.

また、本発明の携帯型情報処理装置は、
複数の機器及び保守作業員を撮影するカメラ部を操作する画像撮影機能を有するカメラ操作部、警告音を鳴動する音声発生機能を有する警報部、前記カメラ部により撮影した画像情報を受けて表示する表示機能を有するディスプレイを含む表示部、前記複数の機器から保守対象機器の保守内エリア及び/又は保守外エリアを指定するエリア指定機能を有するエリア指定部、前記カメラ部により撮影した画像を処理する画像処理機能を有する制御部、を有し、
前記画像処理機能部は、
前記カメラ部から保守対象機器を含む複数の機器の静止画像を受けて前記ディスプレイに表示するように制御し、また前記カメラ部から機器及び当該機器の保守作業員を含む動画像を受けて前記ディスプレイに出力表示するように制御する手段、
前記静止画像の表示状態において、前記保守エリア指定部からの保守エリア指定に基づいて前記複数の機器の中から保守対象の機器を特定する保守エリア指定枠画像を生成して前記ディスプレイに出力表示するように制御する手段、
前記静止画像の表示状態において、前記保守エリア指定部からの保守エリア指定に基づいて前記複数の機器の中から保守対象の機器を特定する保守エリア指定枠画像、及び保守外エリア指定枠画像を生成して前記ディスプレイに出力表示するように制御する手段、
前記動画像の表示状態において、前記保守対象機器の保守内エリアを示す枠画像と保守作業員の手の位置を示す手画像との位置関係を監視する手段、
前記手画像の位置が前記保守内エリアか前記保守外エリアかを判定する手段、
前記判定する手段による判定結果、前記手画像の位置が前記保守内エリアから外れた場合、また保守外エリアに入った場合、前記警報部を制御して保守作業員に対して警告する警告音(警報音)を鳴動する手段、
を有することを特徴とする。
The portable information processing apparatus of the present invention
A camera operation unit having an image shooting function for operating a camera unit for shooting a plurality of devices and maintenance workers, an alarm unit having a sound generation function for sounding a warning sound, and receiving and displaying image information taken by the camera unit A display unit including a display having a display function, an area designating unit having an area designating function for designating a maintenance internal area and / or a non-maintenance area of a maintenance target device from the plurality of devices, and processing an image captured by the camera unit A control unit having an image processing function,
The image processing function unit
Control is performed so that still images of a plurality of devices including a maintenance target device are received from the camera unit and displayed on the display, and a moving image including a device and a maintenance worker of the device is received from the camera unit. Means for controlling the output to be displayed on
In the display state of the still image, a maintenance area designation frame image for identifying a maintenance target device is generated from the plurality of devices based on the maintenance area designation from the maintenance area designation unit, and is output and displayed on the display. Means to control,
In the display state of the still image, a maintenance area designation frame image for specifying a maintenance target device from the plurality of devices and a non-maintenance area designation frame image are generated based on the maintenance area designation from the maintenance area designation unit And means for controlling the output to be displayed on the display,
Means for monitoring a positional relationship between a frame image indicating a maintenance internal area of the maintenance target device and a hand image indicating a position of a maintenance worker's hand in the moving image display state;
Means for determining whether the position of the hand image is the maintenance internal area or the non-maintenance area;
As a result of the determination by the determining means, when the position of the hand image is out of the maintenance inside area, or when entering the maintenance outside area, a warning sound for controlling the alarm unit to warn a maintenance worker ( Alarm sound),
It is characterized by having.

携帯型情報処理装置の画像処理機能部は、さらに
前記カメラからの画像情報及び前記保守エリア指定枠画情報を保守作業監視側に送信する手段、を有することを特徴とする。
The image processing function unit of the portable information processing apparatus further includes means for transmitting the image information from the camera and the maintenance area designation frame information to the maintenance work monitoring side.

本発明によれば、保守対象機器にそれぞれ電気的I/FやRDIDタグを取り付け、管理する必要もなく、保守対象機器に対して正確に保守作業支援を行うことができる携帯型画像処理装置を提供する。
本発明によれば、保守作業員による保守作業時に誤って保守作業対象外の機器に対して保守作業を行うようなことを抑止することができる。
According to the present invention, there is provided a portable image processing apparatus capable of accurately performing maintenance work support on a maintenance target device without attaching and managing an electrical I / F or RDID tag to each maintenance target device. provide.
ADVANTAGE OF THE INVENTION According to this invention, it can suppress performing a maintenance work with respect to the apparatus which is not a maintenance work object accidentally at the time of the maintenance work by a maintenance worker.

上記した以外の課題、構成及び効果は、以下の実施形態の説明により明らかにされる。   Problems, configurations, and effects other than those described above will be clarified by the following description of embodiments.

図1は、本発明の携帯型情報処理装置とラックに搭載された機器との関係を示すシステム構成図である。FIG. 1 is a system configuration diagram showing the relationship between the portable information processing apparatus of the present invention and equipment mounted on a rack. 図2は、携帯型情報処理装置の画像処理制御部22の機能ブロック構成を示す図である。FIG. 2 is a diagram illustrating a functional block configuration of the image processing control unit 22 of the portable information processing apparatus. 図3は、携帯型情報処理装置の表示部23のディスプレイにおける表示画面の一例を示す図である。FIG. 3 is a diagram illustrating an example of a display screen on the display of the display unit 23 of the portable information processing device. 図4は、携帯型情報処理装置の表示部23のディスプレイにおける表示画面の他の例を示す図である。FIG. 4 is a diagram illustrating another example of the display screen on the display of the display unit 23 of the portable information processing device. 図5は、保守作業前の処理フローを示すフロー図である。FIG. 5 is a flowchart showing a processing flow before maintenance work. 図6は、保守作業時の処理フローを示すフロー図である。FIG. 6 is a flowchart showing a processing flow during maintenance work. 図7は、携帯型情報処理装置の一例を示す説明図である。FIG. 7 is an explanatory diagram illustrating an example of a portable information processing apparatus.

以下、本発明の実施例を説明する。   Examples of the present invention will be described below.

図1は、本発明の携帯型情報処理装置とラックに搭載された機器との関係を示すシステム構成図である。   FIG. 1 is a system configuration diagram showing the relationship between the portable information processing apparatus of the present invention and equipment mounted on a rack.

同図において、携帯型情報処理装置2は、図7に示すような保守作業員が携帯に適した端末、例えば、スマートフォンからなる。
そして、保守作業員による保守作業時に例えば、ラック1に搭載された機器11及び当該機器を保守する保守作業員を、カメラ211を含むカメラ部21により撮影するのに適した位置に設置される。
In the figure, the portable information processing device 2 is composed of a terminal suitable for carrying by a maintenance worker as shown in FIG. 7, for example, a smartphone.
At the time of maintenance work by the maintenance worker, for example, the device 11 mounted on the rack 1 and the maintenance worker who maintains the device are installed at a position suitable for photographing with the camera unit 21 including the camera 211.

携帯型情報処理装置2は、カメラ部21、画像処理制御部22、表示部23、警報部24、記憶部25、カメラ操作部26、エリア設定部27、を有する。   The portable information processing device 2 includes a camera unit 21, an image processing control unit 22, a display unit 23, an alarm unit 24, a storage unit 25, a camera operation unit 26, and an area setting unit 27.

カメラ部21は、保守対象を撮影するものであり、具体的には、複数の機器11(含保守対象機器)や保守作業員3(リストバンド31)などを撮影するものであり、静止画、また動画の撮影を可能とする画像撮影機能を有する。   The camera unit 21 captures a maintenance target. Specifically, the camera unit 21 captures a plurality of devices 11 (including maintenance target devices), a maintenance worker 3 (wristband 31), and the like. It also has an image shooting function that enables shooting of moving images.

画像処理制御部22は、CPUを含み、記憶部25に記憶された画像処理プログラムに基づき前記カメラ部により撮影した画像情報を処理する画像処理機能を有する。   The image processing control unit 22 includes a CPU and has an image processing function for processing image information captured by the camera unit based on an image processing program stored in the storage unit 25.

表示部23は、ディスプレイ231を含み、前記カメラ部21により撮影した画像情報111〜115、311を表示する表示機能を有する。   The display unit 23 includes a display 231 and has a display function for displaying image information 111 to 115 and 311 photographed by the camera unit 21.

警報部24は、スピーカ241を含む、保守作業員による保守作業が保守内エリアの機器の保守作業でないと思われるような場合に保守作業員に対して警告音を鳴動する音声発生機能を有する。   The alarm unit 24 includes a speaker 241 and has a sound generation function for sounding a warning sound to the maintenance worker when the maintenance work by the maintenance worker seems not to be a maintenance work for the equipment in the maintenance area.

記憶部25は、カメラ部21により撮影した画像情報を記憶する。また、画像処理制御部22を制御する画像処理プログラム、などを記憶する。これらは、別個の記録部を設けてもよい。   The storage unit 25 stores image information captured by the camera unit 21. Further, an image processing program for controlling the image processing control unit 22 is stored. These may be provided with a separate recording unit.

カメラ操作部26は、カメラ部21による撮影を開始するものであり、例えば、表示部23のディスプレイ231と兼用されたタッチパネル形式からなる。   The camera operation unit 26 starts photographing by the camera unit 21 and has, for example, a touch panel format also used as the display 231 of the display unit 23.

また、カメラ操作部26は、ラック1の機器11を静止画撮影する操作ボタン261、及び当該機器と当該機器の保守作業員を含めて動画撮影する操作ボタン262を有する。操作ボタン261,262は1つのボタンで兼用する構成としてもよい。   In addition, the camera operation unit 26 includes an operation button 261 for capturing a still image of the device 11 in the rack 1 and an operation button 262 for capturing a moving image including the device and a maintenance worker of the device. The operation buttons 261 and 262 may be configured as a single button.

したがって、静止画撮影操作ボタン261を操作したときは、カメラ部21で撮影された画像情報が静止画として表示部23のディスプレイ231に表示され、動画撮影操作ボタン262を操作したときは、カメラ21で撮影された画像情報が動画として表示部23のディスプレイ231に表示される。   Accordingly, when the still image shooting operation button 261 is operated, image information captured by the camera unit 21 is displayed as a still image on the display 231 of the display unit 23, and when the moving image shooting operation button 262 is operated, the camera 21 is displayed. The image information photographed in is displayed on the display 231 of the display unit 23 as a moving image.

エリア指定部27は、表示部23のディスプレイに表示された静止画を元に複数の機器11の中で保守対象となる機器(保守対象機器)の保守内エリア、例えば、保守対象機器の周囲を囲むような枠状の画像2231(図3、図4参照)をもって保守対象エリアを設定するものである。   The area designating unit 27 is a maintenance area of a device (maintenance target device) that is a maintenance target among the plurality of devices 11 based on the still image displayed on the display of the display unit 23, for example, around the maintenance target device. A maintenance target area is set with a surrounding frame-shaped image 2231 (see FIGS. 3 and 4).

エリア設定部27は、例えば、前記カメラ部21により撮影した複数の機器11を含む静止画(画像情報)から保守対象の機器を特定する設定部271を含み、当該保守対象機器の保守内エリア及び/又は保守外エリアを指定、設定するエリア指定機能を有する。設定部271は、例えば、画像座標点情報を指定してエリアを設定する技術を使用する。   The area setting unit 27 includes, for example, a setting unit 271 that identifies a maintenance target device from a still image (image information) including a plurality of devices 11 photographed by the camera unit 21, And / or an area designation function for designating and setting a non-maintenance area. For example, the setting unit 271 uses a technique of setting an area by specifying image coordinate point information.

図2は、携帯型情報処理装置2の画像処理制御部22の機能ブロック構成を示す図である。   FIG. 2 is a diagram illustrating a functional block configuration of the image processing control unit 22 of the portable information processing device 2.

同図において、画像処理制御部22は、カメラ制御部221、画像情報(機器及び保守作業員撮影画像)受信部222、保守対象エリア指定画像(枠画像)生成部223、画像表示制御部224、手位置画像の位置判定部225、警報制御部226、を有する。   In the figure, an image processing control unit 22 includes a camera control unit 221, an image information (device and maintenance worker photographed image) reception unit 222, a maintenance target area designation image (frame image) generation unit 223, an image display control unit 224, A hand position image position determination unit 225 and an alarm control unit 226 are included.

カメラ制御部221は、カメラ操作部26の操作ボタンに応じてカメラ部21を制御する。   The camera control unit 221 controls the camera unit 21 according to the operation button of the camera operation unit 26.

画像情報受信部222は、カメラ部21にて撮影した複数の機器11(111〜115)を含む静止画(静止画情報)、また、複数の機器11(111〜115)、保守作業員の手画像311(図3、図4参照)を含む動画(動画情報)を受信する。   The image information receiving unit 222 includes a still image (still image information) including a plurality of devices 11 (111 to 115) photographed by the camera unit 21, a plurality of devices 11 (111 to 115), and a maintenance worker's hand. A moving image (moving image information) including the image 311 (see FIGS. 3 and 4) is received.

画像表示制御部224は、画像情報受信部222により受信した静止画、動画を含む画情報を受けて表示部23のディスプレイに表示するように制御する。   The image display control unit 224 controls to receive image information including still images and moving images received by the image information receiving unit 222 and display the received image information on the display of the display unit 23.

保守対象エリア指定画像生成部223は、表示部23のディスプレイ231上に表示された静止画表示状態において、エリア指定部27(271)からのエリア指定、例えば保守内エリア指定に基づいて複数の機器11の中から保守対象となる機器(保守対象機器)の保守内エリアを指定する保守対象エリア指定画像2231(図3、図4参照)を生成する。   The maintenance target area designation image generation unit 223 is configured to display a plurality of devices based on the area designation from the area designation unit 27 (271), for example, in-maintenance area designation in the still image display state displayed on the display 231 of the display unit 23. 11 generates a maintenance target area designation image 2231 (see FIGS. 3 and 4) for designating the maintenance internal area of the maintenance target device (maintenance target device).

保守エリア対象エリア指定画像生成部223は、例えば、保守対象機器の周囲を取り囲むような保守内エリア指定枠画像2231を生成するものからなり、当該枠画像によりカメラ21の動画の保守対象機器を取り囲むエリア内を保守内エリアとして指定する。
保守作業員の手の位置は、例えば、保守作業員の手首に装着した一目に付く色のリストバンドや手袋の撮影により得た画像の位置を手の位置とするとよい。
The maintenance area target area designation image generation unit 223 includes, for example, a maintenance area designation frame image 2231 that surrounds the maintenance target device, and surrounds the maintenance target device of the moving image of the camera 21 by the frame image. Designate the area as the maintenance area.
As for the position of the hand of the maintenance worker, for example, the position of an image obtained by photographing a wristband or glove of a color attached to the wrist of the maintenance worker and the glove may be the hand position.

手位置画像の位置判定部225は、表示部23のディスプレイ231上に表示された動画表示状態において、保守対象機器の保守内エリアを示す保守エリア指定画像2231と保守作業員の手の位置を示す画像311との位置関係を監視して当該手の位置が当該保守内エリアから外れたか否かを判定する。   The position determination unit 225 of the hand position image indicates the maintenance area designation image 2231 indicating the maintenance area of the maintenance target device and the position of the maintenance worker's hand in the moving image display state displayed on the display 231 of the display unit 23. The positional relationship with the image 311 is monitored to determine whether or not the position of the hand is out of the maintenance area.

警報制御部226は、位置判定部225による判定結果、当該手の位置が当該保守内エリアから保守外エリアに出た場合、警報部24を制御して保守作業員に対して警告音を鳴動するように制御する。   The alarm control unit 226 controls the alarm unit 24 to sound a warning sound for the maintenance worker when the position of the hand comes out of the maintenance area to the non-maintenance area as a result of the determination by the position determination unit 225. To control.

また、画像処理制御部22は、カメラ部21の画像情報を保守エリア指定画像2231と共に保守作業監視者側に送信する画像情報送信部227を有してもよい。これにより、保守作業監視者側にて保守作業員が保守対象機器の保守作業を適切に行っているのか、そうでないかの状況を確認することができ、場合によっては監視者側から保守作業員に対して助言することも可能となる。   Further, the image processing control unit 22 may include an image information transmission unit 227 that transmits the image information of the camera unit 21 to the maintenance work supervisor side together with the maintenance area designation image 2231. As a result, the maintenance worker can check whether the maintenance worker is properly performing maintenance work on the maintenance target device, or not, depending on the situation. It is also possible to advise against.

図3は、表示部23のディスプレイ231の表示画面の一例を示す図であって、保守内エリア(保守対象エリア)のみを指定した場合の例である。図4は、表示部23のディスプレイの表示画面の他の例を示す図であって、保守内エリア(保守対象エリア)と保守外(保守対象外エリア)の両方を指定した場合の例である。   FIG. 3 is a diagram showing an example of the display screen of the display 231 of the display unit 23, and is an example in the case where only the maintenance area (maintenance target area) is designated. FIG. 4 is a diagram showing another example of the display screen of the display unit 23, and is an example in the case where both the maintenance internal area (maintenance target area) and the non-maintenance area (non-maintenance target area) are designated. .

同図において、表示部23のディスプレイ231には、複数の機器11(111〜115)、保守内エリア指定枠画像(図3、図4の実線で示す枠)2231、また保守作業員の手の位置を示す画像(例えば、リストバンド又は手袋を示す画像)311を示し、例えば、リストバンド311が保守内エリア(保守対象内エリア)から保守対象外、又は保守外エリア(保守対象外エリア):(図4の点線で示す枠)に移動する例を示している。   In the figure, the display 231 of the display unit 23 includes a plurality of devices 11 (111 to 115), an in-maintenance area designation frame image (a frame indicated by a solid line in FIGS. 3 and 4) 2231, and a maintenance worker's hand. An image showing a position (for example, an image showing a wristband or a glove) 311 is shown. For example, the wristband 311 is not subject to maintenance from the maintenance area (maintenance target area), or is not subject to maintenance (maintenance target area): An example of moving to (a frame indicated by a dotted line in FIG. 4) is shown.

図5は、保守作業前の処理フローを示すフロー図、図6は、保守作業時の処理フローを示すフロー図である。   FIG. 5 is a flowchart showing a processing flow before maintenance work, and FIG. 6 is a flowchart showing a processing flow during maintenance work.

図5において、ステップS511にて、携帯型画像処理装置22を所望の位置に設置する。そして、保守対象エリアを静止画撮影する。例えば、ラック1に搭載された機器11のすべてをカメラ部21により静止画撮影する。当該静止画撮影は、カメラ操作部26の静止画操作ボタンをもって行う。   In FIG. 5, in step S511, the portable image processing device 22 is installed at a desired position. Then, still image shooting is performed on the maintenance target area. For example, all the devices 11 mounted on the rack 1 are photographed with the camera unit 21. The still image shooting is performed with the still image operation button of the camera operation unit 26.

続いて、ステップS512にて、カメラ部21より撮影した静止画(静止画情報)を受信して表示部23のディスプレイに表示する。   Subsequently, in step S512, a still image (still image information) taken from the camera unit 21 is received and displayed on the display of the display unit 23.

係る静止画表示状態において、ステップS513にて、保守対象エリアと保守対象外エリアを指定する。この指定に基づき例えば、保守内エリア、及び/又は保守外エリアを指定する保守内エリア、及び/又は保守外エリア指定枠画像(枠画像情報)を生成する。
この保守内エリア、及び/又は保守外エリア指定枠画像は、静止画状態(静止画像上)において、保守対象機器を取り囲む座標点を指定して設定する。
In the still image display state, a maintenance target area and a non-maintenance area are designated in step S513. Based on this designation, for example, a maintenance internal area and / or a non-maintenance area designation frame image (frame image information) for designating a maintenance internal area and / or a non-maintenance area are generated.
This maintenance internal area and / or non-maintenance area designation frame image is set by designating coordinate points surrounding the maintenance target device in the still image state (on the still image).

次に、ステップS514にて、保守内エリア、及び/又は保守外エリア指定枠画像を表示部23のディスプレイに出力して、静止画の機器画像を取り囲むようにして重ねて表示する。これにより、複数の機器11の中から保守対象となる機器を特定する。   Next, in step S514, the maintenance area and / or non-maintenance area designation frame image is output to the display of the display unit 23, and is displayed so as to surround the device image of the still image. As a result, a maintenance target device is identified from among the plurality of devices 11.

次に、保守対象となる機器を特定したあと、以下の処理を実行する。
図6において、ステップS611にて、保守対象エリアを動画撮影する。例えば、ラック1に搭載された機器11のすべて、及び当該機器の保守対象機器を保守する保守作業員をカメラ部21により動画撮影する。当該動画撮影は、カメラ操作部26の動画操作ボタンをもって行う。そして、このときの動画(画像情報)を受信する。このとき、保守作業員はリストバンド又は、手袋を装着し、保守作業員の手の位置がわかり易いようにする。
Next, after specifying a device to be maintained, the following processing is executed.
In FIG. 6, in step S611, the maintenance target area is photographed as a moving image. For example, the camera unit 21 shoots a moving image of all the devices 11 mounted on the rack 1 and maintenance workers who maintain the maintenance target devices of the devices. The moving image shooting is performed with a moving image operation button of the camera operation unit 26. Then, the moving image (image information) at this time is received. At this time, the maintenance worker wears a wristband or gloves so that the position of the maintenance worker's hand can be easily understood.

続いて、ステップS612にて、保守内エリア、及び/又は保守外エリア指定枠画像1231及びカメラ21の動画(機器画像111〜115、保守作業員の手の位置を示す画像311)を表示部23のディスプレイに表示する。   Subsequently, in step S612, the maintenance area and / or non-maintenance area designation frame image 1231 and the moving image of the camera 21 (device images 111 to 115, image 311 indicating the position of the maintenance worker's hand) are displayed on the display unit 23. On the display.

そして、次のステップS613にて、保守内エリア、及び/又は保守外エリア指定枠画像2231と保守作業員の手の位置を示す画像311との位置関係を監視する。   In the next step S613, the positional relationship between the maintenance area and / or non-maintenance area designation frame image 2231 and the image 311 indicating the position of the maintenance worker's hand is monitored.

係る状態において、ステップS614にて保守作業を開始する。   In this state, maintenance work is started in step S614.

また、ステップS615にて、保守作業員による保守作業が完了したか否かを判定する。   In step S615, it is determined whether the maintenance work by the maintenance worker is completed.

ここで、保守作業が完了した場合には、ステップS621にてカメラ動画撮影ボタンを操作して撮影を停止し、保守作業処理を終了する。   If the maintenance work is completed, the camera moving image shooting button is operated in step S621 to stop shooting, and the maintenance work process is ended.

保守作業が完了していない場合には、ステップS616にて手画像情報が保守内外かを判定する。例えば、保守作業員の手が、保守対象外エリアに入り込んだか否かを判定する。   If the maintenance work has not been completed, it is determined in step S616 whether the hand image information is inside or outside the maintenance. For example, it is determined whether or not the hand of the maintenance worker has entered the non-maintenance area.

ここで、保守内エリアの場合には、ステップS620にて保守作業員が保守対象エリア(保守内エリア)の保守対象機器の保守作業中であると認識してステップS615に戻り、手位置画像の位置判定を繰り返す。   Here, in the case of the maintenance area, in step S620, the maintenance worker recognizes that the maintenance target device in the maintenance target area (maintenance area) is undergoing maintenance work, and returns to step S615. Repeat position determination.

保守外エリアの場合には、ステップS617にてアラームを鳴動する。このアラーム鳴動により、ステップS618にて保守作業員に対して保守作業員が保守内エリアから外に出たこと、例えば、保守外エリアの機器を保守しているご操作の可能性がある旨の警告、又は通知を行う。これにより、保守作業員は、警告を聞いた時点で作業を一旦中段し、誤操作をしていないかを確認できる。   If the area is outside the maintenance area, an alarm is sounded in step S617. This alarm sound indicates that the maintenance worker has moved out of the maintenance inside area in step S618, for example, there is a possibility that the operation for maintaining the equipment in the maintenance outside area may be performed. Warning or notification. As a result, the maintenance worker can temporarily check the operation when he / she hears the warning, and can confirm whether or not an erroneous operation has been performed.

ステップS617における鳴動は、明らかに保守作業員が保守内エリアから保守外エリアに移動して保守外の機器の保守を行っていることを判断するに適した所定の待機時間をおいて、鳴動するようにするとよい。この待機時間は、タイマーにより監視する構成とする。   The ringing in step S617 is performed with a predetermined waiting time suitable for determining that the maintenance worker has moved from the maintenance internal area to the non-maintenance area and is performing maintenance of non-maintenance equipment. It is good to do so. The standby time is monitored by a timer.

ステップS619にて保守作業員が確認した場合には、ステップS620に進み、上述した処理を実行する。
保守作業員が保守作業を終了したら、上記各処理(画像処理プログラム)を停止する。
If the maintenance worker confirms in step S619, the process proceeds to step S620, and the above-described processing is executed.
When the maintenance worker finishes the maintenance work, the above processes (image processing programs) are stopped.

上記実施例では、図5と図6との処理を区別して説明したが、図5の処理が完了したあと、自動的に図6の処理に移行するようにするとよい。   In the above embodiment, the processing of FIG. 5 and FIG. 6 has been described separately. However, after the processing of FIG. 5 is completed, it is preferable to automatically shift to the processing of FIG.

また、上記実施例では、携帯型情報処理装置として1つの例を挙げて説明したが、複数台用意し、複数台の装置からの画像情報を元に保守内エリアや保守外エリアを特定し、また画像情報を監視した上で、上述した処理を正確に実行するように構成するとよい。例えば、2台の1つの手画像情報の位置が保守内エリアから外れた場合、または保守外エリアに入った場合に警告音を鳴動するように構成してもよく、或は2台のそれぞれが手画像情報の位置が保守内エリアから外れた場合、または保守外エリアに入った場合に警告音を鳴動するように構成してもよい。   In the above embodiment, a portable information processing device has been described as an example. However, a plurality of devices are prepared, a maintenance internal area and a non-maintenance area are specified based on image information from the plurality of devices, Further, it is preferable that the above-described processing is accurately executed after monitoring the image information. For example, it may be configured to sound a warning sound when the position of one hand image information of two units is out of the maintenance inside area or when entering the outside maintenance area. A warning sound may be generated when the position of the hand image information deviates from the maintenance inside area or enters the maintenance outside area.

以上、本発明の一実施形態を説明したが、これは本発明の例示であって、本発明の範囲をこの実施形態にのみ限定する必要はない。   As mentioned above, although one Embodiment of this invention was described, this is an illustration of this invention, Comprising: It is not necessary to limit the scope of the present invention only to this embodiment.

1 ラック
11 機器
2 携帯型情報処理装置
21 カメラ部
22 画像処理制御部(CPU)
221 カメラ制御部
222 画像情報(機器及び保守作業員撮影画像)受信部
223 保守対象エリア指定画像(枠画像)生成部
224 画像表示制御部
225 手位置画像の位置判定部
226 警報制御部
227 画像情報送信部
DESCRIPTION OF SYMBOLS 1 Rack 11 Apparatus 2 Portable information processing apparatus 21 Camera part 22 Image processing control part (CPU)
221 Camera control unit 222 Image information (device and maintenance worker photographed image) reception unit 223 Maintenance target area designation image (frame image) generation unit 224 Image display control unit 225 Hand position image position determination unit 226 Alarm control unit 227 Image information Transmitter

Claims (3)

複数の機器及び保守作業員を撮影するカメラ部を操作する画像撮影機能を有するカメラ操作部、警告音を鳴動する音声発生機能を有する警報部、前記カメラ部により撮影した画像情報を受けて表示する表示機能を有するディスプレイを含む表示部、前記複数の機器から保守対象機器の保守内エリア及び/又は保守外エリアを指定するエリア指定機能を有するエリア指定部、前記カメラ部により撮影した画像を処理する画像処理機能を有する制御部、を有し、
前記画像処理機能部は、
前記カメラ部から保守対象機器を含む複数の機器の静止画像を受けて前記ディスプレイに表示するように制御し、また前記カメラ部から機器及び当該機器の保守作業員を含む動画像を受けて前記ディスプレイに出力表示するように制御する手段、
前記静止画像の表示状態において、前記保守エリア指定部からの保守エリア指定に基づいて前記複数の機器の中から保守対象の機器を特定する保守エリア指定枠画像を生成して前記ディスプレイに出力表示するように制御する手段、
前記動画像の表示状態において、前記保守対象機器の保守内エリアを示す枠画像と保守作業員の手の位置を示す手画像との位置関係を監視する手段、
前記手画像の位置が前記保守内エリアから外れたか否かを判定する手段、
前記判定する手段による判定結果、前記手画像の位置が前記保守内エリアから外れた場合、前記警報部を制御して保守作業員に対して警告する警告音を鳴動する手段、
を有することを特徴とする携帯型情報処理装置。
A camera operation unit having an image shooting function for operating a camera unit for shooting a plurality of devices and maintenance workers, an alarm unit having a sound generation function for sounding a warning sound, and receiving and displaying image information taken by the camera unit A display unit including a display having a display function, an area designating unit having an area designating function for designating a maintenance internal area and / or a non-maintenance area of a maintenance target device from the plurality of devices, and processing an image captured by the camera unit A control unit having an image processing function,
The image processing function unit
Control is performed so that still images of a plurality of devices including a maintenance target device are received from the camera unit and displayed on the display, and a moving image including a device and a maintenance worker of the device is received from the camera unit. Means for controlling the output to be displayed on
In the display state of the still image, a maintenance area designation frame image for identifying a maintenance target device is generated from the plurality of devices based on the maintenance area designation from the maintenance area designation unit, and is output and displayed on the display. Means to control,
Means for monitoring a positional relationship between a frame image indicating a maintenance internal area of the maintenance target device and a hand image indicating a position of a maintenance worker's hand in the moving image display state;
Means for determining whether the position of the hand image is out of the maintenance area;
As a result of determination by the determining means, if the position of the hand image is out of the maintenance area, the alarm unit is controlled to sound a warning sound for warning a maintenance worker;
A portable information processing apparatus comprising:
複数の機器及び保守作業員を撮影するカメラ部を操作する画像撮影機能を有するカメラ操作部、警告音を鳴動する音声発生機能を有する警報部、前記カメラ部により撮影した画像情報を受けて表示する表示機能を有するディスプレイを含む表示部、前記複数の機器から保守対象機器の保守内エリア及び/又は保守外エリアを指定するエリア指定機能を有するエリア指定部、前記カメラ部により撮影した画像を処理する画像処理機能を有する制御部、を有し、
前記画像処理機能部は、
前記カメラ部から保守対象機器を含む複数の機器の静止画像を受けて前記ディスプレイに表示するように制御し、また前記カメラ部から機器及び当該機器の保守作業員を含む動画像を受けて前記ディスプレイに出力表示するように制御する手段、
前記静止画像の表示状態において、前記保守エリア指定部からの保守エリア指定に基づいて前記複数の機器の中から保守対象の機器を特定する保守エリア指定枠画像を生成して前記ディスプレイに出力表示するように制御する手段、
前記静止画像の表示状態において、前記保守エリア指定部からの保守エリア指定に基づいて前記複数の機器の中から保守対象の機器を特定する保守エリア指定枠画像、及び保守外エリア指定枠画像を生成して前記ディスプレイに出力表示するように制御する手段、
前記動画像の表示状態において、前記保守対象機器の保守内エリアを示す枠画像と保守作業員の手の位置を示す手画像との位置関係を監視する手段、
前記手画像の位置が前記保守内エリアか前記保守外エリアかを判定する手段、
前記判定する手段による判定結果、前記手画像の位置が前記保守内エリアから外れた場合、また保守外エリアに入った場合、前記警報部を制御して保守作業員に対して警告する警告音を鳴動する手段、
を有することを特徴とする携帯型情報処理装置。
A camera operation unit having an image shooting function for operating a camera unit for shooting a plurality of devices and maintenance workers, an alarm unit having a sound generation function for sounding a warning sound, and receiving and displaying image information taken by the camera unit A display unit including a display having a display function, an area designating unit having an area designating function for designating a maintenance internal area and / or a non-maintenance area of a maintenance target device from the plurality of devices, and processing an image captured by the camera unit A control unit having an image processing function,
The image processing function unit
Control is performed so that still images of a plurality of devices including a maintenance target device are received from the camera unit and displayed on the display, and a moving image including a device and a maintenance worker of the device is received from the camera unit. Means for controlling the output to be displayed on
In the display state of the still image, a maintenance area designation frame image for identifying a maintenance target device is generated from the plurality of devices based on the maintenance area designation from the maintenance area designation unit, and is output and displayed on the display. Means to control,
In the display state of the still image, a maintenance area designation frame image for specifying a maintenance target device from the plurality of devices and a non-maintenance area designation frame image are generated based on the maintenance area designation from the maintenance area designation unit And means for controlling the output to be displayed on the display,
Means for monitoring a positional relationship between a frame image indicating a maintenance internal area of the maintenance target device and a hand image indicating a position of a maintenance worker's hand in the moving image display state;
Means for determining whether the position of the hand image is the maintenance internal area or the non-maintenance area;
As a result of the determination by the determining means, when the position of the hand image is out of the maintenance inside area, or when entering the maintenance outside area, a warning sound for controlling the alarm unit to warn the maintenance worker is issued. Means to ring,
A portable information processing apparatus comprising:
請求項1又は請求項2に記載の携帯型情報処理装置であって、
前記画像処理機能部は、さらに
前記カメラからの画像情報及び前記保守エリア指定枠画情報を保守作業監視側に送信する手段、
を有することを特徴とする携帯型情報処理装置。
The portable information processing device according to claim 1 or 2,
The image processing function unit further includes means for transmitting the image information from the camera and the maintenance area designation frame information to the maintenance work monitoring side,
A portable information processing apparatus comprising:
JP2014072078A 2014-03-31 2014-03-31 Portable information processing device Pending JP2015194866A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2014072078A JP2015194866A (en) 2014-03-31 2014-03-31 Portable information processing device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2014072078A JP2015194866A (en) 2014-03-31 2014-03-31 Portable information processing device

Publications (1)

Publication Number Publication Date
JP2015194866A true JP2015194866A (en) 2015-11-05

Family

ID=54433830

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2014072078A Pending JP2015194866A (en) 2014-03-31 2014-03-31 Portable information processing device

Country Status (1)

Country Link
JP (1) JP2015194866A (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2017162218A (en) * 2016-03-10 2017-09-14 富士通株式会社 Management program, management device, and management method
JP2019082864A (en) * 2017-10-31 2019-05-30 株式会社日立製作所 Inspection work managing system and inspection work managing method

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2017162218A (en) * 2016-03-10 2017-09-14 富士通株式会社 Management program, management device, and management method
JP2019082864A (en) * 2017-10-31 2019-05-30 株式会社日立製作所 Inspection work managing system and inspection work managing method
JP7193913B2 (en) 2017-10-31 2022-12-21 株式会社日立製作所 Inspection work management system and inspection work management method

Similar Documents

Publication Publication Date Title
CN106415413B (en) Programmable display, portable terminal device, data processing method
EP3068155B1 (en) Methods and apparatuses for binding with device
JP6852729B2 (en) Plant management system, plant management method, plant management equipment, and plant management program
EP3131235A1 (en) Method and apparatus for controlling device
EP3086539A1 (en) Method and device for deleting smart scene
EP3285505B1 (en) Device marking method and apparatus and recording medium
US20170032638A1 (en) Method, apparatus, and storage medium for providing alert of abnormal video information
CN104508720B (en) Drive assistance device
JP2014225233A5 (en)
US20160088710A1 (en) Method and apparatus for controlling smart light
US20160062843A1 (en) Methods and devices for backing up file
EP3422172B1 (en) Printing control method and device
US10133900B2 (en) Controlling the output of contextual information using a computing device
JP2016038716A (en) Work supervisory device, work supervisory system and program
EP3112993B1 (en) Information processing apparatus, setting condition specification method for image forming apparatus
JP2015201188A (en) Information processor, information transmission system, and information transmission method
JP2015194866A (en) Portable information processing device
JP6690277B2 (en) Image processing control method, image processing control program, and information processing apparatus
CN108965861B (en) Method and device for positioning camera, storage medium and intelligent interaction equipment
JP2012085169A5 (en)
JP6690839B2 (en) Monitoring device, monitoring system, monitoring method, and program
JP2014153734A (en) Tablet monitoring station
JP2018046399A5 (en) Image processing apparatus, control method, and program
JP2016051964A5 (en) Information processing apparatus, information processing apparatus control method, and program
JP2020107366A (en) Monitoring device, monitoring system, monitoring method, and program