JP2014182476A - 操作履歴情報保存装置、画像処理装置、操作履歴情報保存制御プログラム - Google Patents

Abstract

【課題】操作履歴画像として撮影される画像への写り込みによる情報漏れを回避する。
【解決手段】操作者６０の位置は、操作部を操作可能な位置であり、撮像装置からの距離が予測可能である。また、背景画像として撮像される壁までの位置を距離とし、予測した距離と実際の距離との間にしきい値を設定する。距離判定部では、撮影された画像領域の細分化された各画角での画像の距離情報をしきい値と比較して、人物画像（しきい値よりも近い画像）と、人物以外の背景画像（しきい値よりも遠い画像）とに分類し、マスク処理部へ送出する。マスク処理部では、しきい値よりも遠いと判定された画角（人物以外の背景画像）の領域を、所謂黒ベタ画像に置き換えた後、保存制御部によって、ハードディスクに保存する。この黒ベタ画像への置き換えが、マスク処理（隠蔽処理）である。
【選択図】図７

Description

本発明は、操作履歴情報保存装置、画像処理装置、操作履歴情報保存制御プログラムに関する。

特許文献１には、被写体と背景を合成する画像システムであり、デジカメプリントで定型背景フレームとの合成をすることが記載されている。

また、特許文献２は、入力画像を領域分けし、付加符号情報を付けて付勢な再生を回避する。文章の領域別セキュリティであり、事前に付加された符号に基づいて再生するか否かを判断することが記載されている。

特開平１１−００８８３１７号公報 特開２００３−０７８７４５号公報

本発明は、操作履歴画像として撮影される画像への写り込みによる情報漏れを回避することができる操作履歴情報保存装置、画像処理装置、操作履歴情報保存制御プログラムを得ることが目的である。

請求項１に記載の発明は、操作者の操作に基づき処理が実行される処理機器に対峙する特定領域を撮像する撮像手段と、前記撮像手段で前記処理機器に対する操作状態を撮像するように制御する制御手段と、前記撮像手段で撮像した前記特定領域の画像の中から、人物画像を抽出する抽出手段と、前記抽出手段で抽出した前記人物画像以外の背景画像の全部又は一部を隠蔽する隠蔽手段と、隠蔽手段で隠蔽された後の前記特定領域の画像を、前記処理機器を操作する操作者の操作履歴情報として保存する保存手段と、を有している。

請求項２に記載の発明は、前記請求項１に記載の発明において、前記処理機器における、少なくとも前記特定領域を含む監視領域内に移動体が侵入したか否かを検出する移動体検出手段をさらに有し、前記制御手段が、前記移動体検出手段で前記移動体を検出している期間中、前記撮像手段による撮像を継続する。

請求項３に記載の発明は、前記請求項１又は請求項２に記載の発明において、前記抽出手段が、前記特定領域の画像に対応する距離情報を取得する距離情報取得部と、前記距離情報取得部で取得した距離と予め定めたしきい値とを比較する比較部と、前記比較部による比較の結果、前記しきい値よりも近い距離に対応する画像を前記人物画像として判定する判定部と、を備え、前記隠蔽手段が、前記判定部で判定した人物画像以外の背景画像の全部を隠蔽する。

請求項４に記載の発明は、前記請求項３に記載の発明において、前記距離情報取得部が、赤外線カメラによる撮影情報に基づき距離情報を取得する。

請求項５に記載の発明は、前記請求項１又は請求項２に記載の発明において、前記抽出手段が、前記撮像手段で撮像した前記特定領域の画像を解析し隠蔽を要する要隠蔽画像か否かを認識する認識手段と、前記認識手段で認識した前記要隠蔽画像を前記人物画像以外の背景画像の一部として判定する判定部と、を備え、前記隠蔽手段が、前記判定部で判定した人物画像以外の背景画像の一部としての前記要隠蔽画像を隠蔽する。

請求項６に記載の発明は、前記請求項５に記載の発明において、前記認識手段が、文字画像か否かを認識する文字認識手段を備え、前記文字認識手段によって認識した前記文字画像を、前記要隠蔽画像と認識する。

請求項７に記載の発明は、前記請求項１〜請求項６の何れか１項記載の発明において、前記保存手段が不揮発性メモリであり、前記特定領域の画像が前記隠蔽手段によって前記人物画像以外の背景画像の全部又は一部が隠蔽されるまで、前記保存手段の保存処理の実行を禁止する禁止手段をさらに有する。

請求項８に記載の発明は、前記請求項１〜請求項７の何れか１項記載の発明において、前記人物画像の中から顔画像を認識する顔認識手段をさらに有し、前記隠蔽手段が、前記人物画像以外の背景画像に加え、前記顔認識手段で認識した前記顔画像を隠蔽する。

請求項９に記載の発明は、前記請求項１〜請求項８の何れか１項記載の発明において、前記隠蔽手段により隠蔽された画像の元画像は暗号化されて保存され、予め定めた管理者による復号化により、隠蔽状態が解除可能とされている。

請求項１０に記載の発明は、前記請求項１〜請求項９の何れか１項記載の発明において、前記隠蔽手段により隠蔽された画像が、元画像を暗号化した画像であり、予め定めた管理者による復号化により、隠蔽状態が解除可能とされている。

請求項１１に記載の発明は、請求項１〜請求項１０の何れか１項記載の操作履歴画像保存装置を備え、前記処理機器が、少なくとも画像情報を読み取る画像読取装置、或いは画像情報に基づいて記録用紙に画像を形成する画像形成装置の何れか一方を具備する画像処理装置である。

請求項１２に記載の発明は、コンピュータに、処理機器に対峙する特定領域において、操作者が当該処理機器に対して操作する操作状態を撮像し、撮像した前記特定領域の画像の中から、人物画像を抽出し、抽出した前記人物画像以外の背景画像の全部又は一部を隠蔽し、隠蔽された後の前記特定領域の画像を、前記処理機器を操作する操作者の操作履歴情報として保存する、ように操作履歴画像保存制御を実行させるための操作履歴画像保存制御プログラムである。

請求項１記載の発明によれば、操作履歴画像として撮影される画像への写り込みによる情報漏れを回避することができる。

請求項２に記載の発明によれば、本構成を有しない場合に比べて、人が接近しているときの画像を効率よく取得することができる。

請求項３に記載の発明によれば、本構成を有しない場合に比べて、容易かつ簡便に人物画像を抽出することができる。

請求項４に記載の発明によれば、本構成を有しない場合に比べて、容易かつ簡便に特定領域の画像の距離を測定することができる。

請求項５に記載の発明によれば、情報漏れの対象を文字画像に特化することができる。

請求項６に記載の発明によれば、情報漏れの対象を文字画像に特化することができる。

請求項７に記載の発明によれば、隠蔽画像の保存を確実に回避することができる。

請求項８に記載の発明によれば、プライバシー侵害を回避することができる。

請求項９に記載の発明によれば、隠蔽画像と暗号化画像とを兼用することができる。

請求項１０に記載の発明によれば、必要に応じて隠蔽されていない元画像を復元することができる。

請求項１１に記載の発明は、操作履歴画像として撮影される画像への写り込みによる情報漏れを回避することができる。

請求項１２に記載の発明によれば、操作履歴画像として撮影される画像への写り込みによる情報漏れを回避することができる。

第１の実施の形態に係る画像処理装置の概略図である。 第１の実施の形態に係る画像処理装置の電源供給系及び制御系の構成を示すブロック図である。 第１の実施の形態に係る画像処理装置及びその周辺示す斜視図であり、（Ａ）は画像処理装置に操作者が対峙していない状態を示し、（Ｂ）は画像処理装置に操作者が対峙している状態を示す。 第１の実施の形態係るメインコントローラのカメラ制御部の機能を説明するブロック図である。 第１の実施の形態に係り、撮像装置の撮像領域を示す平面図である。 第１の実施の形態に係り、撮像装置の撮像領域を示す側面図である。 （Ａ）撮像装置で撮像した生画像の正面図、（Ｂ）は生画像の画角を区画した領域を示す正面図、（Ｃ）は生画像にマスク処理を施した後の保存画像の正面図である。 第１の実施の形態に係るメインコントローラのカメラ制御部で実行される撮像制御の流れを示すフローチャートである。 第２の実施の形態係るメインコントローラのカメラ制御部の機能を説明するブロック図である。 第２の実施の形態に係り、生画像にマスク処理を施した後の保存画像の正面図である。 第３の実施の形態係るメインコントローラのカメラ制御部の機能を説明するブロック図である。 第３の実施の形態に係り、生画像にマスク処理を施した後の保存画像の正面図である。

［第１の実施の形態］
図１には、第１の実施の形態に係る画像処理装置１０が示されている。

画像処理装置１０は、記録用紙に画像を形成する画像形成部１２と、原稿画像を読み取る画像読取部１４と、ファクシミリ通信制御回路１６を含む処理機器を備えている（以下、総称する場合「デバイス」という場合がある）。画像形成装置１２と、その他のデバイス（画像読取部１４、ファクシミリ通信制御回路１６）との間には、画像形成部１２で画像記録された記録用紙が排出される記録用紙排出トレイ１０Ｔが形成されている。

また、画像読取装置１４の筐体には、操作部４６が設けられている。なお、操作部４６は、図２に示すＵＩタッチパネル４０、並びに図示は省略したが、その他のハードキーを含む。

さらに、画像処理装置１０の筐体の一部であり、画像読取装置１４を支持する縦長矩形状のピラー部５０には、人感センサ３０が取り付けられている。

画像処理装置１０は、メインコントローラ１８を備えており、画像形成部１２、画像読取部１４、ファクシミリ通信制御回路１６を制御して、例えば、画像読取部１４で読み取った原稿画像の画像データを一次的に記憶したり、読み取った画像データを画像形成部１２又はファクシミリ通信制御回路１６へ送出したりする。

メインコントローラ１８にはインターネット等のネットワーク通信回線網２０が接続され、ファクシミリ通信制御回路１６には電話回線網２２が接続されている。メインコントローラ１８は、例えば、ネットワーク通信回線網２０を介してＰＣ２９（図２参照）と接続され、画像データを受信したり、ファクシミリ通信制御回路１６を介して電話回線網２２を用いてファクシミリ受信及びファクシミリ送信を実行する役目を有している。

画像読取部１４は、原稿を位置決めする原稿台と、原稿台に置かれた原稿の画像を走査して光を照射する走査駆動系と、走査駆動系の走査により反射又は透過する光を受光して電気信号に変換するＣＣＤ等の光電変換素子と、が設けられている。

画像形成部１２は、感光体を備え、感光体の周囲には、感光体を一様に帯電する帯電装置と、画像データに基づいて光ビームを走査する走査露光部と、前記走査露光部によって走査露光されることで形成された静電潜像を現像する画像現像部と、現像化された感光体上の画像を記録用紙へ転写する転写部と、転写後の感光体の表面をクリーニングするクリーニング部と、が設けられている。また、記録用紙の搬送経路上には、転写後の記録用紙上の画像を定着する定着部を備えている。

画像処理装置１０には、入力電源線２４の先端にコンセント２６が取り付けられており、壁面Ｗまで配線された商用電源３１の配線プレート３２に、当該コンセント２６を差し込むことで、画像処理装置１０は、商用電源３１から、電力の供給を受けるようになっている。第１の実施の形態の画像処理装置１０では、主電源スイッチ４１のオンオフ操作によって、商用電源を供給するようになっている。

主電源スイッチ４１は、画像処理装置１０の前面にパネル部１０Ｐを開放（下辺を中心とした回転動作）することで、露出する内部部品の一部として設けられている。

また、第１の実施の形態では、主電源スイッチ４１とは別に、副電源操作部４４が設けられている。副電源操作部４４は、主電源スイッチ４１のオン状態で電源供給される前記各デバイス等の動作モードを選択する機能を有している。

ここで、第１の実施の形態における画像処理装置１０には、当該画像処理装置１０に対峙して、操作指示を行う操作者６０を撮像する撮像装置５２が設けられている。

撮像装置５２は、画像処理装置１０の背面側に取り付られたブラケット５４に支持され、前記画像読取部１４の最上端よりもさらに上方に配置されている。撮像装置５２の撮影光軸は、画像処理装置１０の前方、かつ斜め下向きとされている。

この結果、撮像装置５２の撮像領域は、操作者６０が画像処理装置１０の前に対峙して操作部４６（図３（Ｂ）参照）を操作している空間が必ず含まれるようになっている。

なお、撮影光軸は、画像処理装置１０の前方、かつ斜め下向きに限定されるものではなく、画像処理装置１０の設置場所によって変更してもよい。また、撮像装置の高さ方向位置、横方向位置、撮影光軸向き等を調整可能な調整機構を設けてもよい。

この撮像装置５２による撮像時期、撮像した画像処理制御については後述する。

（画像処理装置の制御系ハード構成）
図２は、画像処理装置１０の制御系のハード構成の概略図である。

ネットワーク回線網２０は、前記画像処理装置１０のメインコントローラ１８に接続されている。なお、ネットワーク回路網２０には、画像データを送信元等になり得るＰＣ（端末装置）２９が接続されている。

メインコントローラ１８には、それぞれ、データバスやコントロールバス等のバス３３Ａ〜３３Ｅを介して、ファクシミリ通信制御回路１６、画像読取部１４、画像形成部１２、ＵＩタッチパネル４０、ＩＣカードリーダーライター５８が接続されている。すなわち、このメインコントローラ１８が主体となって、画像処理装置１０の各処理部が制御されるようになっている。なお、ＵＩタッチパネル４０には、ＵＩタッチパネル用バックライト部４０ＢＬが取り付けられている。

また、画像処理装置１０は、電源装置４２を備えており、メインコントローラ１８とは信号ハーネス４３で接続されている。

電源装置４２は、商用電源３１から入力電源線２４を介して電力の供給を受けている。入力電源線２４には、主電源スイッチ４１が介在されている。

電源装置４２では、メインコントローラ１８、ファクシミリ通信制御回路１６、画像読取部１４、画像形成部１２、ＵＩタッチパネル４０、ＩＣカードリーダーライター５８のそれぞれに対して独立して電力を供給する電力供給線３５Ａ〜３５Ｅが設けられている。このため、メインコントローラ１８では、各デバイス（以下において、「処理機器」、「モジュール」等と称する場合もある）の稼働モード中において、個別に電力供給（電力供給モード）、或いは電力遮断（スリープモード）し、所謂部分節電制御を可能としている。

また、メインコントローラ１８には、人感センサ３０が接続されており、画像処理装置１０の周囲の人の有無、より具体的には、画像処理装置１０に設けられているＵＩタッチパネル４０を含む操作部４６を操作する操作者６０の有無を監視している。

第１の実施の形態に係る人感センサ３０の仕様は、移動体の有無（存在・不存在）を検出するものが適用されている。この人感センサ３０に適用されるセンサは、投光部と受光部とを備えた反射型センサ等が代表的である（反射型センサ）。なお、投光部と受光部とが分離された形態であってもよい。

この人感センサ３０に適用された反射型センサ等の最大の特徴は、受光部に入る光を遮断する／しないによって移動体の有無を確実に検出することである。また、投光部から投光される光量等により、受光部へ入射する光量に制限があるため、比較的近距離が検出領域である。なお、「移動体」の定義は、自らが移動可能な物体であり、主として操作者６０が挙げられる。言い換えれば、人感センサ３０は、移動している物体のみを検出するのではなく、静止している移動体を検出することも可能である。

また、人感センサ３０として、反射型センサに限定されるものではないが、人感センサ３０の検出領域として、画像処理装置１０のＵＩタッチパネル４０やハードキーの操作が可能な領域が含まれていることが好ましい。目安として検出臨界距離（最も遠い位置）が０．２〜１．０ｍ程度となる。この領域の中に、前述した撮像装置５２による撮像領域が含まれている。

（撮像装置５２による操作ログ保存）
第１の実施の形態に係る画像処理装置１０では、前記撮像装置５２によって画像処理装置１０に対峙する操作者６０を撮像し、当該撮像された特定領域の画像（動画、静止画を問わず）を保存し、今後の画像処理装置１０の操作向上を目的として、撮像画像から、「操作者がどのような操作に困っているか」「認証（顔認証、ＩＤ認証等）動作に、なりすましがなかったか」を解析する（以下、「操作解析」という場合がある）。

なお、特定領域は、図３（Ｂ）に示される如く、画像処理装置１０に対峙する操作者６０の特に上半身画像を含む画角５６（図３（Ｂ）の点線参照）を指すものとする。

撮像装置５２は、メインコントローラ１８による制御で動作し、前記人感センサ３０によって、画像処理装置１０の対峙面に移動体（ここで、目的は操作者６０である）を検出をした時点から撮像を開始し、当該人感センサ３０で移動体を検出しなくなった時点で撮像を終了する。なお、撮像開始時期、撮像終了時期は、タイマ等により遅延させてもよい。

撮像装置５２によって撮像された特定領域の画像の情報は、メインコントローラ１８に接続されたハードディスク（ＨＤＤ）６２に保存されることになる。保存された特定領域の画像の情報は、例えば、撮像日時と共に時系列で保存され、必要に応じて読み出して、解析を実行するようになっている。

ここで、撮像装置５２が、前記特定領域を図３（Ｂ）に示す点線の画角５６で撮像すると、図７（Ａ）に示される如く、画角５６の背景として、操作者６０以外のもの、例えば、後ろが壁の場合は、当該壁に貼り付けられた秘匿情報媒体（紙媒体等）６４が撮像される場合がある。この秘匿情報媒体の秘匿情報は、前記操作解析には不要のものである。

そこで、第１の実施の形態では、撮像領域として撮像された画像の距離情報を取得して、操作者画像と、操作者６０以外の背景画像６６とを区別し、この操作者６０以外の背景画像６６を対象にマスク処理を施している。なお、操作者６０以外の背景画像には、前記秘匿情報媒体６４の画像領域が含まれることになる。

図４は、撮像装置５２で撮像した画像情報を対象として、メインコントローラ１８で画像処理を施し、ハードディスク６２へ保存する処理を実行するためのブロック図である。なお、このブロック図は、メインコントローラ１８内での処理を機能別に分類したものであり、ハード構成を言及するものではない。

図２に示される如く、メインコントローラ１８には、撮像装置５２の動作を制御するカメラ制御部１８ＣＭＲが設けられている。

撮像装置５２は、可視光カメラ６８及び赤外線カメラ７０と、撮像制御部７２とを備えている。

撮像制御部７２は、前記カメラ制御部１８ＣＭＲの撮像時期制御部７４に接続されている。撮像時期制御部７４には、人感センサ３０が接続されている。この人感センサ３０が移動体を検出すると、撮像時期制御部７４は、撮像制御部７２に対して、撮像指示信号を出力する。これにより、撮像制御部７２は、可視光カメラ６８及び赤外線カメラ７０を制御して、同期して撮像時期が制御されるようになっている。

可視光カメラ６８は、図３（Ｂ）の点線で示す画角５６での通常の撮像を実行するものであり、撮像した画像情報（光信号が電気信号に変換された情報）が、カメラ制御部１８ＣＭＲに設けられた画像入力部７６に入力されるようになっている。画像入力部７６では、被写体の撮像装置５２からの距離によって振り分ける単位の画角に分割することを含み、必要な画像処理を行ったあと、画像情報をマスク処理部７８へ送出するようになっている。

なお、必要な画像処理とは、コントラスト、濃度、彩度、明度等、一般的な画像処理を含む。また、可視光カメラ６８では、予め定めた画像領域よりも広い領域を撮像し、この画像処理によって、画角５６となるようにトリミングしてもよい。

一方、赤外線カメラ７０は、可視光カメラ６８に同期して、前記画角５６での赤外線撮影が撮影され、距離判定部７８に入力されるようになっている。

距離判定部７８では、赤外線カメラ７０で撮影された画像の情報に基づいて、前記撮像領域を細分化した画角(図７（Ｂ）参照）毎に被写体までの距離情報が割り当てられるようになっている。

ここで、第１の実施の形態において、必要とする画像は操作者６０の画像であり、当該操作者６０の位置は、画像処理装置１０の操作部４６を操作可能な位置であり、撮像装置５２からの距離１が予測可能である（図５及び図６参照）。

また、図５及び図６に示される如く、背景画像として撮像される壁までの位置を距離２とし、前記予測した距離１と距離２との間にしきい値を設定する。

距離判定部７８では、撮影された画像領域（画角５６）の細分化された各画角での画像の距離情報をしきい値と比較して、人物画像（しきい値よりも近い画像）と、人物以外の背景画像（しきい値よりも遠い画像）とに分類し、マスク処理部７８へ送出するようになっている。なお、しきい値と一致する距離は、人物画像側としてもよいし、背景画像側としてもよい。

マスク処理部７８では、前記しきい値よりも遠いと判定された画角（人物以外の背景画像）の領域を、所謂黒ベタ画像に置き換えた後、保存制御部８０によって、ハードディスク６２に保存されるようになっている。この黒ベタ画像への置き換えが、マスク処理である（図７（Ｃ）参照）。

第１の実施の形態において、上記手順での撮像領域のマスク処理では、所定途中で、ハードディスク６２に背景画像を一時保存するような工程は存在せず、ハードディスク６２に保存される画像には、人物以外の背景画像は保存されることがない処理手順となっている。

なお、第１の実施の形態において、画像入力部７６に、暗号化処理部８２を介して、ハードディスク６２に接続される信号線を配し、マスク処理工程とは別に、所謂生画像（Raw-Data）を暗号化して、ハードディスク６２に保存するようにしてもよい。これにより、必要に応じて、権限のある者が複合化して、生画像を参照することが可能となる。

以下、第１の実施の形態の作用を、図８のフローチャートに従い説明する。

図８は、メインコントローラ１８のカメラ制御部１８Ｃにおける撮像装置５２を用いた撮像制御ルーチンを示すフローチャートである。

ステップ１００では、人感センサ３０で移動体を検出したか否かが判断される。この判断は、画像処理装置１０の前に操作者が存在しているか否かの判断となり、当該ステップ１００で否定判定された場合は、このルーチンは終了する。

また、ステップ１００で肯定判定されると、画像処理装置１０の前に操作者が存在すると判断し、ステップ１０２へ移行して、撮像装置５２へ撮像開始を指示して、ステップ１０４へ移行する。

ステップ１０４では、可視光カメラ６８、赤外線カメラ７０を同期して撮像を開始し、次いで、ステップ１０６へ移行して、可視光カメラ６８で撮像した生画像を揮発性メモリに一時的に記憶する。この記憶領域は、生画像を用いて画像処理するための作業領域である。

次のステップ１０８では、可視光カメラ６８で撮像された画像（図７（Ａ）参照）を、撮像距離を比較するための画角に細分化し（図７（Ｂ）参照）、次いで、ステップ１１０へ移行して赤外線カメラ７０で撮影された撮影情報に基づく距離情報を、前記細分化された画角に割り当てて、ステップ１１２へ移行する。

ステップ１１２では、各画角をしきい値と比較して、距離１群と距離２群とに分類する（図５及び図６参照）。ここで、距離１群は人物画像と判別した画角であり、距離２群は背景画像と判別した画角である。

次のステップ１１４では、距離２群、すなわち背景画像と判別した画像に対して、マスク処理を施し、ステップ１１６へ移行してマスク処理後における、可視光カメラ６８で撮像された画像領域の全画像情報を不揮発性メモリ（ＨＤＤ６２）へ保存し、ステップ１１８へ移行する（図７（Ｃ）参照）。

ステップ１１８では、人感センサ３０による移動体の検出があるか否か、すなわち操作者が存在しているか否かを判別し、肯定判定された場合は、ステップ１０４へ戻り、上記工程を繰り返す。ここで言う、「繰り返し」は、撮像装置５２による動作画像撮像の場合、或いは、予め定めた時間毎に静止画像撮像（すなわち、コマ送り画像）の場合の両方を含むものとする。なお、静止画像と動画画像を区別することなく、静止画像の延長（コマ送り時間間隔の極小）が動画画像であると定義してもよい。

また、前記ステップ１１８で否定判定された場合は、ステップ１２０へ移行して、撮像装置５２へ撮像終了を指示し、このルーチンは終了する。

［第２の実施の形態］
以下に、図９及び図１０に従い、第２の実施の形態について説明する。なお、第１の実施の形態と同一構成部分には、同一の符号を付して、その構成の説明を省略する。

第２の実施の形態の特徴は、人物画像と背景画像とを区別する場合に、赤外線カメラ７０によって撮影された画像情報から、人物画像の輪郭を検出する点にある。

図９は、第２の実施の形態に係り、撮像装置５２で撮像した画像情報を対象として、メインコントローラ１８で画像処理を施し、ハードディスク６２へ保存する処理を実行するためのブロック図である。なお、このブロック図は、メインコントローラ１８内での処理を機能別に分類したものであり、ハード構成を言及するものではない。

撮像制御部７２は、カメラ制御部１８ＣＭＲの撮像時期制御部７４に接続されている。撮像時期制御部７４には、人感センサ３０が接続されている。この人感センサ３０が移動体を検出すると、撮像時期制御部７４は、撮像制御部７２に対して、撮像指示信号を出力する。これにより、撮像制御部７２は、可視光カメラ６８及び赤外線カメラ７０を制御して、同期して撮像時期が制御されるようになっている。

可視光カメラ６８は、図３（Ｂ）の点線で示す画角５６での通常の撮像を実行するものであり、撮像した画像情報（光信号が電気信号に変換された情報）が、カメラ制御部１８ＣＭＲに設けられた画像入力部７６に入力されるようになっている。画像入力部７６では、必要な画像処理を行ったあと、画像情報をマスク処理部７８へ送出するようになっている。

なお、必要な画像処理とは、コントラスト、濃度、彩度、明度等、一般的な画像処理を含む。また、可視光カメラ６８では、予め定めた画像領域よりも広い領域を撮像し、この画像処理によって、画角５６となるようにトリミングしてもよい。

一方、赤外線カメラ７０は、可視光カメラ６８に同期して、前記画角５６での赤外線撮影が撮影され、輪郭判定部９０に入力されるようになっている。

輪郭判定部９０では、赤外線カメラ７０で撮影された画像の情報（距離情報）に基づいて、人物画像と背景画像との境界情報を検出するようになっている。なお、境界情報は、座標情報でもよいし、ベクトル情報であってもよい。

マスク処理部７８では、前記境界情報に基づいて認識されている人物以外の背景画像の領域（図１０（Ａ）の生画像参照）を、所謂黒ベタ画像に置き換えた後（図１０（Ｂ）参照）、保存制御部８０によって、ハードディスク６２に保存されるようになっている。この黒ベタ画像への置き換えが、マスク処理である。

第２の実施の形態における境界情報に基づく人物画像と背景画像との判別は、第１の実施の形態における画角毎の判別よりも精度よく分類が可能である。

第２の実施の形態において、上記手順での撮像領域のマスク処理では、所定途中で、ハードディスク６２に背景画像を一時保存するような工程は存在せず、ハードディスク６２に保存される画像には、人物以外の背景画像は保存されることがない処理手順となっている。

なお、第２の実施の形態において、画像入力部７６に、暗号化処理部８２を介して、ハードディスク６２に接続される信号線を配し、マスク処理工程とは別に、所謂生画像（Law-Data）を暗号化して、ハードディスク６２に保存するようにしてもよい。これにより、必要に応じて、権限のある者が複合化して、生画像を参照することが可能となる。

［第３の実施の形態］
以下に、図１１及び図１２に従い、第３の実施の形態について説明する。なお、第１の実施の形態及び第２の実施の形態と同一構成部分には、同一の符号を付して、その構成の説明を省略する。

第３の実施の形態の特徴は、第１の実施の形態及び第２の実施の形態において必須であった赤外線カメラ７０が不要であり、可視光カメラ６８で撮像した画像情報から文字画像を判別して、当該文字画像の領域をマスク処理する点にある。

図１１は、第３の実施の形態に係り、撮像装置５２で撮像した画像情報を対象として、メインコントローラ１８で画像処理を施し、ハードディスク６２へ保存する処理を実行するためのブロック図である。なお、このブロック図は、メインコントローラ１８内での処理を機能別に分類したものであり、ハード構成を言及するものではない。

撮像制御部７２は、カメラ制御部１８ＣＭＲの撮像時期制御部７４に接続されている。撮像時期制御部７４には、人感センサ３０が接続されている。この人感センサ３０が移動体を検出すると、撮像時期制御部７４は、撮像制御部７２に対して、撮像指示信号を出力する。これにより、撮像制御部７２は、可視光カメラ６８の撮像時期を制御するようになっている。

可視光カメラ６８は、図３（Ｂ）の点線で示す画角５６での通常の撮像を実行するものであり、撮像した画像情報（光信号が電気信号に変換された情報）が、カメラ制御部１８ＣＭＲに設けられた画像入力部７６に入力されるようになっている。画像入力部７６では、必要な画像処理を行ったあと、画像情報をマスク処理部７８へ送出するようになっている。

なお、必要な画像処理とは、コントラスト、濃度、彩度、明度等、一般的な画像処理を含む。また、可視光カメラ６８では、予め定めた画像領域よりも広い領域を撮像し、この画像処理によって、画角５６となるようにトリミングしてもよい。

画像入力部７６は、マスク処理部７８とは別に文字認識部９２にも撮像された画像情報を送出する。文字認識部９２では、撮像された画像情報の中から、文字情報を抽出する。基本的に文字情報は、撮像された画像（壁６６Ｗ）の紙媒体６４に集中している場合が多く、文字情報を抽出すると、一定の区画（矩形領域）で括ることが可能となる（文字領域９３）。

文字認識部９２によって、区画された文字領域を示す画角５６（図３（Ｂ）参照）内の位置情報は、マスク処理部７８へ送出されるようになっている。なお、ここでは、掲示板のように一定の区画を文字領域９３としたが、一文字毎を文字領域としてもよい。

マスク処理部７８では、前記文字領域を示す位置情報に基づいて認識されている文字領域（図１２（Ａ）の生画像参照）を、所謂黒ベタ画像に置き換えた後（図１２（Ｂ）参照）、保存制御部８０によって、ハードディスク６２に保存されるようになっている。この黒ベタ画像への置き換えが、マスク処理である。

第３の実施の形態において、上記手順での撮像領域のマスク処理では、所定途中で、ハードディスク６２に背景画像を一時保存するような工程は存在せず、ハードディスク６２に保存される画像には、文字画像は保存されることがない処理手順となっている。

なお、第３の実施の形態において、画像入力部７６に、暗号化処理部８２を介して、ハードディスク６２に接続される信号線を配し、マスク処理工程とは別に、所謂生画像（Raw-Data）を暗号化して、ハードディスク６２に保存するようにしてもよい。これにより、必要に応じて、権限のある者が複合化して、生画像を参照することが可能となる。

また、暗号化することで、顕像化される画像は、例えばランダムな文字の羅列となる場合がある。このため、暗号化する場合は、前記第１の実施の形態〜第３の実施の形態におけるマスク処理として行う、所謂「黒ベタ画像」を生成することなく、暗号化された画像（例えば、ランダムな文字の羅列）をそのまま利用してもよい。暗号化された画像をマスク処理画像として適用することで、黒ベタ画像が不要となるため、記憶する画像データ量の削減が可能となる。

Ｗ 壁面
１０ 画像処理装置
１０Ｔ 記録用紙排出トレイ
１０Ｐ パネル部
１２ 画像形成部
１４ 画像読取部
１６ ファクシミリ通信制御回路
１８ メインコントローラ
２０ ネットワーク通信回線網
２２ 電話回線網
２４ 入力電源線
２６ コンセント
２９ ＰＣ
３０ 人感センサ
３１ 商用電源
３２ 配線プレート
３３Ａ〜３３Ｅ バス
３５Ａ〜３５Ｅ 電力供給線
４０ ＵＩタッチパネル
４０ＢＬ ＵＩタッチパネル用バックライト部
４１ 主電源スイッチ
４２ 電源装置
４３ 信号ハーネス
４４ 副電源操作部
４６ 操作部
５０ ピラー部
５２ 撮像装置
５４ ブラケット
５６ 画角
５８ ＩＣカードリーダーライター
６０ 操作者
６２ ハードディスク（ＨＤＤ）
６４ 秘匿情報媒体
６６ 背景画像
６８ 可視光カメラ
７０ 赤外線カメラ
７２ 撮像制御部
７４ 撮像時期制御部
７６ 画像入力部
７８ マスク処理部
８０ 保存制御部
８２ 暗号化処理部

Claims (12)

1. 操作者の操作に基づき処理が実行される処理機器に対峙する特定領域を撮像する撮像手段と、
   前記撮像手段で前記処理機器に対する操作状態を撮像するように制御する制御手段と、
   前記撮像手段で撮像した前記特定領域の画像の中から、人物画像を抽出する抽出手段と、
   前記抽出手段で抽出した前記人物画像以外の背景画像の全部又は一部を隠蔽する隠蔽手段と、
   隠蔽手段で隠蔽された後の前記特定領域の画像を、前記処理機器を操作する操作者の操作履歴情報として保存する保存手段と、
   を有する操作履歴画像保存装置。
2. 前記処理機器における、少なくとも前記特定領域を含む監視領域内に移動体が侵入したか否かを検出する移動体検出手段をさらに有し、
   前記制御手段が、前記移動体検出手段で前記移動体を検出している期間中、前記撮像手段による撮像を継続する請求項１記載の操作履歴画像保存装置。
3. 前記抽出手段が、前記特定領域の画像に対応する距離情報を取得する距離情報取得部と、前記距離情報取得部で取得した距離と予め定めたしきい値とを比較する比較部と、前記比較部による比較の結果、前記しきい値よりも近い距離に対応する画像を前記人物画像として判定する判定部と、を備え、
   前記隠蔽手段が、前記判定部で判定した人物画像以外の背景画像の全部を隠蔽する請求項１又は請求項２記載の操作履歴画像保存装置。
4. 前記距離情報取得部が、赤外線カメラによる撮影情報に基づき距離情報を取得する請求項３記載の操作履歴画像保存装置。
5. 前記抽出手段が、前記撮像手段で撮像した前記特定領域の画像を解析し隠蔽を要する要隠蔽画像か否かを認識する認識手段と、前記認識手段で認識した前記要隠蔽画像を前記人物画像以外の背景画像の一部として判定する判定部と、を備え、
   前記隠蔽手段が、前記判定部で判定した人物画像以外の背景画像の一部としての前記要隠蔽画像を隠蔽する請求項１又は請求項２記載の操作履歴画像保存装置。
6. 前記認識手段が、文字画像か否かを認識する文字認識手段を備え、前記文字認識手段によって認識した前記文字画像を、前記要隠蔽画像と認識する請求項５記載の操作履歴画像保存装置。
7. 前記保存手段が不揮発性メモリであり、前記特定領域の画像が前記隠蔽手段によって前記人物画像以外の背景画像の全部又は一部が隠蔽されるまで、前記保存手段の保存処理の実行を禁止する禁止手段をさらに有する請求項１〜６の何れか１項記載の操作履歴画像保存装置。
8. 前記人物画像の中から顔画像を認識する顔認識手段をさらに有し、前記隠蔽手段が、前記人物画像以外の背景画像に加え、前記顔認識手段で認識した前記顔画像を隠蔽する請求項１〜７の何れか１項記載の操作履歴画像保存装置。
9. 前記隠蔽手段により隠蔽された画像の元画像は暗号化されて保存され、予め定めた管理者による復号化により、隠蔽状態が解除可能とされている請求項１〜請求項８記載の操作履歴画像保存装置。
10. 前記隠蔽手段により隠蔽された画像が、元画像を暗号化した画像であり、予め定めた管理者による復号化により、隠蔽状態が解除可能とされている請求項１〜請求項９の何れか１項記載の操作履歴画像保存装置。
11. 請求項１〜請求項１０の何れか１項記載の操作履歴画像保存装置を備え、前記処理機器が、少なくとも画像情報を読み取る画像読取装置、或いは画像情報に基づいて記録用紙に画像を形成する画像形成装置の何れか一方を具備する画像処理装置。
12. コンピュータに、
    処理機器に対峙する特定領域において、操作者が当該処理機器に対して操作する操作状態を撮像し、
    撮像した前記特定領域の画像の中から、人物画像を抽出し、
    抽出した前記人物画像以外の背景画像の全部又は一部を隠蔽し、
    隠蔽された後の前記特定領域の画像を、前記処理機器を操作する操作者の操作履歴情報として保存する、
    ように操作履歴画像保存制御を実行させるための操作履歴画像保存制御プログラム。