JP2018116350A - 着用状態判定システム、着用状態判定方法、及び着用状態判定プログラム - Google Patents

Abstract

【課題】人の衣服や装備品の着用状態を適切かつ簡便に判定する。【解決手段】人の着用品の着用状態の適切さを判定する着用状態判定システムであって、着用品を着用している複数の人が撮影された画像ａを取得し、取得した画像ａに基づき、着用状態の判定基準となる人を選択する基準者選択部５３１２と、選択した人が着用している着用品の着用状態に関する評価値と、複数の人のうち選択した人以外の人が着用している着用品に関する評価値とをそれぞれ算出する評価値算出部５３１６と、算出した各評価値に基づき、選択した人以外の人の着用品の着用状態の適切さを判定する着用状態判定部５６１と、判定した着用品の着用状態の適切さに関する情報を出力する結果出力部５７と、を備える。【選択図】図２

Description

本発明は、着用状態判定システム、着用状態判定方法、及び着用状態判定プログラムに関する。

倉庫や工事現場などにおける作業員は、作業に際して、自身の作業着や装備品を適切に身につけているかを確認するため、例えば作業員同士が２人１組となって、目視でチェックを行うことがある。しかし、作業員ごとに適否の基準が異なったり、確認漏れ等、適切なチェックが行えない場合がある。また、各作業員は通常、身体の上部から順番に点検部分を確認するのみなので、普段注意していない部分に作業上の危険性がある場合には、これに気づかないおそれがある。そのため、作業員が着用している作業着や装備品を、一定の基準により判断することが重要である。

この点に鑑みて、工場製品の現品検査などでは画像認識による外観検査が利用されているが、この技術をそのまま服装点検に応用する場合には、画像認識の判定基準となるパターンとして、服装ごとのパターン、適切／不適切な服装のパターンを多数用意する必要があり、事前の作業量が多い。

そこで、作業員の服装や装備品を一律に判定するシステムとして、たとえば、特許文献１や非特許文献１のように、物品（衣服）自体の適切さや不適切さを判定する方法が開示されている。

特願２０１４−１１３４６６号公報

http://jpn.nec.com/neosarf/kenpin.html （２０１７年１月５日閲覧）

しかしながら、衣服自体は適切であるが、上着がはみ出ているなど、衣服の着方の適切さや不適切さを判定する手法は、提案されていない。

本発明は、このような事情に鑑みてなされたものであり、人の着用品の着用状態を適切かつ簡便に判定するための、着用状態判定システム、着用状態判定方法、及び着用状態判定プログラムを提供することにある。

上記問題を解決するための本発明の一つは、人の着用品の着用状態の適切さを判定する、プロセッサ及びメモリを備える着用状態判定システムであって、着用品を着用している複数の人が撮影された画像を取得し、取得した画像に基づき、着用状態の判定基準となる人を選択する基準者選択部と、前記選択した人が着用している前記着用品の着用状態に関する評価値と、前記複数の人のうち前記選択した人以外の人が着用している前記着用品に関する評価値とをそれぞれ算出する評価値算出部と、前記算出した各評価値に基づき、前記選択した人以外の人の前記着用品の着用状態の適切さを判定する着用状態判定部と、前記判定した前記着用品の着用状態の適切さに関する情報を出力する結果出力部と、を備え
る。

本発明によれば、人の着用品の着用状態を適切かつ簡便に判定することができる。

上記した以外の課題、構成及び効果は、以下の実施形態の説明により明らかにされる。

図１は、本実施形態に係る着用状態判定システム１０の構成、及び着用状態判定システム１０が備えるハードウェアの一例を説明する図である。 図２は、着用状態判定システム１０を構成する各装置が備える機能の一例を説明する図である。 図３は、リーダー選定方法マスターテーブル５１０の一例を示す図である。 図４は、リーダー選定方法テーブル５００の一例を示す図である。 図５は、グループ体系マスターテーブル５３０の一例を示す図である。 図６は、グループ体系テーブル５２０の一例を示す図である。 図７は、視線マスターテーブル５５０の一例を示す図である。 図８は、視線テーブル５４０の一例を示す図である。 図９は、服装情報ｃの一例を示す図である。 図１０は、服装情報ｃの一例を示す図である。 図１１は、体部位情報ｄの一例を示す図である。 図１２は、体部位情報ｄの一例を示す図である。 図１３は、着方観点マスターテーブル６１０の一例を示す図である。 図１４は、着方観点テーブル６００の一例を示す図である。 図１５は、着方観点テーブル６００の一例を示す図である。 図１６は、判定ルールマスターテーブル６３０の一例を示す図である。 図１７は、判定ルールテーブル６２０の一例を示す図である。 図１８は、着用状態判定処理を説明するフローチャートである。 図１９は、着用状態判定処理を説明するフローチャートである。 図２０は、判定結果ｆの一例を示す図である。 図２１は、表示装置４に出力される出力判定結果ｇの一例を示す図である。

以下、本発明について、図面を用いて詳細に説明する。なお、これにより本発明が限定されるものではない。

＜システム構成、ハードウェア構成＞
図１は、本実施形態に係る着用状態判定システム１０の構成、及び着用状態判定システム１０が備えるハードウェアの一例を説明する図である。

着用状態判定システム１０は、例えば、上着、ズボンといった衣服や、靴、眼鏡、ヘルメット、マスクといった装備品を着用している人（本実施形態では、倉庫や工事現場などにおける作業員（以下、単に作業員という）であるものとする）を対象とした、当該衣服や装備品の着用状態の適切さを判定する情報処理システムである。着用状態判定システム１０は、例えば、当該作業員が存在する倉庫や工事現場に設けられる。なお、以下では、各作業員が着用している上記の衣服や装備品を総称して「着用品」というものとする。

着用状態判定システム１０は、撮影装置３、品質判定装置５、及び表示装置４を含んで構成されている。

撮影装置３は、カメラ等であり、複数の作業員のうち、後述する基準作業員１（以下、リーダーともいう）、及び、基準作業員１以外の他の作業員２（以下、判定対象者ともいう）の業務遂行中又は待機中の画像を撮影する。

品質判定装置５は、情報処理装置（コンピュータ）であり、撮影装置３が撮影した画像に基づき、作業員の着用状態の適切さを判定する。表示装置４は、情報処理装置（コンピュータ）であり、判定された結果を表示する。

撮影装置３の撮影対象である作業員は、円形、一列、又はその他の配置等、所定の整列状態（以下、グループ体系という）で存在している場合がある。また、撮影対象の作業員は、特定の作業員の方に視線を向けている場合もある。本実施形態の着用状態判定システム１０は、このいずれの場合であっても、これらの作業員の一人をリーダーに定めて評価基準とすることにより、判定対象者の着用品の着用方法の適切さを判定することができる。

なお、撮影装置３、表示装置４、及び品質判定装置５の間は、通信ネットワーク６を介して、通信可能に接続されている。この通信ネットワーク６は、例えば、ＬＡＮ（Local Area Network）、ＷＡＮ（Wide Area Network）、インターネット、専用線、携帯電話網
、光ファイバなどの、有線又は無線の通信線又は通信網である。

図１に示すように、撮影装置３は、品質判定装置５との通信を行う通信装置３１と、ＣＰＵ（Central Processing Unit）等のプロセッサ３２ａと、ＲＡＭ（Random Access Memory）、及びＲＯＭ（Read Only Memory）等を含んで構成されているメモリ３２ｂと、光
学素子（レンズ）、及び撮像素子（ＣＣＤ等）を含む画像取得機構３３と、画像取得機構３３により取得された画像データを保持する、ＳＳＤ（Solid State Drive）等で構成さ
れた記憶装置３４とを備える。

表示装置４は、情報処理装置（コンピュータ）であり、品質判定装置５との通信を行う通信装置４１と、ＣＰＵ（Central Processing Unit）等のプロセッサと、ＲＡＭ（Random Access Memory）、ＲＯＭ（Read Only Memory）、又はＨＤＤ（Hard Disk Drive）等を含んで構成されているメモリ４２ｂと、モニタ等の表示装置４３とを備える。

品質判定装置５は、情報処理装置（コンピュータ）であり、撮影装置３及び表示装置４と通信を行う通信装置５１と、ＣＰＵ（Central Processing Unit）等のプロセッサ５２
ａと、ＲＡＭ（Random Access Memory）、ＲＯＭ（Read Only Memory）、又はＨＤＤ（Hard Disk Drive）等を含んで構成されているメモリ５２ｂと、キーボード、マウス、タッ
チパネル等からなる入力装置５２ｃと、モニタ（ディスプレイ）等からなる出力装置５２ｄとを備える。

＜機能＞
図２は、着用状態判定システム１０を構成する各装置が備える機能の一例を説明する図である。

撮影装置３は、撮影した画像（以下、撮影画像ａという）を、品質判定装置５に送信する。

品質判定装置５は、撮影装置３から取得した画像に基づき各種情報を解析する画像解析部５３と、所定の基準に基づき画像の判定を実施する判定部５６と、判定部５６による判定結果の情報を表示装置４に送信する結果出力部５７と、各種の情報を記憶する記憶部５
８とを備える。

画像解析部５３は、解析処理の制御を担う制御部５３１１と、基準者選択部５３１２と、評価値算出部５３１６とを備える。

基準者選択部５３１２は、着用品を着用している複数の人が撮影された画像を取得し、取得した画像に基づき、着用状態の判定基準となる人を選択する。

例えば、前記基準者選択部は、前記取得した画像に基づき前記複数の人のそれぞれの位置を特定し、特定したそれぞれの人の位置に基づき、前記判定基準となる人を選択する。具体的には、例えば、前記基準者選択部は、前記位置を特定した複数の人のうち少なくとも２人以上の人による整列状態を特定すると共に前記整列状態から外れている人を特定し、前記整列状態から外れている人を前記判定基準となる人として選択する。

また、例えば、前記基準者選択部は、前記取得した画像に基づき前記複数の人のそれぞれの視線を特定し、特定した前記それぞれの人の視線に基づき、前記判定基準となる人を選択する。具体的には、例えば、前記基準者選択部は、前記特定した視線に基づき、視線が最も多く集中している人を前記複数の人から特定し、特定した前記人を、前記判定基準となる人として選択する。

次に、記憶部５８は、リーダーの選定方法に関する情報を格納しているリーダー選定方法テーブル５００及びリーダー選定方法マスターテーブル５１０と、グループ体系に関する情報を格納しているグループ体系テーブル５２０及びグループ体系マスターテーブル５３０と、作業員の視線に関する情報を格納している視線テーブル５４０及び視線マスターテーブル５５０と、作業員の着用品及び作業員の体の部位に関する情報を格納している着方観点テーブル６００及び着方観点マスターテーブル６１０と、作業員の着用品の着用状態の適切さの判定に関する情報を格納している判定ルールテーブル６２０及び判定ルールマスターテーブル６３０と、を記憶している。これらの情報は、基準者選択部５３１２によって用いられる。

すなわち、基準者選択部５３１２は、撮影画像ａに記録されている作業員（以下、撮影対象ともいう）を抽出する人物認識部５３１３、撮影対象同士の位置関係からグループ体系を読み取るグループ体系認識部５３１４、及び、撮影対象の視線の方向を解析する視線解析部５３１５を備える。

人物認識部５３１３は、撮影装置３から取得した撮影画像ａを解析し、各作業員を認識する。また、人物認識部５３１３は、リーダー選定方法テーブル５００、及びリーダー選定方法マスターテーブル５１０を参照し、リーダーの選定方法を特定する。

ここで、リーダー選定方法マスターテーブル５１０及びリーダー選定方法テーブル５００について説明する。
図３は、リーダー選定方法マスターテーブル５１０の一例を示す図である。同図に示すように、リーダー選定方法マスターテーブル５１０は、リーダーの選定方法を識別する情報（以下、選定方法番号という）が格納される選定方法番号５１１、及び、選定方法番号５１１の選定方法番号が示す選定方法の内容を示す情報が格納される選定方法５１２の各項目を有する、少なくとも１つ以上のレコードで構成されている。本実施形態では、リーダーの選定方法として、作業員の位置に基づきリーダーを選定する「グループ体系」、及び、作業員の視線に基づきリーダーを選定する「視線」の２種類があるものとする。

図４は、リーダー選定方法テーブル５００の一例を示す図である。同図に示すように、
リーダー選定方法テーブル５００は、選定方法番号が格納される選定方法番号５０１の項目を有する。選定方法番号５０１には、着用状態判定システム１０の管理者等により、事前に選定方法番号が設定されるものとする。この管理者等が指定した選定方法番号に基づき、リーダーが選定される。

次に、図２に示すように、グループ体系認識部５３１４は、撮影画像ａにおける各作業員（撮影対象）の位置を解析することにより、作業員のグループ体系に関する情報であるグループ体系情報ｂ１を生成する。そして、グループ体系認識部５３１４は、生成したグループ体系情報ｂ１、グループ体系テーブル５２０、及びグループ体系マスターテーブル５３０に基づき、撮影対象を、基準作業員１（リーダー）又は他の作業員２（判定対象者）に分類する。

ここで、グループ体系マスターテーブル５３０及びグループ体系テーブル５２０について説明する。
図５は、グループ体系マスターテーブル５３０の一例を示す図である。同図に示すように、グループ体系マスターテーブル５３０は、グループ体系を識別する情報（以下、体系番号という）が格納される体系番号５３１、体系番号５３１の体系番号の名称が格納される名称５３２、及び、体系番号５３１の体系番号のグループ体系におけるリーダーの選定方法（例えば、撮影対象の作業員の位置関係でリーダーを特定する選定方法）を特定する情報が格納されるリーダー選定方法５３３、の各項目を有する少なくとも１つ以上のレコードで構成されている。

図６は、グループ体系テーブル５２０の一例を示す図である。同図に示すように、グループ体系テーブル５２０は、体系番号が格納される体系番号５２１の項目を有する。

視線解析部５３１５は、撮影画像ａにおける各作業員の体の向きや目の状態を解析することにより、作業員の視線に関する情報である視線情報ｂ２を生成する。そして、視線解析部５３１５は、生成した視線情報ｂ２、視線テーブル５４０、及び視線マスターテーブル５５０に基づき、他の作業員からの視線が集中している作業員（リーダー）を特定することにより、各作業員を、基準作業員１（リーダー）又は他の作業員２（判定対象者）に分類する。

ここで、視線マスターテーブル５５０及び視線テーブル５４０について説明する。
図７は、視線マスターテーブル５５０の一例を示す図である。同図に示すように、視線マスターテーブル５５０は、視線に基づくリーダーの各選定方法を識別する情報（以下、視線番号という）が格納される視線番号５５１、視線番号５５１の視線番号が示すリーダーの選定方法の名称が格納される名称５５２、及び、視線番号５５１の視線番号が示すリーダーの選定方法の内容が格納されるリーダー選定方法５５３の各項目を有する、少なくとも１つ以上のレコードで構成されている。

図８は、視線テーブル５４０の一例を示す図である。同図に示すように、視線テーブル５４０は、視線番号が格納される視線番号５４１の項目を有する。

次に、図２に示すように、評価値算出部５３１６は、基準者選択部５２１２が前記選択した人の前記着用品の着用状態に関する評価値と、前記複数の人のうち前記選択した人以外の人の前記着用品に関する評価値とをそれぞれ算出する。

すなわち、評価値算出部５３１６は、撮影対象が着用している着用品についての情報を読み取る服装認識部５３１７、及び、撮影対象の体の部位の情報を読み取る体部位認識部５３１８を備える。

服装認識部５３１７は、撮影画像ａにおける撮影対象の着用品を解析することにより、各作業員が着用している着用品、及び、その位置を含む情報である服装情報ｃを生成する。

体部位認識部５３１８は、撮影画像ａにおける各作業員の身体の構造を解析することにより、各作業員の目、鼻、口、右手、及び左手といった体の部位の位置に関する情報である体部位情報ｄを生成する。服装認識部５３１７及び体部位認識部５３１８は、生成した体部位情報ｄ、服装認識部５３１７が生成した服装情報ｃ、及び、着方観点マスターテーブル６１０に基づき、作業員が着用している着用品の着用方法の評価に関する情報である着方観点情報ｅを生成し、生成した着方観点情報ｅを着方観点テーブル６００に格納する。なお、着方観点情報ｅは、判定部５６に送信される。

ここで、服装情報ｃと体部位情報ｄについて説明する。
図９、１０は、服装情報ｃの一例を示す図である。同図に示すように、服装情報ｃは、作業員の着用品を特定する情報が格納される認識対象３０１、認識対象３０１の着用品の領域を特定するための、当該領域の一端の位置を示す情報（本実施形態では、二次元座標系で表されるものとする）が格納される左上座標３０２、及び、認識対象３０１の着用品の領域を特定するための、当該領域の他端の位置を示す情報が格納される右下座標３０３、の各項目を有する、少なくとも１つ以上のレコードから構成されているデータベースである。このように、服装情報ｃは、リーダーの着用品の情報（図９）、及び、判定対象者の着用品の情報（図１０）を記憶している。

なお、本実施形態では、左上座標３０２、及び右下座標３０３は、着用品を矩形の領域で認識した結果として、当該矩形の左上と右下の撮影画像ａ内での座標をそれぞれ左上の座標（ｘ，ｙ）及び右下の座標（ｘ，ｙ）として表しているものとする（本実施形態では、ｘは水平方向の座標を表し、ｙは鉛直方向の座標を表すものとする。）。

図１１、１２は、体部位情報ｄの一例を示す図である。同図に示すように、体部位情報ｄは、作業員の体の部位を特定する情報が格納される認識対象４０１、認識対象４０１の体の部位の領域を特定するための、当該領域の一端の位置を示す情報（本実施形態では、二次元座標系で表されるものとする）が格納される左上座標４０２、及び、認識対象４０１の体の部位の領域を特定するための、当該領域の他端の位置を示す情報が格納される右下座標４０３、の各項目を有する、少なくとも１つ以上のレコードから構成されているデータベースである。このように、体部位情報ｄは、リーダーの体の部位の情報（図１１）、及び、判定対象者の体の部位の情報（図１２）を記憶している。

なお、本実施形態では、左上座標４０２、及び右下座標４０３は、作業員の体の部位を矩形の領域で認識した結果として、当該矩形の左上と右下の撮影画像ａ内での座標をそれぞれ左上の座標（ｘ，ｙ）及び右下の座標（ｘ，ｙ）と表しているものとする（本実施形態では、ｘは水平方向の座標を表し、ｙは鉛直方向の座標を表すものとする）。

ここで、着方観点マスターテーブル６１０、及び着方観点テーブル６００について説明する。
図１３は、着方観点マスターテーブル６１０の一例を示す図である。同図に示すように、着方観点マスターテーブル６１０は、着方観点情報ｅを記憶したデータベースであり、具体的には、着用品の着用方法を識別する情報（以下、着方観点番号という）が格納される着方観点番号６１１、着方観点番号６１１が示す着用方法が対象とする、体の大凡の部位（頭部、上半身、下半身、右手／左手、及び右足／左足）を示す情報が格納される部位名称６１２、着方観点番号６１１が示す着用方法が対象とする着用品の情報（服装情報ｃ
）が格納される服装情報認識対象６１３、着方観点番号６１１が示す着用方法が対象とする体の具体的な部位の情報（体部位情報ｄ）が格納される体部位情報認識対象６１４、及び、着方観点番号６１１が示す着用方法に対応する評価値（当該着用方法の適切さに関する評価値）の評価基準を示す情報が格納されるシステム管理項目６１５の各項目を含む、少なくとも１つ以上のレコードから構成される。

このように、着方観点マスターテーブル６１０は、画像認識によって得られた服装情報ｃ（作業員が身につけている衣服又は装備品等の着用品の位置）と体部位情報ｄ（作業員の体の部位の位置）とを用いて着用方法を数値で表した情報（評価値）を記憶している。着方観点マスターテーブル６１０は、作業員の体を大きく５つの部位に分類し、それぞれの部位に、服装情報ｃ及び体部位情報ｄを対応させている。

例えば、着方観点番号「１」の着用方法（ヘルメットの固定の仕方）は、作業員の「頭部」を対象としており、服装情報ｃである「ヘルメットあごひも」と体部位情報ｄである「あご」とを用いて算出される評価値である「あごとヘルメットあごひもの隙間の長さ」、即ちヘルメットあごひもの位置とあごの位置との間の隙間の長さ（ヘルメットあごひもの緩み）により数値化されている。

また、着方観点番号「２」の着用方法（帽子のかぶり方）は、作業員の「頭部」を対象としており、服装情報ｃである「帽子」と体部位情報ｄである「目」とを用いて算出される評価値である「ヘルメットによる目の遮蔽度」、即ち帽子の位置と目の位置との重複度合い（ヘルメットの視界をさえぎるかぶり方）により数値化されている。

ここで、着方観点テーブル６００について説明する。
図１４、１５は、着方観点テーブル６００の一例を示す図である。同図に示すように、着方観点テーブル６００は、作業員を識別する情報が格納されるＩＤ６０２、ＩＤ６０２の作業員が着用している着用品の着用方法を識別する情報（着方観点番号）が格納される着方観点番号６０１、及び、着方観点番号６０１の着用方法の評価値が格納されるシステム管理値６０３の各項目を有する、少なくとも１つ以上のレコードからなる。なお、本実施形態において、ＩＤ６０２の値が「０」であればその作業員はリーダー（基準作業員１）であり、ＩＤ６０２の値が「１」以上であればその作業員は他の作業員２（判定対象者）であるものとする。なお、ＩＤ６０２の値が「１」以上の場合、その値は、他の作業員２のそれぞれに割り当てられた番号である。

例えば、図１４の例では、着方観点番号６０１が「７」の着用方法の場合、上着の左上座標と首の左上座標の差が小さいことから（図９、１１参照）、上着の着方の評価値（首の遮蔽度）が「９９％」と高くなっている。また、着方観点番号６０１が「９」の着用方法の場合、左手袋及び右手袋が着用されていないことから（図９、１１参照）、手袋のはめ方の評価値（手袋による掌の遮蔽度）は「０％」となっている。

図１５の例では、着方観点番号６０１が「７」の着用方法においては、上着の左上座標と首の左上座標の差が大きいことから（図１０、１２参照）、上着の着方の評価値（首の遮蔽度）は「８０％」と低くなっている。また、着方観点番号６０１が「９」の着用方法の場合、左手袋及び右手袋が着用されており、かつ左手袋及び左手袋の左上座標及び右下座標と、左右の掌の左上座標及び右下座標との差分が小さいことから（図１０、１２参照）、手袋の嵌め方の評価値（手袋による掌の遮蔽度）は「９９％」と高くなっている。

このように、着方観点テーブル６００は、リーダーの着用状態に関する評価値（図１４）、及び、判定対象者の着用状態に関する評価値（図１５）を記憶している。

なお、以上に説明した画像解析部５３による画像解析及び画像認識（体の部位の位置、着用品の位置、作業員の視線の向き等の特定）の処理は、例えば、Ｗｅｂ（World Wide Web）等から取得した各種画像に基づく統計的機械学習によって行うことができる。

次に、図２に示すように、判定部５６は、着用状態判定部５６１を備える。

着用状態判定部５６１は、評価値算出部５３１６が前記算出した各評価値に基づき、前記選択した人以外の人の前記着用品の着用状態の適切さを判定する。

具体的には、着用状態判定部５６１は、判定ルールマスターテーブル６３０及び判定ルールテーブル６２０を参照することにより、画像解析部５３から取得した、基準作業員１の着方観点情報ｅと他の作業員２の着方観点情報ｅとを比較し、他の作業員２の着用品の着用状態の適切さに関する判定結果ｆを生成する。生成された判定結果ｆは結果出力部５７に送信される。

結果出力部５７は、着用状態判定部５６１が前記判定した前記着用品の着用状態の適切さに関する情報を出力する。具体的には、結果出力部５７は、判定部５６から受信した判定結果ｆを、表示装置４に対応する形式の情報である出力用判定結果ｇに変換し、変換した出力用判定結果ｇを表示装置４に送信する。送信された出力用判定結果ｇの内容は、各撮影対象に通知される。

次に、判定ルールマスターテーブル６３０及び判定ルールテーブル６２０について説明する。

図１６は、判定ルールマスターテーブル６３０の一例を示す図である。同図に示すように、判定ルールマスターテーブル６３０は、作業員の着用品の着用方法の適切さの判定に用いられる条件（以下、判定条件という）を示す判定条件６３１を記憶している。なお、本実施形態では、判定条件として、作業員の着用方法の評価値がリーダーの着用方法の評価値以上である場合に、その作業員の着用方法が適切であると判定する場合に用いる判定条件である、「以上」、作業員の着用方法の評価値がリーダーの着用方法の評価値以下である場合に、その作業員の着用方法が適切であると判定する場合に用いる判定条件である、「以下」、作業員の着用方法の評価値がリーダーの着用方法の評価値より大きい場合に、その作業員の着用方法が適切であると判定する場合に用いる判定条件である、「より多い」、及び、作業員の着用状態の評価値がリーダーの着用状態の評価値と一致する場合に、その作業員の着用方法が適切であると判定する場合に用いる判定条件である、「一致」、があるものとする。

図１７は、判定ルールテーブル６２０の一例を示す図である。同図に示すように、判定ルールテーブル６２０は、着方観点番号が格納される着方観点番号６２１、及び、着方観点番号６２１の着用方法に対応づけられた判定条件を特定する情報が格納されている条件６２２、の各項目を有する、少なくとも１つ以上のレコードで構成されている。

このように、判定ルールテーブル６２０は、各着方観点番号（着用方法）に対応した判定条件を記憶している。

以上に説明した各情報処理装置の機能は、各情報処理装置のハードウェアによって、もしくは、各情報処理装置のプロセッサが、プロセッサやメモリに記憶されているプログラムを読み出して実行することにより実現される。

＜処理＞
次に、着用状態判定システム１０で行われる処理について説明する。

図１８、１９は、着用状態判定システム１０で行われる処理のうち、各作業員の着用状態の判定を行う処理（以下、着用状態判定処理という）を説明するフローチャートである（紙面の都合上、２図に分けて示している）。この処理は、例えば、品質判定装置５が、撮影装置３から撮影画像ａを受信した場合に開始される。

まず、制御部５３１１は、リーダー選定方法テーブル５００を参照し、選定方法番号が「１」であるか否かを判断する（ｓ３０１）。選定方法番号が「１」の場合は（ｓ３０１：ＹＥＳ）、制御部５３１１は、視線に基づくリーダーの選定を行うべく視線テーブル５４０の視線番号５４１を「１」に設定した上で（ｓ３０２）、処理はｓ３１１に進み、選定方法番号が「１」でない場合は（ｓ３０１：ＮＯ）、制御部５３１１は視線番号を「１」（視線が最も集中している作業員をリーダーとして選定する）に設定し（ｓ３１２）、処理はｓ３０３に進む。

ｓ３１１においては、グループ体系認識部５３１４は、グループ体系によるリーダー選定を行うため、まずグループ体系テーブル５４ｃに格納された情報に基づき、撮影対象が直線に並んでいるか判定する（ｓ３１１）。撮影対象が直線に並んでいる場合（ｓ３１１：ＹＥＳ）、グループ体系認識部５３１４は、グループ体系テーブル５２０の体系番号を「１」（作業員が一列に並んでいる）に設定し（ｓ３１２）、処理はｓ３１３に進む。

一方、撮影対象が直線に並んでいない場合（ｓ３１１：ＮＯ）、グループ体系認識部５３１４は、撮影対象が円形に並んでいるか否かを判断する（ｓ３２１）。撮影対象が円形に並んでいる場合は（ｓ３２１：ＹＥＳ）、グループ体系認識部５３１４は、グループ体系テーブル５２０の体系番号を「２」（作業員が円形に並んでいる）に設定し（ｓ３２２）、処理はｓ３２３に進む。

一方、撮影対象が円形に並んでいない場合は（ｓ３２１：ＮＯ）、グループ体系認識部５３１４は、撮影対象の周囲にその位置が固定された席（椅子、台等。以下、固定席という。）があるか判定する（ｓ３３１）。撮影対象の周囲に固定席がある場合（ｓ３３１：ＹＥＳ）、グループ体系認識部５３１４は、グループ体系テーブル５２０の体系番号を「３」（各作業員が一人の作業員を囲んで存在する）に設定し（ｓ３３２）、処理はｓ３３３に進む。

一方、撮影対象の周囲に固定席がない場合（ｓ３３１：ＮＯ）、着用状態判定処理は終了する。

ｓ３０３（視線番号が「１」の場合）において、視線解析部５３１５は、撮影対象を一人選択する。視線解析部５３１５は、選択した撮影対象（以下、選択対象という）について、視線解析部５３１５が生成した視線情報ｂ２に基づき、選択対象の視線の方向を取得し（ｓ３０４）、取得した視線方向に関するカウンター（以下、視線カウンターという。初期値は０。）の値を１増加させる（ｓ３０５）。

視線解析部５３１５は、全ての撮影対象について視線の方向を取得した否かを判断する（ｓ３０６）。全ての撮影対象について視線の方向が取得されている場合には（ｓ３０６：ＹＥＳ）、処理はｓ３０７に進み、視線の方向を取得していない撮影対象がある場合には（ｓ３０６：ＮＯ）、視線解析部５３１５は、その撮影対象を一つ選択した上で、ｓ３０４の処理を繰り返す。

ｓ３０７においては、視線解析部５３１５は、全ての撮影対象の中で視線カウンターの
値が最も大きい撮影対象を、基準作業員として記憶する。その後は、後述するｓ３４１の処理を行う。

ｓ３１３（体系番号が「１」である場合）においては、グループ体系認識部５３１４は、撮影対象を一人選択し、取得した撮影対象（選択対象）について、視線解析部５３１５が生成した視線情報ｂ２に基づき、選択対象の視線の方向を取得し（ｓ３１４）、取得した視線方向を記憶する。

グループ体系認識部５３１４は、全ての撮影対象の視線方向を取得したか否かを判断する（ｓ３１５）。全ての撮影対象の視線方向が取得されている場合には（ｓ３１５：ＹＥＳ）、処理はｓ３１６に進み、視線方向を取得していない撮影対象がある場合には（ｓ３１５：ＮＯ）、グループ体系認識部５３１４は、その撮影対象の一つを選択した上で、ｓ３１３の処理を繰り返す。

ｓ３１６においては、グループ体系認識部５３１４は、取得した視線方向の中で最も多い視線方向（視線カウンターの値が最も大きい視線方向）を「前方」として記憶する、そしてグループ体系認識部５３１４は、その「前方」の方向のうち先頭に存在する撮影対象を、基準作業員１として記憶する（ｓ３１７）。その後は、ｓ３４１の処理が行われる。

ｓ３２３（体系番号が「２」の場合）においては、グループ体系認識部５３１４は、円形の撮影対象のうち最も中心にいる撮影対象を、基準作業員１として記憶する。その後は、ｓ３４１の処理が行われる。

ｓ３３３（体系番号が「３」の場合）においては、グループ体系認識部５３１４は、ｓ３３２で特定した固定席に位置する撮影対象を特定し、特定した撮影対象を基準作業員１として記憶する。その後は、ｓ３４１の処理が行われる。

ｓ３４１において、制御部５３１１は、服装認識部５３１７が取得した基準作業員１の服装情報ｃ、及び体部位認識部５３１８が取得した基準作業員１の体部位情報ｄに基づき、基準作業員１の着方観点情報ｅを作成し、着方観点テーブル６００に格納する。

具体的には、制御部５３１１は、着方観点マスターテーブル６１０における各着方観点番号の着用方法のそれぞれについて、（１）着方観点テーブル６００に新しいレコードを生成し、（２）それぞれの着用方法における評価値を基準作業員１の服装情報ｃ及び体部位情報ｄに基づき算出し、（３）算出した評価値を、生成したレコードのシステム管理値６０３に格納し、（４）生成したレコードのＩＤ６０２に「０」を設定し、（５）生成したレコードの着方観点番号６０１に当該着用方法の着方観点番号を設定する。

また、制御部５３１１は、他の作業員２のうち一人を選択し、選択した他の作業員２（以下、選択作業員という）について、ｓ３４１と同様に、選択作業員の服装情報ｃ、及び選択作業員の体部位情報ｄに基づき、選択作業員の着方観点情報ｅを作成し、着方観点テーブル６００に格納する（ｓ３４２）。

具体的には、制御部５３１１は、着方観点マスターテーブル６１０における各着方観点番号の着用方法のそれぞれについて、（１）着方観点テーブル６００に新しいレコードを生成し、（２）当該着用方法における評価値を基準作業員１の服装情報ｃ及び体部位情報ｄに基づき算出し、（３）算出した評価値を、生成したレコードのシステム管理値６０３に格納し、（４）生成したレコードののＩＤ６０２に１以上の値（他の作業員２に割り当てられたＩＤ）を設定し、（５）生成したレコードの着方観点番号６０１に当該着用方法の着方観点番号を設定する。

次に、判定部５６は、ｓ３４１で生成した基準作業員１の着方観点情報ｅと、Ｓ３４２で生成した選択作業員の着方観点情報ｅとに基づき、選択作業員の着用方法が適切であるか否かを判定する（ｓ３４３）。

具体的には、判定部５６は、選択作業員における着用方法のそれぞれについて、（１）当該着用方法の評価値を着方観点情報ｅのシステム管理値６０３より取得し、（２）当該着用方法の判定条件を判定ルールテーブル６２０から取得し、（３）取得した（選択作業員の）評価値が、基準作業員１における当該着用方法の評価値に対して、前記取得した判定条件を満たしているか否かを判定し、取得した評価値が当該判定条件を満たしている場合には、選択作業員の着用方法が適切であると判定する。

判定部５６は、全ての他の作業員２の着用方法を判定したか否かを判断する（ｓ３４４）。全ての他の作業員２の着用方法を判定している場合は（ｓ３４４：ＹＥＳ）、着用方法判定処理は終了し（ｓ３４５）、着用方法を判定していない他の作業員２がある場合は（ｓ３４４：ＹＥＳ）、その他の作業員２のうち一人を選択し、選択した他の作業員２（選択作業員）についてｓ３４２の処理を繰り返す。

判定部５６は、以上の処理で得られた着用方法の判定結果を、判定結果ｆとして記憶する。そして、結果出力部５７は、判定部５６から受信した判定結果ｆを、表示装置４に出力する画面の情報（出力判定結果ｇ）に変換し、変換した出力判定結果ｇを表示装置４に送信する。そして、表示装置４は、受信した出力判定結果ｇを出力する。

ここで、判定結果ｆについて説明する。
図２０は、判定結果ｆの一例を示す図である。同図に示すように、判定結果ｆは、着方観点番号が格納される項番７０１、他の作業員２を識別する情報が格納されるＩＤ７０２、及び、ＩＤ７０２の作業員の、項番７０１の着方観点番号が示す着用方法の適切さに関する判定結果（適切、又は不適切）が格納される判定結果７０３、の各項目を有する、少なくとも１つ以上のレコードを備えるデータベースである。なお、判定結果７０３に対しては、着用方法の評価値が判定条件を満たしている場合には「適切」が格納され、着用方法の評価値が判定条件を満たしていない場合には「不適切」が格納される。

例えば、項番７０１が「７」のレコードでは、ＩＤが「１」の判定対象者の「上着による肌の遮蔽度」（評価値）がリーダーの評価値以下であったため、その判定対象者の上着の着方は「不適切」、とされている（図１３−１７参照）。

また、例えば、項番７０１が「９」のレコードでは、ＩＤが「１」の判定対象者の「手袋等による掌の遮蔽度」（評価値）がリーダーの評価値以下であったため、その判定対象者の手袋の嵌め方は「不適切」、とされている（図１３−１７参照）。

ここで、図２１は、表示装置４に出力される出力判定結果ｆの一例を示す図である。同図に示すように、出力判定結果ｆには、着用状態の適切さを示す対象となる判定対象者のモデル８０１が示されている。

そして、判定対象者における各着用方法について、その判定対象者の各着用方法の内容８０３、及びその着用方法に関する評価値８０４（判定対象者の評価値及びリーダーの評価値）が示されている。また、各着用方法に対応する、判定対象者の体の部位８０２が示されている。

そして、判定対象者において「不適切」と判定された着用方法がある場合には、その旨
が示されている（符号８０５）。

以上に説明したように、本実施形態の着用状態判定システム１０は、着用品を着用した複数の人が撮影された画像に基づき、着用状態の判定基準となる人を選択し、選択した人の着用状態に関する評価値と、選択されなかった他の人の評価値とをそれぞれ算出し、算出した各評価値に基づき、他の人の着用状態の適切さを判定し、判定した適切さに関する情報を出力するので、作業中の人の着用品の着用状態を、基準となる人の着用状態に基づき、適切かつ簡便に判定することができる。例えば、工事現場等での作業員の服装を統一された基準で漏れなくチェックできる。また、衣服や装備品等の画像を事前に大量に用意することなく、工事現場等での作業員の衣服や装備品の着用状態を、統一された基準で漏れなくチェックすることが可能となる。

また、本実施形態の着用状態判定システム１０は、取得した画像に基づき、複数の人のそれぞれの位置を特定し、特定したそれぞれの人の位置に基づき、判定基準となる人を選択するので、着用状態の判定基準となる人を、その時の各作業員の作業状態に基づき適切に決定することができる。

また、本実施形態の着用状態判定システム１０は、位置を特定した複数の人のうち少なくとも２人以上の人の整列状態を特定すると共に整列状態から外れている人を特定し、整列状態から外れている人を判定基準となる人として選択するので、着用状態の判定基準となる人を、その時の作業員の整列状態に基づき適切に決定することができる。

また、本実施形態の着用状態判定システム１０は、取得した画像に基づき複数の人のそれぞれの人の視線を特定し、特定したそれぞれの視線に基づき、判定基準となる人を選択するので、着用状態の判定基準となる人を、その時の作業員の視線に基づき適切に決定することができる。

また、本実施形態の着用状態判定システム１０は、特定した視線に基づき、視線が最も多く集中している人を特定し、特定した人を、判定基準となる人として選択するので、手本となるべき作業員を、着用状態の判定基準となる人として決定することができる。

また、本実施形態の着用状態判定システム１０は、取得した画像に基づき、複数の人の体の部位の位置、及び、複数の人が着用している衣服又は取り付けている装備品の位置を取得し、取得したそれぞれの位置に基づき、各人の評価値を算出するので、作業員の着用状態を、衣服や装備品を取り付ける作業員の体の部位との関係で適切に評価することができる。

また、本実施形態の着用状態判定システム１０は、人の体の部位の位置と、人が着用している衣服又は取り付けている装備品の位置との近接性を算出し、算出した近接性に基づき評価値を算出するので、作業員が衣服や装備品を適切に身につけているかを適切に評価することができる。

以上の実施例の説明は、本発明の理解を容易にするためのものであり、本発明を限定するものではない。本発明はその趣旨を逸脱することなく、変更、改良され得ると共に本発明にはその等価物が含まれる。

例えば、本実施形態では、作業員の位置や作業員の着用品の位置を２次元座標系を用いて特定したが、その他の座標系、例えば３次元座標系を用いて特定してもよい。

また、本実施形態では、カメラ等による画像を用いて作業員やその着用品を特定するこ
とを前提としたが、ビデオ等により撮影された動画に基づき、各作業員やその着用品を特定してもよい。

また、本実施形態では、作業員の着用状態を、「適切」又は「不適切」であるとして判定するものとしたが、例えば、評価値そのものを判定結果としたり、３段階以上の多段階評価による判定結果の提示を行ってもよい。

１０ 着用状態判定システム、５３１２ 基準者選択部、５３１６ 評価値算出部、５６１ 着用状態判定部、５７ 結果出力部

Claims (12)

1. 人の着用品の着用状態の適切さを判定する、プロセッサ及びメモリを備える着用状態判定システムであって、
   着用品を着用している複数の人が撮影された画像を取得し、取得した画像に基づき、着用状態の判定基準となる人を選択する基準者選択部と、
   前記選択した人が着用している前記着用品の着用状態に関する評価値と、前記複数の人のうち前記選択した人以外の人が着用している前記着用品に関する評価値とをそれぞれ算出する評価値算出部と、
   前記算出した各評価値に基づき、前記選択した人以外の人の前記着用品の着用状態の適切さを判定する着用状態判定部と、
   前記判定した前記着用品の着用状態の適切さに関する情報を出力する結果出力部と、
   を備える、着用状態判定システム。
2. 前記基準者選択部は、前記取得した画像に基づき前記複数の人のそれぞれの位置を特定し、特定したそれぞれの人の位置に基づき、前記判定基準となる人を選択する、
   請求項１に記載の着用状態判定システム。
3. 前記基準者選択部は、前記位置を特定した複数の人のうち少なくとも２人以上の人による整列状態を特定すると共に前記整列状態から外れている人を特定し、前記整列状態から外れている人を前記判定基準となる人として選択する、
   請求項２に記載の着用状態判定システム。
4. 前記基準者選択部は、前記取得した画像に基づき前記複数の人のそれぞれの視線を特定し、特定した前記それぞれの人の視線に基づき、前記判定基準となる人を選択する、
   請求項１に記載の着用状態判定システム。
5. 前記基準者選択部は、前記特定した視線に基づき、視線が最も多く集中している人を前記複数の人から特定し、特定した前記人を、前記判定基準となる人として選択する、
   請求項４に記載の着用状態判定システム。
6. 前記評価値算出部は、
   前記取得した画像に基づき、前記複数の人のそれぞれの体の部位の位置、及び、前記複数の人のそれぞれが着用している前記着用品の位置を取得し、取得した前記体の部位の位置、及び前記取得した着用品の位置に基づき、各前記評価値を算出する、
   請求項１に記載の着用状態判定システム。
7. 前記評価値算出部は、
   前記取得した体の部位の位置と、前記取得した前記着用品の位置との近接性を算出し、算出した近接性に基づき前記評価値を算出する、
   請求項６に記載の着用状態判定システム。
8. 前記基準者選択部は、
   前記取得した画像に基づき前記複数の人のそれぞれの位置を特定し、前記位置を特定した複数の人のうち少なくとも２人以上の人による整列状態を特定すると共に前記整列状態から外れている人を特定し、前記整列状態から外れている人を前記判定基準となる人として選択するものであるか、もしくは、
   前記取得した画像に基づき前記複数の人のそれぞれの視線を特定し、前記特定した視線に基づき、視線が最も多く集中している人を前記複数の人から特定し、特定した前記人を、前記判定基準となる人として選択するものであり、
   前記評価値算出部は、
   前記取得した画像に基づき、前記複数の人のそれぞれの体の部位の位置、及び、前記複数の人のそれぞれが着用している前記着用品の位置を取得し、取得した前記体の部位の位置、及び前記取得した着用品の位置の近接性を算出し、算出した近接性に基づき、各前記評価値を算出する、
   請求項１に記載の着用状態判定システム。
9. 人の着用品の着用状態の適切さを判定する着用状態判定方法であって、プロセッサ及びメモリを備える情報処理装置が、
   着用品を着用している複数の人が撮影された画像を取得し、取得した画像に基づき、着用状態の判定基準となる人を選択する基準者選択処理と、
   前記選択した人が着用している前記着用品の着用状態に関する評価値と、前記複数の人のうち前記選択した人以外の人が着用している前記着用品に関する評価値とをそれぞれ算出する評価値算出処理と、
   前記算出した各評価値に基づき、前記選択した人以外の人の前記着用品の着用状態の適切さを判定する着用状態判定処理と、
   前記判定した前記着用品の着用状態の適切さに関する情報を出力する結果出力処理と、
   を実行する、着用状態判定方法。
10. 前記基準者選択処理は、前記取得した画像に基づき前記複数の人のそれぞれの位置を特定し、特定したそれぞれの人の位置に基づき、前記判定基準となる人を選択する、
    請求項９に記載の着用状態判定方法。
11. 前記基準者選択処理は、前記取得した画像に基づき前記複数の人のそれぞれの視線を特定し、特定した前記それぞれの人の視線に基づき、前記判定基準となる人を選択する、
    請求項９に記載の着用状態判定方法。
12. 人の着用品の着用状態の適切さを判定する、着用状態判定プログラムであって、
    プロセッサ及びメモリを備える情報処理装置に、
    着用品を着用している複数の人が撮影された画像を取得し、取得した画像に基づき、着用状態の判定基準となる人を選択する基準者選択処理と、
    前記選択した人が着用している前記着用品の着用状態に関する評価値と、前記複数の人のうち前記選択した人以外の人が着用している前記着用品に関する評価値とをそれぞれ算出する評価値算出処理と、
    前記算出した各評価値に基づき、前記選択した人以外の人の前記着用品の着用状態の適切さを判定する着用状態判定処理と、
    前記判定した前記着用品の着用状態の適切さに関する情報を出力する結果出力処理と、
    を実行させる、着用状態判定プログラム。