JP5998744B2 - コロニー検出装置、培地情報登録システム、衛生管理システム、及びプログラム - Google Patents

Description

本発明は、食品用の衛生管理システム等に関する。

近年、ファーストフードその他の外食産業の成長や手軽な加工食品の増加により、他人が調理した食品を食する機会が著しく増加している。その一方で、加工食材や加工食品等の食品に毒物又は微生物等の危険なものが混入すると、人体に直接影響を与えるため、加工食品を取り扱う場合には、原材料の安全性だけでなく、製造工程の衛生面を厳しく管理し、食品の生産加工の全般に渡る食品の安全性が求められている。

特に、各地で発生して問題となっている食中毒事件を発端に、食品の一層の安全性を図ることが命題となっており、食品衛生法を遵守するだけでなく、「ＨＡＣＣＰ（Ｈａｚａｒｄ Ａｎａｌｙｓｉｓ ＣｒｉｔｉｃａｌＣｏｎｔｒｏｌ Ｐｏｉｎｔ Ｓｙｓｔｅｍ」や「ＦＳＳＣ（Ｆｏｏｄ Ｓａｆｅｔｙ Ｓｙｓｔｅｍ Ｃｅｒｔｉｆｉｃａｔｉｏｎ２２０００」を導入する企業も増加している。

このような加工食品に混入する微生物を検出するシステムとしては、フィルム型培地を用いるとともに、当該フィルム型培地において培養された検体に発生するコロニーを画像によってカウントするものが知られている。

一方、コロニーが画像化された画像の特性は、コロニーの種別（菌種）又は検体の種別によって異なるため、このようなシステムにおいては、作業者が各種のパラメータを調節し、コロニーが画像化された画像特性に適した状態でコロニーをカウントするものも登場している。

そこで、最近では、上述のようなパラメータの設定など作業者の煩雑な作業を軽減させるシステムとして、画像化した培地の画像に適するプロファイルを特定し、特定したプロファイルによってコロニーをカウントするものが知られている（例えば、特許文献１）。

特開２０１０−２２７１１８号公報

しかしながら、上述の特許文献１にあっては、培地に培養される菌種が培地毎に異なった場合であっても、培地に適したプロフィルを用いることによってコロニーの検出を行うことができるものの、培地に識別情報としてＩＤを付与しており、当該ＩＤに基づいてプロファイルを特定しているため、ＩＤが付与されていない培地についてはコロニーの検出を実行することができない。

本発明は、上述の課題を解決するためになされたものであって、その目的は、培地の識別情報等の検出すべきコロニーの種別を特定する情報を取得できない場合であっても、的確にコロニー及びその数を検出することが可能な培地情報登録システム等を提供することにある。

上述した課題を解決するため、本発明に係る培地情報登録システムは、食品が検体として培養される培地が撮像されて画像化された培地画像を有する培地画像データを取得する取得手段と、前記培地画像を構成する各ピクセルの色に関する特徴量を検出し、当該特徴量に基づいて、前記培地に培養された少なくともコロニーの属性を特定する特定手段と、第１データベースから前記特定されたコロニーの属性と同一の属性を有するコロニーの特性情報を検索して取得する検索手段と、前記検索して取得した特性情報に基づいて、前記培地画像から前記コロニーを検出し、検出したコロニー数を計数する計数手段と、前記計数されたコロニーの数を少なくとも含む前記培地に関する情報を培地情報として第２データベースに登録する登録手段と、を備える構成を有している。

本発明に係る培地情報登録システムは、培地の識別情報等の検出すべきコロニーの種別を特定する情報を取得できない場合であっても、的確にコロニーを検出及び計数することができるとともに、データ登録又は管理等の作業者や監督者の煩雑な作業を低減させることができる。また、本発明に係る培地情報登録システムは、無駄に培地を消費すること無く省資源化を図ることができる。

本発明に係る衛生管理システムの一実施形態の構成を示す構成図である。 一実施形態の衛生管理システムに用いるフィルム型培地の一例である。 一実施形態の衛生管理システムに用いる作業指示書の一例である。 一実施形態の衛生管理システムに用いる携帯用通信端末装置の構成を示すブロック図である。 一実施形態の携帯用通信端末装置によって培地情報を登録する際に表示部に表示される画像の一例である。 一実施形態の携帯用通信端末装置によってフィルム型培地を撮像する際の表示部に表示される画像の一例である。 一実施形態の携帯用通信端末装置によって作業指示書を撮像する際の表示部に表示される画像の一例である。 一実施形態の衛生管理システムに用いるサーバ装置の構成を示すブロック図である。 一実施形態において、画像化されたコロニーの属性（色）を特定する原理を説明するための図（その１）である。 一実施形態において、画像化されたコロニーの属性（色）を特定する原理を説明するための図（その２）である。 一実施形態において、画像化されたコロニーの属性（にじみ度）を特定する原理を説明するための図（その１）である。 一実施形態において、画像化されたコロニーの属性（にじみ度）を特定する原理を説明するための図（その２）である。 一実施形態のサーバ装置における工程判定を説明するための図（その１）である。 一実施形態のサーバ装置における工程判定を説明するための図（その２）である。 一実施形態のサーバ装置における工程判定を説明するための図（その３）である。 一実施形態の携帯用通信端末装置における培地情報の登録処理の動作を示すフローチャートである 一実施形態の携帯用通信端末装置において培地情報を送信する際に表示部に表示される画像の一例である。 一実施形態のサーバ装置における培地情報の登録処理の動作を示すフローチャートである。 一実施形態のサーバ装置におけるロット判定処理の動作を示すフローチャートである。

以下、本発明に係る実施形態について、図面を参照しながら説明する。なお、以下の実施形態は、食品の製造ライン又は検査ライン（以下、「作業ライン」という。）におけるフィルム型培地を用いた衛生管理システムに対して、本発明に係る培地情報登録システム、プログラム、コロニー検出装置及び衛生管理システムを適用した場合の実施形態である。ただし、本発明は、その技術的思想を含む範囲内で以下の実施形態に限定されない。

［１］衛生管理システム
まず、図１を用いて本実施形態の衛生管理システムＳについて説明する。なお、図１は、本実施形態の衛生管理システムＳの構成を示す構成図である。

本実施形態の衛生管理システムＳは、フィルム型の培地（すなわち、フィルム型培地）を用いるとともに、当該培地に関する情報（以下、「培地情報」という。）をデータ管理することによって、食品の製造上又は検査上の衛生状態を検査するためのシステムである。

また、本実施形態の衛生管理システムＳは、加工中又は加工後の食品を製造する製造工程又は当該食品を検査する検査工程を有する作業ライン８０において、製造中又は製造後の食品を検体として抽出し、フィルム型培地６０で検体に発生した一般性菌又は大腸菌等の予め特定した菌を培養させた際の培養状況をデータ管理するシステムである。

そして、衛生管理システムＳは、食品の衛生状態をデータ上で管理及び判定するために、食品の製造又は検査における作業に関する情報（以下、「作業情報」という。）と、当該抽出した検体を培養する前後において携帯用通信端末装置１０によって取得されるフィルム型培地６０の培地情報と、を対応付けてサーバ装置４０（具体的には、データベース４００）に登録することが可能な構成を有している。
特に、本実施形態の衛生管理システムＳは、培養開始から所定の時間経過後に、
（１）フィルム型培地６０を撮像して取得した画像（以下、「培地画像」という。）のデータ（以下、「培地画像データ」という。）から画像化されているコロニーの属性を特定し、
（２）特定したコロニーの属性と同一の属性を有するコロニーの特性を示す情報（以下、「コロニー特性情報」又は「プロファイル情報」という。）をデータベース４００から検索し、
（３）検索により取得したプロファイル情報に基づいて培地画像からコロニーの検出及びその計数を実行し、
（４）コロニー数を少なくとも含む培地情報をデータベース４００に登録する
構成を有している。

このような構成を実現するために、本実施形態の衛生管理システムＳは、図１に示すように、各フィルム型培地６０に関する培地情報を登録する際に用いる複数の携帯用通信端末装置１０と、当該衛生管理システムＳを管理する管理者端末装置２０と、ネットワーク３０と、データベース４００を有し、かつ、携帯用通信端末装置１０又は管理者端末装置２０と連動し、培地情報の登録管理を含む各種の処理を実行するサーバ装置４０と、を有している。

本実施形態の作業情報は、製造工程又は検査工程に係わる各種の情報の他に、検体として製造工程又は検査工程から抽出された食品及び当該検体の培養に関する情報を含み、作業毎に、固有の識別情報（以下、「作業ＩＤ」という。）を用いてデータベース４００に登録されるようになっている。具体的には、各作業情報には、
（１）作業ＩＤと、
（２）検体を抽出すべき作業ライン８０の識別情報（以下、「ラインＩＤ」という。）又は作業ライン８０が複数の工程を有している場合には、ラインＩＤ及び工程の識別情報（以下、「工程ＩＤ７１ｂ」という。）と、
（３）検体としての食品の製品名、ロットの識別情報（以下、「ロットＩＤ」という。）及びロット名と、
（４）作業開始時刻及び終了時刻を示す作業日時と、
（５）作業者ＩＤ（社員ＩＤ）及び作業者名と、
が含まれる。そして、作業情報の各情報は、種別毎にかつ作業毎にデータベース４００に登録されている。

携帯用通信端末装置１０は、例えば、通信機能を有するデジタルカメラ、タブレット型情報端末装置、スマートフォン又は携帯用電話機等、静止画像等の撮像機能又は録画機能（以下、単に「カメラ機能」という。）を有し、かつ、作業者によって携帯可能な通信端末装置である。

特に、携帯用通信端末装置１０は、カメラ機能によって、フィルム型培地６０を画像化して培地画像データを生成すること、及び、作業指示書７０を画像化して指示書画像データを生成することが可能な構成を有している。そして、携帯用通信端末装置１０は、作業ＩＤと、フィルム型培地６０の培地画像データと、当該培地画像データのメタデータと、を培地情報として、サーバ装置４０のデータベース４００に登録することが可能な構成を有している。

一方、携帯用通信端末装置１０は、培地情報をサーバ装置４０に送信する際には、ＢＬＵＥＴＯＯＴＨ（登録商標）、ワイヤレスＬＡＮ（ＷＬＡＮ：Ｗｉｒｅｌｅｓｓ Ｌｏｃａｌ Ａｒｅａ Ｎｅｔｗｏｒｋ）又はワイヤレスＰＡＮ（ＷＰＡＮ：Ｗｉｒｅｌｅｓｓ Ｐｅｒｓｏｎａｌ Ａｒｅａ Ｎｅｔｗｏｒｋ）等の近距離無線用の通信規格を用いて直接若しくはアクセスポイント５０を介してサーバ装置４０に送信し、又は、図示しない移動基地局を介して公衆電話網回線を用いてサーバ装置４０に送信する構成を有している。そして、携帯用通信端末装置１０は、ＸＭＬ（ｅＸｔｅｎｓｉｂｌｅ Ｍａｒｋｕｐ Ｌａｎｇｕａｇｅ）等のマークアップ言語によって構築されたブラウザ機能を有し、当該ブラウザ機能を用いて作業者の操作入力指示及び操作確認を実行するとともに、当該ブラウザ機能を介して培地情報をサーバ装置４０に送信するようになっている。

管理者端末装置２０は、例えば、タブレット型情報端末装置、スマートフォン、パーソナルコンピュータ又はワークステーション等の情報通信端末装置である。

また、管理者端末装置２０は、管理者の識別情報（以下、「管理者ＩＤ」という。）と管理者のパスワード及び作業者の識別情報（以下、「作業者ＩＤ」という。）を管理し、サーバ装置４０へのアクセス権限の管理、携帯用通信端末装置１０の端末ＩＤの管理、及び、登録された培地情報の修正その他の管理を行うことができる制御装置として機能する。

そして、管理者端末装置２０は、携帯用通信端末装置１０と同様に、マークアップ言語によって構築されたブラウザ機能を有し、当該ブラウザ機能を用いてサーバ装置４０とのデータの授受、報告書の閲覧等を実行することができる構成を有している。

なお、管理者端末装置２０は、同一ロット内において、工程を実行する機械の故障その他によって各作業が中断した場合、作業者における培地情報の登録ミス等が発生した場合に、培地情報その他の情報を修正することができる構成を有している。

ネットワーク３０は、例えば、携帯電話網を含む公衆電話回線網（以下、「長距離通信ネットワーク」という）、近距離無線ネットワーク等のＩＰ（Ｉｎｔｅｒｎｅｔ Ｐｒｏｔｏｃｏｌ）ネットワーク、又は、その双方が相互接続されて構成されている。ただし、当該ネットワーク３０の構成は、これに限られない。

サーバ装置４０は、携帯用通信端末装置１０又は管理者端末装置２０と連動し、ロット及び作業ライン８０の衛生管理を行うための各データ処理及び培地情報の登録を実行するために用いられるサーバ装置である。

特に、サーバ装置４０は、培地情報を登録する際に、
（１）食品が検体として培養される培地が撮像されて画像化された培地画像を有する培地画像データを（携帯用通信端末装置１０から）取得し、
（２）培地画像を構成する各ピクセルの色に関する特徴量を検出し、当該特徴量に基づいて、培地に培養されたコロニーの属性を特定し、
（３）データベース４００から特定されたコロニーの属性と同一のコロニーの特性を示す特性情報を検索して取得し、
（４）検索して取得した特性情報に基づいて、培地画像からコロニーを検出するとともに、検出したコロニー数を計数し、
（５）計数されたコロニーの数を少なくとも含む前記培地に関する情報を培地情報としてデータベース４００に登録する
構成を有している。

また、サーバ装置４０は、（２）の処理については、検出した各ピクセルの特徴量に基づいて、コロニーの色及び前記コロニーの影響が生じている前記培地内の領域を示すにじみ領域の少なくとも何れか一方の属性を特定する構成を有している。

具体的には、サーバ装置４０は、（２）の処理については、検出した各ピクセルの特徴量に基づいて、所定の条件を有するピクセルを予め定められた色成分について多値化し、当該多値化された各ピクセルの色成分の分布に基づいて培地画像に画像化されたコロニーの色を属性として特定する、構成を有している。なお、サーバ装置４０は、検出した各ピクセルの特徴量に基づいて、所定の条件を有するピクセルを予め定められた複数の色成分についてそれぞれ多値化する、構成を有している。

さらに、サーバ装置４０は、（２）の処理については、検出した各ピクセルの特徴量に基づいて、所定の条件を有するピクセルを抽出し、かつ、抽出したピクセル同士が隣接するピクセル群を検出し、検出したピクセル群に基づいて、培地画像に画像化されたコロニーのにじみ度を特定する、構成を有している。

具体的には、サーバ装置４０は、検出した各ピクセル群を形成するピクセルの数及び検出された前記ピクセル群の数に基づいて前記培地画像に画像化されたコロニーのにじみ度を特定する、構成を有している。

そして、サーバ装置４０は、特徴量として各ピクセルの彩度を用いる、構成を有している。ただし、特徴量としては、これに限定されず、色に関する特徴量であって、コロニーを構成するピクセルと培地を構成するピクセルとを２値化することが可能な特徴量であればよい。

このような構成を有することによって、本実施形態においては、例えば、色又はコロニーの影響が生じている培地内の領域を示すにじみ等のコロニーの特性を示す特性情報を用いることによって、コロニーの特性を把握しつつ、コロニーを検出して計数することができるようになっている。

特に、本実施形態においては、画像化された際に各種のコロニーの特徴的な性質となり、コロニーが画像化された際の色、にじみ度（にじみ領域のサイズ）又は双方の属性を用いて画像化されたコロニーの属性を特定することができるようになっている。

例えば、本実施形態においては、赤（Ｒｅｄ）、緑（Ｇｒｅｅｎ）、青（Ｂｌｕｅ）等のピクセルを構成する複数の色成分を用いて各ピクセルの色を特定してコロニーの色を属性として特定することができるので、撮像環境の変化やその影響を受けることなく、各種のコロニーの特徴的な性質となる色に基づいてコロニーの属性を特定することができるようになっている。
また、本実施形態においては、コロニーを形成するピクセル数及びその数に基づいて、コロニーのにじみ領域を的確に特定することができるようになっている。

さらに、本実施形態においては、ピクセルの色の鮮やかさに基づいて画像化されたコロニーの属性を特定することができるので、種々の色成分から構成されるコロニーを的確に検出することができるようになっている。

したがって、本実施形態においては、撮像することによって画像化した培地からコロニーを検出して登録する際に、培地に培養されたコロニーの種別や特性を予め認識又は特定させる必要がなく、的確にコロニーを検出及び計数できるとともに、培地情報の登録及び当該培地情報の管理において作業者や監督者の煩雑な作業を低減させることができるようになっている。

また、本実施形態においては、コロニー数を培地情報のデータとして登録することができるので、フィルム型培地６０を用いて食品に関する衛生管理を、電子的なデータによって解析可能となるとともに、その解析結果の提供をも電子的に実行することができる。

したがって、本実施形態においては、紙媒体などの物理的な資源を利用して種々のデータ解析及びその提供を行う場合に比べて省資源化をも図ることができるとともに、培地に関する培地情報をデータベースに登録させることによって登録ミスが著しく減少し、難しい培地の管理を容易にすることができるので、無駄に培地を消費すること無く省資源化を図ることができるようになっている。

［２］フィルム型培地
次に、図２を用いて本実施形態のフィルム型培地６０について説明する。なお、図２は、本実施形態に用いるフィルム型培地６０の一例である。

本実施形態に用いるフィルム型培地６０は、フィルム又はシ−ト状の乾燥培地によって作業ライン８０の各工程から検出した検体としての食品に付着した菌を培養するための培地である。例えば、フィルム型培地６０は、一般生菌用、大腸菌群用及び黄色ブドウ球菌用を培養する培地として用いられる。なお、カビや酵母、リステリア菌、水質用微生物、乳酸菌、タンパク質等の各種の菌、物質又は微生物を培養する培地として用いてもよい。

また、フィルム型培地６０は、例えば、図２に示すように、フィルムによって形成される基材シート６１と、基材シート６１の中心を基準に当該基材シート６１上に形成される円形の枠（以下、「円形枠」という。）６２と、該枠内に設けられる菌を培養する培養層６３と、当該培養層６３を被覆するカバーシート６４と、を有している。

基材シート６１は、フィルム状又はシート状の基材であれば特に限定されず、例えば、プラスチックフィルムや紙等を用いることができる。プラスチックフィルムの例としては、ポリエチレン、ポリプロピレン、ポリエチレンテレフタレート、ポリエチレンナフタレート、ポリメタクリレート、ポリメチルメタクリレート、ポリメチルアクリレート、ポリエステル、ポリカーボネート等の樹脂フィルムを好ましく挙げることができる。ポリエチレンテレフタレート、ポリプロピレン系の合成紙等が好ましく挙げることができる。なお、ポリプロピレン系合成紙は、ポリプロピレンを主原料とするフィルム合成紙である。

［３］作業指示書
次に、図３を用いて本実施形態の作業指示書７０について説明する。なお、図３は、本実施形態に用いる作業指示書７０の一例である。

本実施形態の作業指示書７０は、同一条件によって製造又は検査された食品群毎、すなわち、ロット毎に、一以上の製造工程又は検査工程の作業名称及びその内容と、使用する作業ライン８０と、製造又は検査される食品（加工食品）名称、数量その他の情報と、が記載された指示書である。

また、本実施形態の作業指示書７０は、左上に印刷その他の方法によって形成された指示書ＩＤ７１ａと、所定の領域に印刷その他の方法によって形成された複数の工程ＩＤ７１ｂを有している。指示書ＩＤ７１ａ及び各工程ＩＤ７１ｂは、作業ＩＤ７１として用いられ、例えば、２次元バーコード等のバーコード又は英数字で形成されている。そして、指示書ＩＤ７１ａ及び各工程ＩＤ７１ｂは、フィルム型培地６０の登録が実行される際に当該フィルム型培地６０と同様に画像化され、携帯用通信端末装置１０又はサーバ装置４０において解析することによって認識される。

なお、作業指示書７０は、指示書ＩＤ７１ａ又は工程ＩＤ７１ｂの作業ＩＤ７１を記憶させたＩＣタグを有し、タグリーダなどの携帯用通信端末装置１０が有するインターフェース（近距離無線通信インターフェース１４０）によって当該携帯用通信端末装置１０に作業ＩＤ７１を取得させてもよい。また、以下の説明においては、特別に言及しない場合には、作業ＩＤ７１とは、指示書ＩＤ７１ａ又は工程ＩＤ７１ｂを示す。

［４］携帯用通信端末装置
［４．１］携帯用通信端末装置の構成
次に、図４を用いて本実施形態の携帯用通信端末装置１０の構成について説明する。なお、図４は、本実施形態の携帯用通信端末装置１０の構成を示すブロック図である。

本実施形態の携帯用通信端末装置１０は、各種のプログラムが実行される際に用いられるメモリ機能を有するデータ記憶部１００と、撮像機能を有し、フィルム型培地６０の画像データその他の画像データを生成する画像データ生成部１１０と、サーバ装置４０と連動して培地情報をサーバ装置４０に初期登録及び培養後登録する処理（以下、「培地情報登録処理」という。）その他の処理を実行するアプリケーション制御部１２０と、を備えている。

また、携帯用通信端末装置１０は、サーバ装置４０及び他の通信装置と通信を行うネットワーク通信部１３０と、近距離無線通信インターフェース１４０と、現在位置を検出する現在位置検出部１５０と、表示部１６０と、表示部１６０を制御する表示制御部１６１と、ユーザの操作を入力するための操作部１７０と、タイマー１８０と、装置全体を制御する携帯端末管理制御部１９０と、を有している。

そして、携帯用通信端末装置１０は、例えば、電話機能及び電子メール等のメール機能を有する場合には、マイク、スピーカ及び電子メールの送受信機能等の種々の必要な部材を有している。さらに、上述の各部は、バス１１によって互いに接続され、データの授受が実行される。

データ記憶部１００は、各種のアプリケーションプログラムが記憶されるアプリケーション記憶部１０１と、画像データ生成部１１０によって撮像されて生成された画像データが記憶される画像データ記憶部１０２と、携帯用通信端末装置１０の管理及び制御に関するプログラム、並びに、各プログラムの実行中にワークエリアとして用いられるとともに、携帯用通信端末装置１０で実行される各処理において用いられるデータが記憶されるＲＯＭ／ＲＡＭ１０３と、を有している。

特に、アプリケーション記憶部１０１には、画像データ生成部１１０、操作部１７０、表示制御部１６１及び画像データ記憶部１０２と連動しつつ、アプリケーション制御部１２０によって実行されるアプリケーションプログラム（以下、「アプリ」という。）が記録されている。また、アプリケーション記憶部１０１には、上述のブラウジング機能を実現するためのブラウザ用のプログラムも記録されている。

画像データ記憶部１０２には、撮像した培地画像データ及び指示書画像データと、指示書画像データを解析して取得した指示書ＩＤ７１と、各画像データを管理する画像ＩＤと、撮像時刻等の各画像データに対応する各種のメタデータと各種のフラグ情報と、が対応付けられて記憶される。なお、画像ＩＤとは、各携帯用通信端末装置１０において適宜付与される任意の識別情報である。

画像データ生成部１１０は、光学システムと、当該光学システムから入力された光学画像を電気信号に変換するＣＣＤＩセンサ（Ｃｈａｒｇｅ Ｃｏｕｐｌｅｄ Ｄｅｖｉｃｅ Ｉｍａｇｅ Ｓｅｎｓｏｒ）と、ＣＣＤＩセンサにおいて生成された電気信号に基づいて画像データを生成する生成部と、を有する。

特に、画像データ生成部１１０は、作業指示書７０を撮像した際に、当該撮像された作業指示書７０を画像化し、指示書画像データを生成する。また、画像データ生成部１１０は、検体が培養される、又は、培養されたフィルム型培地６０を撮像した際に、当該撮像されたフィルム型培地６０を画像化し、当該フィルム型培地６０の培地画像データを培地画像データとして生成する。

アプリケーション制御部１２０は、所定のアプリケーション（以下、単に「アプリ」ともいう。）によって培地情報登録処理を実現する。特に、アプリケーション制御部１２０は、アプリケーション記憶部１０１に記憶された培地登録アプリによって携帯用通信端末装置１０の各部を制御するための各種制御プログラムを実行しつつ、ネットワーク通信部１３０、表示制御部１６１及び操作部１７０と連動して、又は、制御して各種の処理を実行する。

なお、アプリケーション制御部１２０は、実装上、携帯端末管理制御部１９０を構成するＣＰＵ（中央処理装置）が、アプリを実行した際の機能として実現されるものであってもよい。また、本実施形態のアプリケーション制御部１２０において実行される培地情報の登録処理の詳細については後述する。

ネットワーク通信部１３０は、アプリケーション制御部１２０及び携帯端末管理制御部１９０の制御の下、ネットワーク３０に接続されるサーバ装置４０との通信回線を構築し、培地画像データ等の種々のデータの授受を行う。

近距離無線通信インターフェース１４０は、アプリケーション制御部１２０及び携帯端末管理制御部１９０の制御の下、ＩＣタグを用いた近距離無線通信を行う。

現在位置検出部１５０は、アプリケーション制御部１２０又は携帯端末管理制御部１９０の制御の下、ネットワーク３０を介してＧＰＳ（Ｇｌｏｂａｌ Ｐｏｓｉｔｉｏｎｉｎｇ Ｓｙｓｔｅｍ）衛星の位置を認識しつつ、当該ＧＰＳ衛星から送信された衛星信号（ＧＰＳ信号）を検出する。

そして、現在位置検出部１５０は、当該検出されたＧＰＳ信号に基づいて携帯用通信端末装置１０の現在位置の緯度及び経度によって示される座標値を算出（すなわち、検出）する。また、この現在位置検出部１５０は、この算出された座標値を位置情報としてアプリケーション制御部１２０に提供する。

なお、携帯用通信端末装置１０が、電話機能や近距離無線機能を有している場合には、電話又は近距離無線に用いる電波を電話基地局等において受信した方角と電波強度に基づいて当該携帯用通信端末装置１０の現在位置を算出（検出）してもよい。

表示部１６０は、所定のサイズ（例えば、５インチ、Ｗ４８０×Ｈ９６０ピクセル）の画像表示領域を有し、液晶素子又はＥＬ（Ｅｌｅｃｔｒｏ Ｌｕｍｉｎｅｓｃｅｎｃｅ）素子のパネルによって構成され、表示制御部１６１において生成された表示データに基づいて所定の画像を表示するようになっている。特に、本実施形態では、表示部１６０は、培地登録アプリが実行されている際に、操作部１７０と連動しつつ、各種の表示及び撮像されて画像化された作業指示書７０とフィルム型培地６０との画像を表示する。

表示制御部１６１は、アプリケーション制御部１２０又は携帯端末管理制御部１９０の制御の下、表示部１６０に所定の画像を描画させるために必要な描画データを生成し、生成した描画データを当該表示部１６０に出力するようになっている。

操作部１７０は、各種の確認ボタン、各操作指令を入力する操作ボタン、テンキー等の多数のキー及び表示部１６０上に設けられたタッチセンサにより構成され、各操作を行う際に用いられるようになっている。具体的には、操作部１７０は、培地登録アプリの起動時に上述の各種の処理を実行するための操作を行う際に用いられるようになっている。

なお、本実施形態においては、操作部１７０は、培地ＩＤ６６を直接手入力する際に用いることも可能である。

タイマー１８０は、画像データ生成部１１０がフィルム型培地を撮像するときの日付及び時刻をアプリケーション制御部１２０に提供する。

携帯端末管理制御部１９０は、主に中央演算処理装置（ＣＰＵ）によって構成されるとともに、キー入力ポート、表示制御ポート等の各種入出力ポートを含み、携帯用通信端末装置１０の全般的な機能及び情報提供プログラムを実行するための全般的な機能を総括的に制御するようになっている。

［４．２］アプリケーション制御部
次に、図５〜図７の各図を用いて本実施形態の携帯用通信端末装置１０におけるアプリケーション制御部１２０の詳細について説明する。なお、図５は、本実施形態の携帯用通信端末装置１０によって培地情報を登録する際に表示部１６０に表示される画像の一例であり、図６は、本実施形態の携帯用通信端末装置１０によってフィルム型培地６０を撮像する際の表示部１６０に表示される画像の一例である。また、図７は、本実施形態の携帯用通信端末装置１０によって作業指示書７０を撮像する際の表示部１６０に表示される画像の一例である。

アプリケーション制御部１２０は、アプリケーション記憶部１０１に記録された培地登録アプリを実行し、画像データ生成部１１０を制御して撮像されたフィルム型培地６０の培地画像データ及び作業指示書７１の指示書画像データを取得して画像データ記憶部１０２に記憶する。

そして、アプリケーション制御部１２０は、バーコード認識機能又はＯＣＲ（Ｏｐｔｉｃａｌ Ｃｈａｒａｃｔｅｒ Ｒｅｃｏｇｎｉｔｉｏｎ）機能などの画像解析機能を用いて、画像化された指示書画像データから指示書ＩＤ７１を取得し、指示書画像データとともに画像データ記憶部１０２に記憶する。なお、アプリケーション制御部１２０は、通信回線を介して他の通信装置又はデータベース４００と連動してバーコード認識又はＯＣＲ認識を実行してもよい。

また、アプリケーション制御部１２０は、培地画像データの撮像後、又は、所定のタイミングによって、検体の培養開始時に培地情報をサーバ装置４０に登録する初期登録及び当該検体の培養開始後に培地情報を登録する培養後登録を実行する。特に、アプリケーション制御部１２０は、作業者の指示に基づいて、初期登録か又は培養後登録かを特定し、当該いずれかの登録かを示す情報（フラグ情報）を指示書画像データ、作業ＩＤ７１及び培地画像データとともに培地情報に含めてサーバ装置４０に送信する。

そして、アプリケーション制御部１２０は、培地画像データを撮像した際に、タイマー１８０から現在時刻を取得し、当該現在時刻を撮像時刻として所定の画像ＩＤとともに当該培地画像データのメタデータとして画像データ記憶部１０２に記憶し、サーバ装置４０に培地画像データを送信する際に一緒に送信する。

例えば、アプリケーション制御部１２０は、図５に示すように、選択ボタンＡ１６及び選択ボタンＢ１７の表示及び画像表示領域１５の該当する領域のタッチ検出によって、初期登録か培養後登録かを培地情報の登録を行う作業者に選択させる。

また、アプリケーション制御部１２０は、図６に示すように、作業者に撮像を促すために、表示部１６０の中央に、検体を画像化する領域（以下、「検体画像化領域」という。）１７を表示させる。そして、アプリケーション制御部１２０は、作業者の指示に基づいて（すなわち、撮像ボタン１９へのタッチを検出して）画像データ生成部１１０に検体画像化領域を撮像させる。

さらに、作業ＩＤ７１として指示書ＩＤ７１ａ又は工程ＩＤ７１ｂが２次元バーコードによって形成されている作業指示書７０のデータを取得する場合には、アプリケーション制御部１２０は、図７に示すように、作業者に撮像を促すために、指示書ＩＤ７１ａ又は工程ＩＤ７１ｂを画像化する領域（以下、「作業ＩＤ画像化領域」という。）１２と、表示部１６０に作業指示書７０を画像化する（以下、「指示書画像化領域」という。）１３と、を表示させる。そして、アプリケーション制御部１２０は、作業者の指示に基づいて（すなわち、撮像ボタンへのタッチを検出して）画像データ生成部１１０に作業ＩＤ７１を有する作業指示書７０の画像を撮像させる。また、アプリケーション制御部１２０は、指示書画像を取得すると、画像解析によって当該指示書画像から作業ＩＤ７１を認識して培地画像データとともに画像データ記憶部１０２に記憶し、培地画像データの送信時に同時にサーバ装置４０に送信する。

このとき、工程ＩＤ７１ｂを作業ＩＤ７１として取得する場合であって、複数の工程ＩＤ７１ｂが形成されている場合には、アプリケーション制御部１２０は、いずれの工程ＩＤ７１ｂを選択すべきか作業者に選択させつつ、該当する工程ＩＤ７１ｂを取得する。ただし、アプリケーション制御部１２０は、サーバ装置４０と連動してライン関連情報を作業者に参照させつつ、当該作業者の指示に基づいて取得すべき工程ＩＤ７１ｂを取得するようにしてもよい。

［５］サーバ装置
［５．１］サーバ装置の構成
次に、図８を用いて本実施形態のサーバ装置４０の構成について説明する。なお、図８は、本実施形態のサーバ装置４０の構成を示す構成図である。

本実施形態のサーバ装置４０は、図８に示すように、作業情報及び培地情報等の各種の情報が記憶されるデータベース４００と、携帯用通信端末装置１０及び管理者端末装置２０と通信を行う通信制御部４１０と、培地情報登録処理等の各種の処理を実行するデータ処理部４２０と、サーバ装置４０の各部を制御するサーバ管理制御部４３０と、各部の制御に用いるＲＯＭ／ＲＡＭ４４０と、時刻管理を行うために用いるタイマー４５０と、を有する。なお、上述の各部は、バス４１によって相互に接続され、各構成要素間におけるデータの転送が実行される。

通信制御部４１０は、所定のネットワークインターフェースであり、携帯用通信端末装置１０又は管理者端末装置２０と通信回線を構築し、携帯用通信端末装置１０又は管理者端末装置２０と種々のデータの授受を行う。

データベース４００は、ＨＤＤにより構成され、培地情報データベース（以下、「培地情報ＤＢ」と略す。）４０１、ライン情報データベース（以下、「ライン情報ＤＢ」と略す。）４０２、ロット情報データベース（以下、「ロット情報ＤＢ」と略す。）４０３、作業管理データベース（以下、「作業管理ＤＢ」と略す。）４０４及び培地に培養されたコロニーの属性に基づいてコロニー検出判定処理を実行する場合に用いられるプロファイル情報が記憶されたプロファイルＤＢ４０５を有する。なお、例えば、本実施形態の培地情報ＤＢ４０１は、本発明の第２データベースを構成し、プロファイルＤＢ４０５は、本発明の第１データベースを構成する。

培地情報ＤＢ４０１は、各作業ライン８０の工程毎に抽出され、かつ、携帯用通信端末装置１０によって撮像されて取得した検体のフィルム型培地６０に関する培地情報が作業ＩＤ毎に、登録時に培地ＩＤを付与しつつ、格納されるデータベースである。例えば、培地情報ＤＢ４０１には、
（１）培地ＩＤ
（２）作業ＩＤ
（３）撮像された培地画像データ
（４）撮像時刻
（５）フラグ情報を含むその他の情報
（６）コロニー数
（７）培地判定結果
（８）コロニーの種別（菌種）
（９）コロニー検出時に用いたプロファイル情報の種別（プロファイルＩＤ）
の９つデータが対応付けて記録される。

なお、各培地情報における菌種、コロニー数及び培地判定としては、データ処理部４２０によって判定された結果が記憶される。また、各培地情報における菌種、コロニー数及び培地判定は、培地情報が登録される際に登録されてもよいし、当該培地情報の登録タイミングと異なる所定のタイミングで登録されてもよい。

ライン情報ＤＢ４０２は、各作業ライン８０に関するライン情報がラインＩＤ毎に格納されるデータベースである。例えば、ライン情報ＤＢ４０２には、
（１）ラインＩＤ
（２）作業ライン８０が有する工程の工程ＩＤ７１ｂ及びその種別
の２つデータが対応付けて記録される。なお、工程種別としては、材料投入、調合、充填、ボイル、包装、及び、梱包等の各工程を特定する名称が用いられる。

ロット情報ＤＢ４０３は、各ロットに関するロット情報がロットＩＤ毎に格納されるデータベースである。例えば、ロット情報ＤＢ４０３には、
（１）ロットＩＤ
（２）ロットの製造又は検査に用いる作業ラインのラインＩＤ
（３）ロットの作業開始時刻
（４）ロットの作業終了時刻
（５）ロットの作業を実行する作業者の作業班
の５つデータが対応付けて記録される。

作業管理ＤＢ４０４は、作業内容に関する各種の情報が格納されるデータベースである。例えば、作業管理ＤＢ４０４には、
（１）作業ＩＤ
（２）検体を抽出すべき作業ラインのラインＩＤ（又はラインＩＤ及び工程ＩＤ７１ｂ）
（３）検体（食品）の種別（製品名、ロットＩＤ及び／又はロット名）
（４）検査種別（一般性菌又は大腸菌など検出する菌種）
（５）培養条件（希釈倍率、希釈液の種別、培養温度、培養湿度及び培養時間）
（６）培養開始時刻
（７）培養開始から所定の時間経過後の時刻（以下、「培養検査時刻」ともいう。）
（８）培養場所（例えば、インキュベータ番号及びインキュベータ内の段数等の位置）
（９）作業日時（作業開始時刻及び終了時刻）
（１０）作業者ＩＤ（及び／又は作業者名）
の１０つデータが対応付けて記録される。

なお、培養検査時刻には、単一の時刻（すなわち、検体の培養を終了させる終了時刻）だけが設定されてもよいし、培養開始時刻から法定された又は所定の時間経過後、例えば、培養開始時刻から２４時間経過後、４８時間経過後又は７２時間経過後等の複数の時刻が設定されてもよい。

プロファイルＤＢ４０５は、コロニーを検出する際に用いる基準となるプロファイル情報（以下、「特性情報」ともいう。）が記憶されており、具体的には、プロファイルＩＤ毎に、コロニーの種類（菌種）、色（発色）、にじみ度、形状、サイズ、近接基準の各属性に関する情報がプロファイル情報として格納されるデータベースである。例えば、プロファイルＤＢ４０５には、
（１）菌種（一般性菌又は大腸菌など検出する菌種）
（２）色
（３）にじみ度
（４）形状（円形又は矩形等）
（５）サイズ
（６）近接基準
（７）培地判定基準
（８）コロニー検出を行うための手法を規定したアプリ（以下、「検出アプリ」という。）
（９）当該アプリで利用するパラメータ又はパラメータ群（以下、「アプリ用パラメータ」という。）
の９つデータが対応付けて記録される。

なお、検出アプリ又はアプリ用パラメータは、培地画像を解析することで得られた色やにじみ度等の属性に基づいて、選択されるアプリ又はパラメータである。そして、検出アプリには、例えば、閾値法又はハフ変換を実行するプログラムが含まれ、色及びにじみ度によってプロファイル情報が特定された場合に選択される。また、アプリ用パラメータには、例えば、にじみ度が小さいプロファイル情報が特定された場合には大きい閾値、又は、にじみ度が大きいプロファイル情報が特定された場合には小さい閾値など、属性に対応付けられて記憶されており、色及びにじみ度によって該当するプロファイル情報が特定された場合に検出アプリと同様に選択される。

データ処理部４２０は、ＲＯＭ／ＲＡＭ４４０に記録されているアプリケーションに応じて各種データ処理を実行する。特に、データ処理部４２０は、所定のプログラムを実行することによって、
（１）通信制御部４１０の動作管理と、
（２）各携帯用通信端末装置１０と連動して実行する培地登録処理と、
（３）培地画像データによって形成される培地画像を解析するとともに、培地によって培養された菌種の属性を特定し、当該属性を有するコロニーのプロファイルをプロファイルＤＢ４０５から取得するプロファイル特定処理と、
（４）特定されたコロニー対応するプロファイに基づいて培地画像に画像化されたコロニー数を検出するコロニー検出判定処理と、
（５）登録した培地情報に基づいてロットの判定を行うロット判定処理と、
（６）判定結果を報告書形式で出力する報告処理と、
（７）データベース４００の管理及び制御と、
を行う。具体的には、データ処理部４２０は、登録処理部４２１、画像解析処理部４２２、コロニー検出判定部４２３、ロット判定処理部４２４及び報告処理部４２５を含む。

なお、例えば、本実施形態の登録処理部４２１は、本発明に係る取得手段及び登録手段を構成し、画像解析処理部４２２は、本発明の特定手段及び検索手段を構成する。また、例えば、本実施形態のコロニー検出判定部４２３は、本発明の計数手段を構成する。さらに、本実施形態の登録処理部４２１、画像解析処理部４２２、コロニー検出判定部４２３、ロット判定処理部４２４及び報告処理部４２５の詳細については後述する。

サーバ管理制御部４３０は、主に中央演算処理装置（ＣＰＵ）によって構成され、プログラムを実行することによって、サーバ装置４０の各部を統合制御する。具体的には、サーバ管理制御部４３０は、ユーザの操作による携帯用通信端末装置１０からのログイン要求に基づいて各ユーザのログイン処理、及び、その他の各種の制御を行う。

ＲＯＭ／ＲＡＭ４４０には、サーバ装置４０の駆動に必要な各種のプログラムが記録されている。特に、ＲＯＭ／ＲＡＭ４４０には、コロニー特定処理の際に用いるクラスタリング用の学習データ、各フィルム型培地６０の培地判定（合否判定）、工程判定、ライン判定及びロット判定の各判定を実行する際に用いる判定基準の情報（以下、「培地判定基準情報」ともいう。）等のそれぞれの各情報が記憶される。また、ＲＯＭ／ＲＡＭ４４０は、各プログラムの実行中にワークエリアとして用いられる。

タイマー４５０は、培地情報の登録処理及びロット判定処理を実行する際に必要な時刻を管理するために用いられる。

［５．２］登録処理部
次に、本実施形態のサーバ装置４０における登録処理部４２１の詳細について説明する。

本実施形態の登録処理部４２１は、携帯用通信端末装置１０と連動し、作業ＩＤ７１に対応付けつつ、各培地情報を培地情報ＤＢ４０１に登録する登録処理を実行する。特に、登録処理部４２１は、培地情報に含まれる、初期登録か又は培養後登録かを示すフラグ情報に基づいて、異なる培地情報登録処理を実行する。

（初期登録）
登録処理部４２１は、初期登録を示すフラグ情報が携帯用通信端末装置１０から送信された培地情報に含まれている場合には、初期登録に基づく登録処理を実行する。

具体的には、登録処理部４２１は、通信制御部４１０介して培地情報を取得すると、作業ＩＤ７１を特定する。また、登録処理部４２１は、特定した作業ＩＤに基づいて、作業管理ＤＢ４０４を検索し、該当する作業情報を特定しつつ、当該特定した作業情報に対応付けて、取得した培地画像データ及び撮像時刻を培地情報ＤＢ４０１に登録する。

特に、登録処理部４２１は、取得した作業ＩＤ７１に基づいて検体を抽出した作業ライン８０が含まれるロットＩＤ、当該作業ライン８０のラインＩＤ、当該検体を抽出した工程ＩＤ７１ｂを特定するとともに、当該特定したロットＩＤ、ラインＩＤ及び工程ＩＤ７１ｂに対応付けて、固有の培地ＩＤを付与しつつ、培地情報に含まれる培地画像データ及び撮像時刻を培地情報ＤＢ４０１に登録する。

なお、登録処理部４２１は、撮像時刻を培養開始時刻として培地情報ＤＢ４０１に登録する。また、培養開始時刻は、当該時刻に培地情報の登録処理を実行することを前提に撮像時刻に代えて予め設定された時刻を用いてもよい。

（培養後登録）
登録処理部４２１は、培養後登録を示すフラグ情報が携帯用通信端末装置１０から送信された培地情報に含まれている場合には、培養後登録に基づく登録処理を実行する。

具体的には、登録処理部４２１は、初期登録と同様に、通信制御部４１０を介し培地情報を取得すると、当該培地情報に含まれる作業ＩＤ７１を特定する。そして、登録処理部４２１は、特定した作業ＩＤ７１に基づいて、作業管理ＤＢ４０４を検索し、該当する作業情報を特定しつつ、当該特定した作業情報に対応付けて、培地画像データ及び撮像時刻を培地情報ＤＢ４０１に登録する。なお、培養検査時刻は、培養開始時刻と同様に、当該時刻に培地情報の登録処理を実行することを前提に撮像時刻に代えて予め設定された時刻を用いてもよい。

また、登録処理部４２１は、画像解析処理部４２２に、培地画像の画像解析を実行させて画像化された培地に培養されているコロニーの属性を特定させ、当該特定させた属性を有するコロニーのプロファイル情報を検索させる。そして、登録処理部４２１は、コロニー検出判定部４２３に、画像解析処理部４２２によって特定させたプロファイルに基づいて、コロニー数に基づいて各フィルム型培地６０の検体の合否判定をさせる。また、登録処理部４２１は検出させたコロニー数及び判定結果を培地情報として特定した作業ＩＤ７１に対応付けて培地情報ＤＢ４０１に登録する。

［５．３］画像解析処理部
次に、図９〜図１２の各図を用いて本実施形態のサーバ装置４０における画像解析処理部４２２の詳細について説明する。なお、図９及び図１０は、画像化されたコロニーの属性（色）を特定する原理を説明するための図であり、図１１及び図１２は、画像化されたコロニーの属性（にじみ度）を特定する原理を説明するための図である。

画像解析処理部４２２は、培地画像を構成する各ピクセルの色に関する特徴量を検出し、当該特徴量に基づいて、培地に培養されたコロニーの属性を特定するコロニー特定処理を実行する。特に、画像解析処理部４２２は、培地画像における検出した各ピクセルの特徴量に基づいて、コロニーの色及びサイズの属性を特定する。そして、画像解析処理部４２２は、プロファイルＤＢ４０５から特定されたコロニーの属性を有するコロニーの特性を示す特性情報（プロファイル情報）を検索して取得するとともに、取得したプロファイル情報をコロニー検出判定部４２３に提供する。

通常、上述のようなフィルム型培地６０等の培地を用いてコロニーを画像化された培地から画像解析によって検出する際には、作業者による設定又は培地に識別情報を付してそれを認識するなど、コロニーの発色する色及びサイズ等の予め検出すべきコロニーの属性を特定しておかなければならない。

しかしながら、上述のような作業ライン８０において複数の菌種をそれぞれ検出する場合又は同一の菌種であっても希釈倍率や培養条件などによって、予めフィルム型培地６０毎にコロニーを検出すべき基準情報及びアプリ等のコロニーを検出するための手法（すなわち、プロファイル）を設定しておくことが困難な場合も多い。また、フィルム型培地６０毎に識別情報を付して当該識別情報に対応付けてプロファイルを管理することも可能であるが、識別情報を付して事前にプロファイルと対応付ける管理する作業は煩雑であるとともに、事後的に培養環境が変化し、又は、フィルム型培地６０を撮像する際の撮像環境が変化した場合には対応することができない。

そこで、本実施形態の画像解析処理部４２２は、上述のような構成を有することによって、フィルム型培地６０に識別情報を付すなどの特別な作業を行うことなく、フィルム型培地６０の識別情報等の検出すべきコロニーの種別又は特性を特定する情報を取得できない場合であっても、コロニーの検出時に自動的にコロニーの属性を特定することができるとともに、作業者や監督者の煩雑な作業を低減させ、かつ、的確にコロニーを検出及び計数させることができるようになっている。

特に、本実施形態の画像解析処理部４２２は、以下のように、培地画像からコロニーの色及びにじみ度の属性を解析することによって、検出すべきコロニーの属性を特定し、特定したコロニーの属性に基づいて該当するプロファイル情報を特定するようになっている。

（コロニーの色の特定）
画像解析処理部４２２は、コロニーの色を特定する際には、
（１）各ピクセルの色に関する特徴量として、培地画像の各ピクセルのＲＧＢの各値をＨＳＶ変換して彩度であるＳ値を算出し、
（２）所定の条件を具備するピクセルを抽出するため、算出されたＳ値を予め定められた閾値によって２値化した画像（以下、「マスク画像」ともいう。）を取得し、
（３）所定の条件を具備するピクセルについてＲＧＢの各色成分について多値化して色成分毎の分布を及びその平均を算出し、
（４）算出した分布及び平均に基づいて予め定められた複数のクラスの中から１のクラスを特定し、
特定したクラスによって定める色をコロニーの色として特定する。

具体的には、画像解析処理部４２２は、各ピクセルのＲＧＢの各値をＨＳＶ変換して各ピクセルのＳ値を算出し、当該算出した各ピクセルのＳ値を予め定められた閾値（色特定用の閾値）によって２値化してコロニーと想定される仮想コロニーを抽出する。例えば、画像解析処理部４２２は、図９（Ａ）に示す培地画像の場合には、２値化すると、図９（Ｂ）に示すような画像（マスク画像）を得る。なお、当該仮想コロニーは、色を特定するために抽出されたものであり、後述するコロニー検出判定処理時のコロニーの検出とは精度そのものが異なる。

また、画像解析処理部４２２は、仮想コロニーとして抽出された各ピクセルのＳ値を、各ＲＧＢ成分のそれぞれについて多値化し、ＲＧＢ毎の分布（ヒストグラム）を算出するとともに、それぞれの色成分についての階調値の平均値を算出する。例えば、画像解析処理部４２２は、２値化により図９（Ｂ）に示す仮想コロニーを抽出した場合には、図１０に示すように、ＲＧＢの各色成分における階調値とピクセル数のヒストグラムを算出し、その平均値Ｒ＝１００．２４、Ｇ＝２１．３６及びＢ＝２２．０３を算出する。

そして、画像解析処理部４２２は、予めＮサンプルの階調値とピクセル数及び平均値とによって規定された学習モデル（教師データ）の機械学習等を用いて、複数のクラス（濃い赤、赤、薄い赤等）の中から、算出したヒストグラム（すなわち、各色成分の平均値及びピクセル数の分布）に基づいて、１のクラスを特定する。例えば、画像解析処理部４２２は、ＲＧＢの各色成分における階調値（Ｎ次元）におけるピクセル数の分布が規定された「濃い赤」、「赤」、「薄い赤」、「濃い緑」、「緑」、「薄い緑」、「濃い青」、「青」及び「薄い青」の９つのクラスの各学習モデルと、算出したＲＧＢの各色成分における階調値及びピクセル数のヒストグラムと、を比較して、近似する学習モデルのクラス（すなわち、図１０の場合には「濃い赤」）をコロニーの色として特定する。

（コロニーのにじみ度の特定）
画像解析処理部４２２は、にじみ度を特定する際には、
（１）所定の条件を有するピクセルを抽出するため、コロニーの色を特定する際に算出した各ピクセルのＳ値を予め定められた閾値（色の特定とは異なる値）によって２値化し、
（２）抽出したピクセル同士が隣接するピクセル群を検出するため、閾値以上の各ピクセルにおいて隣接する同一の値を有する複数のピクセルを１のピクセル群として検出（ラベリング）し、
（３）検出したピクセル群に含まれるピクセル数を算出してピクセル群の分布を算出し、
（４）算出したピクセル群の分布に基づいて予め定められた複数のクラスの中から１のクラスを特定し、
特定したクラスをコロニーのにじみ度として特定する。

具体的には、画像解析処理部４２２は、コロニーの色を特定した際に用いた各ピクセルのＳ値を予め定められた閾値（にじみ度特定用の閾値であって、色特定用の閾値とは異なる閾値）によって２値化してコロニーと想定される仮想コロニーを抽出する。例えば、画像解析処理部４２２は、図１１（Ａ）又は図１２（Ａ）に示す培地画像の場合には、２値化すると、図１１（Ｂ）又は図１２（Ｂ）に示すような画像（マスク画像）を得る。なお、当該仮想コロニーは、コロニーの色を特定する場合と同様に、にじみ度を特定するために抽出されたものであり、後述するコロニー検出判定処理時のコロニーの検出とは精度そのものが異なる。

また、画像解析処理部４２２は、仮想コロニーとして抽出されたピクセル群を構成するピクセル数及び培地画像内の当該ピクセル群の数を算出するとともに、図１１（Ｃ）又は図１２（Ｃ）に示すようなピクセル群を構成するピクセル数（すなわち、仮想コロニーのサイズ）の分布をヒストグラムとして算出する。

そして、画像解析処理部４２２は、予めＮサンプルのピクセル群を構成するピクセル数とピクセル群数とによって規定された学習モデル（教師データ）の機械学習等を用いて、複数のクラスの中から１のクラスを特定する。例えば、画像解析処理部４２２は、ピクセル群を構成するピクセル数と培地画像内のピクセル群の数（Ｎ次元）の分布が規定された「にじみ度大」、「にじみ度中」及び「にじみ度小」の３つのクラスの学習モデルと、ピクセル群を構成するピクセル数とピクセル群数のヒストグラムと、を比較して、近似する学習モデルのクラス（すなわち、図１１（Ａ）の場合には「にじみ度小」又は図１２（Ａ）の場合には「にじみ度大」）をコロニーのにじみ度として特定する。

（プロファイルの特定）
画像解析処理部４２２は、画像化されたコロニーの色とにじみ度の属性を特定すると、当該特定したコロニーの色とにじみ度の属性に基づいてプロファイルＤＢ４０５を検索し、コロニーの色及びにじみ度の属性が一致するコロニーのプロファイルを取得する。

［５．４］コロニー検出判定部
次に、本実施形態のサーバ装置４０におけるコロニー検出判定部４２３の詳細について説明する。

本実施形態のコロニー検出判定部４２３は、画像解析処理部４２２によって取得したコロニーのプロファイル情報と抽出された培地画像に基づいて、画像化された検体で培養されたコロニーの数を検出するとともに、当該検出したコロニー数に基づいて、当該各フィルム型培地６０の検体が衛生管理上において異常であるか正常であるかの培地判定を実行する。特に、コロニー検出判定部４２３は、プロファイル情報に含まれるアプリに基づいて、他のプロファイル情報をパラメータとして用いつつ、コロニーの検出を実行する。

（コロニー数の検出）
コロニー検出判定部４２３は、登録処理部４２１の制御の下、培地情報の培地情報ＤＢ４０１ベースへの登録時又は所定のタイミングにおいて、特定されたプロファイルに基づいて、各培地画像を画像解析してコロニー数の検出を実行し、登録処理部４２１に提供する。

具体的には、コロニー検出判定部４２３は、培地画像と特定されたプロファイルに基づいて、地画像化領域における各画素値が所定の値以上である画素（ピクセル）を検出する。例えば、コロニー検出判定部４２３は、Ｒ、Ｇ、Ｂの各副画素（サブピクセル）において、予め設定された最大の画素値と最小の画素値を読み出し、それぞれの副画素が読み出したそれぞれの画素値の範囲に含まれる画素（ピクセル）を検出する。なお、Ｒ、Ｇ、Ｂの各副画素（サブピクセル）における最大の画素値と最小の画素値は、取得したプロファイル情報に基づいて定められる。

また、コロニー検出判定部４２３は、ノイズを低減させるための画像フィルタ処理を実行する。例えば、コロニー検出判定部４２３は、検出した画素（以下、「検出画素」という。）に対して当該検出画素に隣接して他の検出画素が存在する場合に、検出画素に隣接する全ての画素を検出画素に置き換える膨張処理、及び、検出画素に隣接して非検出した画素が存在する場合に当該検出画素に隣接する画素を全て非検出画素に置き換える収縮処理を実行する。

そして、コロニー検出判定部４２３は、画像フィルタ処理を実行して検出画素と認識した画素に対して隣接する検出画素を連結するラベリングを実行するとともに、連結した検出画素群を一のオブジェクト、すなわち、コロニーとして認識しつつ、認識した各コロニーの重心を算出してその座標数をコロニー数として検出する。また、コロニー検出判定部４２３は、当該検出したコロニー数を登録処理部４２１に提供する。

（検体の合否判定）
コロニー検出判定部４２３は、各フィルム型培地６０の検体が異常であるか正常であるかの培地判定（すなわち、検体の合否判定）を実行する。例えば、登録処理部４２１は、検体から検出すべき菌種によって予め設定された菌数の閾値（すなわち、判定基準）に基づいて、各検体の合否を判定し、その結果を登録処理部４２１に提供する。

特に、本実施形態においては、菌種や希釈倍率に基づいて判定基準は異なるので、登録処理部４２１は、プロファイル情報に基づいて培地判定を実行する。

各判定基準情報は、培地ＩＤ６６に対応付けて特定されるようになっている。すなわち、検体から検出する菌種毎にフィルム型培地６０の種類が異なるので、培地ＩＤ６６を特定すれば、検出すべき菌種を特定することができる。したがって、本実施形態においては、予め希釈倍率を定めておくことによって、培地ＩＤ６６に基づいて特定される判定基準情報を読み出すことができるようになっている。

また、本実施形態においては、工程判定、ライン判定、及び、ロット判定で各フィルム型培地６０の合否判定を用いるので、これらの各判定と対応付けて培地判定が実行される。なお、工程判定、ライン判定、及び、ロット判定において各フィルム型培地６０の合否判定の手法については後述する。

［５．５］ロット判定処理部
次に、図１３〜図１５の各図を用いて本実施形態のサーバ装置４０におけるロット判定処理部４２４の詳細について説明する。なお、図１３〜図１５は、本実施形態のサーバ装置４０における工程判定を説明するための図である。

本実施形態のロット判定処理部４２４は、管理者端末装置２０に入力された管理者の指示に基づいて、指定されたロット、作業ライン８０又は工程における衛生管理に関するデータ解析（すなわち、合否判定）を実行する。

具体的には、ロット判定処理部４２４は、各ロットについて、該当するロットに用いられる作業ライン８０のライン情報と、該当する作業ライン８０に対応付けられて登録された培地情報（少なくともコロニー数）と、に基づいて、同一条件によって製造又は検査された食品群が所定の条件を具備しているか否かを判定する。

また、ロット判定処理部４２４は、ロット判定が指示されると、該当するロットに含まれる作業ライン８０及び当該作業ライン８０に属する工程が衛生管理上において異常であるか正常であるかの作業ライン８０のライン判定（すなわち、衛生管理上の合否の判定）及び各工程の工程判定（すなわち、衛生管理上の合否の判定）を実行し、工程判定及びライン判定を用いてロット判定を実行する。

特に、ロット判定処理部４２４は、ロット判定が指示された際に、例えば、培養開始後から２４時間、４８時間等の所定の培養検査時刻を経過した培地情報におけるフィルム型培地６０のコロニー数や検体の合否判定の培地情報に基づいて当該工程の衛生管理上の合否を判定し、該当する作業ライン８０に含まれる工程の合否判定に基づいて当該作業ライン８０の衛生管理上の合否を判定し、該当するロットに含まれる作業ライン８０の合否判定に基づいて当該ロットの衛生管理上の合否を判定する。

なお、本実施形態のロット判定処理部４２４は、ロット判定だけでなく、工程判定又はライン判定のみをデータ解析として実行してもよい。

（工程判定）
ロット判定処理部４２４は、同一タイミングの培養開始時刻、同一タイミングの培養検査時刻、予め設定された第１時刻から第２時刻までの時間内の時刻を有する培養開始時刻又は、予め設定された第１時刻から第２時刻までの時間内の時刻を有する培養検査時刻を有するなど、培養開始時刻又は培養検査時刻が所定の条件を有し、かつ、同一の菌種であって、同一のロットの同一の工程に対応付けて登録された複数のフィルム型培地６０の培地情報に基づいて、各工程判定を実行する。すなわち、ロット判定処理部４２４は、同一のロットの同一の工程において、同一の菌種に対して所定の複数のフィルム型培地６０の各培地判定の結果に基づく、同一菌種における、又は、複数の菌種を含めた総合判定によって各工程判定を実行する。

具体的には、ロット判定処理部４２４は、該当するフィルム型培地６０の培地判定結果（すなわち、工程判定を実行すべき工程の工程ＩＤ７１ｂを有する培地情報に登録されたすべての培地判定結果）を取得するとともに、判定結果の合否の数が所定の条件を具備している場合には、判定すべき工程の工程判定を合格と判定し、当該条件を具備していない場合には、判定すべき工程の工程判定を不合格と判定する。

例えば、図１３に示すように、同一の培養開始時刻を有する３つのフィルム型培地６０が判定すべき工程の工程ＩＤ７１ｂを有し、第１のフィルム型培地６０のコロニー数が「２０」、第２のフィルム型培地６０のコロニー数が「３０」及び第３のフィルム型培地６０のコロニー数が「７０」でコロニー数が「３０」以下の場合に判定結果が合格とされる場合であって、所定の条件が「６０％」の合格した培地情報を有している場合に、判定すべき工程の工程判定を合格する場合を想定する。この場合には、フィルム型培地６０の３枚中２枚の判定結果が合格であるので、ロット判定処理部４２４は、当該工程を合格と判定する。

また、ロット判定処理部４２４は、上述の手法に代えて、工程判定を実行すべき工程の工程ＩＤ７１ｂを有する培地情報に含まれるコロニー数に基づいて判定すべき工程の工程判定を実行してもよい。

例えば、図１４に示すように、３つのフィルム型培地６０が判定すべき工程の工程ＩＤ７１ｂを有し、第１のフィルム型培地６０のコロニー数が「２０」、第２のフィルム型培地６０のコロニー数が「３０」及び第３のフィルム型培地６０のコロニー数が「７０」の上述と同様の場合であって、所定の条件がコロニー数の閾値「７０」以上のコロニー数を有する培地情報がない場合に、判定すべき工程の工程判定を合格する場合を想定する。この場合には、第３のフィルム型培地６０のコロニー数が「７０」であるので、ロット判定処理部４２４は、当該工程を不合格と判定する。

一方、ロット判定処理部４２４は、上述のコロニー数の閾値を用いて工程判定する手法に代えて、工程判定を実行すべき工程の工程ＩＤ７１ｂを有する全ての培地情報に含まれるコロニー数に基づいて判定すべき工程の工程判定を実行してもよい。

例えば、図１５に示すように、３つのフィルム型培地６０が判定すべき工程の工程ＩＤ７１ｂを有し、第１のフィルム型培地６０のコロニー数が「２０」、第２のフィルム型培地６０のコロニー数が「３０」及び第３のフィルム型培地６０のコロニー数が「７０」の上述と同様の場合であって、所定の条件が全てのコロニー数の平均が閾値「３０」以下の場合に、判定すべき工程の工程判定を合格する場合を想定する。この場合には、３つのフィルム型培地６０のコロニー数の平均が「４０」であるので、ロット判定処理部４２４は、当該工程を不合格と判定する。

他方、ロット判定処理部４２４は、工程判定のみ実行する際に、工程の位置又は役割に基づいて、所定の工程に重み付けを与え、当該重み付けを加味した上で、工程判定を実行してもよい。

具体的には、ロット判定処理部４２４は、最下流の工程（最終工程）等の工程位置についての判定結果の重みを高くし、ボイル又は焼く等の検出する菌が殺菌される工程についての判定結果の重みを高くする。

例えば、ロット判定処理部４２４は、上述の図１３の場合には、最下流の工程におけるフィルム型培地６０の合否判定結果を２倍にして工程判定を実行する。すなわち、この場合には、ロット判定処理部４２４は、第３のフィルム型培地において２枚検査し、同一の値を得たとみなし、４枚のフィルム型培地６０において６０％以上となる場合に、工程を合格と判定する。例えば、図１３の場合には、ロット判定処理部４２４は、フィルム型培地６０の４枚中２の判定結果が合格であるので、ロット判定処理部４２４は、当該工程を不合格と判定することになる。

また、ロット判定処理部４２４は、上述の図１４の場合には、最下流の工程におけるフィルム型培地６０の合否判定時の閾値を１／２に設定して工程判定を実行する。すなわち、この場合には、ロット判定処理部４２４は、第３のフィルム型培地において合否基準となるコロニー数の閾値が１／２となり、３枚のフィルム型培地６０において全てが閾値以下となる場合に、工程を合格と判定する。例えば、図１４の場合には、ロット判定処理部４２４は、第３のフィルム型培地６０の閾値は「３５」となり、コロニー数は閾値以上となるので、ロット判定処理部４２４は、当該工程を不合格と判定することになる。

さらに、ロット判定処理部４２４は、上述の図１５の場合には、最下流の工程におけるフィルム型培地６０の合否判定時のコロニー数を２倍に設定して工程判定を実行する。すなわち、この場合には、ロット判定処理部４２４は、第３のフィルム型培地において合否基準となるコロニー数が２倍となり、３枚のフィルム型培地６０におけるコロニー数の平均が予め定められた値（例えば「３０」）以下となる場合に、工程を合格と判定する。例えば、図１５の場合には、ロット判定処理部４２４は、第３のフィルム型培地６０のコロニー数は「７０」となり、平均は「６３．３」となるので、ロット判定処理部４２４は、当該工程を不合格と判定することになる。

なお、本実施形態のロット判定処理部４２４は、各工程に登録されている培地情報の数に基づいて上述の手法のいずれかを選択してもよいし、上述の手法の２つ又は３つを組み合わせて工程判定を実行するようにしてもよい。また、この所定の条件は、検体の種別、検出する菌種等によって変更可能となっており、管理者によって設定可能、又は、プログラムの一部として提供される。

（ライン判定）
ロット判定処理部４２４は、所定のタイミングで判定され、かつ、同一菌種又は異なる菌種であって、該当するライン情報に対応付けて登録された複数の工程の衛生管理上の合否判定に基づいて、各作業ライン８０のライン判定を実行する。すなわち、ロット判定処理部４２４は、所定のタイミングで判定された同一ロットの複数の工程の各判定結果に基づく、同一菌種における、又は、複数の菌種を含めた総合判定によってライン判定を実行する。

具体的には、ロット判定処理部４２４は、上述のように、ライン判定を実行すべき作業ライン８０のラインＩＤを有する工程の工程判定の判定結果を取得するとともに、判定結果の合否の数が所定の条件を具備している場合には、判定すべき作業ライン８０のライン判定を合格と判定し、当該条件を不具備の場合には、判定すべき作業ライン８０のライン判定を不合格と判定する。

例えば、３つの工程が判定すべき作業ライン８０のラインＩＤを有している場合であって、第１工程が「合格」、第２工程が「合格」及び第３工程が「不合格」で、所定の条件が「６０％」の合格した工程から作業ライン８０が構成されている場合には、ロット判定処理部４２４は、判定すべき作業ライン８０のライン判定を合格する。

（ロット判定）
ロット判定処理部４２４は、所定のタイミングで判定され、該当するロット情報に対応付けて登録された複数の作業ライン８０の衛生管理上の合否判定に基づいて、各ロットのロット判定を実行する。すなわち、ロット判定処理部４２４は、複数の作業ライン８０の各判定結果に基づく、同一菌種における、又は、複数の菌種を含めた総合判定によってロット判定を実行する。

具体的には、ロット判定処理部４２４は、ロット判定を実行すべきロットのロットＩＤを有する作業ライン８０の衛生管理情報の合否判定に基づいて判定すべきロットのロット判定を実行する。

例えば、所定の条件が「６０％」の合格した作業ライン８０からロットが構成されている場合に、ロット判定処理部４２４は、判定すべきロットのロット判定を合格とする場合であって、３つの作業ライン８０が判定すべきロットのロットＩＤを有している場合を想定する。この場合において、第１作業ライン８０が「合格」、第２作業ライン８０が「合格」及び第３作業ライン８０が「不合格」の場合には、ロット判定処理部４２４は、判定すべきロットのロット判定を合格と判定する。

なお、ロットの作業時間が長時間に及ぶ場合には、所定の時間（例えば８時間又は１２時間）毎に時間を区切ってロットの判定を実行してもよい。この場合には、作業が中断している間のロット判定を実行する場合には、ダミーの結果を用いてもよいし、作業中断中として判定してもよい。

（その他）
ロット判定処理部４２４は、培地情報、ライン情報、ロット情報及び作業管理ＤＢ４０４を用いて、上述以外の判定及びデータ解析を行うことができるとともに、報告処理部４２５を介して当該判定結果又はデータ解析結果を管理者が閲覧可能に管理者端末装置２０に提供することができるようになっている。

具体的には、ロット判定処理部４２４は、各フィルム型培地６０に培養された検体の信頼性を確認するために、すなわち、検査ミスが発生していない否かを確認するために、一の培地ＩＤにおける培地情報を培養開始時時刻から培養の終了まで、時系列に培地情報又は培地画像データの所定の解析を実行する。

例えば、ロット判定処理部４２４は、管理者端末装置２０を介して受信した管理者の指示に基づいて、同一の菌種における培養開始時刻から所定の時刻までの複数の培地情報を、培地画像データとともに抽出する。そして、ロット判定処理部４２４は、各培地情報及び各画像データについて所定の時系列に沿って所定の解析を実行し、又は、各培地情報及び各画像データを時系列に沿って集約する。また、ロット判定処理部４２４は、報告処理部４２５に、解析結果又は集約結果を所定のデータ形式を有する閲覧データに生成させ、当該生成させた閲覧データを管理者に閲覧可能に管理者端末装置２０に提供させる。

なお、ロット判定処理部４２４は、報告処理部４２５と連動して、管理者端末装置２０の指示に基づいて、法定された衛生管理の報告用に、該当する菌種における各培地情報を個々に閲覧可能にさせてもよい。

また、ロット判定処理部４２４は、培地情報、ライン情報、ロット情報又は作業管理情報の検索機能を有していてもよい。具体的には、ロット判定処理部４２４は、ロットＩＤ（指示書ＩＤ７１ａ）、作業ラインＩＤ、工程ＩＤ７１ｂ、作業ＩＤ、培養開始時刻、ロットの作業日時、検体の種別などを検索キーとしてデータベース４００を検索し、報告処理部４２５と連動し、該当する培地情報や各種の情報を管理者に閲覧可能なデータを生成してもよい。

なお、報告処理部４２５は、管理者端末装置２０を介して受信した管理者の指示に基づいて、検索によって特定された培地情報（培地画像データ、コロニー数及び培地判定結果）、工程情報、ライン情報、又は、ロットに関する情報を所定の報告形式で提供することも可能である。すなわち、報告処理部４２５は、法定の検査報告その他の場合においてその証拠又は報告書として種々の情報を提供することができるように構成されている。

［５．６］報告処理部
次に、本実施形態のサーバ装置４０における報告処理部４２５の詳細について説明する。

報告処理部４２５は、管理者端末装置２０に入力された管理者の指示及び所定の報告書形式を有するテンプレートデータに基づいて、指定されたロット、作業ライン８０又は工程における衛生管理に関するデータ解析の解析結果（すなわち、合否判定の判定結果）を報告書データとして生成し、生成した報告書データを、通信制御部４１０を介して管理者に閲覧可能に管理者端末装置２０に提供する。

具体的には、報告処理部４２５は、コロニー数又は培地判定結果等、培地情報、ライン情報及びロット情報から必要な情報を抽出するとともに、培地画像データから培地画像を抽出する。また、報告処理部４２５は、抽出した情報とロット判定処理部４２４によって得られた解析結果に基づいて、テンプレートデータに各情報を割り当てつつ、報告書データを生成する。

なお、報告処理部４２５は、上述したように、種々の解析又は検索に応じて所定の報告書データ又は閲覧データを生成し、管理者端末装置２０に提供することができるように構成されている。すなわち、報告処理部４２５は、受信した管理者の指示に基づいて、検索によって特定された培地情報、工程情報、ライン情報、又は、ロットに関する情報を所定の報告形式で提供することも可能であるとともに、法定の検査報告その他の場合においてその証拠又は報告書として種々の情報を提供することができるように構成されている。

［６］衛生管理システムの動作処理
［６．１］培地情報登録処理
次に、図１６〜図１８の各図を用いて本実施形態の携帯用通信端末装置１０及びサーバ装置４０における培地情報登録処理の動作について説明する。なお、図１６は、本実施形態の携帯用通信端末装置１０における培地情報の登録処理動作を示すフローチャートであり、図１７は、携帯用通信端末装置１０において培地情報を送信する際に表示部１６０に表示される画像の一例である。また、図１８は、本実施形態のサーバ装置４０における培地情報の登録処理の動作を示すフローチャートである。

本動作においては、ライン情報ＤＢ４０２及びロット情報ＤＢ４０３には、既に作業指示書７０に対応付けられた該当するロット情報及びライン情報が記憶されているものとする。また、フィルム型培地６０及び作業指示書７０には、２次元バーコードによって培地ＩＤ又は指示書ＩＤが付されているものとする。さらに、本動作においては、各フィルム型培地６０におけるコロニー数の検出は、培地情報のデータベース４００への登録時に実行されるものとする。

まず、携帯用通信端末装置１０において、アプリケーション制御部１２０は、操作部１７０を介して培地登録アプリの起動指示を検出すると（ステップＳ１０１）、アプリケーション記憶部１０１から培地登録アプリを読み出して起動する（ステップＳ１０２）。このとき、アプリケーション制御部１２０は、携帯端末管理制御部１９０の制御下、ワークメモリの初期化その他の必要な処理を実行する。

次いで、アプリケーション制御部１２０は、表示制御部１６１と連動し、フィルム型培地６０の初期登録であるか、又は、培養開始から所定の時間経過した培養後登録であるか選択させるための画像を表示部１６０に表示させてその入力を待機する（ステップＳ１０３）。例えば、アプリケーション制御部１２０は、表示制御部１６１と連動して図５に示す画像を表示部１６０に表示させる。

次いで、アプリケーション制御部１２０は、操作部１７０による選択指示の入力を検出すると（ステップＳ１０４）、初期登録か培養後登録かを判断し、フラグ情報にその結果を設定する（ステップＳ１０５）。

次いで、アプリケーション制御部１２０は、フィルム型培地６０の撮像を促す画面を表示部１６０に表示させ、操作部１７０と連動し、画像データ生成部１１０による撮像を待機する（ステップＳ１０６）。例えば、アプリケーション制御部１２０は、表示制御部１６１と連動して図６（Ａ）に示す画像を表示部１６０に表示させる。

次いで、アプリケーション制御部１２０は、画像データ生成部１１０、表示制御部１６１及び操作部１７０と連動しつつ、画像データ生成部１１０による撮像を検出すると（ステップＳ１０７）、画像データ生成部１１０によってフィルム型培地６０の培地画像データを取得し、画像データ記憶部１０２に所定の画像ＩＤを付与しつつ記憶する（ステップＳ１０８）。

次いで、アプリケーション制御部１２０は、タイマー１８０より現在時刻を培地画像データの撮像時刻として取得し、当該培地画像データに対応付けてメタデータとして画像データ記憶部１０２に記憶する（ステップＳ１０９）。

次いで、アプリケーション制御部１２０は、表示制御部１６１と連動して指示書ＩＤ７１及び工程ＩＤ７２とともに指示書画像データを取得するための画面を表示部１６０に表示させ、指示書画像データの取得を待機する（ステップＳ１１１）。例えば、アプリケーション制御部１２０は、表示制御部１６１と連動して図７（Ａ）に示す画像を表示部１６０に表示させる。

次いで、アプリケーション制御部１２０は、画像データ生成部１１０、表示制御部１６１及び操作部１７０と連動しつつ、画像データ生成部１１０による撮像を検出すると（ステップＳ１１２）、作業ＩＤ７１が画像化された指示書画像データを取得し、ステップＳ１０８によって取得した培地画像データに対応付けて画像データ記憶部１０２に記憶する（ステップＳ１１３）。

なお、アプリケーション制御部１２０は、工程ＩＤ７１ｂを作業ＩＤ７１として取得する場合、又は、複数の工程ＩＤ７１ｂから一の工程ＩＤ７１を取得する場合には、表示制御部１６１及び操作部１７０と連動しつつ、ユーザに取得すべき工程ＩＤ７２を選択させる表示をし、該当する工程ＩＤ７２を取得する。

次いで、アプリケーション制御部１２０は、取画像化された指示書画像データ及び培地画像データの所定の領域に形成された２次元バーコードを解析して作業ＩＤ７１を取得し、当該指示書画像データに対応付けて画像データ記憶部１０２に記憶する（ステップＳ１１４）。

次いで、アプリケーション制御部１２０は、タイマー１８０より現在時刻を培地画像データの撮像時刻として取得し、表示制御部１６１及び操作部１７０と連動して作業者に、取得した指示書画像データ。作業ＩＤ７１、培地画像データ、及び、撮像時刻を確認させる（ステップＳ１１５）。

なお、アプリケーション制御部１２０は、取得した培地情報の作業者による確認時に、作業者の指示に基づいて、培地画像データの再取得を行っていてもよい。また、このとき、アプリケーション制御部１２０は、表示制御部１６１及び操作部１７０と連動して作業者によって培地画像データの補正を行うことができるようにしてもよい。

次いで、アプリケーション制御部１２０は、作業者の指示に基づいて、初期登録か培養後登録かを示すフラグ情報及び端末ＩＤと作業ＩＤ７１とともに、取得した培地画像データとそのメタデータ、及び、初期登録か培養後登録かを示すフラグ情報を培地情報として、ネットワーク通信部１３０を介してサーバ装置４０に送信し（ステップＳ１１６）、携帯用通信端末装置１０の登録処理を終了する。

このとき、表示制御部１６１は、表示部１６０は、図１７に示す画像を表示させる。また、ネットワーク通信部１３０は、培地情報を送信する際に、端末ＩＤや入力されたＩＤ及びパスワードに基づいてサーバ装置４０へのアクセスをするためのログインを実行し、ログイン完了後にサーバ装置４０との通信回線を確立し、培地情報を送信する。
なお、サーバ装置４０は、送信された培地情報に基づく培地情報の登録処理については、別処理として以下の処理を実行する。

まず、サーバ装置４０においては、通信制御部４１０が携帯用通信端末装置１０から送信された培地情報を受信すると（ステップＳ２００）、登録処理部４２１は、受信した培地情報に含まれるフラグ情報に基づいて、初期登録か培養後登録であるかを判定する（ステップＳ２０１）。このとき、登録処理部４２１は、初期登録と判定した場合には、ステップＳ２０２の処理に移行し、初期登録でないと判定した場合には、すなわち、培養後登録と判定した場合には、ステップＳ２０４の処理に移行する。
次いで、登録処理部４２１は、初期登録と判定した場合には、培地情報に含まれる作業ＩＤ７１を抽出して特定する（ステップＳ２０２）。

次いで、登録処理部４２１は、特定した作業ＩＤ７１に基づいて培地情報を培地ＩＤを付与しつつ、培地情報ＤＢ４０１に登録し（ステップＳ２０３）、本動作を終了する。なお、培養開始時刻は作業管理ＤＢ４０４に予め記憶されているが、登録処理部４２１は、ステップＳ２０３の処理において、受信した培地情報に含まれる撮像時刻を培養開始時刻として作業管理ＤＢ４０４に登録してもよい。

一方、登録処理部４２１は、培養後登録と判定した場合には、培地情報に含まれる作業ＩＤ７１を抽出して特定し（ステップＳ２０４）、培地情報に含まれる撮像時刻に基づいて培地情報を登録する培養検査時刻を特定する（ステップＳ２０５）。

なお、このとき、登録処理部４２１は、携帯用通信端末装置１０と連動して培地情報を登録する培養検査時刻を指定させて登録してもよいし、受信した培地情報に含まれる撮像時刻を培養検査時刻としてそのまま登録してもよい。また、登録処理部４２１は、既に実行された培養検査時刻における培地登録を管理し、培地情報を受信したタイミング及び既に培地情報の登録に用いた培養検査時刻に基づいて、培養検査時刻を特定してもよい。すなわち、登録処理部４２１は、培地情報の登録を実行する毎に実行フラグを書き換え、当該フラグの情報を参照しつつ、受信した撮像時刻と比較して、培養検査時刻を特定してもよい。

次いで、登録処理部４２１は、画像解析処理部４２２に、受信した培地画像データによって形成される培地画像に対して画像解析を実行し、コロニーの色及びにじみ度の属性を特定し（ステップＳ２０６）、当該特定した属性に基づいてプロファイルＤＢ４０５を検索して該当するプロファイル情報特定する（ステップＳ２０７）。

次いで、登録処理部４２１は、コロニー検出判定部４２３に、特定されたプロファイルと培地画像に基づいて画像化された検体のコロニーの数を検出させる（ステップＳ２０８）。具体的には、コロニー検出判定部４２３は、特定されたプロファイル情報に含まれる検出アプリ及び検出用のパラメータに基づいて、当該プロファイル情報に含まれる形状、サイズ及び近接基準を用いつつ、画像データの画像上の所定領域を画像解析させてコロニー数を検出する。

次いで、コロニー検出判定部４２３は、作業ＩＤ７１に基づいて特定された検体の種別及び検出する菌種に基づいて、培地判定基準を読み出しつつ、当該読み出した検体判定基準に基づいて、検出したコロニー数が所定の条件を具備するか否かを判定する（ステップＳ２０９）。すなわち、コロニー検出判定部４２３は、所定の条件を具備する場合には、合格（正常）と判定し、所定の条件を不具備な場合には、不合格（異常）と判定する。

なお、コロニー検出判定部４２３は、上述の自動登録に代えて、携帯用通信端末装置１０と連動し、検出したコロニー数及び合否判定の結果を当該携帯用通信端末装置１０の表示部１６０に表示させ、ユーザに閲覧及び確認させるようにしてもよい。

次いで、登録処理部４２１は、培地画像データ、プロファイル（菌種）、判定された合否、検出されたコロニーの数及び培地情報に含まれる撮像時刻を培養開始時刻とした培養開始時刻情報を、特定した作業ＩＤ７１対応付けて培地情報ＤＢ４０１に登録し（ステップＳ２１０）、本動作を終了する。

なお、登録処理部４２１は、ライン情報及び登録すべき情報を携帯用通信端末装置１０の表示部１６０に表示させ、当該携帯用通信端末装置１０を介して入力されたユーザ指示に基づいて、培地情報等の登録をするようにしてもよい。

また、携帯用通信端末装置１０から指示書画像データが送信され、サーバ装置４０によって当該画像データを解析することによって作業ＩＤ７１を認識する場合には、登録処理部４２１は、ステップＳ２０１の処理において、培地受情報とともに指示書画像データを受信し、当該データのそれぞれの所定の領域上に画像化された作業ＩＤ７１を解析して当該作業ＩＤ７１を認識して取得するようになる。

［６．２］ロット判定処理
次に、図１９を用いて本実施形態のサーバ装置４０におけるロット判定処理の動作について説明する。なお、図１９は、本実施形態のサーバ装置４０におけるロット判定処理の動作を示すフローチャートである。

本動作において、該当する培地情報が登録されているものとし、工程判定基準情報、ライン判定基準情報及びロット判定基準情報が予め登録されているものとする。

まず、サーバ装置４０の通信制御部４１０が、管理者端末装置２０から送信されたロット判定指示を受信すると（ステップＳ３０１）、ロット判定処理部４２４は、通信制御部４１０と連動し、ロット判定可能なロットＩＤを検索して当該ロット判定可能なロットＩＤ及びそれに対応するロット情報を、管理者に閲覧及び選択可能に管理者端末装置２０に送信し、ロット判定処理を実行するロットＩＤの指示を待機する（ステップＳ３０２）。
なお、管理者端末装置２０には、ロット判定可能なロットＩＤを管理者に閲覧及び選択可能に所定の表示画面に表示させる。

次いで、通信制御部４１０が、管理者によって特定されたロットＩＤを、管理者端末装置２０を介して受信すると（ステップＳ３０３）、ロット判定処理部４２４は、該当するロットに属する工程の工程判定、ライン判定及びロット判定の条件を示す各判定基準情報をＲＡＭ／ＲＯＭ４４０から読み出す（ステップＳ３０４）。

次いで、ロット判定処理部４２４は、該当するロットＩＤの各種のロット情報、ライン情報及び培地情報を読み出し（ステップＳ３０５）、読み出したロット情報、ライン情報及び培地情報に基づいて、工程判定及びライン判定を実行しつつ、ロット判定を行う（ステップＳ３０６）。具体的には、ロット判定処理部４２４は、ロット情報によって特定された各工程の工程判定を実行し、当該工程判定の工程判定結果に基づいて、ロット情報によって特定された各作業ライン８０のライン判定を実行する。そして、ロット判定処理部４２４は、ライン判定結果に基づいてロット判定を実行する。

次いで、ロット判定処理部４２４は、判定の報告形式となる予め定めたテンプレート情報を読み出しつつ、ロット判定結果を、当該テンプレートに割り当てて、報告書データを生成する（ステップＳ３０７）。

最後に、ロット判定処理部４２４は、通信制御部４１０と連動して生成した報告書データを該当する管理者端末装置２０に提供して（ステップＳ３０８）本動作を終了させる。

なお、管理者端末装置２０は、報告書データを受信すると、管理者に閲覧可能に表示させる。ただし、ロット判定処理部４２４は、管理者端末装置２０に報告書データを送信せずに、プリンタに印刷可能に印刷データとして送信してもよい。

［７］変形例
［７．１］変形例１
上述の実施形態においては、画像抽出処理部４２２は、コロニーの色及びにじみ度の特定においては、Ｓ値の階調値又はピクセル群の数のＮ次元の特徴量と学習モデルを用いているが、当該特徴量としてＲＧＢの各色成分の階調値（３次元）の平均値又はピクセル群の数の平均値（１次元）を用いて特定してもよい。

［７．２］変形例２
上述の実施形態においては、画像抽出処理部４２２は、コロニーの色及びにじみ度の双方の属性を特定してプロファイル情報を特定しているが、いずれか一方の属性のみによってプロファイル情報を特定してもよい。

［７．３］変形例３
上述の実施形態においては、画像抽出処理部４２２は、コロニーの色及びにじみ度の特定においては、何れか一方を作業者が特定するなど、一部作業者による操作入力によって実現してもよいし、プロファイル情報を検索する際に、複数の候補としてプロファイル情報から作業者に選択させるようにしてもよい。

［７．４］変形例４
上述の実施形態においては、画像抽出処理部４２２は、培地画像を構成するピクセルのＳ値について２値化して仮想コロニーを検出し、コロニーの色及びにじみ度を算出しているが、仮想コロニーを検出しなかった場合には、コロニーの色及びにじみ度を特定せずに、コロニー検出判定部４２３は、コロニー検出判定処理も含めて中止して培地判定を合格としてもよいし、仮想コロニーを検出しなかった場合のプロファイル情報をプロファイルＤＢ４０５に記憶して当該プロファイル情報を用いてもよい。

［７．５］変形例５
上述の実施形態においては、画像抽出処理部４２２は、１の培地画像について１のプロファイル情報を特定しているが、各培地画像を培地画像の中心を基準に、２分割又は４分割等に複数に分割し、分割した培地画像毎に、それぞれ、上述の処理によってプロファイルを特定してもよいし、コロニーの培養が適切に行われる培地中央部分や適した培養が実行されない円環部分など、培地画像の特徴的な画像領域に分割して領域毎に上述の処理によってプロファイル情報をそれぞれ特定してもよい。

また、画像抽出処理部４２２は、複数枚のフィルム型培地６０に対して同時にコロニーの色及びにじみ度の特定を行うようにしてもよい。すなわち、画像抽出処理部４２２は、Ｓ値を算出して２値化し、該当するピクセルに及びピクセル群についてヒストグラムを算出する際に、複数のフィルム型培地６０について合算してヒストグラムを算出し、コロニーの色及びにじみ度の属性を特定してもよい。

［７．６］変形例６
同一の作業ＩＤ７１を有するフィルム型培地６０、同一のタイミングによって同一の作業ライン８０若しくは工程から抽出された検体を培養するフィルム型培地６０、又は、同一のタイミングで培地情報が登録されるフィルム型培地６０など、同一の菌種において同一の培養結果が得られることが想定される場合には、属性を特定するための処理の負荷を抑制しつつ、判定精度を高めるために、１のフィルム型培地６０について、又は、複数のフィルム型培地６０をサンプルとして、プロファイル情報を特定し、その他のフィルム型培地６０に対しては当該特定したプロファイル情報を用いてもよい。

［７．７］変形例７
上述の実施形態においては、培地抽出画像を抽出した後に、コロニーを検出しているが、培地抽出画像とコロニー検出を別処理とし、同一のタイミングで又はコロニー検出処理を画像抽出処理に先立って実行してもよい。

［７．８］変形例８
本実施形態において、タブレット型情報端末装置、スマートフォン又は携帯用電話機等の携帯用通信端末装置１０を用いて培地情報の登録処理を実行している点に代えて、ラップトップ型又はデスクトップ型のパーソナルコンピュータと、スキャナ、デジタルカメラ又はスマートフォン等の画像入力装置と、によって当該培地情報の登録処理を実現してもよい。

この場合には、パーソナルコンピュータと画像入力装置とを所定の通信規格によって接続し、パーソナルコンピュータと画像入力装置とを一体的に用いて当該培地情報の登録処理を実現してもよいし、メモリカードその他の物理的なメモリに画像入力装置によって先に取得した培地画像データ及び指示書画像データを記憶させ、当該記憶させた各画像データをパーソナルコンピュータによって取り込みつつ、当該培地情報の登録処理を実現してもよい。

［７．９］変形例９
本実施形態においては、携帯用通信端末装置１０、管理者端末装置２０、サーバ装置４０が同一敷地内で設置又は使用されてもよいし、それぞれが国外などの遠隔地に設置され、又は、遠隔地にて使用されて上述の各処理が実行されてもよい。ただし、携帯用通信端末装置１０は、同一ロットにおいて使用させることが前提となる。

［７．１０］変形例１０
本実施形態においては、フィルム型培地６０を用いて当該フィルム型培地６０に培養された検体における培地情報の登録を実行しているが、寒天培地を用いて当該寒天培地に培養された検体における培地情報の登録を実行してもよい。

［７．１１］変形例１１
本実施形態においては、単一のサーバ装置４０によって各種の処理を実行しているが、複数のサーバ装置４０から構成されるサーバシステムによって各種の処理を実行するようにしてもよい。

以上、本実施形態の衛生管理システムＳにおいては、例えば、色又はコロニーの影響が生じている培地内の領域を示すにじみ等のコロニーの特性を示すプロファイル情報を用いることによって、コロニーの特性を把握しつつ、コロニーを検出して計数することができる。

したがって、本実施形態の衛生管理システムＳにおいては、撮像することによって培地を画像化し、画像化した培地からコロニーを検出して登録する際に、培地に発生したコロニーの種別や特性を予め認識させる必要がなく、的確にコロニーを検出することができるので、的確にコロニーを検出及び計数することができるとともに、作業者や監督者の煩雑な作業を低減させることができる。

また、本実施形態の衛生管理システムＳにおいては、コロニー数を培地情報のデータとして登録することができるので、フィルム型培地等の培地を用いて食品に関する衛生管理を、電子的なデータによって解析可能となるとともに、その解析結果の提供をも電子的に実行することができるので、紙媒体などの物理的な資源を利用して種々のデータ解析及びその提供を行う場合に比べて省資源化をも図ることができるとともに、培地に関する培地情報をデータベースに登録させることによって登録ミスが著しく減少し、難しい培地の管理を容易にすることができるので、無駄に培地を消費すること無く省資源化を図ることができる。

Ｓ … 衛生管理システム
１０ … 携帯用通信端末装置
２０ … 管理者端末装置
３０ … ネットワーク
４０ … サーバ装置
６０ … フィルム型培地
７０ … 作業指示書
８０ … 作業ライン
９０ … ラベル発行装置
１００ … データ記憶部
１０１ … アプリケーション記憶部
１０２ … 画像データ記憶部
１１０ … 画像データ生成部
１２０ … アプリケーション制御部
１３０ … ネットワーク通信部
１４０ … 近距離無線通信インターフェース
１５０ … 現在位置検出部
１６０ … 表示部
１７０ … 操作部
１８０ … タイマー
１９０ … 携帯端末管理制御部
２１０ … 通信制御部
２２０ … ラベル発行処理部
２３０ … 管理者端末管理制御部
２５０ … タイマー
２６０ … 表示部
２６１ … 表示制御部
４００ … データベース
４０１ … 培地情報ＤＢ
４０２ … ライン情報ＤＢ
４０３ … ロット情報ＤＢ
４０４ … 作業管理ＤＢ
４０５ … プロファイルＤＢ
４１０ … 通信制御部
４２０ … データ処理部
４２１ … 登録処理部
４２２ … 画像解析処理部
４２３ … コロニー検出判定部
４２４ … ロット判定処理部
４２５ … 報告処理部
４３０ … サーバ管理制御部

Claims (10)

1. 食品が検体として培養される培地が撮像されて画像化された培地画像を有する培地画像データを取得する取得手段と、
   前記培地画像を構成する各ピクセルの色に関する特徴量を検出し、当該特徴量に基づいて、前記培地に培養されたコロニーの色と当該コロニーの影響が生じている前記培地内の領域サイズを示すにじみ領域のサイズとを属性として特定する特定手段と、
   第１データベースから前記特定されたコロニーの属性と同一の属性を有するコロニーの特性情報を検索して取得する検索手段と、
   前記検索して取得した特性情報に基づいて、前記培地画像から前記コロニーを検出し、検出したコロニー数を計数する計数手段と、
   前記計数されたコロニーの数を少なくとも含む前記培地に関する情報を培地情報として第２データベースに登録する登録手段と、
   を備え、
   前記特定手段が、
   前記検出した各ピクセルの特徴量と第１の基準値とに基づいて前記コロニーの色を特定し、当該各ピクセルの特徴量と第１の基準値とは異なる第２の基準値とに基づいてにじみ領域のサイズを特定することを特徴とする培地情報登録システム。
2. 請求項１に記載の培地情報登録システムにおいて、
   前記特定手段が、前記検出した各ピクセルの特徴量に基づいて、所定の条件を有するピクセルを、予め定められた色成分について多値化し、当該多値化された各ピクセルの色成分の分布に基づいて前記培地画像に画像化されたコロニーの色を前記属性として特定する、培地情報登録システム。
3. 請求項２に記載の培地情報登録システムにおいて、
   前記特定手段が、前記所定の条件を有するピクセルを、予め定められた複数の色成分についてそれぞれ多値化する、培地情報登録システム。
4. 請求項１に記載の培地情報登録システムにおいて、
   前記特定手段が、前記検出した各ピクセルの特徴量に基づいて、所定の条件を有するピクセルを抽出し、かつ、抽出したピクセル同士が隣接するピクセル群を検出し、検出したピクセル群に基づいて、前記培地画像に画像化されたコロニーのにじみ領域のサイズを特定する、培地情報登録システム。
5. 請求項４に記載の培地情報登録システムにおいて、
   前記特定手段が、前記検出した各ピクセル群を形成するピクセルの数及び検出された前記ピクセル群の数に基づいて前記培地画像に画像化されたコロニーのにじみ領域のサイズを特定する、培地情報登録システム。
6. 請求項１〜５の何れか１項に記載の培地情報登録システムにおいて、
   前記特定手段が、前記特徴量として、前記各ピクセルの彩度を用いる、培地情報登録システム。
7. コンピュータを、
   食品が検体として培養される培地が撮像されて画像化された培地画像を有する培地画像データを取得する取得手段、
   前記培地画像を構成する各ピクセルの色に関する特徴量を検出し、当該特徴量に基づいて、前記培地に培養されたコロニーの色と当該コロニーの影響が生じている前記培地内の領域サイズを示すにじみ領域のサイズとを属性として特定する特定手段、
   第１データベースから前記特定されたコロニーの属性と同一の属性を有するコロニーの特性情報を検索して取得する検索手段、
   前記検索して取得した特性情報に基づいて、前記培地画像から前記コロニーを検出し、検出したコロニー数を計数する計数手段、及び、
   前記計数されたコロニーの数を少なくとも含む前記培地に関する情報を培地情報として第２データベースに登録する登録手段、
   として機能させ、
   前記特定手段が、
   前記検出した各ピクセルの特徴量と第１の基準値とに基づいて前記コロニーの色を特定し、当該各ピクセルの特徴量と第１の基準値とは異なる第２の基準値とに基づいてにじみ領域のサイズを特定することを特徴とするプログラム。
8. 食品が検体として培養される培地が撮像されて画像化された培地画像を有する培地画像データを取得する取得手段と、
   前記培地画像を構成する各ピクセルの色に関する特徴量を検出し、当該特徴量に基づいて、前記培地に培養されたコロニーの色と当該コロニーの影響が生じている前記培地内の領域サイズを示すにじみ領域のサイズとを属性として特定する特定手段と、
   第１データベースから前記特定されたコロニーの属性と同一の属性を有するコロニーの特性情報を検索して取得する検索手段と、
   前記検索して取得した特性情報に基づいて、前記培地画像から前記コロニーを検出し、検出したコロニー数を計数する計数手段と、
   を備え、
   前記特定手段が、
   前記検出した各ピクセルの特徴量と第１の基準値とに基づいて前記コロニーの色を特定し、当該各ピクセルの特徴量と第１の基準値とは異なる第２の基準値とに基づいてにじみ領域のサイズを特定することを特徴とするコロニー検出装置。
9. コンピュータを、
   食品が検体として培養される培地が撮像されて画像化された培地画像を有する培地画像データを取得する取得手段、
   前記培地画像を構成する各ピクセルの色に関する特徴量を検出し、当該特徴量に基づいて、前記培地に培養されたコロニーの色と当該コロニーの影響が生じている前記培地内の領域サイズを示すにじみ領域のサイズとを属性として特定する特定手段、
   第１データベースから前記特定されたコロニーの属性と同一の属性を有するコロニーの特性情報を検索して取得する検索手段、及び、
   前記検索して取得した特性情報に基づいて、前記培地画像から前記コロニーを検出し、検出したコロニー数を計数する計数手段、
   として機能させ、
   前記特定手段が、
   前記検出した各ピクセルの特徴量と第１の基準値とに基づいて前記コロニーの色を特定し、当該各ピクセルの特徴量と第１の基準値とは異なる第２の基準値とに基づいてにじみ領域のサイズを特定することを特徴とするプログラム。
10. 食品が検体として培養される培地を撮像し、画像化された培地画像を有する培地画像データを生成する通信端末装置と、
    前記通信端末装置と連動し、一以上の製造工程又は検査工程を含む作業ラインを用いて製造又は検査される食品が検体として培養される培地の情報を示す培地情報をデータベースに登録するサーバ装置と、
    を備え、
    前記サーバ装置が、
    前記通信端末装置から前記培地画像データを取得する取得手段と、
    前記培地画像を構成する各ピクセルの色に関する特徴量を検出し、当該特徴量に基づいて、前記培地に培養されたコロニーの色と当該コロニーの影響が生じている前記培地内の領域サイズを示すにじみ領域のサイズとを属性として特定する特定手段と、
    第１データベースから前記特定されたコロニーの属性と同一の属性を有するコロニーの特性情報を検索して取得する検索手段と、
    前記検索して取得した特性情報に基づいて、前記培地画像から前記コロニーを検出し、検出したコロニー数を計数する計数手段と、
    前記計数されたコロニーの数を少なくとも含む前記培地情報を第２データベースに登録する登録手段と、
    を備え、
    前記特定手段が、
    前記検出した各ピクセルの特徴量と第１の基準値とに基づいて前記コロニーの色を特定し、当該各ピクセルの特徴量と第１の基準値とは異なる第２の基準値とに基づいてにじみ領域のサイズを特定することを特徴とする衛生管理システム。