JP7432593B2 - サンプルの処理およびカタログ化のための装置および方法 - Google Patents

Description

（関連出願の相互参照）
本願は、参照することによってその全体として本明細書に組み込まれる２０１８年７月５日に出願された米国仮特許出願第６２／６９４，０９３号の利益を主張する。
（技術分野）

本発明は、サンプルの処理およびカタログ化のための装置および方法に関し、より具体的に、（典型的に、研究および臨床検査室内の）組織試料、および、証拠または調査目的のために犯罪現場から取得されるアイテムであるサンプルに関する。

組織および他の生物学的試料は、実験室作業における種々の医療および研究プロセス（多くの場合、非常に大量）を通して修正および分析される。これらのプロセスは、概して、種々のサイズおよび詳細の試料を査定し、試料の詳細の精密かつ一貫した追跡と、該資料に対して実施された必要な作業の記録保存とを要求する。多くの場合、調査中の試料は、独特であり、失われた場合、誤ったラベルが付けられた場合、または不正確に処理された場合、置き換えられること、または再現されることができない。実施中の研究および／または臨床的作業の性質を所与として、詳細かつ非常に正確な記録保存および試料測定および追跡が、要求され、この作業は、高い精度を典型的に要求する一方、それにもかかわらず、本質的に、反復的である。したがって、そのような作業は、ヒトの技師の正確度および精度に関する能力を損ない得る。

本発明の一実施形態によると、識別データを伴うラベルを有する容器内のサンプルの処理およびカタログ化のためのデバイスが、提供される。本実施形態において、デバイスは、作業エリアを画定するフレームワークであって、作業エリアは、容器を受け取るための場所を含む、フレームワークを含む。デバイスは、フレームに搭載された複数のカメラも含む。デバイスは、カメラに結合されたコントローラシステムであって、コントローラシステムは、コントローラと、コントローラによって実行されると、コンピュータプロセスの実行を引き起こす命令を記憶している非一過性メモリとを含む、コントローラシステムをさらに含む。本実施形態において、コンピュータプロセスは、
カメラのうちの第１のものに、作業エリア内のサンプルの画像を捕捉させることと、
カメラのうちの第２のものに、識別データの画像を捕捉させることと、
サンプルの画像をサンプルの属性を特徴付けるデータ出力に処理することと、
データ出力をサンプルを特徴付けるカタログ記録出力に統合することであって、そのような記録はまた、識別データも含む、ことと、
保管のために、ネットワークを経由してカタログ記録出力を記録システムに伝送することと
を含む。

随意に、サンプルの画像を処理することは、識別データの画像とサンプルの画像とを含む合成画像を形成することを含む。随意に、カメラのうちの第１のものに画像を捕捉させること、およびカメラのうちの第２のものに画像を捕捉させることは、各カメラによって画像を捕捉することがほぼ同時に生じるような態様で生じる。代替として、または加えて、カタログ記録出力は、サンプル画像と、識別データの画像と、識別データおよびサンプルの画像が捕捉された時間を示すタイムスタンプとを含む。

随意に、サンプルは、処理カセットに移送されるべきであり、処理カセットは、その上に第２の識別データを有し、作業エリアは、カセットを受け取るための場所を有する一方、容器も、作業エリアにおいて受け取られており、コントローラによって実行されるコンピュータプロセスは、
カメラのうちの１つに、第２の識別データの画像を捕捉させることと、
起源識別データおよび第２の識別データをそれぞれの第１および第２のデジタル的にエンコードされたテキストに変換することと、
一貫性を保つために、第１のデジタル的にエンコードされたテキストと第２のデジタル的にエンコードされたテキストとを比較することと
をさらに含む。

代替として、または加えて、コンピュータプロセスは、カメラのうちの選択されたものに、容器から処理カセットへのサンプルの移送を文書化する画像の組を捕捉させることをさらに含む。代替として、または加えて、捕捉された画像の組は、ビデオ記録である。代替として、または加えて、コンピュータプロセスは、移送を文書化する捕捉される画像の組を分析し、活動における、通常の移送に関連付けられるそれからの明白な逸脱を識別することをさらに含む。代替として、または加えて、逸脱は、移送されるべきサンプルの一部が修正されているか、または失われていると思われる場合のそれである。代替として、または加えて、逸脱は、移送されるべきサンプルの一部が、容器内に留まっている場合のそれである。代替として、または加えて、逸脱は、第２のデジタル的にエンコードされたテキストが第１のデジタル的にエンコードされたテキストに合致しないことに基づいて、サンプルが、不正確な処理カセットに移送されていると思われる場合のそれである。代替として、または加えて、コンピュータプロセスは、下流処理のための最小基準の準拠のために、サンプルの属性を特徴付けるデータ出力を査定することと、そのような準拠の場合、ユーザに下流処理のためにサンプルを提出するための通知メッセージを発行することとをさらに含む。代替として、または加えて、査定のために使用されるサンプルの属性は、サンプルのサイズと、サンプルの各部片の寸法と、サンプルの各部片の色と、サンプルの各部片における輪郭場所と、それらの組み合わせとから成る群から選択される１つを含む。

随意に、命令は、部分の識別、部分の少なくとも１つの属性、および部分の場所に加えて、サンプルの複数の部分のうちの各１つの異なるグラフィック表現をユーザに、表示するように構成されるコンピュータユーザインターフェースを確立する。代替として、または加えて、コンピュータプロセスは、サンプルの画像のｚ軸分析によって、部分の少なくとも１つの属性を決定することをさらに含む。代替として、または加えて、コンピュータユーザインターフェースは、ユーザに、活動における、サンプルの通常の移送に関連付けられるそれからの明白な逸脱をグラフィカルに示す。代替として、または加えて、コンピュータユーザインターフェースは、ユーザに、下流処理のための最小基準のサンプルの属性の非準拠をグラフィカルに示す。

別の実施形態において、カタログ化されたサンプルに関連付けられたデータ記録が保管された非一過性記憶媒体であって、データ記録は、（ｉ）サンプルの画像と、（ｉｉ）サンプルに関連付けられた識別データの画像であって、サンプルの画像および識別データの画像が、同時に捕捉されている、画像と、（ｉｉｉ）画像が捕捉された時間を示すタイムスタンプとを含む非一過性記憶媒体が、提供される。随意に、データ記録は、サンプルの画像と識別データの画像とを含む合成画像を含む。代替として、または加えて、識別データの画像は、サンプルを最初に保管する容器に関連付けられ、データ記録は、（ｉｖ）処理カセットに移送されるサンプルの画像と、（ｖ）処理カセットに関連付けられる第２の識別データの画像と、（ｖｉ）処理カセットに移送されるサンプルの画像、および第２の識別データの画像が捕捉された時間を示すタイムスタンプとをさらに含む。
本明細書は、例えば、以下の項目も提供する。
（項目１）
起源識別データを伴うラベルを有する容器内のサンプルの処理およびカタログ化のためのデバイスであって、前記デバイスは、
作業エリアを画定するフレームワークであって、前記作業エリアは、前記容器を受け取るための場所を含む、フレームワークと、
前記フレームワークの中に搭載された複数のカメラと、
前記カメラに結合されたコントローラシステムと
を備え、
前記コントローラシステムは、コントローラと、命令を記憶している非一過性メモリとを含み、前記命令は、前記コントローラによって実行されると、コンピュータプロセスの実行を引き起こし、
前記コンピュータプロセスは、
前記作業エリア内の前記サンプルの画像を前記カメラのうちの第１のものに捕捉させることと、
前記識別データの画像を前記カメラのうちの第２のものに捕捉させることと、
前記サンプルの前記画像を前記サンプルの属性を特徴付けるデータ出力に処理することと、
前記データ出力を前記サンプルを特徴付けるカタログ記録出力に統合することであって、そのような記録は、前記識別データも含む、ことと、
保管のために、ネットワークを経由して前記カタログ記録出力を記録システムに伝送することと
を含む、デバイス。
（項目２）
前記サンプルの前記画像を処理することは、前記識別データの前記画像と、前記サンプルの前記画像とを含む合成画像を形成することを含む、項目１に記載のデバイス。
（項目３）
前記カメラのうちの前記第１のものに捕捉させること、および前記カメラのうちの前記第２のものに捕捉させることは、各カメラによって捕捉することがほぼ同時に生じるような態様で生じる、項目１に記載のデバイス。
（項目４）
前記カタログ記録出力は、前記サンプル画像と、前記識別データの前記画像と、前記識別データおよび前記サンプルの前記画像が捕捉された時間を示すタイムスタンプとを含む、項目３に記載のデバイス。
（項目５）
前記サンプルは、処理カセットに移送されるべきであり、前記処理カセットは、その上に第２の識別データを有し、前記作業エリアは、前記カセットを受け取るための場所を有する一方、前記容器も、前記作業エリアにおいて受け取られており、前記コントローラによって実行される前記コンピュータプロセスは、
前記第２の識別データの画像を前記カメラのうちの１つに捕捉させることと、
前記起源識別データおよび前記第２の識別データをそれぞれの第１および第２のデジタル的にエンコードされたテキストに変換することと、
一貫性を保つために、前記第１のデジタル的にエンコードされたテキストと第２のデジタル的にエンコードされたテキストとを比較することと
をさらに含む、項目１に記載のデバイス。
（項目６）
前記コンピュータプロセスは、前記容器から前記処理カセットへの前記サンプルの移送を文書化した画像の組を前記カメラのうちの選択されたものに捕捉させることをさらに含む、項目５に記載のデバイス。
（項目７）
前記捕捉された画像の組は、ビデオ記録である、項目６に記載のデバイス。
（項目８）
前記コンピュータプロセスは、前記移送を文書化した前記捕捉された画像の組を分析し、通常の移送に関連付けられる活動からのそれにおける明白な逸脱を識別することをさらに含む、項目５に記載のデバイス。
（項目９）
前記逸脱は、移送されるべき前記サンプルの一部が修正されているか、または失われていると思われる場合のそれである、項目８に記載のデバイス。
（項目１０）
前記逸脱は、移送されるべき前記サンプルの前記一部が前記容器内に留まっている場合のそれである、項目９に記載のデバイス。
（項目１１）
前記逸脱は、前記第２のデジタル的にエンコードされたテキストが前記第１のデジタル的にエンコードされたテキストに合致しないことに基づいて、前記サンプルが、不正確な処理カセットに移送されていると思われる場合のそれである、項目８に記載のデバイス。
（項目１２）
前記コンピュータプロセスは、下流処理のための最小基準の準拠のために、前記サンプルの属性を特徴付ける前記データ出力を査定することと、そのような準拠の場合、下流処理のために前記サンプルを提出するための通知メッセージを前記ユーザに発行することとをさらに含む、項目５に記載のデバイス。
（項目１３）
前記査定のために使用される前記サンプルの前記属性は、前記サンプルのサイズと、前記サンプルの各部片の寸法と、前記サンプルの各部片の色と、前記サンプルの各部片における輪郭場所と、それらの組み合わせとから成る群から選択される１つを含む、項目１２に記載のデバイス。
（項目１４）
前記命令は、前記サンプルの複数の部分のうちの各部分の異なるグラフィック表現を前記ユーザに表示するように構成されたコンピュータユーザインターフェースを確立し、前記サンプルの前記複数の部分のうちの各部分は、その部分の識別、その部分の少なくとも１つの属性、およびその部分の場所を一緒に伴っている、項目１に記載のデバイス。
（項目１５）
前記コンピュータプロセスは、前記サンプルの画像のｚ軸分析によって、前記部分の前記少なくとも１つの属性を決定することをさらに含む、項目１４に記載のデバイス。
（項目１６）
前記コンピュータユーザインターフェースは、前記サンプルの通常の移送に関連付けられた活動からのそれにおける明白な逸脱を前記ユーザにグラフィカルに示す、項目１４に記載のデバイス。
（項目１７）
前記コンピュータユーザインターフェースは、下流処理のための最小基準の前記サンプルの属性の非準拠を前記ユーザにグラフィカルに示す、項目１４に記載のデバイス。
（項目１８）
カタログ化されたサンプルに関連付けられたデータ記録が保管された非一過性記憶媒体であって、前記データ記録は、（ｉ）前記サンプルの画像と、（ｉｉ）前記サンプルに関連付けられた識別データの画像であって、前記サンプルの前記画像および前記識別データの前記画像は、同時に捕捉されている、画像と、（ｉｉｉ）前記画像が捕捉された時間を示すタイムスタンプとを含む、非一過性記憶媒体。
（項目１９）
前記データ記録は、前記サンプルの前記画像と前記識別データの前記画像とを含む合成画像を含む、項目１８に記載の記憶媒体。
（項目２０）
前記識別データの前記画像は、前記サンプルを最初に保管する容器に関連付けられており、前記データ記録は、（ｉｖ）処理カセットに移送される前記サンプルの画像と、（ｖ）前記処理カセットに関連付けられた第２の識別データの画像と、（ｖｉ）前記処理カセットに移送される前記サンプルの前記画像と前記第２の識別データの前記画像が捕捉された前記時間を示すタイムスタンプとをさらに含む、項目１８に記載の記憶媒体。

実施形態の前述の特徴は、付随の図面を参照して得られる以下の発明を実施するための形態の参照によって、より容易に理解されるであろう。

図１は、本発明のある実施形態による、組織試料の処理およびカタログ化のためのデバイスのためのハードウェアおよび追加のアイテムの斜視図である。

図２は、本発明のある実施形態による、組織試料の処理およびカタログ化のための図１のデバイスのハードウェアコンポーネントの相互接続を示すブロック図である。

図３は、本発明のある実施形態による、図１のデバイスにおいて使用されるソフトウェアおよびハードウェアシステムのブロック図である。

図４は、本発明のある実施形態による、図３のコンポーネントによって実行されるプロセスの概要を提供するブロック図である。

図５は、本発明のある実施形態による、図３のシステムを使用することにおいて技師によって実行されるプロセスを示すブロック図である。

図６は、本発明のある実施形態による、図３の撮像モジュールによって実行されるプロセスを示すブロック図である。

図７は、本発明のある実施形態による、図３の撮像モジュールのためのコンピュータビジョンプロセスに関連付けられるプロセスを示すブロック図である。

図８は、本発明のある実施形態による、図３の撮像モジュールのためのｚ軸分析に関連付けられるプロセスを示すブロック図である。

図９は、本発明のある実施形態による、図３の撮像モジュールのための品質保証機能に関連付けられるプロセスを示すブロック図である。

図１０は、本発明のある実施形態による、図３の撮像モジュールのためのユーザインターフェースを提供するディスプレイの表現である。

図１１は、本発明のある実施形態による、図３の承認モジュールによって実行されるプロセスを示すブロック図である。

図１２は、本発明のある実施形態による、図３の承認モジュールによって実行される追加のプロセスを示すブロック図である。

図１３は、本発明のある実施形態による、図３の承認モジュールのためのユーザインターフェースを提供するディスプレイの表現である。

図１４は、本発明のある実施形態による、図３の管理モジュールによって実行されるプロセスを示すブロック図である。

図１５は、本発明のある実施形態による、図３の管理モジュールに関連付けられる追加のプロセスを示すブロック図である。

図１６は、本発明のある実施形態による、図３の管理モジュールのためのユーザインターフェース（ＵＩ）を提供するディスプレイの表現である。

図１７は、本発明のある実施形態による、取り入れ容器（最初に図１に容器１２０として示される）から処理カセット（最初に図１にカセット１２２として示される）へのサンプル部片の移送における第１のステップのためのユーザインターフェースを提供するディスプレイの表現である。

図１８は、本発明のある実施形態による、取り入れ容器から処理カセットへのサンプル部片の移送における第２のステップのためのユーザインターフェースを提供するディスプレイの表現である。

図１９は、本発明のある実施形態による、取り入れ容器から処理カセットへのサンプル部片の移送における第３のステップのためのユーザインターフェースを提供するディスプレイの表現である。

図２０は、本発明のある実施形態による、取り入れ容器から処理カセットへのサンプル部片の移送における第４のステップのためのユーザインターフェースを提供するディスプレイの表現である。

定義。本説明および付随の請求項において使用されるように、以下の用語は、文脈が別様に要求しない限り、示される意味を有するものとする。
「コンピュータプロセス」は、ソフトウェアまたはファームウェアまたはこれらのうちのいずれかの組み合わせの制御下で動作するか、または前述のもののうちのいずれかの制御の外で動作し得る（プロセッサ、フィールドプログラマブルゲートアレイ、または他の電子組み合わせ論理、または類似するデバイス等の）コンピュータハードウェアを使用するコンピュータ内の説明される機能の実施である。説明される機能の全てまたは一部が、トランジスタまたはレジスタ等の、能動的または受動的電子コンポーネントによって実施され得る。用語「コンピュータプロセス」を使用することにおいて、必ずしもスケジュール可能なエンティティ、またはコンピュータプロググラムの動作、またはそれらの一部を要求するわけではないが、いくつかの実施形態において、コンピュータプロセスは、そのようなスケジュール可能なエンティティ、またはコンピュータプロググラムの動作、またはそれらの一部によって実装され得る。さらに、文脈が別様に要求しない限り、「プロセス」は、２つ以上のプロセッサまたは２つ以上の（シングルまたはマルチプロセッサ）コンピュータを使用して実装され得る。
「コントローラシステム」は、コントローラの組である。
「組」は、少なくとも１つの構成要素を含む。
「サンプル」は、それへの後の参照のために処理およびカタログ化を受けるべきアイテムである。用語「サンプル」は、限定ではないが、評価のために取得されている組織試料、および証拠または調査目的のために犯罪現場から取得されるアイテムを含む。
サンプルの「画像」は、写真画像のみならず、ビデオ表現も含む。写真画像およびビデオ表現は、随意に、ＪＰＥＧまたはＭＰＥＧフォーマット等のデジタルフォーマットにおけるものあり得る。
「取り入れ容器」は、患者の組織試料を最初に貯蔵するために使用される容器、および／または、関連のある病理検査室への輸送および提示のために使用される容器である。
「処理カセット」は、病理検査室内での受領および取り入れの後、患者の組織試料を処理するために使用されるスレート状の開口部（または他の類似する特徴）を伴う容器である。
「依頼書」は、患者の組織試料源、関連のある医療および患者識別、および該組織試料に関して要求される処理を説明する文書である。これらは、典型的に、患者の組織試料の取り入れ容器に添付され、患者識別を確認し、検査室における処理に関する詳細を提供する。
「組織試料」は、限定ではないが、臓器、真皮、または他のエリアからの組織を含む生物学的材料である。組織は、他の位置の中でもとりわけ、外科手術、生検、動物試験、および剖検を含む医療手技から調達されることができる。
「タッチスクリーン」は、ユーザが画面上のエリアをタッチすることによってコンピュータと相互作用することを可能にする、ディスプレイデバイスである。
「ソフトウェアモジュール」は、プロセッサに本明細書に定義されるような「コンピュータプロセス」の組を実施させるプログラムの組である。
「電子医療記録」は、電子フォーマットで記録される対象に関連する医療、生物学的、症例、または試験情報を含む記録である。そのような記録は、時として、（とりわけ）電子医療記録（ＥＭＲ）、検査室情報システム（ＬＩＳ）における記録、または検査室情報管理システム（ＬＩＭＳ）における記録と称される。
「ラベル」は、容器の内容物を識別するデータを含む容器に適用される表示である。表示は、容器に直接適用されるインクによるもの、容器に貼り付けられる印刷ラベルによるもの、および容器を彫刻することによるものを含む多種多様な方法によって達成され得る。表示は、英数字データ、バーコード、ＱＲコード（登録商標）等を含む、多種多様なフォーマットのいずれかにあり得る。
「カメラ」は、写真またはビデオ表現として、場面の画像を２次元または３次元において捕捉するように構成されたデバイスであり、場面は、サンプルを含み得る。
サンプルの処理およびカタログ化のためのデバイスのための「フレームワーク」は、とりわけ、サンプルの画像を捕捉するように構成されるカメラの組を搭載し、サンプルが撮像される作業エリアも画定する構造である。
「グラフィカルセレクタ」は、アイコン、デバイス、またはボタンを示すコンピュータディスプレイの一部であり、マウスクリックまたはグラフィック相互作用の他の方法によるそれら起動は、ユーザによって行われる選択を構成するようにコンピュータプログラムによって構成される。

図１は、本発明のある実施形態による、組織試料の処理およびカタログ化のためのデバイスのためのハードウェアの斜視図である。ハードウェアコンポーネントは、組織試料の数、サイズ、および他の定性的および定量的視覚特徴の分析のために、独立して機能し、および追加のアイテムと連動して機能する。

システムハードウェアは、堅いプラスチック、アルミニウム、または他の適切な材料から作製されるメインシステムフレームワーク１１４の中に収容され、本実施形態は、典型的な射出成型プロセスを使用して製造される堅いプラスチックエンクロージャを利用する。フレームワークは、３つの部品に成型され、それらは、続いて、部品整列のための成型された留め具孔を利用して取り付けられる。このフレームワーク１１４は、カメラ、照明、可視化スクリーン、および処理コンポーネントを含む全てのハードウェアコンポーネントのための支持および搭載部を含む。これらのハードウェアコンポーネントのうちの１つは、メインフレームワーク内に搭載されるメインカメラ１０４である。フレームワーク１１４は、（光および温度等のパラメータの制御に関連する）試料査定の環境制御を可能にする内部プラットフォーム１０８も含む。このプラットフォームは、該試料および追加の材料に対するシステムの採用のために組織試料および他の材料を置くべきエリアを含み得る。査定中の試料を保持する取り入れ容器１２０が、この内部プラットフォーム１０８上に示されている。サンプルを識別する情報を含み得るこの取り入れ容器１１８のためのラベルも、示されている。本実施形態において、取り入れ容器は、Ｔｈｅｒｍｏ Ｓｃｉｅｎｔｉｆｉｃ製のＳａｍｃｏ Ｈｉｓｔｏｌｏｇｙ Ｂｉｏ－Ｔｉｔｅ非滅菌試料容器である。これらのアイテムは、Ｔｈｅｒｍｏ Ｆｉｓｈｅｒ Ｓｃｉｅｎｔｉｆｉｃ Ｉｎｃ．（Ｗａｌｔｈａｍ，Ｍａｓｓａｃｈｕｓｅｔｔｓ）から入手可能である。示されるラベル１２０は、一般的なインクジェットプリンタまたはより特殊な検査室処理機器から生産され得る。処理カセット１２２は、試料を処理するために使用され得、試料は、図５にさらに説明されるように、本発明の本実施形態の使用中に取り入れ容器から処理カセットに移送される。本発明の本実施形態において、処理カセットは、Ｔｈｅｒｍｏ Ｆｉｓｈｅｒ製のＳｈａｎｄｏｎ^ＴＭ生検処理／埋込カセットＩＩであり、これらのアイテムは、Ｔｈｅｒｍｏ Ｆｉｓｈｅｒ Ｓｃｉｅｎｔｉｆｉｃ Ｉｎｃ．（Ｗａｌｔｈａｍ，Ｍａｓｓａｃｈｕｓｅｔｔｓ）から入手可能である。本実施形態のシステムフレームワーク内部は、種々のカメラの視野内に位置するいくつかのマーキングおよび他の特徴も含み、種々の較正活動を可能にし得る。本発明の本実施形態は、既存のベンチトップエリア内で動作し、オペレータのホルマリンまたは他の定着剤への暴露のリスクに対処するように設計され、本実施形態は、空気濾過を伴うドラフトチャンバまたは他のエリア内で動作するように設計される。他の実施形態は、ホルムアルデヒドまたは他の有毒物質の存在下での安全な動作のための内蔵型空気濾過または空気除去システムを含み得る。

内部照明システム１０２が、コンピュータビジョンおよび他の活動のための照明条件を制御するために使用され得る。本実施形態において、１２ｖＤＣ電力供給源が、照明への電圧、したがって、光強度を制御するために、電圧コントローラと連動してＬＥＤ照明に給電するために使用される。随意に、強度は、図３に関連して説明されるように、手動で制御されるか、または、コンピュータビジョンシステムおよび処理モジュールの制御下に置かれる。この照明のための電気および制御配線が、システムプロセッサの空洞領域１１０を通して伸ばされ得る。この種々の配線は、メインシステムフレームワーク１１４の外部の背面に位置するポートの組を介して本実施形態の他のコンポーネントに接続され得る。

本実施形態は、メインシステムフレームワーク内部およびフレームの外部の領域の両方のビューの視覚記録を提供する複数のカメラを含む。これらのカメラは、状況に従って種々のレベルの分解能および焦点範囲において動作するように構成され得る。本発明の本実施形態において、３つのカメラ、すなわち、一次カメラ１０４、および補助カメラ１０６および１１２が、組織試料および容器、容器上の任意のラベリング、バーコード、および容器上の表記、および、（限定ではないが、依頼書を含む）他の文書の視覚記録を提供するために使用される。一次カメラ１０４は、補助カメラ１０６および１１２より高い能力を有し得、例えば、本実施形態において、一次カメラ１０４は、組織試料の高さおよび構成を詳細に記録することが可能な立体カメラである。本実施形態において、第１の補助カメラ１０６は、その視野が、組織試料、取り入れ容器、処理カセット、依頼書、および／または組織試料に関連付けられる他の文書を含むシステムフレームワーク内部の方に向けられる。第２の補助カメラ１１２は、ステージングエリア１１６を含む視野を伴うメインシステムフレームワーク１１４の近傍であるが、その外部の空間の方に向けられ、ステージングエリア１１６において、関連付けられる文書、依頼書、および追加の容器およびカセットが、設置され、視覚的に詳細に記録され得る。

立体カメラである一次カメラ１０４は、該組織試料の定量的かつ定性的査定および分析のためにシステムフレームワーク内部に位置する組織試料に向けられる視野を有する。本実施形態において、一次カメラは、Ｃｏｄｅ Ｌａｂｏｒａｔｏｒｉｅｓ，Ｉｎｃ．（Ｈｅｎｄｅｒｓｏｎ，Ｎｅｖａｄａ）から入手可能なＤＵＯ－ＭＩＮＩＬＸ－ＬＶ１である。このカメラは、０．３６ＭＰ（７５２×４８０）の分解能を有し、この分解能において４５ＦＰＳのフレームレートを伴う。本実施形態において、ＤＵＯ－ＭＩＮＩＬＸ－ＬＶ１は、その２つのレンズおよびセンサの両方を用いて画像を捕捉することができ、画像は、図８に関連してさらに説明されるように、査定中の組織試料のｚ軸寸法を決定するために使用され得る。全てのカメラが、関連のあるコンピュータプロセスを実施するコンピュータハードウェアに接続され、本実施形態において、コンピュータのユニバーサルシリアルバス（ＵＳＢ）３．０ポートが、（図２に関連してさらに説明されるように）ＵＳＢハブへの接続のための要求に応じて、メインシステムフレームワーク１１４およびシステムプロセッサの空洞領域１１０を通過するケーブルを介して結合される。メインシステムフレームワークの外部は、コンピュータからのケーブルに結合されるＵＳＢポートの組を具備する。

記載されたように、実施形態は、１つ以上の補助カメラ１０６および１１２も含み得る。本実施形態において、Ｌｏｇｉｔｅｃｈ（Ｎｅｗａｒｋ，ＣＡ）から入手可能な２つのＣ９２０ビデオカメラが、使用される。これらのカメラは、１，０８０ｐの分解能を有し、この分解において、１秒あたり３０個のフレームを捕捉する。これらのカメラも、一次カメラ１０４に類似する方式で、ＵＳＢ接続を使用してコンピュータハードウェアに接続される。

本実施形態は、システムの動作のためのユーザインターフェースのためのタッチスクリーン１００を含む。他のディスプレイおよびユーザインターフェース配列も、可能である。ここで、タッチスクリーンを伴う（Ａｄａｆｒｕｉｔ（Ｎｅｗ Ｙｏｒｋ，Ｎｅｗ Ｙｏｒｋ）から入手可能な）Ａｄａｆｒｕｉｔ製ＨＤＭ（登録商標）Ｉ７インチ８００×４８０ディスプレイバックパックが、使用される。このディスプレイは、８００×４８０ピクセルの分解能を提供し、対角線上で７インチを測定する。このディスプレイは、メインシステムフレームワークの上側外面上に位置する。オペレータは、ディスプレイと相互作用し、組織試料、および該組織試料の処理および査定に関連付けられる他の情報の視覚記録および分析を管理する。このディスプレイは、図３に関連して説明されるように、限定ではないが、承認モジュール、管理モジュール、および電子医療記録システムから供給される情報を含む実施形態の他のコンポーネントに関連する情報および活動を管理するためのオペレータのためのインターフェースも提供する。

図２は、本発明のある実施形態による、組織試料の処理およびカタログ化のための図１のデバイスのコンポーネントの相互接続を示すブロック図である。本実施形態において、３つのカメラ、すなわち、「一次カメラ」と標識される１つ２０２、および「補助カメラ」と標識される２つ２０４および２０６が、標準的なＵＳＢ接続ケーブルを使用してＵＳＢハブ２０８に接続される。これらのＵＳＢケーブルは、カメラのための電力を供給し、画像および他のデータを搬送する。このＵＳＢハブは、１２０ｖＡＣを利用する標準的なＡＣ／ＤＣコンバータから供給される１２ｖＤＣ電力２１０によって給電される。ＵＳＢハブは、標準的なＵＳＢケーブルを介してＣＰＵ（中央処理ユニット）２１２にも接続される。このＣＰＵは、撮像分析のためのソフトウェアコンポーネント、すなわち、（図３に説明される）撮像モジュール２１４の動作を含む種々のコンピュータプロセスを実施する。本実施形態において、このＣＰＵは、Ｗｉｎｄｏｗｓ（登録商標）１０オペレーティングシステムを起動する一般的なデスクトップコンピュータである。このコンピュータ、例えば、（Ｄｅｌｌ（Ｒｏｕｎｄ Ｒｏｃｋ，Ｔｅｘａｓ）から入手可能な）Ｄｅｌｌ Ｉｎｓｐｉｒｏｎ ｄｅｓｋｔｏｐ ３６６８は、いくつかの供給元によって製造され得る。このコンピュータは、（Ｌｏｇｉｔｅｃｈ （Ｎｅｗａｒｋ，ＣＡ）から入手可能な）Ｌｏｇｉｔｅｃｈ製Ｋ３６０無線キーボードを含むいくつかの供給元からのキーボード、および（Ａｃｅｒ（Ｓａｎ Ｊｏｓｅ，ＣＡ）から入手可能な）Ａｃｅｒ製Ｋ２２２ＨＱＬ ２１．５ ＬＥＤモニタを含むいくつかの供給元からのディスプレイを供給されるであろう。本実施形態において、このコンピュータは、実施形態のカメラおよび他のハードウェアコンポーネントを動作させるために、実施形態のソフトウェアコンポーネントの動作のために使用される。ユーザは、ここに記載されるモニタおよびキーボードを介して、または図１に関連して説明されるタッチスクリーンを介して、このソフトウェアとインターフェースをとり得る。

図２に示されるＵＳＢハブは、図１に関連して説明されるＬＥＤ照明システムのための輝度コントローラ２１６に接続される。本実施形態において、Ｃａｌｒａｄ製の９２－３４２ＬＥＤ照明調光器（Ｃａｌｒａｄ（Ｌｏｓ Ａｎｇｅｌｅｓ，ＣＡ）から入手可能な輝度調節）が、Ｐｈｉｌｍｏｒｅ製４－ＬＥＤ １２ＶＤＣ方形光モジュール２１８（Ｐｈｉｌｍｏｒｅ（Ｎａｐｌｅｓ，ＦＬ）から入手可能な光アレイ）を制御するために使用される。この照明は、メインシステムフレームワークの内側に設置される組織試料、ラベル、および書類の画像捕捉のための好ましい照明環境を作成するために使用され得る。本発明の本実施形態において、ＬＥＤ照明の要件に対して適切な追加の電力供給源２１０が、使用される。

図３は、本発明のある実施形態による、図１のデバイスにおいて使用されるソフトウェアおよびハードウェアシステムのブロック図である。図３のための凡例に示されるように、本発明に関連するデータが、３つのタイプのコンポーネント間で交換される。第１のタイプは、ＶＰＢ（ＶｉｓｔａＰａｔｈ Ｂｉｏｓｙｓｔｅｍｓ）ソフトウェア３０２であり、本実施形態において、図４に関連して説明されるように、３つのメインソフトウェアモジュール：撮像モジュール３０８、管理モジュール３１０、および承認モジュール３１２が存在する。コンポーネントの第２のタイプは、データハブ３０４であり、それは、データの記憶および管理、および種々のコンピュータプロセスのために使用される。これらのデータハブは、画像データ、システム設定、サンプル報告書、および他の関連のある情報を保持する。本発明の本実施形態において、データサーバが、本機能のために使用され、データサーバは、コンピュータプロセスの実施のためのコンピュータハードウェアと、（Ｄｅｌｌ Ｉｎｃ．（Ｒｏｕｎｄ Ｒｏｃｋ，ＴＸ）から入手可能な）Ｄｅｌｌ製ＰｏｗｅｒＥｄｇｅ Ｔ３０等のデータ記憶装置とから成る。コンポーネントの第３のタイプは、ＶＰＢ（ＶｉｓｔａＰａｔｈ Ｂｉｏｓｙｓｔｅｍｓ）ハードウェア３０６である。システムのコンポーネントのこのタイプは、図１に関連して説明される物理ハードウェアである。

本発明の本実施形態において、ＶＰＢハードウェアコンポーネントは、（ここでは「ビデオフィード」として説明される）画像データを撮像モジュールに送達する。デジタルビジョンアシスタント、またはＤＶＡ３１４は、図１に関連して説明される本実施形態における組織試料プロセッサのための名称である。撮像モジュールソフトウェア３０８は、（ここでは「カメラ制御」として説明される）ＤＶＡ機能の種々の側面を制御するためのデータを送信する。撮像モジュール３０８は、ＤＶＡハードウェアの近傍に位置するコンピュータ上で動作する。このコンピュータは、図２に関連して説明されるように、イーサネット（登録商標）ケーブル等の有線接続を介してローカルコンピュータネットワークに接続される。撮像モジュールは、他のデータの中でもとりわけ、画像および試料データを現場データサーバ３１６に送信する。本発明の本実施形態において、この現場データサーバは、他の特徴の中でもとりわけ、標準的なデータベース特性を含むデータの記憶、管理、および送達のために、コンピュータシステムによって実装される。現場データサーバは、電子医療記録３１５、すなわち、患者の情報または査定中の試料に関連する情報を記憶するデータサーバへの直接的アクセスを有する。電子記録システムは、ＥｐｉｃおよびＣｅｒｎｅｒ等の企業によって提供されるソフトウェアを典型的に利用する。現場データサーバ３１６は、ＶＰＢデータサーバ３１８への直接的アクセスも有し得る。このＶＰＢデータサーバは、試料の処理およびカタログ化の現場から遠隔で位置し得、該データハブへのアクセスは、インタネットプロバイダを介して、または他の一般的な手段によって達成され得る。本発明の本実施形態において、ＶＰＢデータサーバは、他の特徴の中でもとりわけ、標準的なデータベース特性を含むデータの記憶、管理、および送達のためのシステムを表す。このＶＰＢデータハブは、現場データサーバへの類似するデータを含み、追加のＶＰＢソフトウェアへの接続を可能にし得る。現場動作と遠隔データサーバとの間の通信障害の場合、データサーバ３１６および３１８の両方は、独立して機能し、接続されるソフトウェアコンポーネントを支援するための能力を保持することが可能であり得る。本実施形態において、ＶＰＢデータハブは、ＶＰＢソフトウェア管理モジュール３１０および承認モジュール３１２に直接接続される。ＶＰＢデータサーバと管理モジュールとの間のインターフェースに関して、サーバは、他の潜在的データ交換の中でもとりわけ、ユーザ設定および他の動作データを管理モジュールに送信し、ユーザから入力されるデータおよび他のユーザ設定を受信する。ＶＰＢデータサーバと承認モジュールとの間のインターフェースに関して、サーバは、他の潜在的データ交換の中でもとりわけ、画像、患者、および他の試料データを承認モジュールに送信し、レポート承認または他のレポート査定データを含むユーザから入力されるデータを受信する。これらのインターフェースが、図４に関連して説明される。

図４は、本発明のある実施形態による、図３のコンポーネントによって実行されるプロセスの概要を提供するブロック図である。この図において、別個の列が、図３の５つのコンポーネントの各々に充てられ、これらコンポーネントおよびそれらの直接データ接続のための論理フローが、示されている。撮像モジュール機能４００が、試料の査定がユーザ４１０によって開始されると、開始する。撮像モジュールは、次いで、カメラおよび照明動作を制御し得（４１２）、例えば、他の動作の中でもとりわけ、カメラの開口および照明強度を設定し得る。これらのカメラからの画像データは、次いで、撮像モジュールのコンピュータビジョンパイプライン内で分析される（４１４）（本発明のある実施形態の本説明において、コンピュータビジョンプロセスの文脈において、パイプラインは、ある画像分析をもたらすソフトウェアプロセスの集合を指す）。このコンピュータビジョンパイプラインのうちの１つのコンポーネントが、組織試料を識別し、該試料の境界を計算し、各試料の３次元（ｘ、ｙ、ｚ）における寸法を発生させる。コンピュータビジョンパイプラインは、色および総数等の組織試料に関する追加の定量的情報も計算し得る。撮像モジュール内のコンピュータビジョンパイプラインの別のコンポーネントが、おそらく、オブジェクト文字認識（ＯＣＲ）を使用して、査定中の試料に関連付けられる種々のラベリングおよびバーコードを識別する。これらのデータは、全ての関連のあるデータが精査される品質制御プロセスにおいて査定され（４１６）、これらのプロセスは、テキスト、バーコード、ＱＲコード（登録商標）、および他のエンコードされたテキスト情報が、正しい症例または他の試料識別子と内部的に一貫し、それに関連付けられるかどうかを決定する。このプロセスは、図９に関連してさらに説明される。この現在の実施形態において、品質制御プロセス４１６は、一度のみ実施されるが、それは、代替として、試料の査定および処理の全体を通して繰り返して実施され得る。最後に、プロセス４１８において、限定ではないが、カメラ画像、組織試料の寸法および色、および患者の情報を含む撮像モジュールによって発生させられたデータが、集約され、現場データサーバ４０２に送信される。

本発明の本実施形態に関して、現場データサーバ４０２は、ローカルコンピュータネットワークを使用して該コンポーネントに接続するＤＶＡおよび撮像モジュール４２０からのデータを記憶および処理する。現場データサーバ内において、撮像モジュールから供給される症例および他の試料データが、プロセス４２２において、品質制御プロセス４１６の拡張である電子患者記録４２４と比較される。撮像ハードウェア（カメラ）の視野内で容器および文書に関して以前に識別されている関連のあるテキストが、査定され、それらが正しい症例または他の試料識別子と内部的に一貫し、それに関連付けられていることを確認する。この情報の査定は、現場データサーバおよび電子患者記録４２４を通して交換されるデータを介して実施される。これらおよび他の関連のあるデータも、他のソフトウェアモジュールによるアクセスのために、現場データサーバの中に記憶される。

現場データサーバ４０２上に記憶される患者および試料情報は、ＶＰＢデータサーバ４０４も送信される。着目すべきこととして、本実施形態において、現場データサーバ４０２およびＶＰＢ（Ｖｉｓｔａｐａｔｈ Ｂｉｏｓｙｓｔｅｍｓ製）データサーバ４０４上に、冗長データが存在し得る。これは、現場データサーバとＶＰＢデータサーバとの間の通信断絶の場合、本発明の本実施形態の種々のコンポーネントの独立的な動作を可能にする。この冗長データは、該接続がアクティブであるとき、プロセス４２８において、種々の点において、一般的なデータベースシステムプロトコルに従って動作するコンフリクト管理と比較される。所与の症例または試料査定に関して、処理は、全ての要求されるデータが記憶され、適切に査定されると、終結される（４３０）。承認および管理モジュール４０６および４０８は、ＶＰＢサーバ４０４に直接接続されるが、他の実施形態において、現場データサーバ４０２への直接的な追加のデータ接続が、存在し得る。

承認モジュール４０６は、他の関連のあるデータの中でもとりわけ、コンピュータビジョンパイプラインからの患者識別、画像データ、該データに関する分析等のデータを受信し、集約する（４３２）。この試料査定プロセスのための動作のためのユーザによって入力された基準に基づいて、このモジュールは、これらの試料のユーザによる査定のための優先度を作成し得る。該優先度キュー４３４の展開は、他の基準の中でもとりわけ、組織タイプ、システムへのエントリの時間、および処理のための要件等の基準を含み得る。加えて、この承認モジュールは、ＶＰＢデータサーバからのデータを集約し、本発明の本実施形態において、技師による査定のための総括レポートと呼ばれる試料の説明を発生させ得る（４３６）。総括レポートは、部片の数の総数、各部片に関する寸法、および、色および潜在的に他の特徴の説明を含む試料の書かれた説明から成る。他の実施形態において、この説明レポートは、別の用語を用いて識別され得、査定中の試料に関する追加のまたは異なる属性を含み得る。承認モジュールは、このレポートおよび関連付けられたデータをそれらの査定のためにユーザにも送達し得る。本実施形態において、この総括レポートを表示するユーザインターフェースは、発生させられたレポートのテキスト、患者情報、および、全ての関連のあるラベリングおよび書類が意図される試料に関連付けられていることの指示を含み得る。本実施形態のためのそのようなユーザインターフェースの例が、図１０に関連して示される。ユーザがこの情報を査定した後、ユーザは、レポートを容認するか、レポートを拒否するか、または、試料の査定またはレポートの改訂を要求し得る。このレポートの技師の承認または拒絶が、プロセス４３８において記録される。これらのプロセスの詳細が、図１１により詳細に説明される。

管理モジュール４０８は、ＶＰＢデータサーバからの動作および画像データ４４０を集約し、このプロセスおよび該試料の種々の側面の査定のための該情報の統計分析を実施する。本実施形態において、この分析は、例えば、以下の追跡および統計分析４４２を含む：各プロセスステップ、個々のユーザの動作率およびエラー率、症例および／または検査室動作に関する任意のカテゴリ情報と対にされて実施されたプロセスの詳細。この情報および他の情報の種々の提示が、種々のユーザインターフェースによってユーザに利用可能にされる。管理モジュールへのユーザによって発生させられる変更への任意のユーザ選好および／または変更が、後続の使用のために記録される（４４４）。これらのソフトウェア動作が、図１３および１４に関連してさらに説明される。

図５は、本発明のある実施形態による、図３のシステムを使用することにおいて技師によって実行されるプロセスを示すブロック図である。本実施形態において、ユーザは、２つの別個のプロセス、この図の第１および第２の列に示される組織処理５０２と総括レポート精査５０４とを実施する。組織処理５０２に関して、ユーザは、本発明の現在の実施形態のステージングエリアの内側およびその中に材料を配置する（５０８）ことによって、試料の査定を開始する（５０６）。試料が閉鎖された取り入れ容器の中にある場合、ユーザは、該容器の上面を除去し、システム精査を可能にするであろう（５１０）。ユーザは、次いで、（ユーザインターフェース、またはＵＩを介して）査定中の試料の画像と、レポートとの表示を提示され、レポートは、試料と全ての材料（ラベルおよび書類を含む）が、正しい患者記録に関連付けられていることの検証とを説明しているであろう。ユーザは、この情報の容認性を査定するであろう（５１２）。ユーザが、この情報が提示されるように容認可能でないと見出した場合、システムは、技師が情報および画像を調節および修正するための選択肢を提供するであろう（５１４）。これは、限定ではないが、他の可能性の中でもとりわけ、照明および試料のコンピュータビジョン分析の修正、および説明レポートの修正を含み得る。試料処理が、技師によって容認可能であると見なされる場合（５１２）、ユーザは、試料を取り入れ容器から処理カセットに移送するであろう（５１６）。このプロセスが、図１７に関連してさらに説明される。ユーザは、次いで、ＤＶＡから試料および関連付けられる文書を除去する（５１８）。本発明の本実施形態の範囲外である試料の追加の処理（５２０）が、次いで、生じる。

本発明の本実施形態は、この時点において、この試料（症例）が、総括レポート精査コンポーネント５０４を使用した精査のために、かつ潜在的に承認のために利用可能であることを技師に通知する（５２２）。技師は、リスト（キュー）から精査のために利用可能な１つの症例を選択し得（５２４）、技師は、次いで、該症例のための画像および他のデータを精査するであろう（５２６）。症例レポートおよび関連付けられる情報が、ユーザ（技師）に容認可能である場合（５３０）、彼らは、供給されるＵＩを使用して彼らの承認を記載し、症例は、下流処理のために別個のキューに移動させられるであろう（５３２）。症例レポートおよび関連付けられる情報が容認可能でない場合、ユーザは、組織処理作業フローに関連付けられる供給されるプロンプトに従うであろう（５０２）。試料の新しい画像が、要求される場合（５３４）、ユーザは、このプロセスのために、画像捕捉を修正および／または補正するための選択肢を通して指示されるであろう（５３６）。新しい画像が、要求されない場合、ユーザは、この試料に関連付けられる追加の情報を修正および／または補正するための種々の選択肢を通して指示されるであろう（５３８）。改正された試料処理情報が、組織処理作業フローの一部として再査定され（５１２）、次いで、総括レポート精査プロセス（５０４）のためにキューに再送されるであろう。

図６は、本発明のある実施形態による、図３の撮像モジュールによって実行されるプロセスを示すブロック図である。ユーザによってプロンプトされると、これらのソフトウェアプロセスは、撮像モジュールを初期化し、要求されるソフトウェアライブラリのローディング（すなわち、システムブート）を引き起こす（６０２）。初期化（．ｉｎｉ）ファイルが、次いで、ロードされ、初期化ファイルは、カメラハードウェアのアプリケーションプログラミングインターフェース（ＡＰＩ）のためのデフォルト設定値を提供し、カメラハードウェアのための設定とコンピュータビジョンパイプラインのためのデフォルト設定とを定義する（６０４）。カメラは、次に、ラベルおよびバーコードを含む試料の画像を捕捉し（６０６）、それらの画像をコンピュータビジョンパイプラインに渡す（６０８）。コンピュータビジョン分析は、図７に関連してより詳細に説明される個々の試料を識別し、その説明を発生させる（６１０）。ｚ軸計算プロセスが、図８に関連してさらに説明される立体視感知を介して試料のｚ軸寸法（高さ）を決定する（６１２）。この画像分析からのデータが、次いで、ユーザインターフェース６１４および６１６にロードされる。ユーザは、次いで、限定ではないが、試料の寸法、総数、および色を含むコンピュータビジョンパイプラインによって実施される分析を示す画像およびテキストを閲覧する。ユーザは、次いで、画像およびデータが容認可能であるかどうかを査定する（６１８）。画像および関連する分析が容認可能でない場合、ユーザは、コンピュータビジョン設定および／または入力された材料（試料、文書等）を調節する（６２０）。撮像モジュールは、次いで、システム設定を修正し、これらの修正を合致させ（６２２）、システムは、後続の分析のための画像を捕捉するようにカメラに命令する。６１４および６１６において供給される情報が容認可能（はい）である場合、品質保証プロセスが、材料（例えば、文書、処理カセット、取り入れ容器、およびそれらの材料に貼り付けられる任意のラベリング）の画像から発生させられるテキストを分析し、この情報全てが内部的に一貫している（すなわち、使用されるサンプルおよび容器が、正しい患者および患者の電子記録に関連付けられる）かどうかを確認する（６２４）。全ての関連のあるデータが、一貫している場合、それは、集約され、ＤＶＡ画像および症例記憶データベースに渡される（６２６）（この記憶システムは、図４のプロセス４２０と同一である）。このデータが、内部的に一貫していない場合、ユーザは、関連のある容器、ラベル、および／または文書を修正する必要があり（６２８）、次いで、撮像モジュールは、カメラに試料および関連付けられる容器の新しい画像を捕捉するように命令するであろう（６０６）。これらの品質保証プロセスが、図９により詳細に説明される。

図７は、本発明のある実施形態による、図３の撮像モジュールのためのコンピュータビジョンプロセスに関連付けられるプロセスを示すブロック図である。このコンピュータビジョン分析は、（最初に図６のプロセス６１０で説明される）デバイスカメラから撮像された試料を識別し、その説明を発生させる。撮像モジュールプロセスから、デバイスカメラ画像が、これらのコンピュータビジョンプロセスに送信される（７０２）。補助カメラからの２つの画像は、依頼書、カセット、およびそれらの材料に貼り付けられる種々のラベリング等のテキストを含むコンポーネントを含み得、補助カメラからの２つの画像は、意味のあるテキストを抽出するための光学文字認識（ＯＣＲ）エンジンに送信され、二次カメラＡ７０４および二次カメラＢ７０６の両方のための処理が、生じる。例えば、ＯｐｅｎＣｖ製のテキスト認識能力を使用して、テキストが、供給された画像から識別され、文字領域（患者の氏名、生年月日等）に翻訳され、二次カメラＡ７０８および二次カメラＢ７１０の両方のための処理が、生じる。プロセス７１２において、このデータは、次いで、集約され、次いで、（最初に図６のプロセス６１８に関連して説明される）それらの査定７１４のためにユーザに提示される。

この図に説明される処理に加えて、その中に含まれる組織試料を含むバイアルの画像を含み得る一次カメラからの画像が、ＣＶ（コンピュータビジョン）パイプラインに送信される（７１６）。一連のプロセスを通して、ＣＶパイプラインは、画像の背景から組織試料を識別または分割する。最初に、本発明の本実施形態において、ハフ変換が、使用され、画像の残りから取り入れ容器の場所を分離する（７１８）。画像は、次いで、トリミングされ、取り入れ容器のみを示す（７２０）。このトリミングされた画像は、処理され、試料が位置する画像の一部を識別する（閾値化として公知である）（７２２）。本実施形態において、二値閾値化が、使用されるが、他のアプローチも可能である。抽出された輪郭は、本発明の本実施形態に適切なピクセルからミリメートルへの変換を使用して、組織試料のｘおよびｙ寸法を計算するために使用されることができる（７２４）。試料の色が、抽出された輪郭内のＲＢＧ値の平均をとること、およびこれを一連の手動で定義される色ビンと比較することによって決定される（７２４）。抽出された輪郭は、次いで、追加の処理に送信され、（図８に関連してより詳細に説明される）ｚ軸寸法（垂直寸法）を決定する（７２６）。これらのプロセスから発生させられるデータは、限定ではないが、試料の輪郭場所、寸法、および色を含み、次いで、最初に図６のプロセス６１８に関連して説明されるように、ユーザによる査定（７１４）のために集約される（７１２）。

図８は、本発明のある実施形態による、図３の撮像モジュールのためのｚ軸分析に関連付けられるプロセスを示すブロック図である。特に、この図は、図７のプロセス７２６に関連して説明されるように、立体視感知を介した分割処理を用いて識別される組織試料のｚ軸寸法を決定するために要求されるプロセスをさらに説明する。この一連のプロセスは、デバイスによって供給された画像内の識別された組織試料の輪郭および場所が受信されたとき、開始する（８０２）。これらの輪郭および場所は、ここで行われるように、画像のための着目領域（ＲＯＩ）としても説明され得る。図１に関連して記載されるように、このプロセスに関して、互いに既知の距離を空けて設定される２つのカメラ（「カメラ１」および「カメラ２」）を含むＤＵＯ－ＭＩＮＩＬＸ－ＬＶ１立体視カメラが、使用される。このＲＯＩデータ、第ｉのサンプルＲＯＩが、分析のために２つの立体カメラのうちの第１のものに送信される（８０４）。試料の可能性のある最高点を表す特徴点の場所、この場合、第ｉの組織試料のＲＯＩの重心が、立体カメラ設定内の第１のカメラの視点から識別される（８０６）。同一の特徴点が、次いで、第２のカメラからの画像を用いて特徴点の正規化された相互相関の最大値を見出すことによって、立体カメラ設定内の第２のカメラの視点から識別される（８０８）。次に、類似する三角形が、立体カメラから特徴点までのｚ軸距離を識別するために使用される（８１０）。立体カメラからバイアルの底部までの既知のｚ軸距離と、組織試料がバイアルの底部に沈降しているであろうことの仮定とを所与として、第ｉの試料のｚ軸寸法が、計算される（８１２）。分析のための追加の試料輪郭が存在する場合（８１４）、このプロセスは、識別される組織試料の全てのためのｚ寸法が見出されるまで繰り返される（８１６）。関連のあるデータは全て、次いで、保存され（８１８）、ｘ軸およびｙ軸寸法、組織試料の色、ＯＣＲエンジンによって解析されるテキスト、およびカメラからの原画像を含む他の試料データと集約され（８２０）、図９に関連して説明される、品質制御プロセスに渡される。

図９は、本発明のある実施形態による、図３の撮像モジュールのための品質保証機能に関連付けられるプロセスを示すブロック図である。これらの要素は、最初に図６のプロセス６１８に関連して説明されるように、ユーザによって査定された撮像モジュールを通して蓄積された画像および関連するデータの集約データを入力として受け取る。この図に説明されるプロセスは、最初に図６のプロセス６２４に関連して説明される（ここではプロセス９０６として表される）、「使用される正しいサンプルおよび容器」を査定するプロセスに関するさらなる詳細も表す。ユーザによって容認可能であると見なされたこれらの画像を使用して、この品質保証機能は、患者の氏名および生年月日等の情報を含む本発明のカメラの処理画像から解析される文字領域を比較する（９０８）。これらのカメラから集めされるテキストデータが、一貫していない場合、システムは、ユーザインターフェース（ＵＩ）をロックし、さらなる試料処理を防止し（９１０）、是正措置をとるようにユーザにプロンプトするであろう（９１２）。ユーザは、非一貫性に対処し、撮像モジュールを図６のシステムブートプロセスから再度開始することができる。着目すべきこととして、全てのこれらのプロセスは、撮像モジュール９０２内で生じる。結果として生じるテキストが、内部的に一貫している場合、集約データは、現場データサーバ９０４内のＤＶＡ画像および症例記憶装置に渡される。このデータは、次いで、同一の基準に基づいて、ユーザの電子記録システム内に記憶される症例情報と比較される（９１４）。このデータの内部一貫性が、次いで、再度査定される（９１６）。関連のあるテキストおよび追加のデータが、内部的に一貫している場合、データは、ＤＶＡ画像および症例記憶装置データベースに送信され、データ一貫性のこの査定が、記録される（９１８）。このデータが、内部的に一貫していない場合、ユーザインターフェース（ＵＩ）は、再びロックアウトされ（９１０）、ユーザは、コンフリクトを補正するようにプロンプトされる（９１２）全てのこれらのプロセスを通して、検査中のデータの内部一貫性が、関連のあるユーザインターフェース（ＵＩ）上にチェックマーク記号を示すことによってユーザに通信される。ここで説明される品質保証プロセスは、撮像モジュールの終了時に一度行われるが、本発明の他の実施形態において、それは、試料処理ステップの全体を通して複数回行われ得る。

図１０は、本発明のある実施形態による、図３の撮像モジュール３０４のためのユーザインターフェース（ＵＩ）を提供するディスプレイの表現である。このインターフェースは、ユーザが、試料の撮像およびレポートの発生からの出力を試料査定プロセスの精度を査定する意図を持って査定することを可能にする。試料処理の最終承認が、図１１に関連して説明されるように、別個のステップにおいて行われ得る。本実施形態において、ユーザアクションのこの分離は、訓練および認証のより低いレベルのユーザが、試料を処理し、該処理の成功を査定することを可能にする一方、総括レポートの最終承認は、認証のより高いレベルを伴う技師によって、該試料と同じ場所に位置する必要なく実施され得る。患者の氏名、医療記録番号（ＭＲＮ）、および生年月日（ＤＯＢ）を含む症例情報１００４が、ユーザ精査のために示される。ユーザ識別１０１０、本実施形態ではユーザの氏名および使用時間が、正しいユーザが試料処理に関連付けられていることを確認するために示される。他の選択肢の中でもとりわけ、閲覧設定は、「歯車」アイコン１００８によって示されるグラフィカルセレクタを押すことによってユーザによって修正され得る。

このユーザインターフェースは、種々の関連付けられる情報を伴ういくつかの画像を表示する。プロセス１００２は、所与の症例のための試料の画像である。本発明の本実施形態では「総括レポート」とも呼ばれる試料の説明１００６が、ユーザの精査のために提示される。コンピュータビジョンパイプラインから発生させられるこのテキストは、画像１００２内に表される試料の正確な説明を行うべきであり；これは、いくつかの基準のうちの１つであり、それによって、ユーザがこの情報を査定し、承認のためにレポートをファイルするか、または、他のプロセスに戻り、（最初に図６に関連して説明されるように）画像または関連する情報を修正することを選定し得る。本実施形態において、ユーザが、異なるテンプレートおよび／またはフォーマットでこの説明レポートを表示することを望む場合、このタイプの変更は、種々のグラフィカルタブ１０１４を選択することによって行われ得る。容器、ラベル、および他のテキスト情報の全てが現在の症例に関連付けられることをユーザに示すために、このユーザインターフェースは、図９に関連して説明されるように、画像を示し、それをチェックマーク１０１２のアイコンでマーキングし、査定されるデータが内部的に一貫していることを示す。本実施形態において、処理カセットが、該包含に関して査定され；他の実施形態において、所与の症例に関連付けられる書類および他のラベリングが、この査定に含まれるであろう。提示されているような情報が、容認可能である場合、ユーザは、この決定を「レポートをファイルする」グラフィカルセレクタ１０１６を押すことによって示すことができる。この情報が、容認可能でない場合、ユーザは、「戻る」グラフィカルセレクタ１０１８を押し得る。ユーザは、次いで、最初に図６に説明されるように、現在のレポートを修正するための一連のオプションを提示されるであろう。

図１１は、本発明のある実施形態による、図３の承認モジュールによって実行されるプロセスを示すブロック図である。最初に図４のプロセス４０６に関連して説明されるように、承認モジュールは、試料査定の精査、修正、および潜在的な承認を可能にする。以下は、このモジュールのキュー発生に関する論理フローのより詳細な説明である。

ユーザは、ユーザインターフェースを介して承認モジュールプロセスを開始するであろう（１１０４）。モジュールは、次いで、アクティブユーザのための現在の優先度基準にアクセスするであろう（１１０６）。システムは、次いで、（最初に図４に関連して説明される）ＶＰＢデータサーバ上のＤＶＡ症例および画像記憶装置にクエリし、査定のために利用可能な症例を識別する。管理モジュールを介してユーザによって入力されるか、または（最初に図４のプロセス４２６に関連して説明される）ＤＶＡ症例および画像記憶装置内に記憶された追加の優先度基準が、次いで、アクセスされるであろう（１１１０）。このデータに基づいて、適切なキューが、ユーザのために展開されるであろう（１１１２）。該優先度キューの展開は、他の基準の中でもとりわけ、試料タイプ、検査室システムの中へのエントリ時間、処理のための要件のような基準を含み得る。いくつかの一般的なキューイングアルゴリズムのうちの１つが、ここで適用され、該優先度付けを展開し得る。このキューは、次いで、ユーザインターフェースを用いてユーザに提示され（１１１４）、その後、ユーザは、精査のために症例を選択し得る（１１１６）。選択された症例は、次いで、図１２に関連して説明されるように、この承認モジュールのための追加のプロセスに送信され、総括レポートを発生させるであろう（１１０２）。

図１２は、本発明のある実施形態による、図３の承認モジュールによって実行される追加のプロセスを示すブロック図である。特に、この図は、総括レポートの発生および閲覧（１２００）、およびユーザへの該レポートの査定および可能な承認のための提示（１２０２）を説明する。症例が、（図１１のプロセス１１１６に説明され、ここで再び継続のために１２０４と示される）症例キューから選択されると、総括レポートを発生させるためのプロセスが、開始する。（最初に図４のプロセス４０４に関連して示される）ＶＰＢデータサーバが、クエリされ、選択される症例のための画像およびテキストデータを引き出す（１２０６）。総括レポートのためのユーザによって定義されるテンプレートが、次いで、引き出される（１２１０）。このテンプレートは、表示のためのデータのタイプおよび場所を含み得、このテンプレートに関する選好が、適切な承認を伴ってユーザによって入力され（１２０８）、ＶＰＢデータサーバの中に記憶され得る。承認モジュールは、次いで、ユーザの精査（１２１８）のために該症例データを示す適切なＵＩを発生させる（１２１２）。ユーザが、提示されるようなこの症例データを容認する場合、ＶＰＢデータサーバは、この症例に合致するデータベース行に関してクエリされるであろう（１２１４）。さらに、ユーザに示されるように、総括レポートテキストが、このデータベースの場所に入力され、レポートのステータスが、「承認済」に変更されるであろう（１２１６）。

ユーザが、承認モジュールによって発生させられる総括レポートを承認しない場合（１２１８）、ユーザは、図の列「ユーザ応答を管理する」１２０２に説明されるように、選択肢を通して該レポートを修正または拒否するように指示されるであろう。ユーザは、総括レポートがレポートを承認可能にするように修正され得るかどうかを決定するようにプロンプトされるであろう（１２２０）。承認を可能にするであろう修正が、可能でない場合、ユーザは、この障害に関する基準を入力し、それらの応答が、ＶＰＢデータサーバの中に記憶されるであろう（１２２２）。そのような基準は、例えば、撮像モジュールによって実施される画像品質または画像解釈に関連する課題を含み得る。総括レポートの修正が、該レポートの承認を可能にし得る場合、承認モジュールは、ＵＩを使用したレポートの修正に関するカテゴリを提案するであろう（１２２４）。これらのカテゴリは、レポートのレイアウト、組織の寸法が提示される方法、または他の可能な修正を含み得る。ＵＩは、レポートにそのような修正を行うために、ユーザに提示されるであろう（１２２６）。該総括レポートへの改正が、記憶のためにＶＰＢデータサーバに送信されるであろう（１２３０）。次いで、総括レポートへの改正が、発生させられ（１２２８）、ユーザがレポートが容認可能であるかどうかを決定する（１２１８）ようにユーザに提示されるであろう。ユーザ応答に基づいて、承認モジュールは、再び、上で示されるように、承認プロセスを通してユーザにプロンプトするであろう。

図１３は、本発明のある実施形態による、図３の承認モジュールのためのユーザインターフェース（ＵＩ）を提供するディスプレイの表現である。このインターフェースは、ユーザが試料（総括）レポートおよび関連付けられるデータを査定することを可能にする。本発明の本実施形態において、このＵＩは、該試料に関連付けられる画像およびテキストレポートの最終承認を行うための資格のあるユーザによって利用される。患者の氏名、医療記録番号（ＭＲＮ）、および生年月日（ＤＯＢ）等の症例情報が、ユーザの精査のために示される（１３０４）。ユーザ識別１３１０、この場合、ユーザの氏名および使用時間が、正しいユーザが試料レポートの精査に関連付けられていることを確認するために示される。ユーザは、「歯車」アイコン１３０９によって示されるグラフィカルセレクタを押すことによって、他の選択肢の中でもとりわけ、設定を視認および修正し得る。

図１３のユーザインターフェースは、種々の関連付けられる情報を伴ういくつかの画像を表示する。プロセス１３０２は、所与の症例のための試料の画像を示す。試料の説明（総括レポート）１３０８も、示されている。撮像モジュールによって発生させられるこの情報は、画像１３０２内に表される試料のテキスト説明であり、それは、いくつかの基準のうちの１つであり、それによってユーザがこの出力を査定し、この情報を確認するために、またはそれにフラグを立てるために選定し得る。ユーザが、異なるテンプレートおよび／またはフォーマットでこの説明レポートを表示することを望む場合、このタイプの変更は、適切なタブ１３１４のうちの１つを選択することによって行われ得る。容器、ラベル、および他のテキスト情報の全てが現在の症例に関連付けられることをユーザに示すために、ユーザインターフェースは、最初に図４に関連して説明されるように、２つの画像を示し、それらを正しい症例内での包含を示すためのチェックマークのアイコンでマーキングする。本実施形態において、ＵＩは、取り入れ容器１３０６および処理カセット１３１２を示し、情報が内部的に一貫している場合、チェックマークアイコンを表示する。このＵＩの中に提示されるような情報が、容認可能である場合、ユーザは、「総括を確認する」グラフィカルセレクタ１３１６をクリックすることによってこの決定を示すことができる。この情報が、容認可能でない場合、ユーザは、「精査のためにフラグを立てる」グラフィカルセレクタ１３１８をクリックし得る。ユーザは、次いで、最初に図１２に関連して説明される現在のレポートに関連付けられる問題を説明するための一連の選択肢を提示されるであろう。

図１４は、本発明のある実施形態による、図３の管理モジュールによって実行されるプロセスを示すブロック図である。管理モジュールは、このプロセスの種々の側面の精査のための動作および画像データを集約し、試料に関する関連のある画像に関してユーザに通知する。特に、この図は、管理モジュールの開始１４００および症例キューの完了の分析１４０２のためのプロセスを説明する。

管理モジュールは、ユーザによって開始され（１４０４）、次いで、ユーザは、システムにログインする（１４０６）。モジュールは、所与のログインのための許可およびユーザプロファイルを引き出し（１４０８）、ユーザの許可に従って表示される情報を伴う初期ＵＩ（図１６にさらに説明されるようなユーザインターフェース）を表示する（１４１０）。ユーザは、分析のための着目情報のカテゴリを選択する（１４１２）。モジュールは、次いで、ＶＰＢデータサーバにクエリし、分析のために関連のあるデータを引き出す（１４１４）。このデータは、ここで説明されるキュー完了１４０２および図１５に関連して説明される追加の分析１４２４のために利用可能にされる。完了されたキューの割合を分析するために、このモジュールは、その症例に関して完了された合計キューおよびデータに関するデータを引き出す（１４１６）。各技師に関する未処理の症例対該技師に関する合計キューの割合が、次いで、計算される（１４１８）。所与の群に関する未処理の症例対該群に関する合計キューの割合が、次いで、計算される（１４２０）。この群は、例えば、１つのプロセスステップまたは所与の検査室として定義され得る。このモジュールは、次いで、ユーザのために、これらの分析を表示する（１４２２）。本発明の他の実施形態において、この分析の表現が、後の精査のために印刷されるか、そうでなければ記憶され得る。

図１５は、本発明のある実施形態による、図３の管理モジュールによって実施される追加のプロセスを示すブロック図である。管理モジュールは、このプロセスの種々の側面の査定に関する動作および画像データを集約し、試料に関する関連のある情報に関してユーザに通知する。特に、この図は、動作実施の彼らの査定のためにユーザに提供される追加の分析を説明する。図１４に関連して説明されるように、関連のあるデータが、図１４に関連して説明される分析、およびプロセス内のここで説明される分析のために、ＶＰＢデータサーバから引き出される（１５０７）。症例検査所要時間（ここではＴＡＴと略される）１５０２の分析のために、このプロセス時間は、各ユーザに関して（１５０８）、および全てのユーザに関して（１５１０）平均される。これらの平均は、次いで、ユーザの精査のために表示される（１５１２）。ユーザが所与の時間フレームにわたる症例量１５０４を査定するために、プロセス１５０７から入手可能にされたデータが、デフォルト時間枠にわたる合計症例量を計算するために使用される（１５１４）。この計算されたデータは、ユーザの精査のために表示される（１５１６）。ユーザは、次いで、合計症例量を計算するために使用される異なる時間／日の範囲を選択し得る（１５１８）。このモジュールは、この新しい時間範囲に基づいて該合計を再計算し（１５２０）、ユーザの精査のために該分析を提示するであろう（１５２２）。本発明の他の実施形態において、種々のグラフおよび他の視覚化ツールが、発生させられ、ユーザのこのおよび他の情報の精査を支援し得る。

エラーまたは他の品質関心事の分析が、ＱＡ（品質保証）課題列１５０６内に説明されるプロセスによって発生させられる。図１４に関連して記載されるように、関連のあるデータが、図１４に関連して説明される分析、およびここでプロセス１５０７に説明される分析のためにＶＰＢデータサーバから引き出される。この分析のために、エラー率が、合計および平均エラーを計算するために使用されるであろう（１５２４）。これらの平均および合計は、（例えば、エラーの）タイプによってフィルタリングされ得（１５２６）、この分析は、デフォルト時間フレームを使用してユーザの精査のために表示される（１５２８）。ユーザは、次いで、分析のために異なる時間フレームを選択し得（１５３０）、モジュールは、関連のあるデータをフィルタリングするであろう（１５３２）。ユーザは、次いで、レポートのタイプを選択し、提示のために所望されるＱＡ分析を要約し得る（１５３４）。このモジュールは、次いで、関連のあるデータをフィルタリングおよび集約し（１５３６）、このレポートをユーザの精査のために表示するであろう（１５３８）。本発明の他の実施形態において、この分析の表現は、後の精査のために印刷され、そうでなければ記憶され得る。

図１６は、本発明のある実施形態による、図３の管理モジュールのためのユーザインターフェース（ＵＩ）を提供するディスプレイの表現である。このユーザインターフェースは、最初に図１４および１５に関連して説明されるように、ユーザが試料の査定の動作を査定することを可能にする。このインターフェースは、管理モジュールによって発生させられるような種々の作業キュー、症例完了（合計および率）、および他のメトリックを表示することができる。ユーザは、グラフィカルセレクタ１６０４を介してこれらの情報タイプを選択し得る。この場合において、図は「メトリック」セレクタの使用を示す。加えて、種々の設定が、「歯車」アイコン１６０６を押すことによってアクセスされ得る。ユーザ識別１６０８、本実施形態ではユーザの氏名および使用の時間が、精査のためにアクセス可能なデータを決定する、彼らの初期のログイン情報に基づくユーザ同一性を確認するために示される。図１４および１５に関連して説明される管理モジュールによって処理される種々の動作および他のデータが、このインターフェースに示されている。所与のユーザのキューに関して完了された試料の割合を示す表１６１０が、表示される。ユーザ毎の２４時間の期間にわたって査定される試料の平均が、追加の表１６１２に示される。所与の時間範囲内に処理される試料量も、棒グラフ１６１４として表示され、データ範囲およびこのデータをフィルタリングするための他の基準が、ユーザ選択のためにここに表示される。追加のグラフ１６１６は、選択された時間の期間にわたるエラーの割合または数を示す。（図１５に関連して説明される）このＱＡ分析は、各技師に関して、検査室に関して全体として、またはエラーが生じた所与のプロセスステップに関して提示され得る。ユーザは、「症例を開始する」グラフィカルセレクタ１６０２を押すことによって、個々の試料査定または承認等の他のプロセスに戻り得る。

図１７は、本発明のある実施形態による、取り入れ容器（最初に図１に容器１２０として示される）から処理カセット（最初に図１にカセット１２２として示される）へのサンプル部片の移送における第１のステップのためのユーザインターフェースを提供するディスプレイの表現である。ここで説明されるプロセスは、最初に図５に関連して説明される（組織）サンプル移送のためのプロセスの拡張である。サンプルのための識別データ、この場合では患者の氏名１７００および生年月日１７０２が、それぞれ、図１７のディスプレイの上部の左および右に示される。取り入れ容器１７０４の上視画像が、ここに示されているが、このステップにおいて、容器は、定位置にねじ蓋を有する。取り入れ容器のこの上視画像に加えて、取り入れ容器に貼り付けられるバーコード等を含む任意のラベリング１７１０の画像が、示されている。処理カセット１７０６の上視画像も、図１７に示されており、この画像は、任意の識別テキストおよび／またはバーコーディング１７０８をさらに含む。図９に関連して説明されるように、本発明の本実施形態は、取り入れ容器および処理カセットからここで撮像された識別データを比較し、この情報を内部的に、かつＬＩＳ内に記憶される症例およびサンプル情報と比較し、内部一貫性を査定する。情報アイテム１７０８および１７１０が、互いに、およびＬＩＳ内のデータと一貫していることが決定される場合、チェックマーク記号１７１２が、このユーザインターフェース上に表示される。情報の識別セットのうちの１つ以上のものが、一貫していない場合、ｘマーク記号が、表示され、ユーザは、図９に関連して説明されるように、継続することに先立って、設定を補正するようにプロンプトされるであろう。この識別情報が、一貫しているとき、ユーザは、図１８に関連して説明されるように、追加のステップを継続し、サンプル部片を取り入れ容器から処理カセットに移送し得る。

図１８は、本発明のある実施形態による、取り入れ容器から処理カセットへのサンプル部片の移送における第２のステップのためのユーザインターフェースを提供するディスプレイの表現である。図１７に関連して説明されるように、チェックマーク記号１７１２が、このユーザインターフェース上に表示されると、ユーザは、具体的に、画像１７０４に示される取り入れ容器の上面を除去することによって、サンプル部片の移送を継続し得る。図１８において、ねじ蓋は、除去されており、取り入れ容器の内部が、画像１７０４内で可視であり、本発明の本実施形態のコンピュータビジョンコンポーネントが、次いで、上から見た画像１７０４を処理するであろう。この例において、２つのサンプル１８０２および１８０４が、コンピュータビジョンコンポーネントによって識別される。本発明の本実施形態によって識別されるようなこれらのサンプルは、サムネイル画像１８０６として表示される。加えて、これらのサンプル画像１８０２および１８０４が、図６に関連して説明されるようにコンピュータビジョンコンポーネントによって分析され、各サンプル部片に関する結果として生じる寸法も、表示される（１８０６）。サンプル部片画像１８０６のこの表示は、ユーザに所与のサンプル部片の場所を通信する記号を含む。サンプル部片が、取り入れ容器内に位置するとき、丸が、サンプル部片画像に隣接して表示される。ユーザが、表示されるようなサンプル部品の識別に同意しない場合、ユーザは、ユーザインターフェースの上で直接サンプル部片を選択し得る。追加のダイアログウィンドウが、図６のアイテム６２０に関連して説明されるように、サンプル部片の識別の修正を可能にするように提示されるであろう。ユーザが、このユーザインターフェース内に表示されるようなサンプル部片の識別および場所に同意する場合、個々のサンプル部片は、図１９に関連して説明されるように、処理カセットに移送され得る。

図１９は、本発明のある実施形態による、取り入れ容器から処理カセットへのサンプル部片の移送における第３のステップのためのユーザインターフェースを提供するディスプレイの表現である。サンプル部片の移送におけるこの第３のステップにおいて、ユーザは、サンプル部片１８０２を取り入れ容器から処理カセットに物理的に移送している。したがって、取り入れ容器１７０４を表示する画像は、容器の中に残存する単一のサンプル部片１８０４のみを示す。処理カセット１７０６の画像表示は、ここで、ユーザが取り入れ容器から移送しているサンプル部片１８０２を示す。加えて、本実施形態のコンピュータビジョンコンポーネントは、この組織の存在を処理カセットの中に位置するものとして識別している。したがって、サンプル部片画像１８０６の表示は、ここで、この移送されたサンプル部片のサムネイル画像１８０２に隣接して、ユーザに部片が処理カセットに移送されたことを示すための方形を含む。ユーザが、表示されるようなサンプル部片の識別および場所に同意しない場合、ユーザは、ユーザインターフェースの上で直接サンプル部片を選択し得る。図６のアイテム６２０に関連して説明されるように、サンプル部片の識別の修正を可能にするための追加のダイアログウィンドウが、提示されるであろう。ユーザが、このユーザインターフェース内に表示されるようなサンプル部品の識別および場所に同意する場合、図２０に関連して説明されるように、追加のサンプル部片が、処理カセットに移送され得る。

図２０は、本発明のある実施形態による、取り入れ容器から処理カセットへのサンプル部片の移送における第４のステップのためのユーザインターフェースを提供するディスプレイの表現である。サンプル部片の移送におけるこの第４のステップにおいて、ユーザは、第２のサンプル部片１８０４を取り入れ容器から処理カセットに物理的に移送している。したがって、取り入れ容器１７０４を表示する画像は、可視であるサンプル部片がないことを示す。処理カセット１７０６の画像表示は、ここで、ユーザがここで、取り入れ容器から両方のサンプル部片の移送を完了しているので、サンプル部片１８０２および１８０４の両方を存在するものとして示す。加えて、サムネイルサンプル部片画像１８０６の表示は、ここで、サンプル部片のサムネイル画像１８０２および１８０４の両方に隣接して、ユーザにコンピュータビジョンコンポーネントが両方のサンプル部片を処理カセット内に存在するものとして識別していることを示すための方形を示す。サンプル部片のこの移送の完了時、コンピュータビジョンコンポーネントが、取り入れ容器内の部片の初期の数からのサンプル部片の同一の部片数を識別する場合、ユーザは、ユーザインターフェースとともに示される新しいダイアログボックスを介して、このプロセスが完了していることを確認するようにプロンプトされるであろう。コンピュータビジョンコンポーネントが、取り入れ容器内の部片の初期の数からのサンプル部片のための同一の部片数を識別しない場合、ユーザは、ユーザインターフェースとともに示される、新しいダイアログボックスを介して、いかなる損なわれたまたは修正されたサンプル部片も配置するようにプロンプトされるであろう。

本発明の実施形態において実行されるコンピュータプロセスは、いかようにも限定されないが、プロセッサ（例えば、マイクロプロセッサ、マイクロコントローラ、デジタル信号プロセッサ、または汎用コンピュータ）との使用のためのコンピュータプログラム論理、プログラマブル論理デバイス（例えば、フィールドプログラマブルゲートアレイ（ＦＰＧＡ）または他のＰＬＤ）との使用のためのプログラマブル論理、離散コンポーネント、集積回路（例えば、特定用途向け集積回路（ＡＳＩＣ））、またはそれらの任意の組み合わせを含む任意の他の手段等を含む多くの異なる形態において具現化され得る。

本明細書において前述に説明される機能性の全てまたは一部を実装するコンピュータプログラム論理は、いかようにも限定されないが、ソースコード形態、コンピュータ実行可能形態、および種々の中間形態（例えば、アセンブラ、コンパイラ、ネットワーカ、またはロケータによって発生させられる形態）を含む種々の形態において具現化され得る。ソースコードは、種々のオペレーティングシステムまたは動作環境との併用のために、種々のプログラミング言語（例えば、Ｆｏｒｔｒａｎ、Ｃ、Ｃ＋＋、ＪＡＶＡ（登録商標）、またはＨＴＭＬ等のオブジェクトコード、アセンブリ言語、または高レベル言語）のうちのいずれかで実装される一連のコンピュータプログラム命令を含み得る。ソースコードは、種々のデータ構造および通信メッセージを定義し、使用し得る。ソースコードは、（例えば、インタープリタを介して）コンピュータ実行可能な形態にあり得るか、または、ソースコードは、（例えば、トランスレータ、アセンブラ、またはコンパイラを介して）コンピュータ実行可能な形態に変換され得る。

コンピュータプログラムは、半導体メモリデバイス（例えば、ＲＡＭ、ＲＯＭ、ＰＲＯＭ、ＥＥＰＲＯＭ、またはフラッシュ型プログラマブルＲＡＭ）、磁気メモリデバイス（例えば、ディスケットまたは固定ディスク）、光学メモリデバイス（例えば、ＣＤ－ＲＯＭ）、ＰＣカード（例えば、ＰＣＭＣＩＡカード）または他のメモリデバイス等の有形記憶媒体内に恒久的または一時的のいずれか一方で存在する任意の形態（例えば、ソースコード形態、コンピュータ実行可能形態、または中間形態）で固定され得る。コンピュータプログラムは、いかようにも限定されないが、アナログ技術、デジタル技術、光学技術、無線技術、ネットワーキング技術、およびインターネットワーキング技術を含む種々の通信技術のいずれかを使用してコンピュータに伝送可能である信号内に任意の形態で固定され得る。コンピュータプログラムは、添付される印刷または電子文書（例えば、収縮包装されたソフトウェアまたは磁気テープ）を伴うリムーバブル記憶媒体として、コンピュータシステムとともに（例えば、システムＲＯＭまたは固定ディスク上に）予めローディングされる、または通信システム（例えば、インターネットまたはワールドワイドウェブ）を経由してサーバまたは電子掲示板から分散させられた任意の形態で分散させられ得る。

本明細書において前述に説明される機能性の全部または一部を実装する、（プログラマブル論理デバイスとの併用のためのプログラマブル論理を含む）ハードウェア論理は、従来的な手動の方法を使用して設計され得るか、または、コンピュータ支援設計（ＣＡＤ）、ハードウェア記述言語（例えば、ＶＨＤＬまたはＡＨＤＬ）、またはＰＬＤプログラミング言語（例えば、ＰＡＬＡＳＭ、ＡＢＥＬ、またはＣＵＰＬ）等の種々のツールを使用して電子的に設計、捕捉、シミュレート、または文書化され得る。

本発明は、特に、具体的な実施形態を参照して示され、説明されているが、形態および詳細における種々の変更が、添付の付記によって定義されるような、本発明の精神および範囲から逸脱することなくその中に成され得ることが当業者によって理解されるであろう。これらの実施形態のうちのいくつかのものが、プロセスステップによって請求項内に説明されているが、下記の請求項内のプロセスステップを実行することが可能である関連付けられるディスプレイを伴うコンピュータを備えている装置も、本発明に含まれる。同様に、下記の請求項内にあり、コンピュータ可読媒体上に記憶されるプロセスステップを実行するためのコンピュータ実行可能命令を含むコンピュータプログラム製品が、本発明の範囲内に含まれる。

上で説明される本発明の実施形態は、単に例示的であることを意図し、多数の変形例および修正が、当業者に明白となるであろう。そのような変形例および修正は全て、いかなる添付の請求項にも定義されるように、本発明の範囲内であることを意図する。

Claims (19)

1. 起源識別データを伴うラベルを有する容器内のサンプルの処理およびカタログ化のためのデバイスであって、前記サンプルは、処理カセットに移送されるべきものであり、前記処理カセットは、その上に第２の識別データを有し、前記デバイスは、
   作業エリアを画定するフレームワークであって、前記作業エリアは、それぞれ前記容器および前記処理カセットを受け取るための第１および第２の場所を含む、フレームワークと、
   前記フレームワークの中に搭載されたカメラの組と、
   前記カメラに結合されたコントローラシステムと
   を備え、
   前記コントローラシステムは、コントローラと、命令を記憶している非一過性メモリとを含み、前記命令は、前記コントローラによって実行されると、コンピュータプロセスの実行を引き起こし、
   前記コンピュータプロセスは、
   前記カメラの組の構成要素に、
   前記作業エリア内の前記サンプルの画像、
   前記起源識別データの画像、
   前記第２の識別データの画像、および、
   前記容器から前記処理カセットへの前記サンプルの移送を文書化した画像の組
   を一時点において捕捉させることと、
   前記起源識別データおよび前記第２の識別データを、それぞれ、第１および第２のデジタル的にエンコードされたテキストに変換することと、
   前記容器のラベルの前記起源識別データと前記処理カセットの前記第２の識別データとの間の一貫性を保証するために、前記第１および第２のデジタル的にエンコードされたテキストを比較することと、
   前記サンプルの属性を特徴付けるデータ出力を生成するように前記サンプルの前記画像を処理することと、
   前記データ出力を前記サンプルを特徴付けるカタログ記録出力に統合することであって、そのような記録は、前記起源識別データも含む、ことと、
   前記移送を文書化した前記捕捉された画像の組を分析することにより、前記サンプルの少なくとも一部が前記処理カセットへと移送されなかった移送エラーを識別することと
   を含む、デバイス。
2. 前記サンプルの前記画像を処理することは、前記起源識別データの前記画像と、前記サンプルの前記画像とを含む合成画像を形成することを含む、請求項１に記載のデバイス。
3. 前記カタログ記録出力は、前記サンプルの前記画像と、前記起源識別データの前記画像と、前記起源識別データおよび前記サンプルの前記画像が捕捉された時間を示すタイムスタンプとを含む、請求項１に記載のデバイス。
4. 前記捕捉された画像の組は、ビデオ記録である、請求項１に記載のデバイス。
5. 前記移送エラーは、移送されるべき前記サンプルの前記一部が損なわれたと識別された場合のそれである、請求項１に記載のデバイス。
6. 前記移送エラーは、移送されるべき前記サンプルの前記一部が前記容器内に留まっている場合のそれである、請求項１に記載のデバイス。
7. 前記移送エラーは、前記第２のデジタル的にエンコードされたテキストが前記第１のデジタル的にエンコードされたテキストに合致しないことに基づいて、前記サンプルが、不正確な処理カセットに移送されていると思われる場合のそれである、請求項１に記載のデバイス。
8. 前記コンピュータプロセスは、下流処理のための最小基準の準拠のために、前記サンプルの属性を特徴付ける前記データ出力を査定することと、そのような準拠の場合、下流処理のために前記サンプルを提出するための通知メッセージをユーザに発行することとをさらに含む、請求項１に記載のデバイス。
9. 前記査定のために使用される前記サンプルの前記属性は、前記サンプルのサイズと、前記サンプルの各部片の寸法と、前記サンプルの各部片の色と、前記サンプルの各部片における輪郭場所と、それらの組み合わせとから成る群から選択される１つを含む、請求項８に記載のデバイス。
10. 前記命令は、前記サンプルの複数の部分のうちの各部分の異なるグラフィック表現をユーザに表示するように構成されたコンピュータユーザインターフェースを確立し、前記サンプルの前記複数の部分のうちの各部分は、その部分の識別、その部分の少なくとも１つの属性、およびその部分の場所を一緒に伴っている、請求項１に記載のデバイス。
11. 前記コンピュータプロセスは、前記サンプルの前記画像のｚ軸分析によって、前記部分の前記少なくとも１つの属性を決定することをさらに含む、請求項１０に記載のデバイス。
12. 前記コンピュータユーザインターフェースは、前記サンプルの少なくとも一部が前記処理カセットへと移送されなかった移送エラーを前記ユーザにグラフィカルに示す、請求項１０に記載のデバイス。
13. 前記コンピュータユーザインターフェースは、下流処理のための最小基準の前記サンプルの属性の非準拠を前記ユーザにグラフィカルに示す、請求項１０に記載のデバイス。
14. 前記カタログ記録出力が保管された非一過性記憶媒体をさらに備え、
    前記カタログ記録出力は、（ｉ）前記サンプルの前記画像と、（ｉｉ）前記起源識別データの前記画像と、（ｉｉｉ）前記サンプルの前記画像および前記起源識別データの前記画像が捕捉された時間を示すタイムスタンプとを含む、請求項１に記載のデバイス。
15. 前記カタログ記録出力は、前記サンプルの前記画像と前記起源識別データの前記画像とを含む合成画像を含む、請求項１４に記載のデバイス。
16. 前記カタログ記録出力は、（ｉｖ）前記処理カセットに移送されるべき前記サンプルの画像と、（ｖ）前記第２の識別データの前記画像と、（ｖｉ）前記処理カセットに移送されるべき前記サンプルの前記画像と前記第２の識別データの前記画像が捕捉された時間を示すタイムスタンプとをさらに含む、請求項１４に記載のデバイス。
17. 前記コンピュータプロセスは、前記容器内に存在した部片の第１の個数を決定することと、前記処理カセット内に存在した部片の第２の個数を決定することと、前記第１および第２の個数を比較することとをさらに含む、請求項１に記載のデバイス。
18. 前記コンピュータプロセスは、グラフィカルユーザインターフェースを提供することをさらに含み、ユーザは、前記グラフィカルユーザインターフェースによって、
    前記処理カセットへの前記サンプルの前記移送、
    前記第１および第２のデジタル的にエンコードされたテキスト、ならびに、
    前記サンプルの少なくとも一部の少なくとも１つの属性
    を承認することができる、請求項１に記載のデバイス。
19. 前記コンピュータプロセスは、保管のために、ネットワークを経由して前記カタログ記録出力を記録システムに伝送することをさらに含む、請求項１～１８のいずれか一項に記載のデバイス。
    

Images