JP5630674B2 - 情報処理装置、情報処理システム、情報処理方法、プログラム及び記録媒体 - Google Patents

Description

本発明は、情報処理装置、情報処理システム、情報処理方法、プログラム及び記録媒体に関する。

生体組織の組織標本画像に基づく診断においては、癌細胞の領域を選択して癌細胞の数をカウントする。たとえば、特許文献１では、ＨＥ染色の画像に基づいて腫瘍領域の情報を取得して、この情報をＩＨＣ染色の画像と位置合わせすることによって、ＩＨＣ染色の画像における腫瘍領域を特定する。

国際公開第２００８／１０８０５９号

しかしながら、ＩＨＣ染色の画像、特にクラス“０”で細胞膜がほとんど染色されていない画像から腫瘍領域の特定をすることは非常に困難であった。したがって、どのような組織標本画像であっても、正確に組織標本画像中の癌細胞の領域を選択して癌細胞の数をカウントできることが求められる。

そこで、本発明は、どのような組織標本画像であっても、組織標本画像中の癌細胞の領域を選択して癌細胞の数を容易かつ正確にカウントできる情報処理装置、情報処理システム、情報処理方法、プログラム及び記録媒体の提供を目的とする。

上記目的を達成するため、本発明の情報処理装置は、
生体組織を免疫染色して撮像した画像に選択エリアを指定するマークが記載された組織標本画像を読み取って得た画像データを取得する取得手段と、
前記取得手段が取得した前記組織標本画像の前記画像データに基づいて、前記マークが指定する前記選択エリア内の癌細胞の数をカウントするカウント手段と、
を含み、
前記組織標本画像に基づく診断を支援することを特徴とする。

また、本発明の情報処理システムは、
前記本発明の情報処理装置と、入力端末と、表示端末とを含み、
前記本発明の情報処理装置が、
前記画像データを、ネットワークを介して受信する受信手段と、
前記カウント手段でカウントした前記マークが指定する選択エリア内の癌細胞の数を、ネットワークを介して送信する送信手段と、
をさらに含み、
前記入力端末は、前記受信手段が受信する前記画像データを、入力するとともに、ネットワークを介して送信し、
前記表示端末は、前記カウント手段でカウントした前記マークが指定する選択エリア内の癌細胞の数を、ネットワークを介して受信し、表示することを特徴とする。

また、本発明の情報処理方法は、
前記本発明の情報処理装置を用い、
前記取得手段により、前記選択エリアを指定するマークが記載された前記組織標本画像を読み取って得た画像データを取得する取得ステップと、
前記カウント手段により、前記取得ステップで取得した前記組織標本画像の前記画像データに基づいて、前記マークが指定する前記選択エリア内の癌細胞の数をカウントするカウントステップと、
を含むことを特徴とする。

本発明のプログラムは、前記本発明の情報処理方法をコンピュータ上で実行可能なことを特徴とする。

本発明の記録媒体は、前記本発明のプログラムを記録しており、コンピュータで読み取り可能なことを特徴とする。

本発明によれば、どのような組織標本画像であっても、組織標本画像中の癌細胞の領域を選択して癌細胞の数を容易かつ正確にカウントできる。

本発明の第１実施形態に係る情報処理装置の構成を示すブロック図である。 本発明の第２実施形態に係る情報処理システムの構成を示すブロック図である。 本発明の第２実施形態に係る情報処理システムにおける処理シーケンスを示すシーケンス図である。 本発明の第２実施形態に係る病理画像診断支援装置のハードウェア構成を示すブロック図である。 本発明の第２実施形態に係る病理画像診断支援装置のＲＡＭの構成を示すブロック図である。 本発明の第２実施形態に係る病理画像診断支援装置のストレージの構成を示すブロック図である。 本発明の第２実施形態に係る病理画像診断支援装置の処理手順を示すフローチャートである。 本発明の第２実施形態に係るマーク付き組織標本画像の第１例を示す図である。 本発明の第２実施形態に係るマーク付き組織標本画像の第２例を示す図である。 本発明の第２実施形態に係る選択エリア確認の画像を示す図である。 本発明の第２実施形態に係る送信画像の第１例を示す図である。 本発明の第２実施形態に係る送信画像の第２例を示す図である。 本発明の第２実施形態に係るマーク付き組織標本画像の第３例を示す図である。 本発明の第３実施形態に係る情報処理システムにおける処理シーケンスを示すシーケンス図である。 本発明の第３実施形態においてメッシュに分割された選択エリアを示す図である。 本発明の第４実施形態に係る情報処理システムにおける処理シーケンスを示すシーケンス図である。 本発明の第４実施形態に係る選択エリアの重ね合わせを示す図である。

以下に、図面を参照して、本発明の実施の形態について例示的に詳しく説明する。ただし、以下の実施の形態に記載されている構成要素はあくまで例示であり、本発明の技術範囲をそれらのみに限定する趣旨のものではない。

［第１実施形態］
本発明の第１実施形態としての情報処理装置１００について、図１を用いて説明する。図１は、生体組織を免疫染色して撮像した組織標本画像１５０に基づく診断を支援する情報処理装置１００である。情報処理装置１００は、選択エリア１５２を指定するマーク１５１が記載された組織標本画像１５０を読み取って得た画像データ１５５を取得する取得部（取得手段）１１０を備える。また、情報処理装置１００は、取得部１１０が取得した組織標本画像１５０の画像データ１５５に基づいて、マーク１５１が指定する選択エリア内の癌細胞の数をカウントするカウント部（カウント手段）１２０を備える。
以上の構成によれば、どのような組織標本画像であっても、組織標本画像中の癌細胞の領域を容易かつ正確に選択して癌細胞の数をカウントできる。なお、本発明において、前記「選択エリア」は、「注目エリア」ともいうことがある。

［第２実施形態］
〈第２実施形態の情報処理装置である病理画像診断支援装置を含む情報処理システムの構成〉
図２は、第２実施形態の情報処理装置である病理画像診断支援装置２００を含む情報処理システム２５０の構成を示すブロック図である。図２は、ネットワーク２４０を介して、病理画像診断支援装置２００と、各々が組織標本画像を読み取る（入力する）カラースキャナ２２１を有する複数のクライアントＰＣ２２０とが接続されている。また、病理画像診断支援装置２００において処理された画像あるいは処理結果を送信して、専門医師による分析・診断を行なうための病理画像診断センター２３０も接続されている。病理画像診断支援装置２００は、本発明の情報処理装置に該当する。クライアントＰＣ２２０及びカラースキャナ２２１は、本発明の情報処理システムにおける前記「入力端末」に該当するということができる。また、クライアントＰＣ２２０は、本発明の情報処理システムにおける前記「表示端末」にも該当するということができる。さらに、病理画像診断センター２３０も、本発明の情報処理システムにおける前記「表示端末」に該当するということができる。なお、ネットワーク２４０は、インターネットを含む公衆ネットワークであっても良いし、病院内のＬＡＮであってもよい。

病理画像診断支援装置２００は、クライアントＰＣ２２０からネットワークを介して送信されたマーク付き組織標本画像（すなわち、カラースキャナ２２１により前記マーク付き組織標本画像を読み取って得た画像データ）を、通信制御部２０１で受信する。すなわち、通信制御部２０１は、前記マーク付き組織標本画像を、ネットワーク２４０を介して受信する「受信手段」に該当するということができる。受信したマーク付き組織標本画像（画像データ）は、画像記憶部（画像記憶手段）２０２に保存される。画像記憶部（画像記憶手段）２０２は、前記マーク付き組織標本画像を読み取って得た画像データを取得する「取得手段」に該当するということができる。マーク認識部（マーク認識手段）２０３は、マーク付き組織標本画像上のマークをその位置と共に認識する。マーク位置記憶部（マーク位置記憶手段）２０４は認識されたマークの位置を記憶する。かかる記憶により、後述の第４実施形態における組織標本画像の重ね合わせが可能となる。マーク指定領域選択部（選択手段、またはマーク指定領域選択手段ともいう）２０５は、画像記憶部２０２に記憶されたマーク付き組織標本画像とマーク位置とに基づきマーク指定領域を選択する。ここでは、閉曲線のマークの内側を指定領域とする。しかしながら、これに限定されることはなく、マークが記載された位置を含む領域が自動的に設定されてもよい。また、マークは１つに限定されることはなく、複数のマークが記載されても良い。指定領域分割部（分割手段、または指定領域分割手段ともいう）２０６は、後述の第３実施形態でマーク指定領域をメッシュに分割して、その分割領域を癌細胞カウンタ（カウント手段）２０７に転送するものである。

癌細胞カウンタ２０７は、マーク内の観察対象の実質細胞領域の癌細胞数を染色強度別にカウントする。表示データ生成部（表示データ生成手段）２０８は、癌細胞カウンタ２０７がカウントした癌細胞数を染色強度別のカウント値あるいは組織標本画像やマークなどに基づいて、送信データを生成する。かかる表示データは、クライアントＰＣ２２０により診断可能な形式の所望の表示データが選択される。選択された表示データは、通信制御部２０１からネットワークを介して、クライアントＰＣ２２０に返信されて、表示画面に表示される。あるいは、専門医師の分析・診断のために、病理画像診断センター２３０に送信される。すなわち、通信制御部２０１は、前記組織標本画像の前記マークが指定する前記選択エリア内の癌細胞の数を前記カウント手段がカウントして得たカウント値を、ネットワーク２４０を介して送信する「送信手段」にも該当するということができる。

〈第２実施形態の情報処理システムにおける処理シーケンス〉
図３を参照して、第２実施形態の情報処理システムにおける処理シーケンスを示す。

カラースキャナ２２１は、シーケンスＳ３０１において、マーク付き組織標本画像であるマーク付きスライドを読み取る。読み取ったマーク付き組織標本画像は、シーケンスＳ３０３において、カラースキャナ２２１からクライアントＰＣ２２０に送られ、さらに、情報処理装置である病理画像診断支援装置２００に送信される。すなわち、シーケンスＳ３０１及びシーケンスＳ３０３は、入力端末により、受信手段（通信制御部２０１）が受信する画像データを、入力する（読み取る）とともに、ネットワークを介して送信する「入力送信ステップ」に該当するということができる。病理画像診断支援装置２００は、シーケンスＳ３０５で、通信制御部２０１により前記画像データを受信し（受信ステップ）、画像記憶部（取得手段）２０２により画像データを取得する（取得ステップ）とともに、マーク認識部２０３によりマークを認識する。ここで、マークは、注目する染色陽性細胞エリア（癌細胞数をカウントする対象のエリア）を他のエリアから分離するために、たとえば医師がマジックペンで組織標本画像スライド上に記載したマークである。

ここで、図３に点線で示すシーケンスＳ３０７からＳ３１３においては、クライアントＰＣ２２０にマーク認識結果を表示して、マーク内の選択されたエリアの確認をする。これは、オプションである。たとえば、マークが閉曲線として閉じていない場合などは、ユーザに今から癌細胞の数をカウントするエリアを確認することが必要になる。その他、マークとしては、エリアの中心位置を示す点や、エリアの境界の一部を示す線分であってもよい。まず、シーケンスＳ３０７において、エリア選択画面（後述の図８参照）を生成する。シーケンスＳ３０９において、生成されたエリア選択画面を病理画像診断支援装置２００からクライアントＰＣ２２０に送信する。クライアントＰＣ２２０では、シーケンスＳ３１１において、エリア選択画面を表示して、エリアを確認する。次に、シーケンスＳ３１３において、ユーザの確認としてエリア内の癌細胞カウント指示を病理画像診断支援装置２００に送信する。

病理画像診断支援装置２００は、シーケンスＳ３１５（カウントステップ）において、マーク内を選択エリアとして癌細胞のカウントを行なう。なお、点線で示すシーケンスＳ３０７からＳ３１３における確認シーケンスが無い場合は、シーケンスＳ３０５からＳ３１５に移行する。シーケンスＳ３１７（送信ステップ）において、カウントされた癌細胞のカウント結果を送信する。かかる癌細胞のカウント結果の送信には、選択エリアの表示データも含む。

（処理シーケンスの変形例）
図３のシーケンスＳ３２１からＳ３２９は、処理シーケンスの変形例である。シーケンスＳ３２１においては、マーク付あるいはマーク無スライドが組織標本画像として読み取られる。クライアントＰＣ２２０では、シーケンスＳ３２３において、取得した組織標本画像の表示画面でマークを付加する（後述の図７参照）。シーケンスＳ３２５において、クライアントＰＣ２２０はマーク付加組織標本画像あるいはマーク記載・付加組織標本画像を病理画像診断支援装置２００に送信する。病理画像診断支援装置２００は、シーケンスＳ３２７において、記載マーク及び／又は付加マーク内を選択エリアとして癌細胞のカウントを行なう。シーケンスＳ３２９において、カウントされた癌細胞のカウント結果を送信する。かかる癌細胞のカウント結果の送信には、選択エリアの表示データも含む。

〈病理画像診断支援装置のハードウェア構成〉
図４Ａは、第２実施形態の情報処理装置である病理画像診断支援装置２００のハードウェア構成を示すブロック図である。図に示すように病理画像診断支援装置２００は、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ［中央演算処理装置］）４１０、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ［読み出し専用メモリ］）４２０、通信制御部２０１、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ［ランダムアクセスメモリ］）４３０、ストレージ４４０を含む。

図４Ａで、ＣＰＵ４１０は演算制御用のプロセッサであり、プログラムを実行することで図２及び図３の各部を実現する。ＲＯＭ４２０は、初期データ及びプログラムなどの固定データ及びプログラムを記憶する。通信制御部２０１は、図２でも説明したようにネットワーク２４０を介して外部装置であるクライアントＰＣ２２０や病理画像診断センター２３０と通信する。

ＲＡＭ４３０は、ＣＰＵ４１０が一時記憶のワークエリアとして使用する一時記憶部である。ＲＡＭ４３０には、大きく分けて、処理対象画像データ４３１、表示データ４３２が一時的に記憶される。さらに、ＲＡＭ４３０は、ＣＰＵ４１０がプログラムを実行するためのプログラム実行領域４３３を含む。

一方、ストレージ４４０は、診断支援情報４４１、各種パラメータ４４２、各種プログラム４４３を不揮発に記憶する。

図４Ｂに示すように、ＲＡＭ４３０の処理対象画像データ４３１は、以下のデータを含む。
・通信制御部２０１を介して受信されたマーク付き組織標本画像４５１
・マーク付き組織標本画像から認識されたマーク画像４５２。かかるマーク画像の記憶は、マーク画像そのものの位置アドレスであっても良いし、細線化やスムージング、あるいはマーク画像を基に生成された閉曲線であっても良い。
・受信された組織標本画像中から選択された１つの選択エリアの画像４５３

また、通信制御部２０１を介してクライアントＰＣ２２０に送信される表示データ４３２は、以下のデータを含む。
・受信した組織標本画像に選択エリアをマッピングした選択エリア・マッピング画像４６１
・第１選択エリアについての、第１選択エリア画像４６２
・第１選択エリア画像において染色強度別にカウントされた癌細胞数である第１細胞数カウント値４６３
第２選択エリア以降についても同様のデータが表示データ４３２に含まれる。

一方、図４Ｃに示すように、ストレージ４４０の診断支援情報４４１は、以下のデータを含む。
・受信した組織標本画像４７１
・組織標本画像から選択された一部領域である、選択エリアの位置・サイズ４７２
・選択エリア内の癌細胞に関するカウント値４７３
・各組織標本画像単位、患者単位、あるいは、症例単位などで検索可能に蓄積された処理後の表示データ４７４

さらに、図４Ｃに示すように、ストレージ４４０の各種パラメータ４４２は、以下のパラメータを含む。
・組織標本画像に記載されたマークあるいは付加されたマークを抽出するための閉曲線抽出パラメータ４８１。たとえば、閉曲線抽出パラメータ４８１は、マークの色が予め組織標本画像上で識別可能な色に決められていれば、その色を示すパラメータとして使用される。また、閉曲線抽出パラメータ４８１は、マークの形状が予め組織標本画像上で識別可能な円や矩形などに決められていれば、その形状を示すパラメータとして使用される。
・たとえば、ユーザによるマークの記載が容易な円状の閉曲線である場合に、閉じてない閉曲線を補完して閉曲線とするための判別処理あるいは補完処理のための閉曲線形成パラメータ４８２

さらに、図４Ｃに示すように、ストレージ４４０の各種プログラム４４３は、以下のプログラムを含む。
・診断支援を行なう診断支援プログラム４９１
・組織標本画像上のマークを抽出して選択エリアを認識するためのマーク抽出プログラム４９２（図５のＳ５２０を実行する）。
選択エリアの画像から染色強度別の細胞数をカウントする細胞数カウントプログラム４９３（図５のＳ５４０を実行する）。

〈第２実施形態の病理画像診断支援装置２００の動作手順〉
以下、上記構成による病理画像診断支援装置２００の動作手順をフローチャート及び表示画面例を参照に詳細に説明する。なお、各フローチャートにより示されるプログラムは、ＣＰＵ４１０により実行されて、図２の各機能構成部を実現する。

（診断支援処理の手順）
図５は、本実施形態の診断支援処理全体の手順を示すフローチャートである。

ステップＳ５００（受信ステップ）において、クライアントＰＣ２２０からのマーク付き組織標本画像の受信を待つ。画像受信があると、ステップＳ５１０（取得ステップ）に進んでマーク付き組織標本画像を記憶する。図６と図７に、マーク付き組織標本画像の第１例と第２例を示す。図６のマーク付き組織標本画像６００には、ユーザが癌細胞のカウントを望む領域６０２を囲む閉曲線のマーク６０１が、図６では分からないが、たとえば濃い青色で描かれている。一方、図７のマーク付加組織標本画像７００には、ユーザが癌細胞のカウントを望む各領域を囲む矩形のマーク７０１及び閉曲線のマーク７０２〜７０４が、図７では分からないが、たとえば種々の色で描かれている。図６と図７との相違は、図６が、ユーザがマジックペンなどでスライド上に描いたマークであるのに対して、図７はクライアントＰＣ２２０の表示画面で挿入したマークである点である。なお、スライド上に描いたマークと表示画面で挿入したマークが混在して良い。

ステップＳ５２０においては、受信したマーク付き組織標本画像上からマークを抽出して選択エリアを認識する。なお、マークの抽出処理や選択エリアの認識処理は、種々の方法が既知であり、それらが使用されて良い。

ステップＳ５３０は、図３のシーケンスＳ３０７からＳ３１３に相当する、ユーザへの選択エリアの確認ステップである。まず、ステップＳ５３１において、組織標本画像に選択エリアをマッピングした画像を生成する。ステップＳ５３３において、選択エリア・マッピング画像をクライアントＰＣ２２０に送信する。図８に、選択エリア・マッピング画像の表示例を示す。図８の選択エリア・マッピング画像８００においては、マークから抽出された閉曲線８０１がピンク色で表示され、選択エリア８０２は緑色で埋められて、ユーザが確認し易い表示に変換されている。ユーザが確認して承認するのを待って、癌細胞数カウント指示を受けるとステップＳ５４０に進む。

ステップＳ５４０（カウントステップ）において、マーク内の選択エリアの癌細胞数が染色強度別にカウントされる。複数のマークがある場合は、ステップＳ５５０において全マークで指示された選択エリアの処理が完了するのを待って、全選択エリアの処理が完了するとステップＳ５６０に進む。ステップＳ５６０において、クライアントＰＣ２２０へ送信するカウント結果の表示データを生成する。図９又は図１０に、カウント結果の表示画面の第１例と第２例を示す。図９の表示画面は、選択エリアの組織標本画像９００と染色強度別のカウント数９０１とを含む。なお、組織標本画像９００は、染色強度別の細胞を異なる色で着色して表示しているが、説明は省略する。図１０の表示画面１０００には、１つの選択エリアの拡大された組織標本画像１００１と、選択エリアの縮小画像１００２と、組織標本画像のサムネイル画像１００３とが含まれる。さらに、５つの選択エリア内のバーグラフを含むサムネイル画像１００４と、選択エリアに対応するバーグラフ１０１０とが含まれる。バーグラフ１０１０は、たとえば、染色強度が“強”の細胞数を表わす領域１０１１、染色強度が“弱”の細胞数を表わす領域１０１２、染色強度が“無”の細胞数を表わす領域１０１３を含む。なお、全体の組織標本画像のサムネイル画像１００３、５つの選択エリア内のバーグラフを含むサムネイル画像１００４は、ボタンとして表示される。図１０は、第３選択エリア“３”が選択された場合であり、５つの選択エリア内の、サムネイル画像の第３選択エリア“３”の濃い枠が、選択結果を表わしている。ステップＳ５７０（送信ステップ）において、生成された表示データをクライアントＰＣ２２０に送信する。

（選択エリアの追加の例）
ステップＳ５８０においては、クライアントＰＣ２２０への表示結果からユーザが選択エリアを追加して細胞数のカウントを指示したかを判断する。選択エリアの追加があれば、ステップＳ５００に戻って、追加された選択エリアのマークを含む組織標本画像の受信を待つ。受信があればステップＳ５１０からＳ５７０を繰り返す。図１１に、追加された選択エリアのマークを含む組織標本画像を示す。図１１の表示画像１１００には、組織標本画像１１０１に既に細胞数のカウントが終了した選択エリアのマーク１１０５に加えて、追加された選択エリアのマーク１１０６が重畳されている。図１１には表示されていないが、たとえばマーク１１０５は赤色でマーク１１０６は黄色で表示されて、識別可能である。なお、１１０２から１１０４は、図１０の１００２から１００４と同様に、既に細胞数のカウントが終了した選択エリアのサムネイル画像が選択ボタンとして示されている。

［第３実施形態］
第３実施形態では、マーク内の選択エリアが、たとえば、膨大な癌細胞を含む、あるいは癌細胞の塊が離散しているような場合に、選択エリアをメッシュに分割して１つのメッシュの小エリア単位に細胞数をカウントする例を示す。なお、メッシュに分割して１つのメッシュ単位に細胞数をカウントして、後でその合計をカウント結果としても良い。その場合には、マーク内の選択エリア内の一部にスコア＋３の部分があっても、平均のスコアが判別結果となって誤診断の原因になる場合がある。したがって、分割したメッシュから自動的にその一部を選択してスコアを判別するか、あるいはメッシュを重畳してユーザに対し表示して、スコア判別するメッシュの選択をユーザに依頼するのが、望ましい。
本実施形態では、図４Ｃに示すように、ストレージ４４０が、各種パラメータ４４２の一部としてメッシュサイズ・パラメータ４８３を含む。このメッシュサイズ・パラメータ４８３は、マーク内の選択エリアが、たとえば、膨大な癌細胞を含む、あるいは癌細胞の塊が離散しているような場合に、選択エリアをメッシュに分割するためのパラメータとして使用される（図１３参照）。また、各種プログラム４４３の一部としてメッシュ分割プログラム４９４を含む。これは選択エリアをメッシュに分割するためであり、図１２のＳ１２０１を実行する。

〈第３実施形態の情報処理システムにおける処理シーケンス〉
図１２を参照して、第３実施形態の情報処理システムにおける処理シーケンスを示す。

カラースキャナ２２１は、シーケンスＳ３０１において、マーク付き組織標本画像であるマーク付きスライドを読み取る。読み取ったマーク付き組織標本画像は、シーケンスＳ３０３において、カラースキャナ２２１からクライアントＰＣ２２０に送られ、さらに、情報処理装置である病理画像診断支援装置２００に送信される。病理画像診断支援装置２００は、シーケンスＳ３０５でマークを認識する。ここまでは、第２実施形態の図３と同様である。

次に、病理画像診断支援装置２００は、シーケンスＳ１２０１において、マークにより選択した選択エリアをメッシュに分割する。なお、分割は図４Ｃのメッシュサイズパラメータ４８３を使用して行なわれるが、たとえば、サイズそのもの、あるいは拡大率や解像度から１つのメッシュ内の細胞数などからメッシュサイズが適切に設定される。図１３に、マークにより選択した選択エリアをメッシュに分割した表示例を示す。図１３の表示画像１３００は、マーク１３０１内の選択エリアが８１個のメッシュ領域１３０２に分割されている。病理画像診断支援装置２００は、シーケンスＳ１２０３において、メッシュ単位に細胞数をカウントし、選択エリア内の８１個のメッシュ領域１３０２のカウントを総計する。そして、シーケンスＳ１２０５において、カウントの総計を癌細胞カウント結果としてクライアントＰＣ２２０に送る。なお、送信データには、図１３のメッシュ重畳の選択エリアの表示データも含ませるのが望ましい。

クライアントＰＣ２２０では、シーケンスＳ１２０７において、表示されたメッシュ重畳の選択エリアを見て、選択エリア全体でなく選択したメッシュ内の細胞数のカウントを望む指示を受付けたか否かを判断する。選択指示がなければ処理を終了する。選択指示があればシーケンスＳ１２０９に進んで、選択指示により特定されたメッシュを取得する。クライアントＰＣ２２０は、シーケンスＳ１２１１において選択されたメッシュの情報（メッシュ番号、あるいはメッシュ位置情報）を病理画像診断支援装置２００に送信する。病理画像診断支援装置２００は、シーケンスＳ１２１３において、選択された各選択メッシュ単位に細胞数をカウントし、シーケンスＳ１２１５において、選択メッシュごとの癌細胞のカウント結果をクライアントＰＣ２２０に送る。

［第４実施形態］
第４実施形態では、複数の染色法を用いて染色を行なった複数の組織標本画像に対して、１つのマーク付き組織標本画像から抽出したマークを共通に使用する。本実施形態では、マーク付ＨＥスライドから抽出したマークを、マーク無しＩＨＣスライドに対しても適用し、そのマーク内の癌細胞をカウントする。

〈第４実施形態の情報処理システムにおける処理シーケンス〉
図１４は、第４実施形態の情報処理システムにおける処理シーケンスを示す図である。カラースキャナ２２１は、シーケンスＳ３０１において、マーク付き組織標本画像であるマーク付きＨＥスライドを読み取る。読み取ったマーク付き組織標本画像は、シーケンスＳ３０３において、カラースキャナ２２１からクライアントＰＣ２２０に送られ、さらに、病理画像診断支援装置２００に送信される。病理画像診断支援装置２００は、シーケンスＳ３０５でマークを認識する。次に、病理画像診断支援装置２００は、シーケンスＳ１４０１（マーク位置記憶ステップ）において、マーク位置を記憶する。

一方、シーケンスＳ１４０３において、カラースキャナ２２１が、マーク無し組織標本画像であるマーク無しＩＨＣスライドを読み取る。読み取られたマーク無し組織標本画像は、シーケンスＳ１４０５において、カラースキャナ２２１からクライアントＰＣ２２０に送られ、さらに、病理画像診断支援装置２００に送信される。

病理画像診断支援装置２００は、他の染色による同じ組織標本画像を受信すると、シーケンスＳ１４０９に進む。シーケンスＳ１４０９において、シーケンスＳ１４０１で記憶したマーク位置を読出す。シーケンスＳ１４１１において、マーク付きＨＥスライドから読み取ったマーク付き組織標本画像と、マーク無しＩＨＣスライドから読み取ったマーク無し組織標本画像との位置合わせを行なう。かかる位置合わせについては、図１５に概略を示している。図１５において、１５００はＨＥ染色の組織標本画像、１５２１はＩＨＣ染色のＥＲ組織標本画像、１５２２はＩＨＣ染色のＰｇＲ組織標本画像、１５２３はＩＨＣ染色のＨＥＲ２組織標本画像である。１５１０はＨＥ染色の組織標本画像、１５１１はマーク付き組織標本画像のマークである。１５３０はＩＨＣ染色の組織標本画像である。位置合わせは、たとえば画像の回転などによるパターンマッチングで行なわれる。かかる詳細については、特許文献１などに記載されており、当業者であれば適宜実施可能である。

シーケンスＳ１４１３において各選択エリアの癌細胞数のカウントをする際に、ＨＥ染色の組織標本画像１５１０に付されたマーク１５１１が、ＩＨＣ染色の組織標本画像１５３０のマーク１５３１として兼用できる。

シーケンスＳ１４１５において、カウントされた癌細胞のカウント結果をクライアントＰＣ２２０に送信する。この時、癌細胞のカウント結果と共に、選択エリアの表示データも送信する。

（他の実施形態）
以上、本発明の実施形態について詳述したが、それぞれの実施形態に含まれる別々の特徴を如何様に組み合わせたシステム又は装置も、本発明の範疇に含まれる。

また、本発明は、複数の機器から構成されるシステムに適用しても良いし、単体の装置に適用しても良い。さらに、本発明は、実施形態の機能を実現する制御プログラムが、システムあるいは装置に直接あるいは遠隔から供給される場合にも適用可能である。したがって、本発明の機能をコンピュータで実現するために、コンピュータにインストールされる制御プログラム、あるいはその制御プログラムを格納した媒体、その制御プログラムをダウンロードさせるＷＷＷサーバも、本発明の範疇に含まれる。

以上、実施形態及び実施例を参照して本願発明を説明したが、本願発明は、上記実施形態及び実施例に限定されるものではない。本願発明の構成や詳細には、本願発明のスコープ内で当業者が理解しうる様々な変更をすることができる。

この出願は、２０１０年９月３０日に出願された日本出願特願２０１０−２２３０５０を基礎とする優先権を主張し、その開示の全てをここに取り込む。

１００ 情報処理装置
１１０ 取得部（取得手段）
１２０ カウント部（カウント手段）
１５０ 組織標本画像
１５１ マーク
１５２ 選択エリア（注目エリア）
１５５ 画像データ
２００ 病理画像診断支援装置（情報処理装置）
２０１ 通信制御部（受信手段、送信手段）
２０２ 画像記憶部（取得手段）
２０３ マーク認識部（マーク認識手段）
２０４ マーク位置記憶部（マーク位置記憶手段）
２０５ マーク指定領域選択部（選択手段）
２０６ 指定領域分割部（分割手段）
２０７ 癌細胞カウンタ（カウント手段）
２０８ 表示データ生成部（表示データ生成手段）
２２０ クライアントＰＣ（入力端末、表示端末）
２２１ カラースキャナ（入力端末）
２３０ 病理画像診断センター（表示端末）
２４０ ネットワーク
２５０ 情報処理システム
４１０ ＣＰＵ
４２０ ＲＯＭ
４３０ ＲＡＭ
４３１ 処理対象画像データ
４３２ 表示データ
４３３ プログラム実行領域
４４０ ストレージ
４４１ 診断支援情報
４４２ 各種パラメータ
４４３ 各種プログラム
４５１ 通信制御部２０１を介して受信されたマーク付き組織標本画像
４５２ マーク付き組織標本画像から認識されたマーク画像
４５３ 受信された組織標本画像中から選択された１つの選択エリアの画像
４６１ 受信した組織標本画像に選択エリアをマッピングした選択エリア・マッピング画像
４６２ 第１選択エリアについての、第１選択エリア画像
４６３ 第１選択エリア画像において染色強度別にカウントされた癌細胞数である第１細胞数カウント値
４７１ 受信した組織標本画像
４７２ 組織標本画像から選択された一部領域である、選択エリアの位置・サイズ
４７３ 選択エリア内の癌細胞に関するカウント値
４７４ 各組織標本画像単位、患者単位、あるいは、症例単位などで検索可能に蓄積された処理後の表示データ
４８１ 組織標本画像に記載されたマークあるいは付加されたマークを抽出するための閉曲線抽出パラメータ
４８２ 判別処理あるいは補完処理のための閉曲線形成パラメータ
４８３ メッシュサイズパラメータ
４９１ 診断支援を行なう診断支援プログラム
４９２ 組織標本画像上のマークを抽出して選択エリアを認識するためのマーク抽出プログラム（図５のＳ５２０を実行する）
４９３ 選択エリアの画像から染色強度別の細胞数をカウントする細胞数カウントプログラム（図５のＳ５４０を実行する）
４９４ 選択エリアをメッシュに分割するためのメッシュ分割プログラム
６００ マーク付き組織標本画像
６０１ 領域６０２を囲む閉曲線のマーク
６０２ ユーザが癌細胞のカウントを望む領域（選択エリア）
７００ マーク付加組織標本画像
７０１ 矩形のマーク
７０２〜７０４ 閉曲線のマーク
８００ 選択エリア・マッピング画像
８０１ マークから抽出された閉曲線
８０２ 選択エリア
９００ 選択エリアの組織標本画像
９０１ 染色強度別のカウント数
１０００ 表示画面
１００１ １つの選択エリアの拡大された組織標本画像
１００２ 選択エリアの縮小画像
１００３ 組織標本画像のサムネイル画像
１００４ ５つの選択エリア内のバーグラフを含むサムネイル画像
１０１０ 選択エリアに対応するバーグラフ
１０１１ 染色強度が“強”の細胞数を表わす領域
１０１２ 染色強度が“弱”の細胞数を表わす領域
１０１３ 染色強度が“無”の細胞数を表わす領域
１１００ 表示画像
１１０１ 組織標本画像
１１０２ 選択エリアの縮小画像
１１０３ 組織標本画像のサムネイル画像
１１０４ ５つの選択エリア内のバーグラフを含むサムネイル画像
１１０５ 細胞数のカウントが終了した選択エリアのマーク
１１０６ 追加された選択エリアのマーク
１３００ 表示画像
１３０１ 選択エリアを囲むマーク
１３０２ 選択エリアが分割されたメッシュ領域
１５００ ＨＥ染色の組織標本画像
１５１０ ＨＥ染色の組織標本画像
１５１１ マーク付き組織標本画像のマーク
１５２１ ＩＨＣ染色のＥＲ組織標本画像
１５２２ ＩＨＣ染色のＰｇＲ組織標本画像
１５２３ ＩＨＣ染色のＨＥＲ２組織標本画像
１５３０ ＩＨＣ染色の組織標本画像
１５３１ 組織標本画像１５３０のマーク

Claims (19)

1. 生体組織を免疫染色して撮像した画像に選択エリアを指定するマークが記載された組織標本画像を読み取って得た画像データを取得する取得手段と、
   前記取得手段が取得した前記組織標本画像の前記画像データに基づいて、前記マークが指定する前記選択エリア内の癌細胞の数をカウントするカウント手段と、
   を含み、
   前記カウント手段は、
   前記マークが示す染色陽性細胞エリアを複数の小エリアに分割する分割手段と、
   前記複数の小エリアから一部の小エリアを選択する小エリア選択手段と、
   を含み、
   前記小エリア選択手段によって選択された小エリアに含まれる細胞数を、染色強度別にカウントし、
   前記組織標本画像に基づく診断を支援することを特徴とする情報処理装置。
2. 前記選択エリアが、注目する染色陽性細胞エリアであり、
   前記マークは、前記注目する染色陽性細胞エリアを他のエリアから分離するためのマークであることを特徴とする請求項１に記載の情報処理装置。
3. 前記マークは、ユーザにより、前記注目する染色陽性細胞エリアを囲むように描かれた閉曲線であることを特徴とする請求項２に記載の情報処理装置。
4. 前記画像データは、前記マークが記載された組織標本画像スライドから前記組織標本画像を読み取ることにより得た画像データであることを特徴とする請求項１乃至３のいずれか１項に記載の情報処理装置。
5. 前記取得手段は、前記選択エリアを指定するマークがさらに重畳された画像データを取得することを特徴とする請求項１乃至４のいずれか１項に記載の情報処理装置。
6. 複数の前記マークが、前記組織標本画像の画像データに含まれることを特徴とする請求項１乃至５のいずれか１項に記載の情報処理装置。
7. 前記カウント手段は、前記取得手段が取得した前記組織標本画像の前記画像データから、前記マークが指定するエリア内の染色陽性細胞の染色強度別の数をカウントすることを特徴とする請求項１乃至６のいずれか１項に記載の情報処理装置。
8. 前記カウント手段は、さらに、
   前記分割手段によって分割された前記複数の小エリアを表示する表示手段と、
   前記表示手段によって表示された前記複数の小エリアに含まれる一部の小エリアについて、ユーザからの選択指示を受け付ける受付手段と、
   を含み、
   前記選択指示によって特定された前記小エリアに含まれる細胞数を、染色強度別にカウントすることを特徴とする請求項１乃至７のいずれか１項に記載の情報処理装置。
9. 前記組織標本画像上のマークをその位置と共に認識するマーク認識手段と、
   前記マーク認識手段により認識された前記組織標本画像中の前記マークの位置を記憶するマーク位置記憶手段とをさらに含み、
   前記マークによって指定された前記選択エリアを、前記生体組織を他の染色方法で染色して撮像した他の組織標本画像に対して適用することを特徴とする請求項１乃至８のいずれか１項に記載の情報処理装置。
10. 前記組織標本画像を読み取る読取手段と、
    前記カウント手段でカウントした前記マークが指定する前記選択エリア内の癌細胞の数を診断可能な形式で表示する表示手段と、
    をさらに含むことを特徴とする請求項１乃至９のいずれか一項に記載の情報処理装置。
11. 前記選択エリアを指定するマークが記載された前記組織標本画像又は前記組織標本画像を読み取って得た前記画像データを、ネットワークを介して受信する受信手段と、
    前記受信手段が受信した前記組織標本画像の前記マークが指定する前記選択エリア内の癌細胞の数を前記カウント手段がカウントして得たカウント値を、ネットワークを介して送信する送信手段と、
    をさらに含むことを特徴とする請求項１乃至９のいずれか１項に記載の情報処理装置。
12. 請求項１１に記載の情報処理装置と、入力端末と、表示端末とを含み、
    前記入力端末は、前記受信手段が受信する前記画像データを、入力するとともに、ネットワークを介して送信し、
    前記表示端末は、前記カウント手段でカウントした前記マークが指定する選択エリア内の癌細胞の数を、ネットワークを介して受信し、表示することを特徴とする情報処理システム。
13. 請求項１に記載の情報処理装置を用い、
    前記取得手段により、前記選択エリアを指定するマークが記載された前記組織標本画像を読み取って得た画像データを取得する取得ステップと、
    前記カウント手段により、前記取得ステップで取得した前記組織標本画像の前記画像データに基づいて、前記マークが指定する前記選択エリア内の癌細胞の数をカウントするカウントステップと、
    を含み、
    前記カウントステップは、
    前記マークが示す染色陽性細胞エリアを複数の小エリアに分割する分割ステップと、
    前記複数の小エリアから一部の小エリアを選択する小エリア選択ステップと、
    を含み、
    前記小エリア選択ステップによって選択された小エリアに含まれる細胞数を、染色強度別にカウントすることを特徴とする情報処理方法。
14. 前記情報処理装置が、
    前記組織標本画像上のマークをその位置と共に認識するマーク認識手段と、前記マーク認識手段により認識された前記組織標本画像中の前記マークの位置を記憶するマーク位置記憶手段とをさらに含み、
    前記マーク認識手段により、前記組織標本画像上のマークをその位置と共に認識するマーク認識ステップと、
    前記マーク位置記憶手段により、前記組織標本画像中の前記マークの位置を記憶するマーク位置記憶ステップをさらに含み、
    前記マークによって指定された前記選択エリアを、前記生体組織を他の染色方法で染色して撮像した他の組織標本画像に対して適用することを特徴とする請求項１３記載の情報処理方法。
15. 前記情報処理装置が、
    前記組織標本画像を読み取る読取手段と、
    前記カウント手段でカウントした前記マークが指定する前記選択エリア内の癌細胞の数を診断可能な形式で表示する表示手段と、をさらに含み、
    前記読取手段により、前記組織標本画像を読み取る読取ステップと、
    前記表示手段により、前記カウント手段でカウントした前記マークが指定する前記選択エリア内の癌細胞の数を診断可能な形式で表示する表示ステップと、
    をさらに含むことを特徴とする請求項１３又は１４に記載の情報処理方法。
16. 前記情報処理装置が、
    前記選択エリアを指定するマークが記載された前記組織標本画像又は前記組織標本画像を読み取って得た前記画像データを、ネットワークを介して受信する受信手段と、
    前記受信手段が受信した前記組織標本画像の前記マークが指定する前記選択エリア内の癌細胞の数を前記カウント手段がカウントして得たカウント値を、ネットワークを介して送信する送信手段と、
    をさらに含み、
    前記受信手段により、前記組織標本画像又は前記画像データを、ネットワークを介して受信する受信ステップと、
    前記送信手段により、前記カウント値を、ネットワークを介して送信する送信ステップと、
    をさらに含むことを特徴とする請求項１３乃至１５のいずれか１項に記載の情報処理方法。
17. 前記情報処理装置と、入力端末と、表示端末とを含む情報処理システムを用い、
    前記入力端末は、前記受信手段が受信する前記画像データを、入力するとともに、ネットワークを介して送信し、
    前記表示端末は、前記カウント手段でカウントした前記マークが指定する選択エリア内の癌細胞の数を、ネットワークを介して受信し、表示し、
    前記入力端末により、前記受信手段が受信する前記画像データを、入力するとともに、ネットワークを介して送信する入力送信ステップと、
    前記表示端末により、前記カウント手段でカウントした前記マークが指定する前記選択エリア内の癌細胞の数を、ネットワークを介して受信し、表示する受信表示ステップと、
    をさらに含むことを特徴とする請求項１６に記載の情報処理方法。
18. 請求項１３乃至１７のいずれか１項に記載の情報処理方法をコンピュータ上で実行可能なことを特徴とするプログラム。
19. 請求項１８に記載のプログラムを記録しており、コンピュータで読み取り可能なことを特徴とする記録媒体。