JP6777086B2 - 情報処理装置、情報処理方法及び情報処理システム - Google Patents
情報処理装置、情報処理方法及び情報処理システム Download PDFInfo
- Publication number
- JP6777086B2 JP6777086B2 JP2017544391A JP2017544391A JP6777086B2 JP 6777086 B2 JP6777086 B2 JP 6777086B2 JP 2017544391 A JP2017544391 A JP 2017544391A JP 2017544391 A JP2017544391 A JP 2017544391A JP 6777086 B2 JP6777086 B2 JP 6777086B2
- Authority
- JP
- Japan
- Prior art keywords
- region
- detector
- interest
- unit
- analysis
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/0002—Inspection of images, e.g. flaw detection
- G06T7/0012—Biomedical image inspection
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/70—Determining position or orientation of objects or cameras
- G06T7/73—Determining position or orientation of objects or cameras using feature-based methods
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/20—Image preprocessing
- G06V10/255—Detecting or recognising potential candidate objects based on visual cues, e.g. shapes
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/60—Type of objects
- G06V20/69—Microscopic objects, e.g. biological cells or cellular parts
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20081—Training; Learning
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20092—Interactive image processing based on input by user
- G06T2207/20104—Interactive definition of region of interest [ROI]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30004—Biomedical image processing
- G06T2207/30024—Cell structures in vitro; Tissue sections in vitro
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Health & Medical Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Multimedia (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Quality & Reliability (AREA)
- Radiology & Medical Imaging (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Medical Informatics (AREA)
- Life Sciences & Earth Sciences (AREA)
- Biomedical Technology (AREA)
- Molecular Biology (AREA)
- Investigating Or Analysing Biological Materials (AREA)
- Apparatus Associated With Microorganisms And Enzymes (AREA)
- Investigating Or Analysing Materials By Optical Means (AREA)
- Measuring Or Testing Involving Enzymes Or Micro-Organisms (AREA)
- Image Analysis (AREA)
Description
1.情報処理システムの概要
2.第1の実施形態
2.1.情報処理装置の構成例
2.2.情報処理装置の処理例
2.3.効果
2.4.応用例
3.第2の実施形態
3.1.情報処理装置の構成例
3.2.効果
4.ハードウェア構成例
5.まとめ
図1は、本開示の一実施形態に係る情報処理システム1の構成の概要を示す図である。図1に示すように、情報処理システム1は、撮像装置10、および情報処理装置20を備える。撮像装置10および情報処理装置20は、有線または無線の各種ネットワークにより接続される。
撮像装置10は、撮像画像(動画像)を生成する装置である。本実施形態に係る撮像装置10は、例えば、デジタルカメラにより実現される。他にも、撮像装置10は、例えばスマートフォン、タブレット、ゲーム機、またはウェアラブル装置など、撮像機能を有するあらゆる装置により実現されてもよい。例えば、撮像装置10は、CCD(Charge Coupled Device)またはCMOS(Complementary Metal Oxide Semiconductor)などの撮像素子、および撮像素子への被写体像の結像を制御するためのレンズなどの各種の部材を用いて実空間を撮像する。また、撮像装置10は、情報処理装置20との間で撮像画像等を送受信するための通信装置を含む。本実施形態において、撮像装置10は、解析対象である細胞が培養されている培地Mを撮像するための撮像ステージSの上方に設けられる。そして、撮像装置10は、培地Mを特定のフレームレートで撮像することにより動画像データを生成する。なお、撮像装置10は、培地Mを直接(他の部材を介さずに)撮像してもよいし、顕微鏡等の他の部材を介して培地Mを撮像してもよい。また、上記フレームレートは特に限定されないが、観察対象の変化の度合いに応じて設定されることが好ましい。なお、撮像装置10は、観察対象の変化を正しく追跡するため、培地Mを含む一定の撮像領域を撮像する。撮像装置10により生成された動画像データは、情報処理装置20へ送信される。
情報処理装置20は、画像解析機能を有する装置である。情報処理装置20は、PC(Personal Computer)、タブレット、スマートフォンなど、画像解析機能を有するあらゆる装置により実現される。また、情報処理装置20は、ネットワーク上の1または複数の情報処理装置によって実現されてもよい。本実施形態に係る情報処理装置20は、撮像装置10から撮像画像を取得し、取得した撮像画像について観察対象の領域の追跡を実行する。情報処理装置20による追跡処理の解析結果は、情報処理装置20の内部または外部に備えられる記憶装置または表示装置等に出力される。なお、情報処理装置20の各機能を実現する機能構成については後述する。
まず、図2〜図11を参照して本開示の第1の実施形態に係る情報処理装置20−1について説明する。
図2は、本開示の第1の実施形態に係る情報処理装置20−1の構成例を示すブロック図である。図2に示すように、情報処理装置20−1は、検出器データベース(DB)200、解析方法取得部210、検出器決定部220、画像取得部230、検出部240、検出パラメータ調整部250、領域描画部260、解析部270、および出力制御部280を含む。
検出器DB200は、解析対象を検出するために必要な検出器を格納するデータベースである。検出器DB200により格納された検出器は、観察対象を撮像した撮像画像から特徴量を計算し、当該特徴量に基づいて当該観察対象に対応する領域を検出するために用いられる。検出器DB200には複数の検出器が格納されており、これらの検出器は、特定の観察対象に対して行う解析方法または評価方法に応じてそれぞれ最適化されている。例えば、観察対象のある特定の変化を検出するために、当該特定の変化に対して複数の検出器が関連付けられている。この特定の変化を検出するための複数の検出器の組を、本明細書において「検出レシピ」と定義する。検出レシピに含まれる検出器の組み合わせは、例えば、観察対象ごとに、および当該観察対象が発現し得る現象ごとに予め決定される。
解析方法取得部210は、観察対象を解析するための解析方法または評価方法(上述したように評価方法は解析方法に含まれるため、以下、評価方法と解析方法とを併せて「解析方法」と呼称する)に関する情報を取得する。例えば、解析方法取得部210は、情報処理装置20−1を用いて観察対象の解析を行う際に、不図示の入力部を介してユーザにより入力された解析方法を取得してもよい。また、解析方法取得部210は、例えば、予め決められたスケジュールに従って解析を行う際は、所定の時点において不図示の記憶部から解析方法を取得してもよい。さらに、解析方法取得部210は、不図示の通信部を介して解析方法を取得してもよい。
検出器決定部220は、解析方法取得部210から取得した解析方法に関する情報に応じて、少なくとも一の検出器を決定する。例えば、検出器決定部220は、取得した解析方法の種類に関連付けられている検出レシピを決定し、検出器DB200から当該検出レシピに含まれている検出器を取得する。
画像取得部230は、撮像装置10により生成された撮像画像を含む画像データを、不図示の通信装置を介して取得する。例えば、画像取得部230は、撮像装置10により生成された動画像データを時系列に取得する。取得した画像データは、検出部240に出力される。
検出部240は、画像取得部230が取得した撮像画像について、検出器決定部220において決定された検出器を用いて注目領域を検出する。注目領域とは、上述したように、観察対象に対応する領域である。
検出パラメータ調整部250は、上述したように、観察対象の状態、観察条件または撮像装置10の撮像条件等に応じて、検出部240の検出処理に関する検出パラメータを調整する。検出パラメータ調整部250は、例えば上記の各状態および各条件に応じて検出パラメータを自動的に調整してもよいし、ユーザの操作により検出パラメータが調整されてもよい。
領域描画部260は、検出部240の検出処理の対象である撮像画像上に、注目領域、識別領域、およびID等の検出結果を重畳させる。領域描画部260は、例えば、直線、曲線、または曲線等によって閉じられた平面等の図形により注目領域および識別領域等を示してもよい。これらの領域を示す平面の形状は、例えば矩形、円形、楕円形等、任意の形状であってもよく、また、観察対象に対応する領域の輪郭に応じて形成された形状であってもよい。また、領域描画部260は、上記のIDを注目領域または識別領域の近傍に表示させてもよい。領域描画部260による具体的な描画処理については、後述する。領域描画部260は、描画処理の結果を出力制御部280に出力する。
解析部270は、検出部240が検出した注目領域(および識別領域)について解析を行う。解析部270は、例えば、注目領域の検出に用いられた検出器に関連付けられている解析方法に基づく解析を、当該注目領域について行う。解析部270により行われる解析とは、例えば観察対象である細胞の成長、増殖、分裂、細胞死、運動または形状の変化を定量的に評価するための解析である。この場合、解析部270は、例えば、細胞のサイズ、面積、個数、形状(例えば、真円度)、動きベクトル等の特徴量について注目領域または識別領域から算出する。
出力制御部280は、領域描画部260から取得した描画情報(領域重畳後の撮像画像等)、および解析部270から取得した解析結果を出力データとして出力する。出力制御部280は、例えば、情報処理装置20−1の内部または外部に備えられる表示部(不図示)に出力データを表示してもよい。また、出力制御部280は、情報処理装置20−1の内部または外部に備えられる記憶部(不図示)に出力データを記憶してもよい。また、出力制御部280は、情報処理装置20−1の備える通信部(不図示)を介して、外部装置(サーバ、クラウド、端末装置)等に出力データを送信してもよい。
以上、本開示の一実施形態に係る情報処理装置20−1の構成例について説明した。次に、本開示の一実施形態に係る情報処理装置20−1による処理の一例について、図6〜図9を参照して説明する。
以上、本開示の第1の実施形態に係る情報処理装置20−1の構成例および処理例について説明した。本実施形態によれば、解析方法取得部210が取得した解析方法に応じて検出レシピ(検出器)が決定され、検出部240が決定された検出器を用いて撮像画像から注目領域を検出し、解析部270が当該注目領域について解析を行う。これにより、ユーザは観察対象の解析方法を決めるだけで、当該観察対象を撮像画像から検出し、当該観察対象についての解析を行うことができる。解析方法に基づいて検出器を決定することにより、時間の経過に応じて変化する観察対象のそれぞれの形状および状態に適した検出器が選択される。これにより、観察対象の変化にかかわらず観察対象を精度高く解析することが可能となる。また、解析方法を選択すれば観察対象の変化の検出に適した検出器が自動的に選択されるので、観察対象の変化を解析したいユーザにとっての利便性も向上する。
続いて、本開示の第1の実施形態に係る情報処理装置20−1による処理の応用例について、図10および図11を参照しながら説明する。
まず、複数の検出器による注目領域の絞り込み処理の第1の例について説明する。本応用例では、検出部240は、まず一の検出器を用いて複数の細胞の注目領域を検出し、さらに検出部240は、検出した注目領域から特定の変化を示す観察対象に対応する注目領域を、他の検出器を用いて絞り込む。これにより、複数の注目領域から、特定の変化を示す観察対象に対応する注目領域のみを解析対象とすることができる。したがって、例えば、複数のがん細胞のうち、増殖しているもの、および細胞死しているものを区別して、当該がん細胞を解析することが可能となる。
次に、複数の検出器による注目領域の絞り込み処理の第2の例について説明する。本応用例では、検出部240は、複数の検出器を用いて、一の種類の細胞の注目領域を複数検出する。これにより、一の細胞が複数の異なる特徴を有している場合であっても、それぞれの特徴に応じて検出される注目領域について解析することができる。したがって、例えば、神経細胞のように一の細胞に軸索のような特異的な特徴を有する場合であっても、軸索の領域のみを検出して解析することが可能となる。
次に、図12〜図14を参照して本開示の第2の実施形態に係る情報処理装置20−2について説明する。
図12は、本開示の第2の実施形態に係る情報処理装置20−2の構成例を示すブロック図である。図12に示すように、情報処理装置20−2は、検出器データベース(DB)200、解析方法取得部210、検出器決定部220、画像取得部230、検出部240、検出パラメータ調整部250、領域描画部260、解析部270、および出力制御部280に加えて、さらに形状設定部290、および領域特定部295を含む。以下、形状設定部290および領域特定部295の機能について説明する。
形状設定部290は、領域描画部260により描画される注目領域を示す表示の形状を設定する。
領域特定部295は、検出部240により検出された注目領域から、解析部270による解析の対象となる注目領域を特定する。例えば、領域特定部295は、検出部240により検出された複数の注目領域のうち、解析の対象とする注目領域を、ユーザの操作または所定の条件に応じて特定する。そして、解析部270は、領域特定部295により特定された注目領域について解析を行う。より具体的には、ユーザの操作により注目領域を特定する場合、領域特定部295は、出力制御部280により表示された複数の注目領域のうちどの注目領域を特定するかをユーザの操作により選択し、選択された注目領域について解析部270は解析を行う。
以上、本開示の第2の実施形態に係る情報処理装置20−2の構成例について説明した。本実施形態によれば、注目領域を定義する図形の形状を設定することが可能であり、例えば、観察対象の領域の輪郭にフィットする形状を注目領域の形状として設定することもできる。これにより、観察対象の領域と注目領域とをより密接に関連付けて解析することができる。また、本実施形態によれば、検出された注目領域のうち、解析の対象とする注目領域を特定することができる。これにより、評価に必要な解析結果を抽出したり、解析結果の比較をすることが可能となる。
次に、図15を参照して、本開示の実施形態に係る情報処理装置のハードウェア構成について説明する。図15は、本開示の実施形態に係る情報処理装置のハードウェア構成例を示すブロック図である。図示された情報処理装置900は、例えば、上記の実施形態における情報処理装置20実現しうる。
以上、添付図面を参照しながら本開示の好適な実施形態について詳細に説明したが、本開示の技術的範囲はかかる例に限定されない。本開示の技術分野における通常の知識を有する者であれば、特許請求の範囲に記載された技術的思想の範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、これらについても、当然に本開示の技術的範囲に属するものと了解される。
解析方法に応じて少なくとも一の検出器を決定する検出器決定部と、
前記検出器決定部により決定された前記少なくとも一の検出器を用いて、前記解析方法による解析を行う解析部と、
を備える情報処理装置。
(2)
前記検出器決定部により決定された前記少なくとも一の検出器を用いて、撮像画像内から注目領域を検出する検出部をさらに備え、
前記解析部は、前記注目領域について解析を行う、前記(1)に記載の情報処理装置。
(3)
前記検出器決定部により複数の検出器が決定された場合、
前記検出部は、前記複数の検出器を用いて得られる複数の検出結果に基づいて前記注目領域を決定する、前記(2)に記載の情報処理装置。
(4)
前記検出部は、前記検出器を用いて検出した前記注目領域を、前記解析部による前記注目領域についての解析により得られる解析結果と関連付ける、前記(2)または(3)に記載の情報処理装置。
(5)
前記検出器の検出パラメータを調整する検出パラメータ調整部をさらに備え、
前記検出部は、決定された前記検出器の前記検出パラメータに基づいて前記撮像画像内から前記注目領域を検出する、前記(2)〜(4)のいずれか1項に記載の情報処理装置。
(6)
前記解析部による解析結果を、解析結果に対応する注目領域と関連付けて出力する出力制御部をさらに備える、前記(2)〜(5)のいずれか1項に記載の情報処理装置。
(7)
前記注目領域を示す表示を前記検出部による検出結果に基づいて前記撮像画像に描画する領域描画部をさらに備え、
前記出力制御部は、前記領域描画部により描画された前記注目領域に相当する表示を含む前記撮像画像を出力する、前記(6)に記載の情報処理装置。
(8)
前記注目領域に相当する表示の形状は、前記撮像画像に対する画像解析に基づいて検出される形状を含む、前記(7)に記載の情報処理装置。
(9)
前記注目領域に相当する表示の形状は、前記検出部による注目領域の検出結果に基づいて算出される形状を含む、前記(7)に記載の情報処理装置。
(10)
検出された前記注目領域から、前記解析部による解析の対象とする注目領域を特定する領域特定部をさらに備える、前記(2)〜(9)のいずれか1項に記載の情報処理装置。
(11)
前記検出器は、前記解析方法と前記解析方法により解析される解析対象に関する画像データとの組を学習データとする機械学習により生成される検出器であり、
前記検出部は、前記検出器を用いて前記撮像画像から得られる特徴データに基づいて前記注目領域を検出する、前記(2)〜(10)のいずれか1項に記載の情報処理装置。
(12)
前記検出器決定部は、前記解析方法により解析される解析対象が示す変化の種類に応じて少なくとも一の検出器を決定する、前記(1)〜(11)のいずれか1項に記載の情報処理装置。
(13)
前記解析方法により解析される解析対象は、細胞、細胞小器官、または前記細胞により形成される生体組織を含む、前記(12)に記載の情報処理装置。
(14)
解析方法に応じて少なくとも一の検出器を決定することと、
決定された前記少なくとも一の検出器を用いて、前記解析方法による解析を行うことと、
を含む情報処理方法。
(15)
撮像画像を生成する撮像部
を備える撮像装置と、
解析方法に応じて少なくとも一の検出器を決定する検出器決定部と、
前記検出器決定部により決定された前記少なくとも一の検出器を用いて、前記撮像画像について前記解析方法による解析を行う解析部と、
を備える情報処理装置と、
を備える情報処理システム。
20 情報処理装置
200 検出器DB
210 解析方法取得部
220 検出器決定部
230 画像取得部
240 検出部
250 検出パラメータ調整部
260 領域描画部
270 解析部
280 出力制御部
290 形状設定部
295 領域特定部
Claims (11)
- 細胞、細胞小器官、または前記細胞により形成される生体組織を含む観察対象であって、撮像画像における前記観察対象の変化を解析するための解析方法に応じて少なくとも一の検出器を決定する検出器決定部と、
前記検出器決定部により決定された前記少なくとも一の検出器を用いて、前記撮像画像内から注目領域を検出する検出部と、
前記検出器決定部により決定された前記少なくとも一の検出器を用いて、前記撮像画像から検出された前記注目領域について前記解析方法による解析を行う解析部と、
前記注目領域を示す表示を前記検出部による検出結果に基づいて前記撮像画像に描画する領域描画部と、
前記解析部による解析結果を、解析結果に対応する前記注目領域と関連付けて出力するとともに、前記領域描画部により描画された前記注目領域に関する表示を含む前記撮像画像を出力する出力制御部と、を備え、
前記検出器決定部は、
前記観察対象の種類に対応した第1の検出器を決定するとともに、当該観察対象の特定の変化に対応した第2の検出器を決定し、
前記検出部は、
前記第1の検出器を用いて、前記撮像画像内から前記種類の前記観察対象を示す複数の前記注目領域を検出し、前記第2の検出器を用いて、前記複数の注目領域の中から前記特定の変化を示す前記注目領域を検出し、
前記解析部は、
前記注目領域における動きベクトルの特徴量を算出し、
前記領域描画部は、
算出された前記特徴量に応じた前記動きベクトルを前記注目領域の内部に描画する、
情報処理装置。 - 前記検出器決定部により複数の検出器が決定された場合、
前記検出部は、前記複数の検出器を用いて得られる複数の検出結果に基づいて前記注目領域を決定する、請求項1に記載の情報処理装置。 - 前記検出部は、前記検出器を用いて検出した前記注目領域を、前記解析部による前記注目領域についての解析により得られる解析結果と関連付ける、請求項1に記載の情報処理装置。
- 前記検出器の検出パラメータを調整する検出パラメータ調整部をさらに備え、
前記検出部は、決定された前記検出器の前記検出パラメータに基づいて前記撮像画像内から前記注目領域を検出する、請求項1に記載の情報処理装置。 - 前記注目領域に相当する表示の形状は、前記撮像画像に対する画像解析に基づいて検出される形状を含む、請求項1に記載の情報処理装置。
- 前記注目領域に相当する表示の形状は、前記検出部による注目領域の検出結果に基づいて算出される形状を含む、請求項1に記載の情報処理装置。
- 検出された前記注目領域から、前記解析部による解析の対象とする注目領域を特定する領域特定部をさらに備える、請求項1に記載の情報処理装置。
- 前記検出器は、前記解析方法と前記解析方法により解析される解析対象に関する画像データとの組を学習データとする機械学習により生成される検出器であり、
前記検出部は、前記検出器を用いて前記撮像画像から得られる特徴データに基づいて前記注目領域を検出する、請求項1に記載の情報処理装置。 - 前記検出器決定部は、前記解析方法により解析される解析対象が示す変化の種類に応じて少なくとも一の検出器を決定する、請求項1に記載の情報処理装置。
- 細胞、細胞小器官、または前記細胞により形成される生体組織を含む観察対象であって、撮像画像における前記観察対象の変化を解析するための解析方法に応じて少なくとも一の検出器を決定することと、
決定された前記少なくとも一の検出器を用いて、前記撮像画像内から注目領域を検出することと、
決定された前記少なくとも一の検出器を用いて、前記撮像画像から検出された前記注目領域について前記解析方法による解析を行うことと、
前記注目領域を示す表示を検出結果に基づいて前記撮像画像に描画することと、
解析結果を、解析結果に対応する前記注目領域と関連付けて出力するとともに、描画された前記注目領域に関する表示を含む前記撮像画像を出力することと、を含み、
前記観察対象の種類に対応した第1の検出器を決定するとともに、当該観察対象の特定の変化に対応した第2の検出器を決定し、
前記第1の検出器を用いて、前記撮像画像内から前記種類の前記観察対象を示す複数の前記注目領域を検出し、前記第2の検出器を用いて、前記複数の注目領域の中から前記特定の変化を示す前記注目領域を検出し、
前記注目領域における動きベクトルの特徴量を算出し、
算出された前記特徴量に応じた前記動きベクトルを前記注目領域の内部に描画する、
情報処理方法。 - 撮像画像を生成する撮像部
を備える撮像装置と、
細胞、細胞小器官、または前記細胞により形成される生体組織を含む観察対象であって、撮像画像における前記観察対象の変化を解析するための解析方法に応じて少なくとも一の検出器を決定する検出器決定部と、
前記検出器決定部により決定された前記少なくとも一の検出器を用いて、前記撮像画像内から注目領域を検出する検出部と、
前記検出器決定部により決定された前記少なくとも一の検出器を用いて、前記撮像画像から検出された前記注目領域について前記解析方法による解析を行う解析部と、
前記注目領域を示す表示を前記検出部による検出結果に基づいて前記撮像画像に描画する領域描画部と、
前記解析部による解析結果を、解析結果に対応する前記注目領域と関連付けて出力するとともに、前記領域描画部により描画された前記注目領域に関する表示を含む前記撮像画像を出力する出力制御部と、を備え、
前記検出器決定部は、
前記観察対象の種類に対応した第1の検出器を決定するとともに、当該観察対象の特定の変化に対応した第2の検出器を決定し、
前記検出部は、
前記第1の検出器を用いて、前記撮像画像内から前記種類の前記観察対象を示す複数の前記注目領域を検出し、前記第2の検出器を用いて、前記複数の注目領域の中から前記特定の変化を示す前記注目領域を検出し、
前記解析部は、
前記注目領域における動きベクトルの特徴量を算出し、
前記領域描画部は、
算出された前記特徴量に応じた前記動きベクトルを前記注目領域の内部に描画する、
情報処理装置と、
を備える情報処理システム。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2015199990 | 2015-10-08 | ||
JP2015199990 | 2015-10-08 | ||
PCT/JP2016/070121 WO2017061155A1 (ja) | 2015-10-08 | 2016-07-07 | 情報処理装置、情報処理方法及び情報処理システム |
Publications (2)
Publication Number | Publication Date |
---|---|
JPWO2017061155A1 JPWO2017061155A1 (ja) | 2018-08-02 |
JP6777086B2 true JP6777086B2 (ja) | 2020-10-28 |
Family
ID=58487485
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017544391A Active JP6777086B2 (ja) | 2015-10-08 | 2016-07-07 | 情報処理装置、情報処理方法及び情報処理システム |
Country Status (3)
Country | Link |
---|---|
US (1) | US20180342078A1 (ja) |
JP (1) | JP6777086B2 (ja) |
WO (1) | WO2017061155A1 (ja) |
Families Citing this family (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
DE112018004960T5 (de) * | 2017-10-26 | 2020-07-23 | Sony Corporation | Informationsverarbeitungseinrichtung, informationsverarbeitungsverfahren, programm und beobachtungssystem |
US11798662B2 (en) * | 2018-03-07 | 2023-10-24 | Verdict Holdings Pty Ltd | Methods for identifying biological material by microscopy |
JP6947289B2 (ja) * | 2018-03-20 | 2021-10-13 | 株式会社島津製作所 | 細胞観察装置 |
JP6947288B2 (ja) * | 2018-03-20 | 2021-10-13 | 株式会社島津製作所 | 細胞観察装置及び細胞観察用プログラム |
EP3797169B1 (fr) * | 2019-03-14 | 2022-07-20 | Hitachi High-Tech Corporation | Procédé de contrôle de sensibilité à des agents chimiques |
JP7172796B2 (ja) * | 2019-03-28 | 2022-11-16 | コニカミノルタ株式会社 | 表示システム、表示制御装置及び表示制御方法 |
CN112639396B (zh) * | 2019-08-07 | 2022-11-11 | 株式会社日立高新技术 | 尺寸测量装置、尺寸测量方法以及半导体制造系统 |
JP2021083431A (ja) * | 2019-11-29 | 2021-06-03 | シスメックス株式会社 | 細胞解析方法、細胞解析装置、細胞解析システム、及び細胞解析プログラム |
WO2021152727A1 (ja) * | 2020-01-29 | 2021-08-05 | 楽天グループ株式会社 | 物体認識システム、位置情報取得方法、及びプログラム |
WO2021166120A1 (ja) * | 2020-02-19 | 2021-08-26 | 三菱電機株式会社 | 情報処理装置、情報処理方法及び情報処理プログラム |
DE102020126953B3 (de) * | 2020-10-14 | 2021-12-30 | Bayerische Motoren Werke Aktiengesellschaft | System und Verfahren zum Erfassen einer räumlichen Orientierung einer tragbaren Vorrichtung |
Family Cites Families (20)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2000069346A (ja) * | 1998-06-12 | 2000-03-03 | Canon Inc | カメラ制御装置、方法、カメラ、追尾カメラシステム及びコンピュ―タ読み取り可能な記憶媒体 |
US7203360B2 (en) * | 2003-04-09 | 2007-04-10 | Lee Shih-Jong J | Learnable object segmentation |
JP2006018706A (ja) * | 2004-07-05 | 2006-01-19 | Nippon Telegr & Teleph Corp <Ntt> | 被写体識別器設定装置、その設定方法とその設定プログラム、および被写体識別装置、その識別方法とその識別プログラム |
JP2007222073A (ja) * | 2006-02-23 | 2007-09-06 | Yamaguchi Univ | 画像処理により細胞運動特性を評価する方法、そのための画像処理装置及び画像処理プログラム |
US9398266B2 (en) * | 2008-04-02 | 2016-07-19 | Hernan Carzalo | Object content navigation |
JP5530126B2 (ja) * | 2009-07-24 | 2014-06-25 | オリンパス株式会社 | 三次元細胞画像解析システム及びそれに用いる三次元細胞画像解析装置 |
JPWO2011016189A1 (ja) * | 2009-08-07 | 2013-01-10 | 株式会社ニコン | 細胞の分類手法、この手法を用いた画像処理プログラム及び画像処理装置、並びに細胞塊の製造方法 |
EP2293248A1 (en) * | 2009-09-08 | 2011-03-09 | Koninklijke Philips Electronics N.V. | Motion monitoring system for monitoring motion within a region of interest |
EP2499827A4 (en) * | 2009-11-13 | 2018-01-03 | Pixel Velocity, Inc. | Method for tracking an object through an environment across multiple cameras |
JP2011193159A (ja) * | 2010-03-12 | 2011-09-29 | Toshiba Corp | 監視システム、画像処理装置、及び監視方法 |
US8941706B2 (en) * | 2010-04-07 | 2015-01-27 | Apple Inc. | Image processing for a dual camera mobile device |
JP5547597B2 (ja) * | 2010-09-29 | 2014-07-16 | 大日本スクリーン製造株式会社 | 病理診断支援装置、病理診断支援方法、病理診断支援のための制御プログラムおよび該制御プログラムを記録した記録媒体 |
EP2549735A3 (en) * | 2011-07-19 | 2014-08-27 | Samsung Electronics Co., Ltd. | Method of editing static digital combined images comprising images of multiple objects |
CN104024913A (zh) * | 2011-12-22 | 2014-09-03 | 松下健康医疗器械株式会社 | 观察系统、观察系统的控制方法以及程序 |
JP5945434B2 (ja) * | 2012-03-16 | 2016-07-05 | オリンパス株式会社 | 生物試料の画像解析方法、画像解析装置、画像撮影装置およびプログラム |
JP6102166B2 (ja) * | 2012-10-10 | 2017-03-29 | 株式会社ニコン | 心筋細胞の運動検出方法、心筋細胞の培養方法、薬剤評価方法、画像処理プログラム及び画像処理装置 |
KR102173123B1 (ko) * | 2013-11-22 | 2020-11-02 | 삼성전자주식회사 | 전자장치에서 이미지 내의 특정 객체를 인식하기 위한 방법 및 장치 |
JP6197659B2 (ja) * | 2014-01-20 | 2017-09-20 | 富士ゼロックス株式会社 | 検出制御装置、プログラム及び検出システム |
KR101736173B1 (ko) * | 2014-02-14 | 2017-05-17 | 한국전자통신연구원 | 관심 객체 고속 검출 장치 및 그 방법 |
JP6024719B2 (ja) * | 2014-09-09 | 2016-11-16 | カシオ計算機株式会社 | 検出装置、検出方法、及びプログラム |
-
2016
- 2016-07-07 WO PCT/JP2016/070121 patent/WO2017061155A1/ja active Application Filing
- 2016-07-07 JP JP2017544391A patent/JP6777086B2/ja active Active
- 2016-07-07 US US15/761,572 patent/US20180342078A1/en not_active Abandoned
Also Published As
Publication number | Publication date |
---|---|
WO2017061155A1 (ja) | 2017-04-13 |
JPWO2017061155A1 (ja) | 2018-08-02 |
US20180342078A1 (en) | 2018-11-29 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6777086B2 (ja) | 情報処理装置、情報処理方法及び情報処理システム | |
US11229419B2 (en) | Method for processing 3D image data and 3D ultrasonic imaging method and system | |
US20170166858A1 (en) | Incubated state evaluating device, incubated state evaluating method, incubator, and program | |
JP6448129B2 (ja) | 細胞評価装置、インキュベータ、細胞評価方法、プログラム、及び細胞の培養方法 | |
US10929985B2 (en) | System and methods for tracking motion of biological cells | |
JP7001060B2 (ja) | 情報処理装置、情報処理方法及び情報処理システム | |
WO2011016189A1 (ja) | 細胞の分類手法、この手法を用いた画像処理プログラム及び画像処理装置、並びに細胞塊の製造方法 | |
KR20160078955A (ko) | 현미경 이미지 내에서 각각의 세포를 분류 및 식별하는 방법 및 시스템 | |
JP2014525252A (ja) | 組織分類のためのシステム及び方法 | |
CN106023151A (zh) | 一种开放环境下中医舌象目标检测方法 | |
WO2017154318A1 (ja) | 情報処理装置、情報処理方法、プログラム及び情報処理システム | |
JPWO2017150194A1 (ja) | 画像処理装置、画像処理方法及びプログラム | |
CN107408198A (zh) | 细胞图像和视频的分类 | |
JP2017023055A (ja) | 細胞管理システム、プログラム、及び、細胞管理方法 | |
EP3485458A1 (en) | Information processing device, information processing method, and information processing system | |
Lin et al. | Quality assessment of fetal head ultrasound images based on faster R-CNN | |
JPWO2018105298A1 (ja) | 情報処理装置、情報処理方法及び情報処理システム | |
CN108460370A (zh) | 一种固定式家禽生命信息报警装置 | |
US20210217172A1 (en) | Information processing device, information processing method, program, and information processing system | |
Masdiyasa et al. | A new method to improve movement tracking of human sperms | |
EP4258852A1 (en) | Plant detection and display system | |
Yin et al. | A novel method of situ measurement algorithm for oudemansiella raphanipies caps based on YOLO v4 and distance filtering | |
Durgadevi et al. | Image characterization based fetal brain MRI localization and extraction | |
US20220249060A1 (en) | Method for processing 3d image data and 3d ultrasonic imaging method and system | |
Patel et al. | Plant disease detection using image processing and machine learning |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20190208 |
|
RD03 | Notification of appointment of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7423 Effective date: 20190214 |
|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20190222 |
|
RD02 | Notification of acceptance of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7422 Effective date: 20190515 |
|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20190522 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20190611 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20200414 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20200608 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20200630 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20200824 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20200908 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20200921 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 6777086 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |