JP7219804B2 - 情報処理装置、情報処理システム、情報処理方法およびプログラム - Google Patents
情報処理装置、情報処理システム、情報処理方法およびプログラム Download PDFInfo
- Publication number
- JP7219804B2 JP7219804B2 JP2021501210A JP2021501210A JP7219804B2 JP 7219804 B2 JP7219804 B2 JP 7219804B2 JP 2021501210 A JP2021501210 A JP 2021501210A JP 2021501210 A JP2021501210 A JP 2021501210A JP 7219804 B2 JP7219804 B2 JP 7219804B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- display
- information processing
- unit
- area
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 230000010365 information processing Effects 0.000 title claims description 194
- 238000003672 processing method Methods 0.000 title claims description 7
- 238000004458 analytical method Methods 0.000 claims description 16
- 238000004364 calculation method Methods 0.000 claims description 16
- 238000001514 detection method Methods 0.000 claims description 12
- 238000000605 extraction Methods 0.000 claims description 11
- 238000010191 image analysis Methods 0.000 claims description 11
- 230000000007 visual effect Effects 0.000 claims description 9
- 230000011218 segmentation Effects 0.000 claims description 8
- 230000003287 optical effect Effects 0.000 claims description 7
- 239000000284 extract Substances 0.000 claims description 5
- 230000004048 modification Effects 0.000 description 50
- 238000012986 modification Methods 0.000 description 50
- 238000012545 processing Methods 0.000 description 37
- 238000010586 diagram Methods 0.000 description 35
- 238000000034 method Methods 0.000 description 15
- 230000008569 process Effects 0.000 description 11
- 238000003384 imaging method Methods 0.000 description 9
- 239000006059 cover glass Substances 0.000 description 4
- 230000000694 effects Effects 0.000 description 4
- 239000011521 glass Substances 0.000 description 4
- 230000008859 change Effects 0.000 description 3
- 238000004891 communication Methods 0.000 description 3
- 238000005401 electroluminescence Methods 0.000 description 2
- 238000011156 evaluation Methods 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 230000005540 biological transmission Effects 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 239000000470 constituent Substances 0.000 description 1
- 238000003745 diagnosis Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000014509 gene expression Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 229910044991 metal oxide Inorganic materials 0.000 description 1
- 150000004706 metal oxides Chemical class 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 239000000758 substrate Substances 0.000 description 1
- 230000002194 synthesizing effect Effects 0.000 description 1
- 238000009966 trimming Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/60—Type of objects
- G06V20/69—Microscopic objects, e.g. biological cells or cellular parts
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B21/00—Microscopes
- G02B21/36—Microscopes arranged for photographic purposes or projection purposes or digital imaging or video purposes including associated control and data processing arrangements
- G02B21/365—Control or image processing arrangements for digital or video microscopes
- G02B21/367—Control or image processing arrangements for digital or video microscopes providing an output produced by processing a plurality of individual source images, e.g. image tiling, montage, composite images, depth sectioning, image comparison
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B21/00—Microscopes
- G02B21/36—Microscopes arranged for photographic purposes or projection purposes or digital imaging or video purposes including associated control and data processing arrangements
- G02B21/368—Microscopes arranged for photographic purposes or projection purposes or digital imaging or video purposes including associated control and data processing arrangements details of associated display arrangements, e.g. mounting of LCD monitor
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/70—Determining position or orientation of objects or cameras
- G06T7/73—Determining position or orientation of objects or cameras using feature-based methods
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/20—Image preprocessing
- G06V10/25—Determination of region of interest [ROI] or a volume of interest [VOI]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10056—Microscopic image
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20212—Image combination
- G06T2207/20221—Image fusion; Image merging
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30242—Counting objects in image
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Multimedia (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Chemical & Material Sciences (AREA)
- Analytical Chemistry (AREA)
- Optics & Photonics (AREA)
- Biomedical Technology (AREA)
- Life Sciences & Earth Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Molecular Biology (AREA)
- Health & Medical Sciences (AREA)
- Signal Processing (AREA)
- Microscoopes, Condenser (AREA)
- Closed-Circuit Television Systems (AREA)
- Controls And Circuits For Display Device (AREA)
- User Interface Of Digital Computer (AREA)
- Measuring And Recording Apparatus For Diagnosis (AREA)
Description
〔情報処理システムの構成〕
図1は、実施の形態1に係る情報処理システムの機能構成を示すブロック図である。図1に示す情報処理システム1は、情報処理装置10と、画像データベース20(以下、「画像DB20」という)と、操作部30と、表示部40と、を備える。
次に、情報処理装置10の詳細な構成について説明する。情報処理装置10は、取得部11と、記憶部12と、制御部13と、を備える。
次に、情報処理装置10が実行する処理について説明する。図2は、情報処理装置10が実行する処理の概要を示すフローチャートである。
xt-Δ<xk<xt+Δ、かつ、yt-Δ<yk<yt+Δ
(k=t,t+Δt,・・・nΔt、Δt:ステップ幅)
の条件を満たしているとき、「所定の条件を満たす」とする。なお、表示領域のアスペクト比が一定と仮定できる場合は、wt,htのどちらか一方を記憶すれば良い。第1判定部133によって所定の条件を満たすと判定された場合(ステップS4:Yes)、情報処理装置10は、ステップS5へ移行する。これに対して、第1判定部133によって所定の条件を満たさないと判定された場合(ステップS4:No)、情報処理装置10は、後述するステップS6へ移行する。
図3は、上述した図2のステップS5の加算処理の概要を示すフローチャートである。
W=m×p ・・・(1)
H=m×q ・・・(2)
ps=floor(xk/m)
qs=floor(yk/m)
pe=floor((xk+wk)/m)
qe=floor((yk+hk)/m)
ここで、0<pi≦p、0<qs≦qを満たす。
(F’(pi,qi)=F’(pi,qi)+1)
ステップS6において、情報処理装置10は、表示部40による表示画像の表示、すなわち次の画像の生成を行わないとき、終了判定(ステップS6:Yes)とし、後述するステップS7へ移行する。これに対して、表示部40による表示画像の表示を終了しない場合(ステップS6:No)、情報処理装置10は、上述したステップS2へ移行することによって表示画像の生成を行う。また、情報処理装置10は、前記の様に、所定間隔での表示情報(xk,yk,wk,hk)を生成し、一旦記憶部12に保持した後に、表示情報を再度読みだして評価する場合において、上述したステップS6において、終了しない場合(ステップS6:No)のとき、上述したステップS4へ戻り、判定処理を行ってもよい。
次に、実施の形態1の変形例1について説明する。実施の形態1の変形例1は、加算部134が実行する加算処理が異なる。上述した実施の形態1では、表示履歴を記憶することによってN回繰り返し処理を行っていたが、実施の形態1の変形例1では、所定の時間間隔で表示頻度の加算を行う。
次に、実施の形態1の変形例2について説明する。実施の形態1の変形例2では、加算部134が実行する加算処理が異なる。具体的には、実施の形態1の変形例2では、標本画像に対する表示画像の表示領域の倍率に応じて、表示頻度に重み付けを行って加算する。このため、以下においては、実施の形態1の変形例2に係る加算部134が実行する加算処理について説明する。
図5は、実施の形態1の変形例2に係る加算処理の概要を示すフローチャートである。図5において、ステップS301~ステップS304、ステップS306,ステップS307は、上述した図3のステップS101~104およびステップS106,ステップS107それぞれに対応し、ステップS305のみ異なる。このため、以下においては、ステップS307のみについて説明する。
次に、実施の形態1の変形例3について説明する。実施の形態1の変形例3では、加算部134が実行する加算処理に含まれる判別基準が異なる。具体的には、実施の形態1の変形例3では、表示部40が現在表示している表示画像における表示領域と、この表示画像が表示された所定時間前に表示された表示画像または所定時間経過後に表示された表示画像の表示領域とを比較し、表示倍率が大きいか否かを判定することによって表示頻度のカウント値を加算する。実施の形態1の変形例3の前提としては、表示画像に係る表示領域情報(xt,yt,wt,ht)を蓄積した後に行う。そのため、以下においては、後述するステップS402で説明する様に、判定の対象とする時刻kの前後のデータを取得できるとしている。
図7は、実施の形態1の変形例3に係る加算処理の概要を示すフローチャートである。図7において、ステップS403~ステップS405、ステップS407,ステップS408は、上述した図3のステップS102~ステップS104、ステップS106およびステップS107それぞれに対応する。このため、以下においては、ステップS401、ステップS402およびステップS406について説明する。
次に、実施の形態1の変形例4について説明する。実施の形態1の変形例4では、加算部134が実行する加算処理が異なる。具体的には、実施の形態1の変形例4では、過去n個のデータの偏差に応じて表示頻度のカウント値を加算する。このため、以下においては、実施の形態1の変形例4に係る加算部134が実行する加算処理について説明する。
図9は、実施の形態1の変形例4に係る加算処理の概要を示すフローチャートである。図9において、ステップS503~ステップS508は、上述したステップS403~ステップS408それぞれに対応し、ステップS501およびステップS502のみ異なる。以下においては、ステップS501およびステップS502について説明する。
次に、実施の形態2について説明する。上述した実施の形態1では、表示頻度のカウント値に基づいて、注目領域を設定することによって対象画像上に注目領域を重畳表示していたが、実施の形態2では、対象画像の特徴量の解析を行った後に特徴量による画像のセグメンテーションを行い、注目領域に類似する類似領域を抽出する。以下においては、実施の形態2に係る情報処理システムの構成について説明する。なお、上述した実施の形態1に係る情報処理システムと同一の構成には同一の符号を付して詳細な説明は省略する。
図11は、実施の形態2に係る情報処理システムの機能構成を示すブロック図である。図11に示す情報処理システム1Aは、上述した実施の形態1に係る情報処理システム1の情報処理装置10に換えて、情報処理装置10Aを備える。
情報処理装置10Aは、上述した実施の形態1に係る制御部13に換えて、制御部13Aを備える。さらに、制御部13Aは、上述した実施の形態1に係る制御部13の構成に加えて、画像解析部141と、特徴量解析部142と、抽出部143と、をさらに備える。
次に、実施の形態3について説明する。実施の形態3では、注目領域の特徴量を解析し、この解析結果をクエリ(Query)として画像データベースから検索を行う。以下においては、実施の形態3に係る情報処理システムの構成について説明する。なお、上述した実施の形態1,2に係る情報処理システム1,1Aと同一の構成には同一の符号を付して詳細な説明は省略する。
図16は、実施の形態3に係る情報処理システムの機能構成を示すブロック図である。図16に示す情報処理システム1Bは、上述した実施の形態1に係る情報処理システム1の情報処理装置10に換えて、情報処理装置10Bを備える。さらに、特徴量が解析された複数の画像データを記憶する特徴解析済画像データベース50(以下、「特徴解析済画像DB50」という)をさらに備える。
情報処理装置10Bは、上述した実施の形態2に係る制御部13Aの構成から画像解析部141および抽出部143に換えて、クエリ生成部150と、検索部151を備え、それ以外は、制御部13Aと同様の構成を有する。
次に、実施の形態4について説明する。実施の形態4では、顕微鏡が撮像した画像データに対応する画像における表示領域の表示頻度に基づいて、注目領域を設定する。以下においては、実施の形態4に係る情報処理システムの構成について説明する。なお、上述した実施の形態1に係る情報処理システム1と同一の構成には同一の符号を付して詳細な説明を省略する。
図17は、実施の形態4に係る情報処理システムの機能構成を示す概略図である。図17に示す情報処理システム1Cは、情報処理装置10Cと、表示部40と、顕微鏡100と、を備える。
次に、情報処理装置10Cの詳細な構成について説明する。情報処理装置10Cは、上述した実施の形態1に係る取得部11、記憶部12および制御部13に換えて、取得部11C、記憶部12Cおよび制御部13Cを備える。
次に、実施の形態4の変形例1について説明する。実施の形態4の変形例1では、同一のスライドを再度観察する場合、撮像部105が生成した画像データに対応するライブビュー画像に注目領域を表示部40に重畳表示させる。なお、上述した実施の形態4に係る情報処理システム1Dと同一の部分には同一の符号を付して詳細な説明は省略する。
図22は、実施の形態4の変形例1に係る情報処理システムの機能構成を示す概略図である。図22に示す情報処理システム1Dは、上述した実施の形態4に係る情報処理システム1Cの情報処理装置10Cに換えて、情報処理装置10Dを備える。
情報処理装置10Dは、上述した実施の形態4に係る情報処理装置10Cの記憶部12に換えて、記憶部12Dを備える。記憶部12Dは、上述した実施の形態4に係る記憶部12の構成に加えて、標本画像と、ステージの位置情報と、表示頻度のカウント値と、を関係付けて記憶する全体画像記憶部125を有する。
次に、実施の形態4の変形例2について説明する。実施の形態4の変形例2では、標本画像の全体を用いて位置合わせを行うことによってライブビュー画像上に注目領域を表示部40に重畳表示させる。なお、上述した実施の形態4に係る情報処理システム1Dと同一の部分には同一の符号を付して詳細な説明は省略する。
図23は、実施の形態4の変形例2に係る情報処理システムの機能構成を示す概略図である。図23に示す情報処理システム1Eは、上述した実施の形態4の変形例1に係る情報処理システム1Dの情報処理装置10Dに換えて、情報処理装置10Eを備える。
情報処理装置10Eは、上述した実施の形態4の変形例1に係る情報処理装置10Dの制御部13Cに換えて、制御部13Eを備える。制御部13Eは、上述した実施の形態4の変形例1に係る制御部13Cの構成に加えて、位置合わせ処理部160をさらに有する。
次に、実施の形態4の変形例3について説明する。実施の形態4の変形例3では、観察像に注目領域を重畳する。なお、上述した実施の形態4に係る情報処理システム1Cと同一の部分には同一の符号を付して詳細な説明は省略する。
図24は、実施の形態4の変形例3に係る情報処理システムの機能構成を示す概略図である。図24に示す情報処理システム1Fは、上述した実施の形態4に係る顕微鏡100に換えて、顕微鏡100Fを備える。
次に、実施の形態5について説明する。上述した実施の形態1~4では、2次元の標本画像等の平面画像に対する注目領域を設定したが、実施の形態5では、CT画像、MRI画像および3次元の標本画像等の立体画像に対する注目領域を設定する。なお、上述した実施の形態1に係る情報処理システム1と同一の構成には同一の符号を付して詳細な説明は省略する。
図25は、実施の形態5に係る情報処理システムの機能構成を示すブロック図である。図25に示す情報処理システム1Gは、上述した実施の形態1に係る情報処理システム1の画像DB20および情報処理装置10に換えて、CT画像、MRI画像および3次元の標本画像等の複数の立体画像データを記憶する画像DB20Gおよび情報処理装置10Gを備える。
情報処理装置10Gは、上述した実施の形態1に係る情報処理装置10の制御部13に換えて、制御部13Gを備える。制御部13Gは、上述した実施の形態1に係る加算部134に換えて、加算部134Gを備える。
上述した実施の形態1~5に開示されている複数の構成要素を適宜組み合わせることによって、種々の実施の形態を形成することができる。例えば、上述した実施の形態1~5に記載した全構成要素からいくつかの構成要素を削除してもよい。さらに、上述した実施の形態1~5で説明した構成要素を適宜組み合わせてもよい。
10,10A,10B,10C,10D,10E,10G 情報処理装置
11,11C 取得部
12,12C,12D 記憶部
13,13A,13C,13E,13G 制御部
20 画像DB
30 操作部
40,60 表示部
50 特徴解析済画像DB
100,100F 顕微鏡
101 筐体部
101A スライドガラス
101B カバーガラス
102 ステージ
103 対物レンズ
104 レボルバ
105 撮像部
106 接眼部
107 操作部
108 位置検出部
109 倍率検出部
110 中間鏡筒
111 ハーフミラー
121 表示情報記憶部
122 カウント値記憶部
123 プログラム記録部
124 視野情報記憶部
125 全体画像記憶部
131 第1生成部
132,132C 算出部
133 第1判定部
134 第2判定部
135,135G 加算部
136 設定部
137,137C 第2生成部
138 表示制御部
141 画像解析部
142 特徴量解析部
143 抽出部
151 検索部
160 位置合わせ処理部
Claims (21)
- 外部装置から入力される画像データと、外部装置から入力される指示信号であって、前記画像データに対応する画像における所定の表示領域を選択する指示信号と、に基づいて、前記画像データに対応する第1画像を用いて、前記指示信号によって選択される前記表示領域に対応する表示画像を生成する第1生成部と、
前記第1画像における前記表示領域の位置を示す表示領域情報と、前記第1画像における所定の領域毎の表示頻度を示すカウント値と、を記憶する記憶部と、
前記表示領域情報が所定の条件を満たすか否かを判定する第1判定部と、
前記第1判定部が前記所定の条件を満たすと判定した前記領域の前記カウント値に所定の値を加算する加算部と、
前記カウント値に基づいて、前記第1画像において注目度が高い領域を注目領域として設定する設定部と、
を備える、
情報処理装置。 - 請求項1に記載の情報処理装置であって、
前記表示領域情報は、前記第1画像を基準とした座標系で前記表示画像の位置を表す座標情報と前記表示画像の大ききを表す情報である、
情報処理装置。 - 請求項1または2に記載の情報処理装置であって、
前記設定部は、
前記カウント値が大きい領域ほど注目度が高い前記注目領域として設定する、
情報処理装置。 - 請求項1~3のいずれか一つに記載の情報処理装置であって、
前記設定部は、
前記カウント値の値が所定値より大きい領域を前記注目領域として設定する、
情報処理装置。 - 請求項1~4のいずれか一つに記載の情報処理装置であって、
前記表示画像を表示部に表示させる表示制御部をさらに備え、
前記所定の条件は、
前記表示部において表示された表示時間であり、
前記第1判定部は、
前記表示が所定時間、一定の大きさで所定の移動範囲内で表示されたか否かを判定し、
前記加算部は、
前記第1判定部によって前記表示時間が所定の時間より長く表示されたと判定された前記領域の前記カウント値を加算する、
情報処理装置。 - 請求項1~4のいずれか一つに記載の情報処理装置であって、
前記表示画像を表示部に表示させる表示制御部と、
前記第1判定部と異なる所定の条件を判定する第2判定部と、
をさらに備える、
情報処理装置。 - 請求項6に記載の情報処理装置であって、
前記第2判定部は、
前記所定の領域毎に、対象時刻における前記表示領域が対象時刻の前後の表示領域より大きいか否かを判定し、
前記加算部は、
前記第2判定部によって対象時刻における前記表示領域が対象時刻の前後の表示領域より大きいと判定された前記領域の前記カウント値を加算する、
情報処理装置。 - 請求項6に記載の情報処理装置であって、
前記加算部は、
前記所定の値に対して、前記表示領域が小さいほど重み付けを行って前記カウント値に加算する、
情報処理装置。 - 請求項6に記載の情報処理装置であって、
前記第2判定部の所定の条件は、
前記表示画像の表示位置および前記表示画像の表示領域の大きさの偏差、または所定時間における前記表示画像の表示位置および前記表示画像の表示領域の大きさの偏差であり、 前記加算部は、
前記第2判定部によって前記偏差が所定値以下であると判定された前記領域の前記カウント値を加算する、
情報処理装置。 - 請求項1~9のいずれか一つに記載の情報処理装置であって、
前記画像データは、
2次元の平面画像データまたは3次元の立体画像データである、
情報処理装置。 - 請求項1~10のいずれか一つに記載の情報処理装置であって、
前記第1画像の特徴量を解析することによって特徴量毎にセグメンテーションを行う画像解析部と、
前記注目領域の注目領域特徴量を解析する特徴量解析部と、
前記注目領域特徴量と前記特徴量とに基づいて、前記第1画像から前記注目領域に類似する領域を抽出する抽出部と、
をさらに備える、
情報処理装置。 - 請求項11に記載の情報処理装置であって、
前記注目領域特徴量に基づいて、複数の画像データから類似する画像データを検索するためのクエリを生成するクエリ生成部と、
前記クエリに基づいて、複数の画像データを記憶する画像データベースから画像を検索する検索部をさらに備える、
情報処理装置。 - 請求項1~12のいずれか一つに記載の情報処理装置であって、
前記表示画像に前記注目領域を重畳して重畳画像を生成する第2生成部をさらに備える、
情報処理装置。 - 請求項1~13のいずれか一つに記載の情報処理装置であって、
前記指示信号に基づいて、前記表示領域の位置を示す表示領域情報を算出する算出部をさらに備える、
情報処理装置。 - 請求項14に記載の情報処理装置であって、
前記指示信号は、
顕微鏡に設けられ位置検出部が検出した基準位置からのステージの位置を示す位置情報と、
前記顕微鏡に設けられた倍率検出部が検出した標本を観察する観察倍率を示す倍率情報と、
を含む、
情報処理装置。 - 対象物を観察する観察装置を備える情報処理システムであって、
前記観察装置によって選択される前記対象物の選択位置と、少なくとも前記観察装置の視野の大きさを示す視野情報と、所定の領域毎の表示頻度を示すカウント値と、を記憶する記憶部と、
前記視野情報が所定の条件を満たすか否かを判定する第1判定部と、
前記第1判定部が前記所定の条件を満たすと判定した前記領域の前記カウント値に所定の値を加算する加算部と、
前記カウント値に基づいて、前記対象物に対応する座標系において注目度が高い領域を注目領域として設定する設定部と、
を備える、
情報処理システム。 - 請求項16に記載の情報処理システムであって、
前記視野情報は、
被写界を基準とした座標系における前記視野の位置を表す座標情報をさらに含む、
情報処理システム。 - 請求項16に記載の情報処理システムであって、
前記対象物の観察像に前記注目領域に係る情報を表示部に表示させる表示制御部をさらに備える、
情報処理システム。 - 請求項16に記載の情報処理システムであって、
観察光学系と、
前記観察光学系が結像する前記対象物の観察像に前記注目領域に係る情報を重畳する表示制御部と、
をさらに備える、
情報処理システム。 - 情報処理装置が実行する情報処理方法であって、
外部装置から入力される画像データと、外部装置から入力される指示信号であって、前記画像データに対応する画像における所定の表示領域を選択する指示信号と、に基づいて、前記画像データに対応する第1画像を用いて前記指示信号によって選択される前記表示領域に対応する表示画像を生成し、
前記第1画像における前記表示領域の位置を示す表示領域情報と、前記第1画像における所定の領域毎の表示頻度を示すカウント値と、を記憶する記憶部から前記表示領域情報を取得し、
前記表示領域情報が所定の条件を満たすか否かを判定し、
前記所定の条件を満たすと判定した前記領域の前記カウント値をカウントアップし、
前記カウント値に基づいて、前記第1画像において注目度が高い領域を注目領域として設定する、
情報処理方法。 - 情報処理装置に、
外部装置から入力される画像データと、外部装置から入力される指示信号であって、前記画像データに対応する画像における所定の表示領域を選択する指示信号と、に基づいて、前記画像データに対応する第1画像を用いて前記指示信号によって選択される前記表示領域に対応する表示画像を生成し、
前記第1画像における前記表示領域の位置を示す表示領域情報と、前記第1画像における所定の領域毎の表示頻度を示すカウント値と、を記憶する記憶部から前記表示領域情報を取得し、
前記表示領域情報が所定の条件を満たすか否かを判定し、
前記所定の条件を満たすと判定した前記領域の前記カウント値をカウントアップし、
前記カウント値に基づいて、前記第1画像において注目度が高い領域を注目領域として設定する、
プログラム。
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
PCT/JP2019/006369 WO2020170369A1 (ja) | 2019-02-20 | 2019-02-20 | 情報処理装置、情報処理システム、情報処理方法およびプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JPWO2020170369A1 JPWO2020170369A1 (ja) | 2021-12-16 |
JP7219804B2 true JP7219804B2 (ja) | 2023-02-08 |
Family
ID=72144543
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2021501210A Active JP7219804B2 (ja) | 2019-02-20 | 2019-02-20 | 情報処理装置、情報処理システム、情報処理方法およびプログラム |
Country Status (3)
Country | Link |
---|---|
US (1) | US11972619B2 (ja) |
JP (1) | JP7219804B2 (ja) |
WO (1) | WO2020170369A1 (ja) |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005202173A (ja) | 2004-01-16 | 2005-07-28 | Canon Inc | 画像表示方法 |
JP2011215660A (ja) | 2010-03-31 | 2011-10-27 | Hitachi Ltd | 注目画像閲覧表示方法 |
JP2016139397A (ja) | 2015-01-23 | 2016-08-04 | パナソニックIpマネジメント株式会社 | 画像処理装置、画像処理方法、画像表示装置およびコンピュータプログラム |
JP2017046340A (ja) | 2015-08-28 | 2017-03-02 | パナソニックIpマネジメント株式会社 | 画像出力装置、画像送信装置、画像受信装置、画像出力方法および記録媒体 |
US20180137119A1 (en) | 2016-11-16 | 2018-05-17 | Samsung Electronics Co., Ltd. | Image management method and apparatus thereof |
Family Cites Families (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
GB0229625D0 (en) | 2002-12-19 | 2003-01-22 | British Telecomm | Searching images |
US8126267B2 (en) * | 2007-02-05 | 2012-02-28 | Albany Medical College | Methods and apparatuses for analyzing digital images to automatically select regions of interest thereof |
WO2011074198A1 (ja) | 2009-12-14 | 2011-06-23 | パナソニック株式会社 | ユーザインタフェース装置および入力方法 |
FR2982384B1 (fr) | 2011-11-04 | 2014-06-27 | Univ Pierre Et Marie Curie Paris 6 | Dispositif de visualisation d'une lame virtuelle |
JP2013174581A (ja) * | 2012-01-25 | 2013-09-05 | Canon Inc | 画像データ生成装置および画像データ生成方法 |
JP2015114798A (ja) | 2013-12-11 | 2015-06-22 | キヤノン株式会社 | 情報処理装置および情報処理方法、プログラム |
US9437022B2 (en) * | 2014-01-27 | 2016-09-06 | Splunk Inc. | Time-based visualization of the number of events having various values for a field |
JP6411768B2 (ja) * | 2014-04-11 | 2018-10-24 | Hoya株式会社 | 画像処理装置 |
US9824189B2 (en) | 2015-01-23 | 2017-11-21 | Panasonic Intellectual Property Management Co., Ltd. | Image processing apparatus, image processing method, image display system, and storage medium |
CN104778009A (zh) * | 2015-04-15 | 2015-07-15 | 京东方科技集团股份有限公司 | 驱动方法及装置、显示装置 |
US10048485B2 (en) | 2015-08-28 | 2018-08-14 | Panasonic Intellectual Property Management Co., Ltd. | Image output device, image transmission device, image reception device, image output method, and non-transitory recording medium |
US10645376B2 (en) * | 2017-04-16 | 2020-05-05 | Facebook, Inc. | Systems and methods for presenting content |
US10484675B2 (en) * | 2017-04-16 | 2019-11-19 | Facebook, Inc. | Systems and methods for presenting content |
-
2019
- 2019-02-20 JP JP2021501210A patent/JP7219804B2/ja active Active
- 2019-02-20 WO PCT/JP2019/006369 patent/WO2020170369A1/ja active Application Filing
-
2021
- 2021-08-06 US US17/395,666 patent/US11972619B2/en active Active
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005202173A (ja) | 2004-01-16 | 2005-07-28 | Canon Inc | 画像表示方法 |
JP2011215660A (ja) | 2010-03-31 | 2011-10-27 | Hitachi Ltd | 注目画像閲覧表示方法 |
JP2016139397A (ja) | 2015-01-23 | 2016-08-04 | パナソニックIpマネジメント株式会社 | 画像処理装置、画像処理方法、画像表示装置およびコンピュータプログラム |
JP2017046340A (ja) | 2015-08-28 | 2017-03-02 | パナソニックIpマネジメント株式会社 | 画像出力装置、画像送信装置、画像受信装置、画像出力方法および記録媒体 |
US20180137119A1 (en) | 2016-11-16 | 2018-05-17 | Samsung Electronics Co., Ltd. | Image management method and apparatus thereof |
Also Published As
Publication number | Publication date |
---|---|
JPWO2020170369A1 (ja) | 2021-12-16 |
US11972619B2 (en) | 2024-04-30 |
WO2020170369A1 (ja) | 2020-08-27 |
US20210364776A1 (en) | 2021-11-25 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6124543B2 (ja) | 画像処理装置、画像処理方法、画像処理システム、及びプログラム | |
JP4545828B2 (ja) | 画像検索装置及び画像検索方法 | |
JP5281972B2 (ja) | 撮像装置 | |
US9386297B2 (en) | Image generating apparatus generating reconstructed image, method, and computer-readable recording medium | |
JP4462959B2 (ja) | 顕微鏡画像撮影システム及び方法 | |
JP5679524B2 (ja) | スタックされた顕微鏡画像をナビゲートするための方法及び装置 | |
JP2016157436A (ja) | 情報端末の制御方法及びプログラム | |
US20140184778A1 (en) | Image processing apparatus, control method for the same, image processing system, and program | |
JP2009175040A (ja) | 病理組織画像撮影システム、病理組織画像撮影方法、および病理組織画像撮影プログラム | |
US20160042122A1 (en) | Image processing method and image processing apparatus | |
JP4872396B2 (ja) | 画像編集装置、画像編集方法および画像編集プログラム | |
US10429632B2 (en) | Microscopy system, microscopy method, and computer-readable recording medium | |
JP5344073B2 (ja) | 病理組織画像撮影システム、病理組織画像撮影方法、および病理組織画像撮影プログラム | |
JP2013153429A (ja) | 画像処理装置、画像表示システム、画像処理方法および画像処理プログラム | |
JP2006329684A (ja) | 画像計測装置及び方法 | |
US11729494B2 (en) | Information processing apparatus, control method therefor, and storage medium | |
JP7219804B2 (ja) | 情報処理装置、情報処理システム、情報処理方法およびプログラム | |
EP2355525A2 (en) | Mobile communication terminal having image conversion function and method | |
US20220351428A1 (en) | Information processing apparatus, information processing method, and computer readable recording medium | |
JPWO2014087622A1 (ja) | 見え方提示システム、方法およびプログラム | |
CN113014806B (zh) | 虚化图像拍摄方法及装置 | |
JP6338730B2 (ja) | 表示データを生成する装置、方法、及びプログラム | |
JP7174318B2 (ja) | 情報処理装置、情報処理方法、及びプログラム | |
JP6068010B2 (ja) | 顕微鏡システム | |
KR102355578B1 (ko) | 정보 처리 장치, 프로그램을 기록한 기록 매체 및 정보 처리 방법 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20220216 |
|
A711 | Notification of change in applicant |
Free format text: JAPANESE INTERMEDIATE CODE: A712 Effective date: 20221004 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20230104 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20230127 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 7219804 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |