JPWO2020170369A1 - 情報処理装置、情報処理システム、情報処理方法およびプログラム - Google Patents

情報処理装置、情報処理システム、情報処理方法およびプログラム Download PDF

Info

Publication number
JPWO2020170369A1
JPWO2020170369A1 JP2021501210A JP2021501210A JPWO2020170369A1 JP WO2020170369 A1 JPWO2020170369 A1 JP WO2020170369A1 JP 2021501210 A JP2021501210 A JP 2021501210A JP 2021501210 A JP2021501210 A JP 2021501210A JP WO2020170369 A1 JPWO2020170369 A1 JP WO2020170369A1
Authority
JP
Japan
Prior art keywords
image
information processing
display
unit
region
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2021501210A
Other languages
English (en)
Other versions
JP7219804B2 (ja
Inventor
伸之 渡辺
英敏 西村
一仁 堀内
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Olympus Corp
Original Assignee
Olympus Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Olympus Corp filed Critical Olympus Corp
Publication of JPWO2020170369A1 publication Critical patent/JPWO2020170369A1/ja
Application granted granted Critical
Publication of JP7219804B2 publication Critical patent/JP7219804B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/60—Type of objects
    • G06V20/69—Microscopic objects, e.g. biological cells or cellular parts
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B21/00—Microscopes
    • G02B21/36—Microscopes arranged for photographic purposes or projection purposes or digital imaging or video purposes including associated control and data processing arrangements
    • G02B21/365—Control or image processing arrangements for digital or video microscopes
    • G02B21/367—Control or image processing arrangements for digital or video microscopes providing an output produced by processing a plurality of individual source images, e.g. image tiling, montage, composite images, depth sectioning, image comparison
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B21/00—Microscopes
    • G02B21/36—Microscopes arranged for photographic purposes or projection purposes or digital imaging or video purposes including associated control and data processing arrangements
    • G02B21/368—Microscopes arranged for photographic purposes or projection purposes or digital imaging or video purposes including associated control and data processing arrangements details of associated display arrangements, e.g. mounting of LCD monitor
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/70—Determining position or orientation of objects or cameras
    • G06T7/73—Determining position or orientation of objects or cameras using feature-based methods
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/20—Image preprocessing
    • G06V10/25—Determination of region of interest [ROI] or a volume of interest [VOI]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10056—Microscopic image
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/20—Special algorithmic details
    • G06T2207/20212—Image combination
    • G06T2207/20221—Image fusion; Image merging
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30242—Counting objects in image

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Optics & Photonics (AREA)
  • Analytical Chemistry (AREA)
  • Chemical & Material Sciences (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Molecular Biology (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Biomedical Technology (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Signal Processing (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Microscoopes, Condenser (AREA)
  • Closed-Circuit Television Systems (AREA)
  • User Interface Of Digital Computer (AREA)
  • Measuring And Recording Apparatus For Diagnosis (AREA)

Abstract

簡易な操作で標本画像の注目領域を提示することができる情報処理装置、情報処理システム、情報処理方法およびプログラムを提供する。情報処理装置は、記憶部が記憶する表示領域情報が所定の条件を満たすか否かを判定する判定部と、判定部が所定の条件を満たすと判定した領域のカウント値に所定の値を加算する加算部と、カウント値に基づいて、第１画像において注目度が高い注目領域を設定する設定部と、を備える。

Description

本開示は、画像を表示する情報処理装置、情報処理システム、情報処理方法およびプログラムに関する。
従来、バーチャルスライドによってデジタル化された標本画像の一部を拡大することによって表示する技術が知られている（例えば特許文献１参照）。この技術によれば、複数の画像をつなぎ合わせて合成することで、顕微鏡の視野よりも大きなデジタルの標本画像を表示し、ユーザが操作ダイヤルを操作することによって標本画像の表示位置を上下左右に移動したり、ズーム用ホイールを操作することによって表示倍率を変更したりすることで、標本画像内から診断上重要となる注目領域を探索しながら観察を行っている。
特表２０１５−５０４５２９号公報
しかしながら、上述した特許文献１では、ユーザが操作ダイヤルやズーム用ホイールを操作することによって、その都度、画像の表示領域の位置や表示領域の倍率を変更することによって表示させているため、ユーザが画像から注目領域を探索するのに膨大な作業が生じることで、操作が煩雑になるという問題点があった。
本開示は、上記に鑑みてなされたものであって、簡易な操作で画像の注目領域を提示することができる情報処理装置、情報処理システム、情報処理方法およびプログラムを提供することを目的とする。
上述した課題を解決し、目的を達成するために、本開示に係る情報処理装置は、外部装置から入力される画像データと、外部装置から入力される指示信号であって、前記画像データに対応する画像における所定の表示領域を選択する指示信号と、に基づいて、前記画像データに対応する第１画像を用いて、前記指示信号によって選択される前記表示領域に対応する表示画像を生成する第１生成部と、前記第１画像における前記表示領域の位置を示す表示領域情報と、前記第１画像における所定の領域毎の表示頻度を示すカウント値と、を記憶する記憶部と、前記表示領域情報が所定の条件を満たすか否かを判定する第１判定部と、前記第１判定部が前記所定の条件を満たすと判定した前記領域の前記カウント値に所定の値を加算する加算部と、前記カウント値に基づいて、前記第１画像において注目度が高い領域を注目領域として設定する設定部と、を備える。
また、本開示に係る情報処理装置は、上記開示において、前記表示領域情報は、前記第１画像を基準とした座標系で前記表示画像の位置を表す座標情報と前記表示画像の大ききを表す情報である。
また、本開示に係る情報処理装置は、上記開示において、前記設定部は、前記カウント値が大きい領域ほど注目度が高い前記注目領域として設定する。
また、本開示に係る情報処理装置は、上記開示において、前記設定部は、前記カウント値の値が所定値より大きい領域を前記注目領域として設定する。
また、本開示に係る情報処理装置は、上記開示において、前記表示画像を表示部に表示させる表示制御部をさらに備え、前記所定の条件は、前記表示部において表示された表示時間であり、前記第１判定部は、前記表示が所定時間、一定の大きさで所定の移動範囲内で表示されたか否かを判定し、前記加算部は、前記第１判定部によって前記表示時間が所定の時間より長く表示されたと判定された前記領域の前記カウント値を加算する。
また、本開示に係る情報処理装置は、上記開示において、前記表示画像を表示部に表示させる表示制御部と、前記第１判定部と異なる所定の条件を判定する第２判定部と、をさらに備える。
また、本開示に係る情報処理装置は、上記開示において、前記第２判定部は、前記所定の領域毎に、対象時刻における前記表示領域が対象時刻の前後の表示領域より大きいか否かを判定し、前記加算部は、前記第２判定部によって対象時刻における前記表示領域が対象時刻の前後の表示領域より大きいと判定された前記領域の前記カウント値を加算する。
また、本開示に係る情報処理装置は、前記加算部は、前記所定の値に対して、前記表示領域が小さいほど重み付けを行って前記カウント値に加算する。
また、本開示に係る情報処理装置は、上記開示において、前記画像データは、２次元の平面画像データまたは３次元の立体画像データである。
また、本開示に係る情報処理装置は、上記開示において、前記第２判定部の所定の条件は、前記表示画像の表示位置および前記表示画像の表示領域の大きさの偏差、または所定時間における前記表示画像の表示位置および前記表示画像の表示領域の大きさの偏差であり、 前記加算部は、前記第２判定部によって前記偏差が所定値以下であると判定された前記領域の前記カウント値を加算する。
また、本開示に係る情報処理装置は、上記開示において、前記画像データは、２次元の平面画像データまたは３次元の立体画像データである。
また、本開示に係る情報処理装置は、上記開示において、前記第１画像の特徴量を解析することによって特徴量毎にセグメンテーションを行う画像解析部と、前記注目領域の注目領域特徴量を解析する特徴量解析部と、前記注目領域特徴量と前記特徴量とに基づいて、前記第１画像から前記注目領域に類似する領域を抽出する抽出部と、をさらに備える。
また、本開示に係る情報処理装置は、上記開示において、前記注目領域特徴量に基づいて、複数の画像データから類似する画像データを検索するためのクエリを生成するクエリ生成部と、前記クエリに基づいて、複数の画像データを記憶する画像データベースから画像を検索する検索部をさらに備える。
また、本開示に係る情報処理装置は、上記開示において、前記表示画像に前記注目領域を重畳して重畳画像を生成する第２生成部をさらに備える。
また、本開示に係る情報処理装置は、上記開示において、前記指示信号に基づいて、前記表示領域の位置を示す表示領域情報を算出する算出部をさらに備える。
また、本開示に係る情報処理装置は、上記開示において、前記指示信号は、顕微鏡に設けられ位置検出部が検出した基準位置からのステージの位置を示す位置情報と、前記顕微鏡に設けられた倍率検出部が検出した標本を観察する観察倍率を示す倍率情報と、を含む。
また、本開示に係る情報処理システムは、対象物を観察する観察装置を備える情報処理システムであって、前記観察装置によって選択される前記対象物の選択位置と、少なくとも前記観察装置の視野の大きさを示す視野情報と、所定の領域毎の表示頻度を示すカウント値と、を記憶する記憶部と、前記視野情報が所定の条件を満たすか否かを判定する第１判定部と、前記第１判定部が前記所定の条件を満たすと判定した前記領域の前記カウント値に所定の値を加算する加算部と、前記カウント値に基づいて、前記対象物に対応する座標系において注目度が高い領域を注目領域として設定する設定部と、を備える。
また、本開示に係る情報処理システムは、上記開示において、前記視野情報は、被写界を基準とした座標系における前記視野の位置を表す座標情報をさらに含む。
また、本開示に係る情報処理システムは、上記開示において、前記対象物の観察像に前記注目領域に係る情報を表示部に表示させる表示制御部をさらに備える。
また、本開示に係る情報処理システムは、上記開示において、観察光学系と、前記観察光学系が結像する前記対象物の観察像に前記注目領域に係る情報を重畳する表示制御部と、をさらに備える。
また、本開示に係る情報処理方法は、情報処理装置が実行する情報処理方法であって、外部装置から入力される画像データと、外部装置から入力される指示信号であって、前記画像データに対応する画像における所定の表示領域を選択する指示信号と、に基づいて、前記画像データに対応する第１画像を用いて前記指示信号によって選択される前記表示領域に対応する表示画像を生成し、前記第１画像における前記表示領域の位置を示す表示領域情報と、前記第１画像における所定の領域毎の表示頻度を示すカウント値と、を記憶する記憶部から前記表示領域情報を取得し、前記表示領域情報が所定の条件を満たすか否かを判定し、前記所定の条件を満たすと判定した前記領域の前記カウント値をカウントアップし、前記カウント値に基づいて、前記第１画像において注目度が高い領域を注目領域として設定する。
また、本開示に係るプログラムは、情報処理装置に、外部装置から入力される画像データと、外部装置から入力される指示信号であって、前記画像データに対応する画像における所定の表示領域を選択する指示信号と、に基づいて、前記画像データに対応する第１画像を用いて前記指示信号によって選択される前記表示領域に対応する表示画像を生成し、前記第１画像における前記表示領域の位置を示す表示領域情報と、前記第１画像における所定の領域毎の表示頻度を示すカウント値と、を記憶する記憶部から前記表示領域情報を取得し、前記表示領域情報が所定の条件を満たすか否かを判定し、前記所定の条件を満たすと判定した前記領域の前記カウント値をカウントアップし、前記カウント値に基づいて、前記第１画像において注目度が高い領域を注目領域として設定する。
本開示によれば、簡易な操作で画像の注目領域を提示することができるという効果を奏する。
図１は、実施の形態１に係る情報処理システムの機能構成を示すブロック図である。 図２は、情報処理装置が実行する処理の概要を示すフローチャートである。 図３は、図２の加算処理の概要を示すフローチャートである。 図４は、実施の形態１に係る表示制御部が表示部に表示させる重畳画像の一例を示す図である。 図５は、実施の形態１の変形例２に係る加算処理の概要を示すフローチャートである。 図６は、実施の形態１の変形例２に係る表示制御部が表示部に表示させる重畳画像の一例を示す図である。 図７は、実施の形態１の変形例３に係る加算処理の概要を示すフローチャートである。 図８は、実施の形態１の変形例３に係る表示制御部が表示部に表示させる重畳画像の一例を示す図である。 図９は、実施の形態１の変形例４に係る加算処理の概要を示すフローチャートである。 図１０は、実施の形態１の変形例４に係る表示制御部が表示部に表示させる重畳画像の一例を示す図である。 図１１は、実施の形態２に係る情報処理システムの機能構成を示すブロック図である。 図１２は、実施の形態２に係る取得部が取得した第１画像の一例を模式的に示す図である。 図１３は、セグメンテーションを行った第１画像の一例を模式的に示す図である。 図１４は、重畳画像の一例を模式的に示す図である。 図１５は、類似領域の一例を模式的に示す図である。 図１６は、実施の形態３に係る情報処理システムの機能構成を示すブロック図である。 図１７は、実施の形態４に係る情報処理システムの機能構成を示す概略図である。 図１８は、実施の形態４に係るステージを模式的に示す図である。 図１９は、実施の形態４に係るステージに対応するレジスタを模式的に示す図である。 図２０は、実施の形態４に係る重畳画像の一例を模式的に示す図である。 図２１は、実施の形態４に係るスライドガラス上におけるカバーガラスの位置を模式的に示す図である。 図２２は、実施の形態４の変形例１に係る情報処理システムの機能構成を示す概略図である。 図２３は、実施の形態４の変形例２に係る情報処理システムの機能構成を示す概略図である。 図２４は、実施の形態４の変形例３に係る情報処理システムの機能構成を示す概略図である。 図２５は、実施の形態５に係る情報処理システムの機能構成を示すブロック図である。 図２６は、実施の形態５に係るＣＴ画像の一例を模式的に示す図である。 図２７は、実施の形態５に係る断面像毎に表示頻度のカウント値を加算する際の加算方法を模式的に示す図である。 図２８は、実施の形態５に係るＣＴ画像上に注目領域を立体的に重畳表示した際を模式的に示す図である。
以下、本開示を実施するための形態を図面とともに詳細に説明する。なお、以下の実施の形態により本開示が限定されるものでない。また、以下の説明において参照する各図は、本開示の内容を理解でき得る程度に形状、大きさ、および位置関係を概略的に示してあるに過ぎない。即ち、本開示は、各図で例示された形状、大きさ、および位置関係のみに限定されるものでない。
（実施の形態１）
〔情報処理システムの構成〕
図１は、実施の形態１に係る情報処理システムの機能構成を示すブロック図である。図１に示す情報処理システム１は、情報処理装置１０と、画像データベース２０（以下、「画像ＤＢ２０」という）と、操作部３０と、表示部４０と、を備える。
情報処理装置１０は、ユーザによる操作部３０の操作に応じて、画像ＤＢ２０が記録する複数の画像データから所望の画像データを取得し、この画像データを操作部３０の操作に応じた指示信号に応じた表示領域（観察視野）に対応する表示画像を表示部４０に出力する。ここで、画像データは、標本や試料を顕微鏡等で撮像した２次元の平面データである。なお、情報処理装置１０の詳細な構成は、後述する。
画像ＤＢ２０は、顕微鏡等によって標本や試料を撮像することによって生成された２次元の複数の画像データを記憶する。画像ＤＢ２０は、ネットワークを経由するサーバシステム、または、ローカルのＨＤＤ（Hard Disk Drive）およびＳＳＤ（Solid State Drive）等を用いて構成される。
操作部３０は、ユーザの操作を受け付け、受け付けた操作に応じた指示信号を情報処理装置１０へ出力する。操作部３０は、キーボード、マウスおよびタッチパネル等を用いて構成される。
表示部４０は、情報処理装置１０の制御のもと、情報処理装置１０から入力された画像データに対応する画像を表示する。表示部４０は、液晶や有機ＥＬ（Electro Luminescence）等の表示パネルを用いて構成される。
〔情報処理装置の構成〕
次に、情報処理装置１０の詳細な構成について説明する。情報処理装置１０は、取得部１１と、記憶部１２と、制御部１３と、を備える。
取得部１１は、制御部１３の制御のもと、操作部３０から入力される指示信号に応じて、画像ＤＢ２０が記憶する２次元平面の複数の画像データから操作部３０から入力される指示信号に応じて選択された画像データを取得する。取得部１１は、例えば所定のＩ／Ｆ回路を用いて構成される。なお、取得部１１は、有線または無線によって画像ＤＢ２０から画像データを取得する。
記憶部１２は、表示部４０が表示する画像における表示領域であって、取得部１１が取得した画像データに対応する第１画像（以下、「対象画像」という）における所定の表示領域の位置を示す表示領域情報を記憶する表示情報記憶部１２１と、表示部４０が表示する対象画像における表示領域における所定の領域毎の表示頻度を示すカウント値（以下、単に「カウント値」という）を記憶するカウント値記憶部１２２と、情報処理システム１が実行する各種のプログラムを記憶するプログラム記録部１２３と、を有する。記憶部１２は、揮発性メモリ、不揮発性メモリ、ＨＤＤ、ＳＳＤおよびメモリーカード等を用いて構成される。
制御部１３は、情報処理システム１を構成する各部を制御する。制御部１３は、メモリおよびＣＰＵ（Central Processing Unit）、ＦＰＧＡ（Field Programmable Gate Array）およびＡＳＩＣ（Application Specific Integrated Circuit）等のプロセッサを有するハードウェアを用いて構成される。制御部１３は、第１生成部１３１と、算出部１３２と、第１判定部１３３と、加算部１３４と、第２判定部１３５と、設定部１３６と、第２生成部１３７と、表示制御部１３８と、を備える。
第１生成部１３１は、取得部１１が取得した画像データと、操作部３０から入力される指示信号であって、対象画像における所定の表示領域を選択する指示信号とに基づいて、対象画像を用いて、指示信号で選択される表示領域に対応する表示画像を生成する。具体的には、第１生成部１３１は、対象画像を用いて、指示信号で選択される表示領域を切り出すトリミング処理を行ってトリミング画像を生成し、このトリミング画像を表示部４０の表示領域までに拡大・縮小処理または補間処理するリサイズ処理を行って表示画像を生成する。
算出部１３２は、取得部１１が取得した対象画像における表示画像の位置と大きさを示す表示領域情報を算出し、この算出結果を表示情報記憶部１２１に記憶する。具体的には、算出部１３２は、対象画像における所定の位置を原点、例えば対象画像の左上端部の画素を原点（０，０）とした場合、対象画像における表示領域の位置を示す画素アドレスを表示領域情報をとして算出する。ここで、対象画像における表示領域の位置を示す画素アドレスとしては、対象画像における表示領域の右下端部または矩形の各頂点の画素アドレス等である。
第１判定部１３３は、表示情報記憶部１２１が記憶する表示領域情報に基づいて、対象画像における所定の領域毎に所定の条件を満たすか否かを判定する。ここで、所定の条件とは、表示部４０によって対象画像が表示された表示時間である。第１判定部１３３は、対象画像における所定の領域毎に、表示時間が所定の時間より長く表示されたか否かを判定する。
加算部１３４は、第１判定部１３３が所定の条件を満たすと判定した領域のカウント値をカウントアップする。具体的には、加算部１３４は、第１判定部１３３が所定の条件を満たすと判定した領域のカウント値を、例えば「１」をカウントアップすることによってカウント値を加算する。
第２判定部１３５は、第１判定部１３３と異なる所定の条件を判定する。具体的には、第２判定部１３５は、所定の領域毎に、対象時刻における表示領域が対象時刻の前後の表示領域より大きいか否かを判定する。
設定部１３６は、カウント値記憶部１２２が記憶するカウント値に基づいて、取得部１１が取得した画像データに対応する対象画像において注目度が高い領域を注目領域として設定する。具体的には、設定部１３６は、カウント値記憶部１２２が記憶するカウント値が大きい領域ほど注目度が高い注目領域として設定する。さらに、設定部１３６は、カウント値記憶部１２２が記憶するカウント値の値が所定値より大きい領域を注目領域として設定する。
第２生成部１３７は、設定部１３６が設定した注目領域に関する注目情報を、取得部１１が取得した画像データに対応する対象画像に重畳した重畳画像を生成する。この場合、第２生成部１３７は、設定部１３６が設定した注目領域のカウント値に基づいて、注目領域に対応する枠を注目情報として識別可能に重畳した重畳画像を生成する。なお、第２生成部１３７は、設定部１３６が設定した注目領域のカウント値に基づいて、注目領域の彩度、色味およびコントラストを強調することによって注目情報として識別可能に重畳した重畳画像を生成してもよい。
表示制御部１３８は、第１生成部１３１によって生成された表示画像または第２生成部１３７によって生成された重畳画像を表示部４０に表示させる。また、表示制御部１３８は、情報処理システム１に関する各種の情報を表示部４０に表示させる。
〔情報処理装置の処理〕
次に、情報処理装置１０が実行する処理について説明する。図２は、情報処理装置１０が実行する処理の概要を示すフローチャートである。
図２に示すように、まず、取得部１１は、操作部３０から入力される指示信号に応じた画像データを画像ＤＢ２０か取得する（ステップＳ１）。
続いて、第１生成部１３１は、取得部１１が取得した画像データに対応する対象画像に対して、操作部３０から入力された対象画像における表示領域を指示する指示信号に基づいて、指示信号で選択される表示領域に対応する表示画像を生成する（ステップＳ２）。
その後、算出部１３２は、対象画像の座標における表示範囲（全表示領域）における所定の位置を基準とする相対座標（ワールド座標）と、表示領域の大きさとを含む表示領域情報を算出する（ステップＳ３）。具体的には、算出部１３２は、対象画像（第１画像）を基準とした座標系における表示範囲の左上端部を基準（０，０）とする表示画像の相対座標（ｘｋ，ｙｋ）と、表示画像の表示範囲の大きさ（ｗｋ，ｈｋ）と、を含む表示領域情報を算出する。この場合、算出部１３２は、表示領域情報を表示情報記憶部１２１に記憶する。
続いて、第１判定部１３３は、表示情報記憶部１２１が記憶する表示領域情報に基づいて、対象画像における所定の領域毎に所定の条件を満たすか否かを判定する（ステップＳ４）。ここで、所定の条件とは、表示部４０によって表示された表示時間に基づく。また、第１判定部１３３による所定の条件の判定方法は、例えば、所定時間間隔Δtごとに、表示情報、例えば上述したステップＳ１において選択した画像データ上で、上述したステップＳ２において生成した時刻ｔの表示画像の表示情報表示の開始点(ｘｔ,ｙｔ)と、大きさ(ｗｔ,ｈｔ)を取得し(上述したステップＳＳ３を参照)、その大きさが一定時間不変、すなわち倍率が一定であり、開始点(ｘｔ,ｙｔ)が一定時間で所定の範囲内で有るかどうか、以下
ｘｔ−Δ＜ｘｋ＜ｘｔ＋Δ、かつ、ｙｔ−Δ＜ｙｋ＜ｙｔ＋Δ
（ｋ＝ｔ,ｔ＋Δｔ,・・・ｎΔｔ、Δｔ：ステップ幅）
の条件を満たしているとき、「所定の条件を満たす」とする。なお、表示領域のアスペクト比が一定と仮定できる場合は、ｗｔ,ｈｔのどちらか一方を記憶すれば良い。第１判定部１３３によって所定の条件を満たすと判定された場合（ステップＳ４：Ｙｅｓ）、情報処理装置１０は、ステップＳ５へ移行する。これに対して、第１判定部１３３によって所定の条件を満たさないと判定された場合（ステップＳ４：Ｎｏ）、情報処理装置１０は、後述するステップＳ６へ移行する。
ステップＳ５において、加算部１３４は、表示部４０によって表示された対象画像における所定の領域毎に表示頻度のカウント値を加算する加算処理を実行する。なお、図２では、所定間隔での表示情報の生成→条件判別→加算処理の順番で実施した例を示しているが、所定間隔での表示情報（ｘｋ，ｙｋ，ｗｋ，ｈｋ）を生成し、一旦記憶部１２に保持した後に再度読みだして評価する様にしても良い。その際には上記の一定時間不変の条件は、時刻ｔの前後を使用しても良い。
〔加算処理の概要〕
図３は、上述した図２のステップＳ５の加算処理の概要を示すフローチャートである。
加算部１３４は、表示領域情報の開始点（ｘｋ，ｙｋ）、幅（ｗｋ）および高さ（ｈｋ）を設定する（ステップＳ１０１）。以下では、画像ＤＢ２０から取得した対象画像の幅をＷ、高さをＨと表記する。対象画像をｍ×ｍ画素の領域で分割し、ｐ×ｑ個の加算用レジスタを用意する。Ｗ、Ｈ、ｍ、ｐ、ｑの関係は、以下の式（１）、（２）によって表すことができる。
Ｗ＝ｍ×ｐ ・・・（１）
Ｈ＝ｍ×ｑ ・・・（２）
続いて、加算部１３４は、表示画像に対応した上記の加算用レジスタのアドレスを算出する。（ステップＳ１０２）。
ｐｓ＝ｆｌｏｏｒ（ｘｋ／ｍ）
ｑｓ＝ｆｌｏｏｒ（ｙｋ／ｍ）
ｐｅ＝ｆｌｏｏｒ（（ｘｋ＋ｗｋ）／ｍ）
ｑｅ＝ｆｌｏｏｒ（（ｙｋ＋ｈｋ）／ｍ）
ここで、０＜ｐｉ≦ｐ、０＜ｑｓ≦ｑを満たす。
その後、加算部１３４は、表示画像における領域毎の縦方向のアドレス（ｆｏｒ ｐi ｉｎ ｒａｎｇｅ（ｐｓ，ｐｅ））を設定し（ステップＳ１０３）、表示画像における領域毎の幅方向のアドレス（ｆｏｒ ｑi ｉｎ ｒａｎｇｅ（ｑｓ，ｑｅ））を設定する（ステップＳ１０４）。
続いて、加算部１３４は、上述したステップＳ１０６で指定したレジスタＦ(ｐｉ，ｑｉ)を順次頻度のカウントアップする（ステップＳ１０５）。
（Ｆ’（ｐｉ，ｑｉ）＝Ｆ’（ｐｉ，ｑｉ）＋１）
続いて、第２判定部１３５は、表示画像の領域が高さ方向ｑｅに到達（ｑｉ＝ｑｅ？）したか否かを判定する（ステップＳ１０６）。第２判定部１３５によって表示画像の領域が高さ方向ｑｅに到達（ｑｉ＝ｑｅ？）したと判定された場合（ステップＳ１０６：Ｙｅｓ）、情報処理装置１０は、後述するステップＳ１０７へ移行し、第２判定部１３５によって表示画像の領域が高さ方向ｑｅに到達（ｑｉ＝ｑｅ？）していないと判定された場合（ステップＳ１０６：Ｎｏ）、情報処理装置１０は、上述したステップＳ１０４へ戻る。
ステップＳ１０７において、第２判定部１３５は、表示画像の領域が幅方向ｐｅに到達（ｐｉ＝ｐｅ？）したか否かを判定する（ステップＳ１０７）。第２判定部１３５によって表示画像の領域が幅方向ｐｅに到達（ｐｉ＝ｐｅ？）したと判定された場合（ステップＳ１０７：Ｙｅｓ）、情報処理装置１０は、図２のメインルーチンへ戻る。これに対して、第２判定部１３５によって表示画像の領域が幅方向ｐｅに到達（ｐｉ＝ｐｅ？）していないと判定された場合（ステップＳ１０７：Ｎｏ）、情報処理装置１０は、上述したステップＳ１０３へ戻る。
図２に戻り、ステップＳ５以降の説明を続ける。
ステップＳ６において、情報処理装置１０は、表示部４０による表示画像の表示、すなわち次の画像の生成を行わないとき、終了判定（ステップＳ６：Ｙｅｓ）とし、後述するステップＳ７へ移行する。これに対して、表示部４０による表示画像の表示を終了しない場合（ステップＳ６：Ｎｏ）、情報処理装置１０は、上述したステップＳ２へ移行することによって表示画像の生成を行う。また、情報処理装置１０は、前記の様に、所定間隔での表示情報(ｘｋ，ｙｋ，ｗｋ，ｈｋ)を生成し、一旦記憶部１２に保持した後に、表示情報を再度読みだして評価する場合において、上述したステップＳ６において、終了しない場合（ステップＳ６：Ｎｏ）のとき、上述したステップＳ４へ戻り、判定処理を行ってもよい。
全ての表示画像に対応するカウントアップが終了した後、ステップＳ７において、設定部１３６は、カウント値記憶部１２２が記憶する対象画像における所定の領域毎のカウント値に基づいて、注目領域を設定する。
続いて、第２生成部１３７は、設定部１３６が生成した注目領域に関する注目領域情報を生成し（ステップＳ８）、対象画像に注目領域情報を重畳した重畳画像を生成する（ステップＳ９）。
その後、表示制御部１３８は、第２生成部１３７が生成した重畳画像を表示部４０に表示させる（ステップＳ１０）。図４は、表示制御部１３８が表示部４０に表示させる重畳画像の一例を示す図である。図４に示すように、表示制御部１３８は、対象画像に対して設定部１３６が設定した注目領域上に、第２生成部１３７によって生成された注目領域情報Ｆ１〜Ｆ６が重畳された重畳画像Ｐ１を表示部４０に表示させる。これにより、ユーザは、対象画像における注目領域を直感的に把握することができる。ステップＳ１０の後、情報処理装置１０は、本処理を終了する。
以上説明した実施の形態１によれば、設定部１３６がカウント値記憶部１２２によって記憶された所定の領域毎の表示頻度を示すカウント値に基づいて、対象画像において注目度が高い領域を提示することができる（例えば図４）。
また、実施の形態１によれば、設定部１３６によってカウント値が大きい領域ほど注目度が高い注目領域として設定されるため、ユーザは、注目領域毎に重要度を把握することができる。
また、実施の形態１によれば、設定部１３６によってカウント値が所定値より大きい領域を注目領域として設定されるため、表示回数が少ない領域を注目領域から除外することができる。
また、実施の形態１によれば、加算部１３４が第１判定部１３３によって表示時間が所定の時間より長く表示された領域のカウント値を加算するため、誤って表示された領域が注目領域として設定されることを防止することができる。
（実施の形態１の変形例１）
次に、実施の形態１の変形例１について説明する。実施の形態１の変形例１は、加算部１３４が実行する加算処理が異なる。上述した実施の形態１では、表示履歴を記憶することによってＮ回繰り返し処理を行っていたが、実施の形態１の変形例１では、所定の時間間隔で表示頻度の加算を行う。
（実施の形態１の変形例２）
次に、実施の形態１の変形例２について説明する。実施の形態１の変形例２では、加算部１３４が実行する加算処理が異なる。具体的には、実施の形態１の変形例２では、標本画像に対する表示画像の表示領域の倍率に応じて、表示頻度に重み付けを行って加算する。このため、以下においては、実施の形態１の変形例２に係る加算部１３４が実行する加算処理について説明する。
〔加算処理〕
図５は、実施の形態１の変形例２に係る加算処理の概要を示すフローチャートである。図５において、ステップＳ３０１〜ステップＳ３０４、ステップＳ３０６，ステップＳ３０７は、上述した図３のステップＳ１０１〜１０４およびステップＳ１０６，ステップＳ１０７それぞれに対応し、ステップＳ３０５のみ異なる。このため、以下においては、ステップＳ３０７のみについて説明する。
ステップＳ３０５において、加算部１３４は、対象画像の全体サイズをＷ、表示画像の表示領域の幅をＷｋとしたとき、表示頻度のカウント値に表示倍率を加味することによって加算する（Ｆ’（ｐｉ，ｑｉ）＝Ｆ’（ｐｉ，ｑｉ）＋α（ｗ／ｗｋ））。この場合、加算部１３４は、カウント値に冪指数（α（ｗ／ｗｋ））βのように、表示画像の表示倍率毎にカウント値に重み付けを行ってカウントアップする。さらに、加算部１３４は、表示倍率が所定値を超えていない場合、注視でなく、画像全体を観察していると判断し、表示頻度のカウントアップを禁止してもよい。これにより、図６に示すように、表示制御部１３８は、第２生成部１３７が対象画像に対して設定部１３６が設定した注目領域上に注目領域情報Ｆ１０〜Ｆ１５を重畳した重畳画像Ｐ２を表示部４０に表示させる。
以上説明した実施の形態１の変形例２によれば、上述した実施の形態１と同様の効果を有するとともに、倍率に応じた注視度の設定に関して、より詳細な条件を設定する事ができる。
また、実施の形態１の変形例２によれば、第１判定部１３３によって対象時刻における前記表示領域が対象時刻の前後の表示領域より小さいと判定された領域のカウント値を加算するので、ユーザが注視している領域に対して注目領域を設定することができる。
（実施の形態１の変形例３）
次に、実施の形態１の変形例３について説明する。実施の形態１の変形例３では、加算部１３４が実行する加算処理に含まれる判別基準が異なる。具体的には、実施の形態１の変形例３では、表示部４０が現在表示している表示画像における表示領域と、この表示画像が表示された所定時間前に表示された表示画像または所定時間経過後に表示された表示画像の表示領域とを比較し、表示倍率が大きいか否かを判定することによって表示頻度のカウント値を加算する。実施の形態１の変形例３の前提としては、表示画像に係る表示領域情報（ｘｔ，ｙｔ，ｗｔ，ｈｔ）を蓄積した後に行う。そのため、以下においては、後述するステップＳ４０２で説明する様に、判定の対象とする時刻ｋの前後のデータを取得できるとしている。
〔加算処理〕
図７は、実施の形態１の変形例３に係る加算処理の概要を示すフローチャートである。図７において、ステップＳ４０３〜ステップＳ４０５、ステップＳ４０７，ステップＳ４０８は、上述した図３のステップＳ１０２〜ステップＳ１０４、ステップＳ１０６およびステップＳ１０７それぞれに対応する。このため、以下においては、ステップＳ４０１、ステップＳ４０２およびステップＳ４０６について説明する。
ステップＳ４０１において、加算部１３４は、対象時刻の表示領域情報の開始点（ｘｋ，ｙｋ）、幅（ｗｋ）および高さ（ｈｋ）、対象時刻より前のｕ回前の幅（ｗｋ-ｕ）、対象時刻より後のｖ回後の幅（ｗｋ＋ｖ）を設定する。
続いて、第２判定部１３５は、対象時刻の幅ｗｋがｕ回前の幅ｗｋ-ｕより小さく（ｗｋ＜ｗｋ-ｕ）、かつ、対象時刻の幅ｗｋがｖ回後の幅ｗｋ＋ｖより小さい（ｗｋ＜ｗｋ＋ｖ）場合（ステップＳ４０２：Ｙｅｓ）、情報処理装置１０は、ステップＳ４０３へ移行する。この場合、例えば、第２判定部１３５は、ユーザが標本画像に対する表示領域の倍率変更操作を、４倍→１０倍→４倍と行った場合、１０倍表示を注目したと想定できるので、加算部１３４は、ステップＳ４０５へ移行する。これに対して、第２判定部１３５は、対象時刻の幅ｗｋがｕ回前の幅ｗｋ-ｕより小さくなく（ｗｋ＜ｗｋ-ｕ）、かつ、対象時刻の幅ｗｋがｖ回後の幅ｗｋ＋ｖより小さくない（ｗｋ＜ｗｋ＋ｖ）場合（ステップＳ４０２：Ｎｏ）、情報処理装置１０は加算処理の終了し、図２のメインルーチンへ戻る。例えば、第２判定部１３５によってユーザが標本画像に対する表示領域の倍率変更操作を、４倍→１０倍→２０倍という操作を行ったと判定された場合、ユーザが注目したと想定できる状態が２０倍観察時である。このため、加算部１３４は、第２判定部１３５によって対象時刻の幅Ｗｋが１０倍観察時と判定された場合、カウント値を加算することなく、加算処理の終了し、図２のメインルーチンへ戻る。
このように、加算部１３４は、第２判定部１３５の判定結果に基づいて、同じ１０倍観察の状態でも注視の有無の差が現れるため、表示領域の倍率情報だけなく、その前後関係の倍率情報に基づいて、注視度を設定することによって表示頻度のカウント値を加算する。
ステップＳ４０６において、加算部１３４は、標本画像の全体サイズをＷ、表示画像の表示領域の幅をＷｋとしたとき、表示頻度のカウント値に表示倍率を加味することによって加算する（Ｆ’（ｐｉ，ｑｉ）＝Ｆ’（ｐｉ，ｑｉ）＋α×（Ｗ／Ｗｋ））。これにより、図８に示すように、表示制御部１３８は、対象画像に対して設定部１３６が設定した注目領域上に注目領域情報Ｆ２０を重畳した重畳情報Ｐ３を表示部４０に表示させる。ステップＳ４０６の後、加算部１３４は、ステップＳ４０５へ移行する。
以上説明した実施の形態１の変形例３によれば、上述した実施の形態１と同様の効果を有するとともに、倍率の変更プロセスに基づき、より詳細な注視領域推定の条件を設定する事ができる。
また、実施の形態１の変形例３によれば、加算部１３４が表示領域の大きさに応じてカウント値に加算する値に重み付けを行って加算するため、ユーザの注視度に応じたカウント値を加算することができる。
（実施の形態１の変形例４）
次に、実施の形態１の変形例４について説明する。実施の形態１の変形例４では、加算部１３４が実行する加算処理が異なる。具体的には、実施の形態１の変形例４では、過去ｎ個のデータの偏差に応じて表示頻度のカウント値を加算する。このため、以下においては、実施の形態１の変形例４に係る加算部１３４が実行する加算処理について説明する。
〔加算処理〕
図９は、実施の形態１の変形例４に係る加算処理の概要を示すフローチャートである。図９において、ステップＳ５０３〜ステップＳ５０８は、上述したステップＳ４０３〜ステップＳ４０８それぞれに対応し、ステップＳ５０１およびステップＳ５０２のみ異なる。以下においては、ステップＳ５０１およびステップＳ５０２について説明する。
図９に示すように、加算部１３４は、対象時刻の表示領域情報の開始点（ｘｋ，ｙｋ），（ｘｋ-１，ｙｋ-１）、・・・，（ｘｋ-ｎ，ｙｋ-ｎ）、幅（ｗｋ），（ｗｋ‐１），・・・，（ｗｋ-ｎ）および高さ（ｈｋ），（ｈｋ‐１），・・・，（ｈｋ-ｎ）を設定する（ステップＳ５０１）。
続いて、第２判定部１３５は、過去ｎ個のデータの偏差の合計が一定値以下（Ｔｈｒ１，Ｔｈｒ１）であるか否かを判定する（ステップＳ５０２）。第２判定部１３５によって過去ｎ個のデータの偏差の合計が一定値以下であると判定された場合（ステップＳ５０２：Ｙｅｓ）、情報処理装置１０は、ステップＳ５０３へ移行する。これに対して、第２判定部１３５によって過去ｎ個のデータの偏差の合計が一定値以下でないと判定された場合（ステップＳ５０２：Ｎｏ）、情報処理装置１０は、上述した図２のメインルーチンへ戻る。
このように、加算部１３４は、第２判定部１３５の判定結果に基づいて、同じ１０倍観察の状態でも注視したかいないかの差が現れるため、表示領域の倍率情報だけなく、その前後関係の倍率情報に基づいて、注視度を仮定することによって表示頻度のカウント値を加算する。これにより、図１０に示すように、表示制御部１３８は、対象画像に対して設定部１３６が設定した注目領域上に注目領域情報Ｆ３０を重畳した重畳情報Ｐ４を表示部４０に表示させる。
以上説明した実施の形態１の変形例４によれば、上述した実施の形態１と同様の構成を有するとともに、表示領域の偏差を考慮した詳細な注視領域推定の条件を設定する事ができる。
また、実施の形態１の変形例４によれば、加算部１３４が第１判定部１３３によって偏差が所定値以下であると判定された領域のカウント値を加算するので、ユーザの注視した領域に対して確実にカウント値を加算することができる。
（実施の形態２）
次に、実施の形態２について説明する。上述した実施の形態１では、表示頻度のカウント値に基づいて、注目領域を設定することによって対象画像上に注目領域を重畳表示していたが、実施の形態２では、対象画像の特徴量の解析を行った後に特徴量による画像のセグメンテーションを行い、注目領域に類似する類似領域を抽出する。以下においては、実施の形態２に係る情報処理システムの構成について説明する。なお、上述した実施の形態１に係る情報処理システムと同一の構成には同一の符号を付して詳細な説明は省略する。
〔情報処理システムの構成〕
図１１は、実施の形態２に係る情報処理システムの機能構成を示すブロック図である。図１１に示す情報処理システム１Ａは、上述した実施の形態１に係る情報処理システム１の情報処理装置１０に換えて、情報処理装置１０Ａを備える。
〔情報処理装置の構成〕
情報処理装置１０Ａは、上述した実施の形態１に係る制御部１３に換えて、制御部１３Ａを備える。さらに、制御部１３Ａは、上述した実施の形態１に係る制御部１３の構成に加えて、画像解析部１４１と、特徴量解析部１４２と、抽出部１４３と、をさらに備える。
画像解析部１４１は、取得部１１が取得した標本画像に対して周知の特徴量を解析する解析処理を行って、標本画像に対して特徴量毎のセグメンテーションを行う。
特徴量解析部１４２は、設定部１３６が設定した複数の注目領域の各々の特徴量を解析する。
抽出部１４３は、画像解析部１４１が解析した特徴量毎のセグメンテーションと特徴量解析部１４２が解析した複数の注目領域の各々の特徴量との比較し、注目領域に類似する類似領域を抽出する。
このように構成された情報処理装置１０Ａは、まず、取得部１１が操作部３０の操作に応じた画像データを画像ＤＢ２０から出力する。具体的には、図１２に示すように、取得部１１が画像データに対応する対象画像Ｐ１０を取得する。
続いて、画像解析部１４１は、取得部１１が取得した対象画像に対して周知の特徴量を解析する解析処理を行って、対象画像に対して特徴量毎のセグメンテーションを行う。具体的には、図１３に示すように、画像解析部１４１は、取得部１１が取得した対象画像Ｐ１０に対して周知の特徴量を解析する解析処理を行って、対象画像Ｐ１０に対して特徴量毎のセグメンテーションを行った画像Ｐ１１を生成する。
その後、特徴量解析部１４２は、設定部１３６が設定した複数の注目領域の各々の特徴量を解析する。具体的には、図１４に示すように、設定部１３６が設定した対象画像Ｐ１０における複数の注目領域Ｆ３０〜Ｆ３２の各々の特徴量を解析する。図１４では、模式的に矩形状の枠で注目領域を表しているが、これに限定されることなく、例えば注目領域における表示頻度のカウント値が高いほど濃度が濃くなるように表示してもよい。
続いて、抽出部１４３は、画像解析部１４１が解析した特徴量毎のセグメンテーションと特徴量解析部１４２が解析した複数の注目領域の各々の特徴量との比較し、注目領域に類似する類似領域を抽出する。具体的には、図１５に示すように、抽出部１４３は、対象画像Ｐ１０において、注目領域Ｚ１に類似する類似領域Ｚ１１〜Ｚ１５を抽出する。この場合、表示制御部１３８は、抽出部１４３が抽出した類似領域Ｚ１１〜Ｚ１５を対象画像Ｐ１３に重畳表示することによって表示部４０に表示させてもよい。なお、表示制御部１３８は、抽出部１４３が抽出した類似領域Ｚ１１〜Ｚ１５の各々を表示部４０に所定の時間毎に順次全画面表示させてもよい。
以上説明した実施の形態２によれば、簡易な操作で画像の注目領域を提示することができる。
また、実施の形態２によれば、抽出部１４３が画像解析部１４１によって解析された特徴量毎のセグメンテーションと特徴量解析部１４２が解析した複数の注目領域の各々の特徴量との比較し、注目領域に類似する類似領域を抽出するので、対象画像に対する読影を行う領域の見逃しを防止することができるうえ、類似領域を優先的に読影するため、対象画像に対する読影を効率的に行うことができる。
（実施の形態３）
次に、実施の形態３について説明する。実施の形態３では、注目領域の特徴量を解析し、この解析結果をクエリ（Ｑｕｅｒｙ）として画像データベースから検索を行う。以下においては、実施の形態３に係る情報処理システムの構成について説明する。なお、上述した実施の形態１，２に係る情報処理システム１，１Ａと同一の構成には同一の符号を付して詳細な説明は省略する。
〔情報処理システムの構成〕
図１６は、実施の形態３に係る情報処理システムの機能構成を示すブロック図である。図１６に示す情報処理システム１Ｂは、上述した実施の形態１に係る情報処理システム１の情報処理装置１０に換えて、情報処理装置１０Ｂを備える。さらに、特徴量が解析された複数の画像データを記憶する特徴解析済画像データベース５０（以下、「特徴解析済画像ＤＢ５０」という）をさらに備える。
〔情報処理装置の構成〕
情報処理装置１０Ｂは、上述した実施の形態２に係る制御部１３Ａの構成から画像解析部１４１および抽出部１４３に換えて、クエリ生成部１５０と、検索部１５１を備え、それ以外は、制御部１３Ａと同様の構成を有する。
クエリ生成部１５０は、特徴量解析部１４２が解析した注目領域特徴量に基づいて、複数の画像データから類似する画像データを検索するためのクエリを生成する。具体的には、クエリ生成部１５０は、特徴量解析部１４２が解析した注目領域特徴量の特徴量毎にクエリを生成する。
検索部１５１は、クエリ生成部１５０が生成したクエリに基づいて、特徴解析済画像ＤＢ５０から複数の類似画像データを検索することによって取得する。
このように構成された情報処理装置１０Ｂは、検索部１５１がクエリ生成部１５０によって生成されたクエリに基づいて、特徴解析済画像ＤＢ５０から複数の類似画像データを検索することによって、注目領域の特徴量に類似する類似画像データを取得する。その後、表示制御部１３８は、検索部１５１が取得した類似画像データに対応する類似画像を表示部４０に表示させる。
以上説明した実施の形態３によれば、上述した実施の形態１と同様の効果を有するうえ、簡易な操作で画像の注目領域を提示することができる。
また、実施の形態３によれば、検索部１５１がクエリ生成部１５０によって生成されたクエリに基づいて、特徴解析済画像ＤＢ５０から複数の類似画像データを検索することによって、注目領域の特徴量に類似する類似画像データを取得するため、類似画像データに対応する類似画像と見比べながら読影することができる。
（実施の形態４）
次に、実施の形態４について説明する。実施の形態４では、顕微鏡が撮像した画像データに対応する画像における表示領域の表示頻度に基づいて、注目領域を設定する。以下においては、実施の形態４に係る情報処理システムの構成について説明する。なお、上述した実施の形態１に係る情報処理システム１と同一の構成には同一の符号を付して詳細な説明を省略する。
〔情報処理システムの構成〕
図１７は、実施の形態４に係る情報処理システムの機能構成を示す概略図である。図１７に示す情報処理システム１Ｃは、情報処理装置１０Ｃと、表示部４０と、顕微鏡１００と、を備える。
情報処理装置１０Ｃは、顕微鏡１００から画像データを取得し、取得した画像データに対応する画像を表示部４０に表示させる。なお、情報処理装置１０Ｃの詳細な構成は、後述する。
顕微鏡１００は、略Ｃ字状をなす筐体部１０１と、筐体部１０１に対して３次元方向に移動可能に取り付けられたステージ１０２と、互いに観察倍率が異なる複数の対物レンズ１０３を有し、ユーザの操作に応じて所望の対物レンズ１０３を配置するレボルバ１０４と、対物レンズ１０３を経由してステージ１０２上に載置された標本を撮像するＣＣＤ（Charge Coupled Device）またはＣＭＯＳ（Complementary Metal Oxide Semiconductor）等で構成された撮像部１０５と、対物レンズ１０３を経由して標本の観察像を観察する接眼部１０６と、ユーザの操作に応じてステージ１０２を３次元方向に移動させる操作部１０７と、基準位置からのステージ１０２の位置を検出する位置検出部１０８は、エンコーダ等を用いて構成され、顕微鏡１００が標本を観察する観察倍率を示す倍率情報を検出する倍率検出部１０９と、を備える。なお、実施の形態４では、顕微鏡１００が観察装置として機能する。さらに、実施の形態４では、対物レンズ１０３が観察光学系として機能する。
〔情報処理装置の構成〕
次に、情報処理装置１０Ｃの詳細な構成について説明する。情報処理装置１０Ｃは、上述した実施の形態１に係る取得部１１、記憶部１２および制御部１３に換えて、取得部１１Ｃ、記憶部１２Ｃおよび制御部１３Ｃを備える。
取得部１１Ｃは、顕微鏡１００の撮像部１０５から画像データを取得する。さらに、取得部１１Ｃは、位置検出部１０８からステージ１０２の位置に関する位置情報と、倍率検出部１０９から倍率情報と、を指示信号として取得する。
記憶部１２Ｃは、上述した実施の形態１に係る記憶部１２の構成に加えて、視野情報記憶部１２４をさらに備える。視野情報記憶部１２４は、顕微鏡１００によって選択される対象物の選択位置と、少なくとも顕微鏡１００の視野の大きさを示す視野情報と、を記憶する。さらに、視野情報には、視野情報記憶部１２４は、被写界を基準とした座標系における前記視野の位置を表す座標情報が含まれる。
制御部１３Ｃは、上述した実施の形態１に係る制御部１３の算出部１３２および第２生成部１３７に換えて、算出部１３２Ｃおよび第２生成部１３７Ｃを備える。
算出部１３２Ｃは、位置検出部１０８が検出したステージ１０２の位置情報と、倍率検出部１０９が検出した倍率情報と、に基づいて、撮像部１０５が生成した画像データに対応する画像の表示領域（視野領域）を算出し、この算出結果を表示情報記憶部１２１に記憶する。
第２生成部１３７Ｃは、算出部１３２Ｃが算出した算出結果に基づいて、第１生成部１３１が生成したライブビュー画像上に設定部１３６によって設定された注目領域を重畳した重畳画像を生成する。
このように構成された情報処理システム１Ｃが実行する表示領域の表示頻度のカウント値の加算方法について説明する。図１８は、ステージ１０２を模式的に示す図である。図１９は、ステージ１０２に対応するレジスタを模式的に示す図である。図２０は、スライドガラス１０１Ａ上におけるカバーガラス１０１Ｂの位置を模式的に示す図である。
図１８および図１９に示すように、算出部１３２Ｃが算出した物体面上の表示領域の開始基準位置の座標を（Ｘｓ，Ｙｓ）とし、表示領域の終了位置の座標を（Ｘ，Ｙ）＝（Ｘｅ，Ｙｅ）とし、表示頻度を加算するためのレジスタの開始位置の座標を（０，０）＝（ｐ，ｑ）とし、レジスタの終了位置の座標を（ｐｅ，ｑｅ）とした場合、図２０に示すように、スライドガラス１０１Ａ上のカバーガラス１０１Ｂを含むように余白を設けて設定する。
算出部１３２Ｃは、位置検出部１０８が検出したステージ１０２の位置情報に基づいて、ステージ１０２と撮像部１０５との位置関係に基づく光学中心軸に相当する物体面（対象物）上の位置を表示領域情報または対象物の選択位値として算出することによって特定する。さらに、算出部１３２Ｃは、倍率検出部１０９が検出した倍率情報に基づいて、被写界を基準とした座標系における光学中心位置からの視野角（表示領域）に相当する物体面上の選択位置を表示領域情報として算出することによって特定する。これにより、加算部１３４は、算出部１３２Ｃが取得した物体面上の表示領域情報（観察視野情報）に基づいて、上述した実施の形態１および実施の形態１に係る変形例１〜４のいずれか一つの加算処理を行うことによって表示頻度のカウント値を加算する加算処理を行う。
その後、設定部１３６は、加算部１３４が加算したカウント値に基づいて、標本全体の中で、どの位置の表示頻度が高く、注目されたことを示す注目領域を設置する。具体的には、設定部１３６は、加算部１３４が加算したカウント値に基づいて、標本全体に対応する座標系において、どの位置の表示頻度が高く、注目度が高い領域を注目されたことを示す注目領域として設定する。
続いて、図２１に示すように、第２生成部１３７Ｃは、標本全体を撮影した対象画像上に注目領域Ｆ１０１〜Ｆ１０６を重畳した重畳画像Ｐ１００を生成する。この場合、図１５に示すように、第２生成部１３７Ｃは、注目領域のカウント値が高いほど他の画素よりも濃くなるように重畳画像Ｐ１００を生成する。これにより、ユーザや他の観察者は、ユーザが注目した注目領域を直感的に把握することができる。
以上説明した実施の形態４によれば、簡易な操作で標本画像の注目領域を提示することができる。
（実施の形態４の変形例１）
次に、実施の形態４の変形例１について説明する。実施の形態４の変形例１では、同一のスライドを再度観察する場合、撮像部１０５が生成した画像データに対応するライブビュー画像に注目領域を表示部４０に重畳表示させる。なお、上述した実施の形態４に係る情報処理システム１Ｄと同一の部分には同一の符号を付して詳細な説明は省略する。
〔情報処理システムの構成〕
図２２は、実施の形態４の変形例１に係る情報処理システムの機能構成を示す概略図である。図２２に示す情報処理システム１Ｄは、上述した実施の形態４に係る情報処理システム１Ｃの情報処理装置１０Ｃに換えて、情報処理装置１０Ｄを備える。
〔情報処理装置の構成〕
情報処理装置１０Ｄは、上述した実施の形態４に係る情報処理装置１０Ｃの記憶部１２に換えて、記憶部１２Ｄを備える。記憶部１２Ｄは、上述した実施の形態４に係る記憶部１２の構成に加えて、標本画像と、ステージの位置情報と、表示頻度のカウント値と、を関係付けて記憶する全体画像記憶部１２５を有する。
このように構成された情報処理システム１Ｄでは、物体面が標本の位置でなく、ステージ１０２の位置を基準としているため、標本を含むスライドガラス１０１Ａをステージ１０２から取り外しても後に、再度ステージ１０２上に載置した場合において、位置ずれが生じているときであっても、全体画像記憶部１２５が対象画像（標本画像）と、ステージの位置情報と、表示頻度のカウント値と、を関係付けて記憶しているので、再度、同一の標本を観察した場合、表示部４０のライブビュー画像上に注目領域を重畳して表示することができる。
以上説明した実施の形態４の変形例１によれば、簡易な操作で標本画像の注目領域を提示することができる。
（実施の形態４の変形例２）
次に、実施の形態４の変形例２について説明する。実施の形態４の変形例２では、標本画像の全体を用いて位置合わせを行うことによってライブビュー画像上に注目領域を表示部４０に重畳表示させる。なお、上述した実施の形態４に係る情報処理システム１Ｄと同一の部分には同一の符号を付して詳細な説明は省略する。
〔情報処理システムの構成〕
図２３は、実施の形態４の変形例２に係る情報処理システムの機能構成を示す概略図である。図２３に示す情報処理システム１Ｅは、上述した実施の形態４の変形例１に係る情報処理システム１Ｄの情報処理装置１０Ｄに換えて、情報処理装置１０Ｅを備える。
〔情報処理装置の構成〕
情報処理装置１０Ｅは、上述した実施の形態４の変形例１に係る情報処理装置１０Ｄの制御部１３Ｃに換えて、制御部１３Ｅを備える。制御部１３Ｅは、上述した実施の形態４の変形例１に係る制御部１３Ｃの構成に加えて、位置合わせ処理部１６０をさらに有する。
位置合わせ処理部１６０は、取得部１１Ｃが顕微鏡１００から取得した画像データに対応する画像と、全体画像記憶部１２５が記憶する前回観察時の全体画像データに対応する標本画像との位置合わせを行う位置合わせ処理を行う。
このように構成された情報処理システム１Ｅは、再度、ユーザが標本を再観察した場合、カウント値記憶部１２２が記憶する表示領域の表示頻度のカウント値に基づいて、再観察時の物体面の位置にライブビュー画像との表示位置を対応させるため、再観察時の表示領域を取得することで、再観察時のライブビュー画像上に注目領域を適切な位置に重畳表示することができる。
以上説明した実施の形態４の変形例２によれば、簡易な操作で標本画像の注目領域を提示することができる。
（実施の形態４の変形例３）
次に、実施の形態４の変形例３について説明する。実施の形態４の変形例３では、観察像に注目領域を重畳する。なお、上述した実施の形態４に係る情報処理システム１Ｃと同一の部分には同一の符号を付して詳細な説明は省略する。
〔情報処理システムの構成〕
図２４は、実施の形態４の変形例３に係る情報処理システムの機能構成を示す概略図である。図２４に示す情報処理システム１Ｆは、上述した実施の形態４に係る顕微鏡１００に換えて、顕微鏡１００Ｆを備える。
顕微鏡１００Ｆは、上述した実施の形態４に係る顕微鏡１００の構成に加えて、中間鏡筒１１０と、中間鏡筒１１０に設けられ、対物レンズ１０３が結像した観察像を撮像部１０５および接眼部１０６へ透過するとともに、後述する表示部６０から出射された画像を撮像部１０５および接眼部１０６へ反射するハーフミラー１１１と、制御部１３Ｃの制御のもと、ハーフミラー１１１へ向けて画像を出射する表示部６０と、を備える。
このように構成された情報処理システム１Ｆは、物体面の表示領域における表示頻度のカウント値の対応が取れているため、再度、標本の観察時に表示領域（観察視野）と倍率情報とを取得することで、接眼レンズ１０６を通して観察される観察像上に注目領域を直接的に重畳表示することができる。
以上説明した実施の形態４の変形例３によれば、簡易な操作で観察像の注目領域を提示することができる。
（実施の形態５）
次に、実施の形態５について説明する。上述した実施の形態１〜４では、２次元の標本画像等の平面画像に対する注目領域を設定したが、実施の形態５では、ＣＴ画像、ＭＲＩ画像および３次元の標本画像等の立体画像に対する注目領域を設定する。なお、上述した実施の形態１に係る情報処理システム１と同一の構成には同一の符号を付して詳細な説明は省略する。
〔情報処理システムの構成〕
図２５は、実施の形態５に係る情報処理システムの機能構成を示すブロック図である。図２５に示す情報処理システム１Ｇは、上述した実施の形態１に係る情報処理システム１の画像ＤＢ２０および情報処理装置１０に換えて、ＣＴ画像、ＭＲＩ画像および３次元の標本画像等の複数の立体画像データを記憶する画像ＤＢ２０Ｇおよび情報処理装置１０Ｇを備える。
〔情報処理装置の構成〕
情報処理装置１０Ｇは、上述した実施の形態１に係る情報処理装置１０の制御部１３に換えて、制御部１３Ｇを備える。制御部１３Ｇは、上述した実施の形態１に係る加算部１３４に換えて、加算部１３４Ｇを備える。
加算部１３４Ｇは、三次元画像の表示頻度のカウント値をカウントアップすることによって加算する。加算部１３４Ｇは、３次元画像に対して、上述した実施の形態１〜４と同様の処理を行う。
このように構成された情報処理装置１０Ｇは、図２６に示すように、２次元の断面像が断層方向に複数積み重なっているＣＴ画像の場合、加算部１３４Ｇが断面像Ｆ３００毎に表示頻度のカウント値を加算する（図２７を参照）。この場合、図２８に示すように、表示制御部１３８は、ＣＴ画像上に注目領域Ｑ１００を立体的に重畳表示する。
以上説明した実施の形態５によれば、簡易な操作で標本画像の注目領域を提示することができる。
（その他の実施の形態）
上述した実施の形態１〜５に開示されている複数の構成要素を適宜組み合わせることによって、種々の実施の形態を形成することができる。例えば、上述した実施の形態１〜５に記載した全構成要素からいくつかの構成要素を削除してもよい。さらに、上述した実施の形態１〜５で説明した構成要素を適宜組み合わせてもよい。
また、実施の形態１〜５において、上述してきた「部」は、「手段」や「回路」などに読み替えることができる。例えば、制御部は、制御手段や制御回路に読み替えることができる。
また、実施の形態１〜５に係る情報処理装置に実行させるプログラムは、インストール可能な形式または実行可能な形式のファイルデータでＣＤ−ＲＯＭ、フレキシブルディスク（ＦＤ）、ＣＤ−Ｒ、ＤＶＤ（Ｄｉｇｉｔａｌ Ｖｅｒｓａｔｉｌｅ Ｄｉｓｋ）、ＵＳＢ媒体、フラッシュメモリ等のコンピュータで読み取り可能な記録媒体に記録されて提供される。
また、実施の形態１〜５に係る情報処理装置に実行させるプログラムは、インターネット等のネットワークに接続されたコンピュータ上に格納し、ネットワーク経由でダウンロードさせることにより提供するように構成してもよい。さらに、実施の形態１〜６に係る情報処理装置に実行させるプログラムをインターネット等のネットワーク経由で提供または配布するようにしてもよい。
また、実施の形態１〜５では、伝送ケーブルを経由して各種機器から信号を送信していたが、例えば有線である必要はなく、無線であってもよい。この場合、所定の無線通信規格（例えばＷｉ−Ｆｉ（登録商標）やＢｌｕｅｔｏｏｔｈ（登録商標））に従って、各機器から信号を送信するようにすればよい。もちろん、他の無線通信規格に従って無線通信を行ってもよい。
なお、本明細書におけるフローチャートの説明では、「まず」、「その後」、「続いて」等の表現を用いてステップ間の処理の前後関係を明示していたが、本発明を実施するために必要な処理の順序は、それらの表現によって一意的に定められるわけではない。即ち、本明細書で記載したフローチャートにおける処理の順序は、矛盾のない範囲で変更することができる。
さらなる効果や変形例は、当業者によって容易に導き出すことができる。よって、本発明のより広範な態様は、以上のように表し、かつ記述した特定の詳細、および代表的な実施の形態に限定されるものではない。従って、添付のクレームおよびその均等物によって定義される総括的な発明の概念の精神または範囲から逸脱することなく、様々な変更が可能である。
１，１Ａ，１Ｂ，１Ｃ，１Ｄ，１Ｅ，１Ｆ，１Ｇ 情報処理システム
１０，１０Ａ，１０Ｂ，１０Ｃ，１０Ｄ，１０Ｅ，１０Ｇ 情報処理装置
１１，１１Ｃ 取得部
１２，１２Ｃ，１２Ｄ 記憶部
１３，１３Ａ，１３Ｃ，１３Ｅ，１３Ｇ 制御部
２０ 画像ＤＢ
３０ 操作部
４０，６０ 表示部
５０ 特徴解析済画像ＤＢ
１００，１００Ｆ 顕微鏡
１０１ 筐体部
１０１Ａ スライドガラス
１０１Ｂ カバーガラス
１０２ ステージ
１０３ 対物レンズ
１０４ レボルバ
１０５ 撮像部
１０６ 接眼部
１０７ 操作部
１０８ 位置検出部
１０９ 倍率検出部
１１０ 中間鏡筒
１１１ ハーフミラー
１２１ 表示情報記憶部
１２２ カウント値記憶部
１２３ プログラム記録部
１２４ 視野情報記憶部
１２５ 全体画像記憶部
１３１ 第１生成部
１３２，１３２Ｃ 算出部
１３３ 第１判定部
１３４ 第２判定部
１３５，１３５Ｇ 加算部
１３６ 設定部
１３７，１３７Ｃ 第２生成部
１３８ 表示制御部
１４１ 画像解析部
１４２ 特徴量解析部
１４３ 抽出部
１５１ 検索部
１６０ 位置合わせ処理部

Claims (21)

  1. 外部装置から入力される画像データと、外部装置から入力される指示信号であって、前記画像データに対応する画像における所定の表示領域を選択する指示信号と、に基づいて、前記画像データに対応する第１画像を用いて、前記指示信号によって選択される前記表示領域に対応する表示画像を生成する第１生成部と、
    前記第１画像における前記表示領域の位置を示す表示領域情報と、前記第１画像における所定の領域毎の表示頻度を示すカウント値と、を記憶する記憶部と、
    前記表示領域情報が所定の条件を満たすか否かを判定する第１判定部と、
    前記第１判定部が前記所定の条件を満たすと判定した前記領域の前記カウント値に所定の値を加算する加算部と、
    前記カウント値に基づいて、前記第１画像において注目度が高い領域を注目領域として設定する設定部と、
    を備える、
    情報処理装置。
  2. 請求項１に記載の情報処理装置であって、
    前記表示領域情報は、前記第１画像を基準とした座標系で前記表示画像の位置を表す座標情報と前記表示画像の大ききを表す情報である、
    情報処理装置。
  3. 請求項１または２に記載の情報処理装置であって、
    前記設定部は、
    前記カウント値が大きい領域ほど注目度が高い前記注目領域として設定する、
    情報処理装置。
  4. 請求項１〜３のいずれか一つに記載の情報処理装置であって、
    前記設定部は、
    前記カウント値の値が所定値より大きい領域を前記注目領域として設定する、
    情報処理装置。
  5. 請求項１〜４のいずれか一つに記載の情報処理装置であって、
    前記表示画像を表示部に表示させる表示制御部をさらに備え、
    前記所定の条件は、
    前記表示部において表示された表示時間であり、
    前記第１判定部は、
    前記表示が所定時間、一定の大きさで所定の移動範囲内で表示されたか否かを判定し、
    前記加算部は、
    前記第１判定部によって前記表示時間が所定の時間より長く表示されたと判定された前記領域の前記カウント値を加算する、
    情報処理装置。
  6. 請求項１〜４のいずれか一つに記載の情報処理装置であって、
    前記表示画像を表示部に表示させる表示制御部と、
    前記第１判定部と異なる所定の条件を判定する第２判定部と、
    をさらに備える、
    情報処理装置。
  7. 請求項６に記載の情報処理装置であって、
    前記第２判定部は、
    前記所定の領域毎に、対象時刻における前記表示領域が対象時刻の前後の表示領域より大きいか否かを判定し、
    前記加算部は、
    前記第２判定部によって対象時刻における前記表示領域が対象時刻の前後の表示領域より大きいと判定された前記領域の前記カウント値を加算する、
    情報処理装置。
  8. 請求項６に記載の情報処理装置であって、
    前記加算部は、
    前記所定の値に対して、前記表示領域が小さいほど重み付けを行って前記カウント値に加算する、
    情報処理装置。
  9. 請求項６に記載の情報処理装置であって、
    前記第２判定部の所定の条件は、
    前記表示画像の表示位置および前記表示画像の表示領域の大きさの偏差、または所定時間における前記表示画像の表示位置および前記表示画像の表示領域の大きさの偏差であり、 前記加算部は、
    前記第２判定部によって前記偏差が所定値以下であると判定された前記領域の前記カウント値を加算する、
    情報処理装置。
  10. 請求項１〜９のいずれか一つに記載の情報処理装置であって、
    前記画像データは、
    ２次元の平面画像データまたは３次元の立体画像データである、
    情報処理装置。
  11. 請求項１〜１０のいずれか一つに記載の情報処理装置であって、
    前記第１画像の特徴量を解析することによって特徴量毎にセグメンテーションを行う画像解析部と、
    前記注目領域の注目領域特徴量を解析する特徴量解析部と、
    前記注目領域特徴量と前記特徴量とに基づいて、前記第１画像から前記注目領域に類似する領域を抽出する抽出部と、
    をさらに備える、
    情報処理装置。
  12. 請求項１１に記載の情報処理装置であって、
    前記注目領域特徴量に基づいて、複数の画像データから類似する画像データを検索するためのクエリを生成するクエリ生成部と、
    前記クエリに基づいて、複数の画像データを記憶する画像データベースから画像を検索する検索部をさらに備える、
    情報処理装置。
  13. 請求項１〜１２のいずれか一つに記載の情報処理装置であって、
    前記表示画像に前記注目領域を重畳して重畳画像を生成する第２生成部をさらに備える、
    情報処理装置。
  14. 請求項１〜１３のいずれか一つに記載の情報処理装置であって、
    前記指示信号に基づいて、前記表示領域の位置を示す表示領域情報を算出する算出部をさらに備える、
    情報処理装置。
  15. 請求項１４に記載の情報処理装置であって、
    前記指示信号は、
    顕微鏡に設けられ位置検出部が検出した基準位置からのステージの位置を示す位置情報と、
    前記顕微鏡に設けられた倍率検出部が検出した標本を観察する観察倍率を示す倍率情報と、
    を含む、
    情報処理装置。
  16. 対象物を観察する観察装置を備える情報処理システムであって、
    前記観察装置によって選択される前記対象物の選択位置と、少なくとも前記観察装置の視野の大きさを示す視野情報と、所定の領域毎の表示頻度を示すカウント値と、を記憶する記憶部と、
    前記視野情報が所定の条件を満たすか否かを判定する第１判定部と、
    前記第１判定部が前記所定の条件を満たすと判定した前記領域の前記カウント値に所定の値を加算する加算部と、
    前記カウント値に基づいて、前記対象物に対応する座標系において注目度が高い領域を注目領域として設定する設定部と、
    を備える、
    情報処理システム。
  17. 請求項１６に記載の情報処理システムであって、
    前記視野情報は、
    被写界を基準とした座標系における前記視野の位置を表す座標情報をさらに含む、
    情報処理システム。
  18. 請求項１６に記載の情報処理システムであって、
    前記対象物の観察像に前記注目領域に係る情報を表示部に表示させる表示制御部をさらに備える、
    情報処理システム。
  19. 請求項１６に記載の情報処理システムであって、
    観察光学系と、
    前記観察光学系が結像する前記対象物の観察像に前記注目領域に係る情報を重畳する表示制御部と、
    をさらに備える、
    情報処理システム。
  20. 情報処理装置が実行する情報処理方法であって、
    外部装置から入力される画像データと、外部装置から入力される指示信号であって、前記画像データに対応する画像における所定の表示領域を選択する指示信号と、に基づいて、前記画像データに対応する第１画像を用いて前記指示信号によって選択される前記表示領域に対応する表示画像を生成し、
    前記第１画像における前記表示領域の位置を示す表示領域情報と、前記第１画像における所定の領域毎の表示頻度を示すカウント値と、を記憶する記憶部から前記表示領域情報を取得し、
    前記表示領域情報が所定の条件を満たすか否かを判定し、
    前記所定の条件を満たすと判定した前記領域の前記カウント値をカウントアップし、
    前記カウント値に基づいて、前記第１画像において注目度が高い領域を注目領域として設定する、
    情報処理方法。
  21. 情報処理装置に、
    外部装置から入力される画像データと、外部装置から入力される指示信号であって、前記画像データに対応する画像における所定の表示領域を選択する指示信号と、に基づいて、前記画像データに対応する第１画像を用いて前記指示信号によって選択される前記表示領域に対応する表示画像を生成し、
    前記第１画像における前記表示領域の位置を示す表示領域情報と、前記第１画像における所定の領域毎の表示頻度を示すカウント値と、を記憶する記憶部から前記表示領域情報を取得し、
    前記表示領域情報が所定の条件を満たすか否かを判定し、
    前記所定の条件を満たすと判定した前記領域の前記カウント値をカウントアップし、
    前記カウント値に基づいて、前記第１画像において注目度が高い領域を注目領域として設定する、
    プログラム。
JP2021501210A 2019-02-20 2019-02-20 情報処理装置、情報処理システム、情報処理方法およびプログラム Active JP7219804B2 (ja)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2019/006369 WO2020170369A1 (ja) 2019-02-20 2019-02-20 情報処理装置、情報処理システム、情報処理方法およびプログラム

Publications (2)

Publication Number Publication Date
JPWO2020170369A1 true JPWO2020170369A1 (ja) 2021-12-16
JP7219804B2 JP7219804B2 (ja) 2023-02-08

Family

ID=72144543

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2021501210A Active JP7219804B2 (ja) 2019-02-20 2019-02-20 情報処理装置、情報処理システム、情報処理方法およびプログラム

Country Status (3)

Country Link
US (1) US11972619B2 (ja)
JP (1) JP7219804B2 (ja)
WO (1) WO2020170369A1 (ja)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005202173A (ja) * 2004-01-16 2005-07-28 Canon Inc 画像表示方法
JP2011215660A (ja) * 2010-03-31 2011-10-27 Hitachi Ltd 注目画像閲覧表示方法
JP2016139397A (ja) * 2015-01-23 2016-08-04 パナソニックＩｐマネジメント株式会社 画像処理装置、画像処理方法、画像表示装置およびコンピュータプログラム
JP2017046340A (ja) * 2015-08-28 2017-03-02 パナソニックＩｐマネジメント株式会社 画像出力装置、画像送信装置、画像受信装置、画像出力方法および記録媒体
US20180137119A1 (en) * 2016-11-16 2018-05-17 Samsung Electronics Co., Ltd. Image management method and apparatus thereof

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB0229625D0 (en) 2002-12-19 2003-01-22 British Telecomm Searching images
US8126267B2 (en) * 2007-02-05 2012-02-28 Albany Medical College Methods and apparatuses for analyzing digital images to automatically select regions of interest thereof
US8830164B2 (en) 2009-12-14 2014-09-09 Panasonic Intellectual Property Corporation Of America User interface device and input method
FR2982384B1 (fr) 2011-11-04 2014-06-27 Univ Pierre Et Marie Curie Paris 6 Dispositif de visualisation d'une lame virtuelle
JP2013174581A (ja) * 2012-01-25 2013-09-05 Canon Inc 画像データ生成装置および画像データ生成方法
JP2015114798A (ja) 2013-12-11 2015-06-22 キヤノン株式会社 情報処理装置および情報処理方法、プログラム
US9437022B2 (en) * 2014-01-27 2016-09-06 Splunk Inc. Time-based visualization of the number of events having various values for a field
JP6411768B2 (ja) * 2014-04-11 2018-10-24 Hoya株式会社 画像処理装置
US9824189B2 (en) 2015-01-23 2017-11-21 Panasonic Intellectual Property Management Co., Ltd. Image processing apparatus, image processing method, image display system, and storage medium
CN104778009A (zh) * 2015-04-15 2015-07-15 京东方科技集团股份有限公司 驱动方法及装置、显示装置
US10048485B2 (en) 2015-08-28 2018-08-14 Panasonic Intellectual Property Management Co., Ltd. Image output device, image transmission device, image reception device, image output method, and non-transitory recording medium
US10484675B2 (en) * 2017-04-16 2019-11-19 Facebook, Inc. Systems and methods for presenting content
US10645376B2 (en) * 2017-04-16 2020-05-05 Facebook, Inc. Systems and methods for presenting content

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005202173A (ja) * 2004-01-16 2005-07-28 Canon Inc 画像表示方法
JP2011215660A (ja) * 2010-03-31 2011-10-27 Hitachi Ltd 注目画像閲覧表示方法
JP2016139397A (ja) * 2015-01-23 2016-08-04 パナソニックＩｐマネジメント株式会社 画像処理装置、画像処理方法、画像表示装置およびコンピュータプログラム
JP2017046340A (ja) * 2015-08-28 2017-03-02 パナソニックＩｐマネジメント株式会社 画像出力装置、画像送信装置、画像受信装置、画像出力方法および記録媒体
US20180137119A1 (en) * 2016-11-16 2018-05-17 Samsung Electronics Co., Ltd. Image management method and apparatus thereof

Also Published As

Publication number Publication date
WO2020170369A1 (ja) 2020-08-27
US11972619B2 (en) 2024-04-30
US20210364776A1 (en) 2021-11-25
JP7219804B2 (ja) 2023-02-08

Similar Documents

Publication Publication Date Title
CN103377487B (zh) 信息处理设备、显示控制方法以及程序
JP5281972B2 (ja) 撮像装置
US8350905B2 (en) Microscope system, image generating method, and program for practicing the same
US9204050B2 (en) Information displaying apparatus and information displaying method
US10809515B2 (en) Observation method and specimen observation apparatus
WO2013099124A1 (en) Image processing apparatus, image processing system, image processing method, and program
JP5679524B2 (ja) スタックされた顕微鏡画像をナビゲートするための方法及び装置
JP2010177741A (ja) 撮像装置
EP2800053A1 (en) Image processing device, image display system, image processing method, and image processing program
US20160042122A1 (en) Image processing method and image processing apparatus
JP2016024489A (ja) 画像処理装置、撮像装置、画像処理方法及びプログラム
JP2017162103A (ja) 点検作業支援システム、点検作業支援方法、点検作業支援プログラム
JP4872396B2 (ja) 画像編集装置、画像編集方法および画像編集プログラム
JP2006329684A (ja) 画像計測装置及び方法
US10429632B2 (en) Microscopy system, microscopy method, and computer-readable recording medium
TW200809698A (en) A method and system for obtaining multiple views of an object for real-time video output
JP6265133B2 (ja) 見え方提示システム、方法およびプログラム
JP7219804B2 (ja) 情報処理装置、情報処理システム、情報処理方法およびプログラム
JP2020034743A (ja) 画像取得装置および画像取得装置の作動方法
JPH10254903A (ja) 画像検索方法および装置
JP5001400B2 (ja) 遮蔽物除去表示装置
JP7174318B2 (ja) 情報処理装置、情報処理方法、及びプログラム
US11356632B2 (en) Display-information generating apparatus, information processing apparatus, and imaging system
CN113014806B (zh) 虚化图像拍摄方法及装置
KR102355578B1 (ko) 정보 처리 장치, 프로그램을 기록한 기록 매체 및 정보 처리 방법

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20220216

A711 Notification of change in applicant

Free format text: JAPANESE INTERMEDIATE CODE: A712

Effective date: 20221004

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20230104

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20230127

R151 Written notification of patent or utility model registration

Ref document number: 7219804

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151