JP2013025554A - マーク情報記録装置、マーク情報提示装置、マーク情報記録方法及びマーク情報提示方法 - Google Patents

Abstract

【課題】画像にマーク情報を記録するマーク情報記録装置、また、記録されたマーク情報を提示可能なマーク情報提示装置を提供すること。
【解決手段】本技術に係るマーク情報記録装置は、出力部と、記録部とを具備する。前記出力部は、１つの対象物について異なる複数の解像度でそれぞれ生成された全体画像のうち、任意の１つの解像度の前記全体画像内の、一部の画像である部分画像を表示するために、前記部分画像を出力する。前記記録部は、前記出力された前記部分画像の、前記全体画像内の位置情報及び前記解像度の情報に、マーク情報を関連付けて記録する。
【選択図】図７

Description

本技術は、電子的なマーク情報を記録するマーク情報記録装置、記録されたマーク情報を提示するマーク情報提示装置、また、マーク情報の記録及び提示方法に関する。

特許文献１に記載の撮像装置は、動画の撮影時において、映像に関連するインデックスを表す電子マーク（エッセンスマーク）を、映像フレームに関連付ける。これにより、ユーザーはその映像の編集時に、その電子マークに関連付けられたフレームをサムネイルとして見ることができ、所望の映像シーンを見つけ出すことができる（例えば、特許文献１の明細書段落[００２６]、[００３０]参照）。

特開２００５−２３６９０６号公報

映像だけでなく、画像にも電子的なマーク情報を付加したいという要求がある。

以上のような事情に鑑み、本技術の目的は、画像にマーク情報を記録するマーク情報記録装置、また、記録されたマーク情報を提示可能なマーク情報提示装置を提供し、さらにマーク情報の記録及び提示の方法を提供することにある。

上記目的を達成するため、本技術に係るマーク情報記録装置は、出力部と、記録部とを具備する。
前記出力部は、１つの対象物について異なる複数の解像度でそれぞれ生成された全体画像のうち、任意の１つの解像度の前記全体画像内の、一部の画像である部分画像を表示するために、前記部分画像を出力する。
前記記録部は、前記出力された前記部分画像の、前記全体画像内の位置情報及び前記解像度の情報に、マーク情報を関連付けて記録する。

マーク情報が、出力部により出力された部分画像の位置情報、及び、その部分画像の解像度（その部分画像を含む全体画像の解像度）の情報に関連付けされて記録される。したがって、マーク情報記録装置は、部分画像の位置に応じてマーク情報を付加することができ、また、部分画像の位置だけでなく、その解像度に応じてもマーク情報を付加することができる。

「ＡをＢに関連付ける」という概念には、「Ａに、Ｂを識別するIDを関連付ける」及び「Ａを識別するIDに、ＢまたはＢを識別するIDを関連付ける」の両方の意味が含まれる。

前記記録部は、前記マーク情報として、アノテーション情報、及び、前記部分画像内に合成されるマーク画像を記録してもよい。

前記マーク情報記録装置は、前記アノテーション情報の生成を開始するためのユーザーによる入力操作の情報を取得した場合、前記アノテーション情報の生成を開始するアノテーション情報生成部をさらに具備してもよい。これにより、上記のユーザーの操作情報に応じて、ユーザーが意図した時にアノテーション情報を記録することができる。

あるいは、前記マーク情報記録装置は、ユーザーの発話による音声の情報を取得した場合、前記アノテーション情報の生成を開始するアノテーション情報生成部をさらに具備してもよい。これにより、ユーザーによる発話開始をトリガーとして、マーク情報の記録を開始することができる。

前記マーク情報記録装置は、前記部分画像を前記出力部に出力させるためのユーザーによる操作情報を取得する取得部をさらに具備してもよい。その場合、前記記録部は、前記取得部により取得された前記操作情報に応じて前記出力部により出力された前記部分画像の、前記位置情報及び前記解像度情報に、前記マーク情報を関連付ける。これにより、ユーザーの操作に応じて出力された部分画像（例えば全体画像のうちユーザーが観察したい部分画像）に関連付けられたマーク情報を記録することが可能となる。

前記記録部は、前記取得部により取得された前記ユーザーの連続的または断続的な一連の前記操作情報に応じて前記出力部により出力される、前記位置情報及び前記解像度情報のうち少なくとも一方が互いに異なる前記部分画像ごとの位置情報及び解像度情報を関連付けてもよい。この場合、前記記録部は、この関連付けによる情報を、前記各部分画像の出力の履歴情報として記録し、また、前記履歴情報に、前記マーク情報を関連付ける。これにより、異なる複数の部分画像を連続的に出力するためのユーザーの一連の操作の履歴情報ごとに、マーク情報を記録することができる。

前記記録部は、前記取得部により取得された前記操作情報のうち所定の操作情報が取得された場合、前記所定の操作情報に応じて出力された前記部分画像について、前記マーク情報の前記関連付け処理を実行してもよい。これにより、部分画像の出力のための各種のユーザーの操作情報のうち、限定された所定の操作情報が取得部により取得された場合に、その操作情報によって出力された部分画像について、マーク情報を関連付けることができる。

前記記録部は、複数のマーク情報のそれぞれの提示時の優先度を示す優先度情報を、前記複数のマーク情報に関連付けて記録してもよい。これにより、設定された優先度に応じて複数のマーク情報のうち少なくとも１つを提示することができる。

前記記録部は、前記出力部により出力された前記部分画像の解像度を含む少なくとも２以上の解像度範囲ごとに、前記マーク情報を前記関連付けてもよい。すなわち、記録部は、その出力された部分画像の解像度を含む解像度範囲ごとに、マーク情報の関連付け処理を実行することができる。

前記記録部は、ユーザーの操作に応じて前記解像度の閾値を設定し、前記設定された解像度の閾値を、前記位置情報及び前記マーク情報に関連付けて記録してもよい。これにより、マーク情報の提示時において、例えば出力される部分画像の倍率が閾値以上となった場合に、マーク情報が提示されるようにすることができる。

本技術に係るマーク情報提示装置は、出力部と、記録部と、処理部とを具備する。
前記出力部は、１つの対象物について異なる複数の解像度でそれぞれ生成された全体画像のうち、任意の１つの解像度の前記全体画像内の、一部の画像である部分画像を表示するために、前記部分画像を出力する。
前記記録部は、前記出力された前記部分画像の、前記全体画像内の位置情報及び前記解像度の情報に、マーク情報を関連付け、前記マーク情報に関連付けられた前記位置情報及び前記解像度の情報を、記録位置情報及び記録解像度情報として記録する。
前記処理部は、前記出力される部分画像を構成する出力位置情報群内に前記記録位置情報がある場合、少なくとも前記記録位置情報に関連付けられた前記マーク情報を提示するための処理を実行する。

本技術によれば、全体画像内で、出力される部分画像を構成する出力位置情報群が、記録位置情報を有している場合、その記録位置情報に関連付けられたマーク情報を提示することができる。

前記処理部は、前記出力位置情報群内に前記記録位置情報がある場合であって、かつ、前記出力部により出力される前記部分画像の出力解像度情報と、前記記録位置情報に対応する前記記録解像度情報とが一致する場合、前記記録位置情報及び前記記録解像度情報に関連付けられた前記マーク情報を提示するための処理を実行してもよい。これにより、部分画像の記録位置情報及び記録解像度情報の両方に関連付けられたマーク情報を提示することができる。

前記記録部は、前記マーク情報として、アノテーション情報、及び、前記部分画像内に合成されるマーク画像を記録してもよい。その場合、前記処理部は、前記アノテーション情報を提示するための処理を実行する。

前記処理部は、前記出力される部分画像を構成する前記出力位置情報群内に複数の記録位置情報がある場合、前記複数の記録位置情報にそれぞれ関連付けられた複数のマーク画像を、前記出力される部分画像内に合成してもよい。これにより、出力された１つの部分画像内に複数のマーク情報が関連付けられている場合、このマーク情報提示装置に接続された表示部は、それらにそれぞれ関連付けられた複数のマーク画像を表示することができる。

前記処理部は、前記複数の記録位置情報にそれぞれ関連付けられた複数の記録解像度情報のうち、前記出力部により出力される前記部分画像の前記出力解像度情報に一致するまたは記録された解像度範囲内の解像度情報に対応する画像を、前記出力される部分画像内に合成してもよい。

前記記録部は、前記複数の画像にそれぞれ対応する複数のアノテーション情報のそれぞれの提示時の優先度を示す優先度情報を、前記複数のマーク情報に関連付けてもよい。その場合、前記処理部は、前記記録された優先度情報に応じて、前記複数のアノテーション情報を提示するかしないか、または、それらの提示の時間順序を設定する。これにより、ユーザーは、優先度の高い順にアノテーション情報の提示を受けることができる。

前記記録部は、前記出力部により出力された前記部分画像の出力解像度を含む少なくとも２以上の解像度範囲ごとに前記アノテーション情報をそれぞれ関連付け、異なる前記優先度情報ごとにそれぞれ異なる記録解像度範囲を設定してもよい。その場合、前記処理部は、前記出力位置情報群内にある前記複数の記録位置情報にそれぞれ関連付けられた複数のアノテーション情報のうち少なくとも１つのアノテーション情報を、前記設定された記録解像度範囲に応じて提示するための処理を実行する。

前記マーク情報提示装置は、前記部分画像を前記出力部に出力させるためのユーザーによる操作情報を取得する取得部をさらに具備してもよい。その場合、前記記録部は、前記取得部により取得された前記操作情報のうち所定の操作情報が取得された場合、前記所定の操作情報に応じて出力された前記部分画像について、前記マーク情報の前記関連付け処理を実行する。また、前記処理部は、前記ユーザーによる前記所定の操作情報に応じて出力された前記部分画像を構成する出力位置情報群内に前記記録位置情報がある場合、少なくとも前記記録位置情報に関連付けられた前記マーク情報を提示するための処理を実行する。

本技術に係るマーク情報記録方法は、１つの対象物について異なる複数の解像度でそれぞれ生成された全体画像のうち、任意の１つの解像度の前記全体画像内の、一部の画像である部分画像を表示するために、前記部分画像を出力することを含む。
前記出力された前記部分画像の、前記全体画像内の位置情報及び前記解像度の情報に、マーク情報が関連付けて記録される。

本技術に係るマーク情報提示方法は、１つの対象物について異なる複数の解像度でそれぞれ生成された全体画像のうち、任意の１つの解像度の前記全体画像内の、一部の画像である部分画像を表示するために、前記部分画像を出力することを含む。
前記出力された前記部分画像の、前記全体画像内の位置情報及び前記解像度の情報に、マーク情報を関連付け、前記マーク情報に関連付けられた前記位置情報及び前記解像度の情報が、記録位置情報及び記録解像度情報として記録される。
前記出力される部分画像を構成する出力位置情報群内に前記記録位置情報がある場合、少なくとも前記記録位置情報に関連付けられた前記マーク情報を提示するための処理が実行される。

以上、本技術によれば、画像にマーク情報を記録することができる。また、記録されたマーク情報を提示することができる。

図１は、本技術の一実施形態に係るマーク情報記録装置及びマーク情報提示装置を含む情報処理装置として、例えばＰＣのハードウェアの構成を示すブロック図である。 図２は、ピラミッド構造を有する画像の表示原理を説明するための画像ピラミッド構造を示す図である。 図３は、この画像ピラミッド構造の画像群を生成するときの手順を説明するための図である。 図４は、ＰＣの入力部の一例を示す図である。 図５は、全体画像及び部分画像のそれぞれの大きさの一例を示す図である。 図６は、記録処理の実施形態１に係る記録処理を示すフローチャートである。 実施形態１に係る記録処理で作成されるテーブルである。 図８Ａは、音声情報が記録される時の、表示部に表示される画面の例を示す。図８Ｂはその変形例を示す。 図９は、実施形態２に係る記録処理を示すフローチャートである。 図１０は、実施形態３に係る記録処理を示すフローチャートである。 図１１は、上記実施形態３に係る記録処理を示すフローチャートである。 図１２は、実施形態５に係る記録処理を示すフローチャートである。 図１３は、上記実施形態５に係る記録処理で作成される、履歴情報のテーブルである。 図１４は、上記実施形態５における履歴情報内の複数の部分画像の動きを示す図である。 図１５は、実施形態６に係る記録処理により作成されるテーブルである。 図１６は、実施形態８に係る記録処理により作成されるテーブルである。 図１７は、提示処理の実施形態１に係るフローチャートである。 図１８Ａ及びＢは、実施形態１に係る提示処理により得られるマーク画像が合成された部分画像をそれぞれ示す図である。 図１９は、実施形態２に係る提示処理を示すフローチャートである。 図２０は、実施形態３に係る提示処理により得られるマーク画像が合成された部分画像を示す図である。 図２１は、実施形態３に係る提示処理により得られるマーク画像が合成された部分画像を示す図である。 図２２は、実施形態４に係る提示処理を示すフローチャートである。 図２３Ａ及びＢは、実施形態５に係る提示処理により得られるマーク画像が合成された部分画像をそれぞれ示す図である。 図２４は、実施形態５に係る提示処理により得られるマーク画像が合成された部分画像を示す図である。 図２５は、実施形態６に係る提示処理に用いられる、上記実施形態３に係る記録処理により作成されるテーブルである。 図２６は、実施形態７に係る提示処理を示すフローチャートである。 図２７は、実施形態７に係る提示処理を示すフローチャートである。

以下、図面を参照しながら、本技術の実施形態を説明する。

図１は、本技術の一実施形態に係るマーク情報記録装置及びマーク情報提示装置を含む情報処理装置として、例えばＰＣ（Personal Computer）のハードウェアの構成を示すブロック図である。

ＰＣ１００は、ＣＰＵ（Central Processing Unit）１０１、ＲＯＭ１０２（Read Only Memory）、ＲＡＭ（Random Access Memory）１０３、入出力インターフェース１０５、及び、これらを互いに接続するバス１０４を備える。

入出力インターフェース１０５には、表示部１０６、入力部１０７、記憶部１０８、通信部１０９、ドライブ部１１０等が接続される。

表示部１０６は、例えば液晶、ＥＬ（Electro-Luminescence）等を用いた表示デバイスである。

入力部１０７は、例えばポインティングデバイス、キーボード、タッチパネル、マイクロフォン、その他の操作装置である。入力部１０７がタッチパネルを含む場合、そのタッチパネルは表示部１０６と一体となり得る。

図４は、入力部１０７の一例を示す図である。この入力部１０７は、ゲーム用のコントローラー１と類似の形状及び機能を有し、十字キー２、押しボタンＡ、Ｌ、Ｒ等を有している。十字キー２は、例えば後述する全体画像内における一部の画像である部分画像を指定して表示するために、ユーザーが全体画像内で指定領域（表示領域）を選択するためのキーである。押しボタンＬ及びＲは、その部分画像の観察倍率を変更するための拡大及び縮小する機能を有する。また、押しボタンＡは、後述するアノテーション情報の作成処理を開始及び停止する機能、あるいはその他の機能を有する。

記憶部１０８は、不揮発性の記憶デバイスであり、例えばＨＤＤ（Hard Disk Drive）、フラッシュメモリ、その他の固体メモリである。

ドライブ部１１０は、例えば光学記録媒体、フロッピー（登録商標）ディスク、磁気記録テープ、フラッシュメモリ等、リムーバブルの記録媒体１１１を駆動することが可能なデバイスである。これに対し上記記憶部１０８は、主にリムーバブルでない記録媒体を駆動する、ＰＣ１００に予め搭載されたデバイスとして使用される場合が多い。

通信部１０９は、ＬＡＮ（Local Area Network）、ＷＡＮ（Wide Area Network）等に接続可能な、他のデバイスと通信するためのモデム、ルーター、その他の通信機器である。通信部１０９は、有線及び無線のどちらを利用して通信するものであってもよい。通信部１０９は、ＰＣ１００とは別体で使用される場合が多い。

次に、図示しない光学顕微鏡により得られた画像であって、ＰＣ１００の主に記憶部１０８に記憶される画像及びその表示原理について説明する。図２は、その表示原理を説明するための画像ピラミッド構造を示す図である。

本実施形態における画像ピラミッド構造５０は、光学顕微鏡により同じ１つの観察の対象物１５（図３参照）から得られる同一の画像について、異なる複数の解像度により生成された画像群（全体画像群）である。画像ピラミッド構造５０の最下には、最も大きいサイズの画像が配置され、最上には最も小さいサイズの画像が配置される。最も大きいサイズの画像の解像度は、例えば５０×５０（Kpixel：キロピクセル）、あるいは図５に示すように３０×４０（Kpixel）である。最も小さいサイズの画像は、例えば２５６×２５６（pixel）、あるいは、２５６×５１２（pixel）である。

つまり、同じ表示部１０６が、これらの画像を例えば１００％でそれぞれ表示（それらの画像のピクセル数と同じ物理的なドット数でそれぞれ表示）すると、最も大きいサイズの画像が最も大きく表示され、最も小さいサイズの画像が最も小さく表示される。ここで、図２では、その表示部１０６の表示範囲をＤとして示している。

図３は、この画像ピラミッド構造５０の画像群を生成するときの手順を説明するための図である。

まず、図示しない光学顕微鏡により所定の観察倍率で得られた元画像（巨大画像）のデジタル画像が用意される。この元画像が、図２で示した画像ピラミッド構造５０の最下の画像である最も大きいサイズの画像に相当し、つまり最も高い解像度の画像となる。したがって、画像ピラミッド構造５０の最下の画像としては、比較的高倍率で観察されて得られる光学顕微鏡の画像が用いられる。

なお、病理の分野一般においては、生体の臓器、組織、細胞、またはこれらの一部から、薄く切り取られたものが観察対象物１５となる。そして、光学顕微鏡の機能を有する図示しないスキャナ装置により、ガラススライドに収められた観察対象物１５が読み取られ、これにより得られたデジタル画像が、そのスキャナ装置またはその他の記憶装置に記憶される。

このスキャナ装置または図示しない汎用コンピュータは、図３に示すように、上記のように得られた最も大きいサイズの画像から、段階的に解像度を小さくした複数の画像を生成し、これらを例えば所定サイズの単位である「タイル」単位で記憶する。１タイルのサイズは、例えば２５６×２５６（pixel）である。このように生成された画像群が画像ピラミッド構造５０を形成し、この画像ピラミッド構造５０がＰＣ１００の記憶部１０８に記憶される。実際には、ＰＣ１００はそれら異なる複数の解像度の画像と、解像度の情報とをそれぞれ対応付けて記憶すればよい。なお、画像ピラミッド構造５０の生成及びその記憶は、図１に示したＰＣ１００が実行してもよい。

これらの画像ピラミッド構造５０を形成する全体画像群は、公知の圧縮方法により生成されてもよいし、例えばサムネイル画像を生成するときの公知の圧縮方法により生成されてもよい。

ＰＣ１００は、この画像ピラミッド構造５０のシステムを採用するソフトウェアを用い、ユーザーの入力部１０７を介した入力操作の情報に応じて、画像ピラミッド構造５０から所望の画像を抽出し、これを表示部１０６に出力する。具体的には、ＰＣ１００は、ユーザーにより選択された任意の解像度の画像のうちの、ユーザーにより指定された任意の部位の画像を表示する。この場合、ＣＰＵ１０１、入出力インターフェース１０５及び表示部１０６のうち少なくとも１つは、その任意の部位の画像を表示部１０６で表示させるために、その画像を外部に出力する出力部として機能する。また、ＣＰＵ１０１または入出力インターフェース１０５は、ユーザーによる入力操作の情報を取得する取得部として機能する。

例えば、図５に示すように、異なる複数の解像度の全体画像のうち、任意の１つの解像度を有する全体画像２００の、一部の画像である画像２１０がユーザーの入力操作により指定される。ＰＣ１００は、上述のように異なる複数の解像度の全体画像２００を有している。ユーザーの入力操作により画像２１０が指定されると、ＰＣ１００は、その指定された領域の画像を部分画像２１０として切り出し、これを表示部１０６に出力することができる。

図５に示した例では、最もサイズの大きな元画像から部分画像２１０が切り出され、表示部１０６は、この切り出された部分画像２１０を、例えばＨＤ（High Definition）により表示部１０６が持つ画面全体の画面として表示する。

表示部１０６は、任意の解像度を持つ部分画像２１０として表示可能であり、この部分画像２１０の解像度は、切り出される元の画像である全体画像の解像度による。もちろん、表示部１０６は、切り出された部分画像を、その表示部１０６が持つ画面全体のうちの一部に表示することも可能である。

このような処理により、ユーザーは、観察倍率を変えながら観察対象物１５を観察しているような感覚を得ることができる。すなわち、ＰＣ１００は仮想顕微鏡として機能する。ここでの仮想的な観察倍率は、実際には解像度に相当する。

[マーク情報記録装置としてのＰＣによるマーク情報の記録処理]

本技術は、表示部１０６に出力される部分画像２１０の、全体画像内の位置情報（座標）及びその解像度情報に、マーク情報を関連付ける技術である。

以下、ＰＣ１００によるマーク情報の記録処理について説明する。マーク情報は、記号、符号、インデックス、アノテーション情報、または、これらを表現する画像である。

アノテーション情報は、テキスト、音声、画像、リンク（例えばＵＲＬ：Uniform Resource Locator）等により形成される情報であり、上記の記号、符号、インデックス等と関連付けられていてもよい。

以下では、そのマーク情報は、アノテーション情報（特に、ユーザーの発話により形成される音声情報）及び部分画像２１０内に合成される画像であるとして、その記録処理を説明する。このことは、「マーク情報の提示処理」の説明でも同様である。

なお、以下に説明するＰＣ１００の処理は、記憶部１０８またはＲＯＭ１０２等の記憶されたソフトウェアと、ＰＣ１００のハードウェア資源との協働により実現される。具体的には、ＣＰＵ１０１が記憶部１０８またはＲＯＭ１０２等に記憶された、ソフトウェアを構成するプログラムをＲＡＭ１０３にロードして実行することにより、以下の処理が実現される。説明の便宜上、処理の主体をＣＰＵ１０１としてその処理を説明する。このことは、「マーク情報の提示処理」の説明でも同様である。

（記録処理の実施形態１）
図６は、実施形態１に係る記録処理を示すフローチャートである。

ユーザーは、例えばコントローラー１の十字キー２を用いた入力操作に応じて、ＣＰＵ１０１は、全体画像２００内をパン、ズームイン及びズームアウトし、ユーザーは自身の観察した部分画像２１０を探す。ここで、パンとは、水平及び垂直の両方向のうち少なくとも一方の成分を含む、表示部１０６での指定領域（表示領域）の移動である。

ＣＰＵ１０１の、全体画像２００内でのパン、ズームイン及びズームアウトのうち少なくとも１つの処理を、以下、指定処理という。すなわち、ＣＰＵ１０１は指定処理を実行するごとに、部分画像２１０を表示部１０６に出力する。既述しているが、指定領域とは、この指定処理によって表示部１０６に出力される、全体画像２００内での部分画像２１０を構成する領域である。

ＣＰＵ１０１は、以上のようにユーザーの入力操作に応じて指定処理を行い、ユーザーが観察したい部分画像２１０を表示すると、ユーザーはコントローラー１を用いて記録用のボタンである押しボタンＡを押す。そうすると、ＣＰＵ１０１は、音声の記録処理を開始する（ステップ１０１）。ＣＰＵ１０１は、記録される音声情報を識別するIDをインクリメントする（ステップ１０２）。また、ＣＰＵ１０１は、記録処理が開始された時に表示のために出力されている部分画像２１０の、全体画像２００内における位置情報（座標）、及びその観察倍率（以下、単に倍率という）を、上記IDに関連付けて図７に示したテーブルに保存する（ステップ１０３）。そして、ＣＰＵ１０１は、マイクロフォンを介して入力されるユーザーの発話による音声情報を、記憶部１０８等に記録する処理を開始する（ステップ１０４）。この場合、ＣＰＵ１０１は、アノテーション情報生成部として機能する。

ＣＰＵ１０１は、この音声情報を、その部分画像２１０（のID、その位置情報及び解像度情報）に関連付けて記録する。この場合、ＣＰＵ１０１は記録部として機能する。

テーブルに記録される部分画像２１０を示す座標（代表座標）は、部分画像２１０を構成する座標群のうち所定位置の座標でよい。例えばそれは、部分画像２１０内の中心の座標、最も左上の座標、あるいはその他の所定位置の座標である。

ＣＰＵ１０１は、押しボタンＡが押されている間（ステップ１０５のNo）、記録処理を継続する（ステップ１０６）。そして、ユーザーが押しボタンＡを離すと、音声の記録処理を終了する（ステップ１０７）。

図８Ａは、音声情報が記録される時の、表示部１０６に表示される画面の例を示す。音声情報の記録処理が開始または終了した時、ＣＰＵ１０１は、例えばテーブルに記録された部分画像２１１内に、アノテーション情報を識別するマーク画像Ｍを合成し、それを、図７に示すようにその部分画像２１１のIDに関連付ける。図７及び８Ａに示したマーク画像Ｍの形態情報は、青色かつ丸形状、という情報である。

マーク画像Ｍの形態は、他の色、他の形状であってもよく、ユーザー単位で異なっていてもよい。あるいは、その形態は、音声情報か、他のアノテーション情報（例えばリンク画像、あるいはテキスト情報）かによって、つまり、アノテーション情報の種類によって異なっていてもよい。あるいは、マーク画像Ｍの形態は、後述する優先度によって異なっていてもよい。

ＣＰＵ１０１は、部分画像２１１内の所定の位置、例えば中心位置にマーク画像Ｍを合成する。このマーク画像Ｍの合成される位置の座標は、上記部分画像２１０を示す座標（テーブルに記録された代表座標）でもよい。

あるいは、図８Ｂに示すように、ユーザーが、その部分画像２１０内においてポインター（あるいは画面へのタッチ操作）で指定した任意の位置の座標に合成してもよい。この場合、マーク画像Ｍの座標情報も、図７に示したテーブルに記憶されてもよい。音声情報は、このマーク画像Ｍの座標に関連付けられてもよい。

記録された音声情報をユーザーに提示（例えば再生）する方法の１つとして、次のような処理がある。例えば、このように合成されたマーク画像Ｍの位置、ユーザーによりクリック（あるいはタッチ）等の入力操作が実行された場合、ＣＰＵ１０１は、後述するように記録された音声情報を再生する。この場合、マーク画像ＭはＧＵＩ（Graphical User Interface）として機能する。

以上のように、本実施形態では、マーク情報であるアノテーション情報が、表示のために出力された部分画像２１１の位置情報、及び、その部分画像２１１の解像度（その部分画像２１１を含む全体画像２００の解像度）の情報に関連付けされて記録される。したがって、ＣＰＵ１０１は、部分画像２１０の座標に応じてアノテーション情報を付加することができ、また、部分画像２１０の座標だけでなく、その倍率に応じてもアノテーション情報を付加することができる。

また、本実施形態では、ユーザーのコントローラー１への操作情報に応じて記録処理が開始されるので、ユーザーが意図した時に音声情報を記録することができる。

上記の説明では、ユーザーが押しボタンＡを離した時に、記録処理が終了した。しかし、同じ押しボタンＡの最初の押下で記録開始、次の押下で記録終了というように、トグル機能により記録処理が実行されてもよい。あるいは、別々の押しボタンにより、記録開始及び終了がそれぞれ実行されてもよい。

（記録処理の実施形態２）
図９は、実施形態２に係る記録処理を示すフローチャートである。以下の実施形態において、上記実施形態１と同様の処理は説明を簡略化し、または省略して説明する。

本実施形態では、ユーザーによる発話の開始を図示しないマイクロフォン（入力部１０７）により検出し、それが記録処理開始のトリガーとされる。

ＣＰＵ１０１は、ユーザーの入力操作に応じて指定処理を行い、ユーザーが観察したい部分画像を表示する。ここで、ユーザーによる発話が発生した場合（ステップ２０１のYes）、IDをインクリメントし（ステップ２０２）、表示部１０６に表示されているその部分画像２１０の座標及び倍率の情報をそのIDに関連付けてテーブル（図７参照）に保存する（ステップ２０３）。ステップ２０１では、ＣＰＵ１０１は、例えば閾値を超えた音圧レベルの音声の入力があった場合に、ユーザーによる発話が発生したと判定することができる。

ＣＰＵ１０１は、無音期間が一定時間継続した場合（ステップ２０５のYes）、その記録処理を終了する（ステップ２０７）。無音期間は、例えば上記閾値以下の音圧レベルの入力がある期間とされる。

このように、ユーザーのコントローラー１への意図的な入力操作によらず、ユーザーによる発話開始をトリガーとして、音声情報の記録処理を開始することができる。これにより、ユーザーにとって操作感が向上し、簡単に音声を記録することができる。

ＰＣ１００は、ユーザーの発話のうち、「記録スタート」、「始め」など、所定の言葉を登録し、その登録された言葉をユーザーが発した時に、それをトリガーとしてステップ２０１のYes処理とするプログラムを有していてもよい。その場合、ステップ２０７も同様に、ＰＣ１００は、登録された言葉をユーザーが発した時に、それをトリガーとしてステップ２０７を実行するプログラムを有していてもよい。

（記録処理の実施形態３）
図１０及び１１は、実施形態３に係る記録処理を示すフローチャートである。

本実施形態では、ユーザーの発話を記録している途中に、ユーザーによる入力部１０７への所定の入力操作があった場合、その入力操作情報に応じて、その入力操作により出力される部分画像２１０の座標等が記録される。

図１０に示すように、ユーザーの発話が発生した場合（ステップ３０１のYes）、ＣＰＵ１０１は、その音声の記録処理を開始する（ステップ３０２）。ＣＰＵ１０１は、無音期間が一定時間継続しなかった場合（ステップ３０３のNo）、ＰＣ１００が有するメモリの一種であるテンポラリバッファにその音声情報を記録する（ステップ３０４）。ＣＰＵ１０１は、無音期間が一定時間継続した場合（ステップ３０３のYes）、音声の記録処理を終了する（ステップ３０５）。

ステップ３０１及び３０３の判定基準は、上述のステップ２０１及び２０５とそれぞれ同様である。

そして、図１０のような音声の監視ループが実行されている中で、図１１に示すようにユーザーの入力操作状態の監視ループが実行される。

ＣＰＵ１０１は、ユーザーの所定の入力操作として、画面のズームイン（拡大）操作が開始されたか否かを判定する（ステップ４０１）。ＣＰＵ１０１は、ズームイン操作が開始された場合、図１０に示した、音声入力状態の監視ループ処理において、音声が記録中であるか否かを判定する（ステップ４０２）。ＣＰＵ１０１は、音声を記録中でない場合に（ステップ４０２のNo）、ズームイン操作が終了した場合は（ステップ４０３のYes）、ステップ４０１へ戻る。

ステップ４０２において、ＣＰＵ１０１は音声を記録中である場合、IDをインクリメントし（ステップ４０４）、表示のために出力されている部分画像２１０の座標及び倍率を、そのIDとともに図７に示すテーブルに保存する（ステップ４０５）。

ＣＰＵ１０１は、図１０に示した音声入力状態の監視ループ処理において、音声が記録中であるか否か（音声の記録処理を終了したか否か）を判定する（ステップ４０６）。記録処理を終了すると、ＣＰＵ１０１は、テンポラリバッファに一時的に記憶された音声情報を、ID等に関連付けて図７のテーブルに保存する（ステップ４０７）。

本実施形態では、ＣＰＵ１０１は、ステップ４０７において、ステップ４０１からステップ４０６までに一時記憶された音声情報を記録すればよい。あるいは、ＣＰＵ１０１は、ステップ４０１から所定の時間（例えば１〜１０秒）経過した後からステップ４０６までに一時記憶された音声情報を記録すればよい。あるいは、ＣＰＵ１０１は、ステップ４０１の前からステップ４０６までに一時記憶された音声情報を記録してもよい。

本実施形態では、ユーザーが、入力操作のうちズームインの操作を実行した場合であって、かつ、音声の記録処理中に、そのズームイン操作によって表示される部分画像２１０を記録することができる。ズームイン操作をした場合、そのズームインにより表示される部分画像２１０内に重要な地点が含まれている場合が多いので、本実施形態に係る処理によれば大きなメリットが得られる。

ステップ４０１及び４０３で判定対象となる所定の入力操作は、ズームイン操作に限られず、例えばパン、ズームアウト等のポインターやタッチの動きでもよい。また、ＰＣ１００は、それらの判定対象となる所定の入力操作を、ユーザーがカスタマイズ設定できるプログラムを有していてもよい。

（記録処理の実施形態４）
図示はしないが、次のような処理も実現可能である。

例えば、ＣＰＵ１０１は図１０に示すような音声の入力状態の監視ループを行わない場合において、ユーザーによる所定の入力操作（例えば上記のようなズームイン操作）が開始された直後、または所定の入力操作の開始から所定時間（例えば１〜１０秒）経過した後に、ＣＰＵ１０１が記録処理を開始することも可能である。この場合、記録の終了方法は、図７または９に示した方法でよい。

（記録処理の実施形態５）
図１２は、実施形態５に係る記録処理を示すフローチャートである。

本実施形態の処理は、図１４に示すように、ユーザーの連続的または断続的な一連の入力操作によって出力される複数の部分画像２１０が記録され、それらに音声情報が関連付けられる処理である。図１４は、ユーザーの一連の入力操作により、１〜５の指定領域の画像が順に出力される例を示す。指定領域１〜４については、倍率が同じでそれらの部分画像の座標が異なる。指定領域５の中心座標は、指定領域４のそれと同じであり、それらの倍率が異なる（指定領域５の方の倍率が高い）。

例えば、ユーザーの発話が発生した場合、ＣＰＵ１０１は、IDをインクリメントし、音声の記録処理を開始する（ステップ５０１〜５０３）。

ここで、ＣＰＵ１０１は、ユーザーの連続的または断続的な一連の入力操作情報に応じて出力される、異なる複数の部分画像２１０ごとの座標及び解像度情報を関連付け、これらを指定処理の履歴情報として記録する（ステップ５０４）。図１３は、その指定処理の履歴情報のテーブルを示す。すなわち１つのIDに、複数の異なる部分画像及び音声情報が関連付けられる。

異なる複数の部分画像とは、その座標及び解像度のうち少なくとも一方が異なる部分画像を意味する。

ＣＰＵ１０１は、無音期間が一定時間継続した場合（ステップ５０６のYes）、その記録処理を終了する（ステップ５０７）。

連続的または断続的な一連の入力操作情報とは、予め設定された、または、ユーザーカスタマイズ可能な所定時間以内の時間間隔をおいて、ユーザーにより操作された操作情報である。つまり、所定時間以内の時間間隔とは、ユーザーが、全体画像２００内のパンを１回し、次に再度パンをする場合に、それらの２回のパン操作の間において、領域を指定するユーザーによる入力操作が何もないインターバル時間である。

所定時間は、例えば１秒あるいはそれ未満である。図１４を用いて説明すると、それは、例えば指定領域１〜２までのパンと、指定領域２〜３とのパンの間における部分画像２１０が動かない間の時間間隔である。

以上のように、本実施形態では、異なる複数の部分画像２１０を連続的に出力するためのユーザーの一連の操作の履歴情報ごとに、音声情報を記録することができる。

本実施形態では、発話が発生したことをトリガーとして記録処理が開始されたが、図７に示すように、ユーザーにより記録用のボタンが押されてから記録処理が開始され、その音声情報に履歴情報が関連付けられてもよい。

（記録処理の実施形態６）
図１５は、実実施形態６に係る記録処理により作成されたテーブルである。

本実施形態では、ＣＰＵ１０１は、複数のアノテーション情報である複数の音声情報のIDごとに、それらの音声情報の提示（再生）時の優先度を示す優先度情報を、関連付けて記録する。このように、ＣＰＵ１０１は、設定された優先度に従って複数の音声情報のうち少なくとも１つを再生することができる。優先度に従った音声情報の再生については、後の「提示処理」で詳しく説明する。

（記録処理の実施形態７）
上記の各実施形態では、テーブルにおいて音声情報に関連付けられた、表示部１０６に表示するために出力された部分画像２１０の倍率値は１つの値であった。しかし、音声情報の記録時において、表示部により表示するために出力され部分画像２１０を含む少なくとも２以上の倍率値（すなわち倍率範囲）ごとに、音声情報が関連付けられてもよい。

すなわち、ＣＰＵ１０１は、音声情報の記録時に、表示のために出力された部分画像２１０の倍率値を含む倍率範囲ごとに音声情報が関連付けられる。例えば、図７に示したID=1の倍率は20倍である。これは音声情報の記録処理が開始された時点で出力されている部分画像２１０の倍率である。この場合、テーブルには、20倍を含む倍率範囲、例えば10〜30倍、5〜40倍、あるいは、20〜40倍等の倍率範囲が記録される。

このようにすることにより、後述するように、記録された音声情報の再生時において、ＣＰＵ１０１は次のように処理することができる。すなわち、ＣＰＵ１０１は、この部分画像を構成する座標群のうち少なくとも１つの座標を含む指定領域の画像を、その倍率範囲内にある倍率での表示のために出力した場合、その部分画像（のID）に関連付けられた音声情報を再生することができる。

本実施形態の音声情報の記録開始及び終了のためのトリガー、及びそれらのタイミング等は、上述した各実施形態のうちいずれか１つと同様でよい。

図１３及び１５に示した各実施形態に、本実施形態をそれぞれ適用してもよい。

（記録処理の実施形態８）
図１６は、実施形態８に係る記録処理により作成されたテーブルを示す。

本実施形態では、例えばユーザーが任意に倍率の閾値を設定し、ＣＰＵ１０１はこの倍率の閾値である設定倍率をテーブルに記録しておく。一旦、図７等に示すようなテーブルが生成された後は、いつでもユーザーが倍率を設定してＣＰＵ１０１がテーブルに記録してもよく、その場合、元の記録倍率に上書きするようにしてもよい。

あるいは、ユーザーが倍率を設定する場合に限られず、例えば音声情報の記録処理の開始時、記録途中、または終了時等に、ＣＰＵ１０１が所定のアルゴリズムにしたがって倍率を設定するようにしてもよい。

本実施形態によれば、後述するように、マーク情報の提示時において、例えば出力される部分画像２１０の倍率が設定倍率以上となった場合に、マーク情報が提示されるようにすることができる。

（記録処理のその他の実施形態）
以上の各実施形態では、音声情報が記録開始時または終了時等、少なくとも記録処理が実行されたタイムスタンプ（年月日の概念も含んでもよい）も、IDに関連付けられて記録されてもよい。

[マーク情報提示装置としてのＰＣによるマーク情報の提示処理]

次に、以上のように各実施形態においてテーブルが作成された後、そのテーブルを用いて記録されたマーク情報のうち１つであるアノテーション情報を、ＰＣがユーザーに提示する処理について説明する。この提示処理を行う時のＣＰＵ１０１は、処理部として機能する。

（提示処理の実施形態１）

図１７は、例えば図７に示したテーブルの記録データに基づき、アノテーション情報として音声情報を提示（再生）する処理を示すフローチャートである。記録データとは、つまり、テーブルに記録された、座標、倍率、及びアノテーション情報である。以下、テーブルに記録された座標及び倍率を、それぞれ、記録座標（記録位置情報）及び記録倍率（記録解像度情報）という。

ＣＰＵ１０１は、部分画像を表示するためのユーザーによる入力操作が実行されている場合、その入力操作情報を取得する（ステップ６０１のYes）。この場合、ＣＰＵ１０１は取得部として機能する。

ＣＰＵ１０１は、その入力操作による指定領域の部分画像を構成する座標群（出力位置情報群としての出力座標群）、及び、その部分画像の倍率（出力解像度情報としての出力倍率）を、テーブル内の記録データと比較する（ステップ６０２）。

ＣＰＵ１０１は、その部分画像２１０を構成する出力座標群内に、テーブル内の記録座標と一致する出力座標があり、かつ、その部分画像２１０の出力倍率が、テーブル内の記録倍率と一致するか、または、それを超える場合、ステップ６０４へ進む（ステップ６０３）。

ステップ６０３でYesの場合、ＣＰＵ１０１は、その記録倍率に該当するIDに対応する音声データを、ＰＣ１００に接続された（またはＰＣに搭載された）図示しないスピーカーに出力するための処理、すなわち再生処理を実行する（ステップ６０４）。

本実施形態によれば、ＣＰＵ１０１が、図１８Ａに示すように低倍率の部分画像２１２において、記録されたマーク画像Ｍを合成して出力したとしても（後述の実施形態２参照）、その出力倍率が記録倍率と一致しない（またはこれを超えない）限り、音声情報を再生しない。図１８Ｂに示すように、その部分画像２１３の出力倍率が記録倍率と一致、またはこれを超えた場合に、音声情報が再生される。

例えば上記記録処理の実施形態７を本実施形態に適用することも可能である。すなわち、指定領域の部分画像の出力倍率が、テーブルに記録された倍率範囲内である場合、ＣＰＵ１０１は、その倍率範囲に関連付けられたマーク画像Ｍ及び音声情報のうち少なくとも一方を提示することができる。この考え方は、以下に説明する、提示処理の実施形態２〜８についても同様である。

ユーザーが、巨大な観察対象物の画像内から特定の部位を選び出し、その部位に対して診断する、という操作は、病理診断では通常行われることである。このような状況下において、特に専門家が行った診断内容を部分画像に応じて記録しておき、教育用途等でそれを再生し、生徒がその診断方法及び内容を勉強することは重要である。したがって、本技術に係るメーク情報としての音声メモは非常に有効である。上記したように、本技術では、記録されたユーザーの入力操作状況と一致する（または後述するようにそれに近い入力操作）が行われた時には、その音声メモが再生されるので、非常に便利で、病理分野においてメリットが大きい。

（提示処理の実施形態２）
図１９は、実施形態２に係る提示処理を示すフローチャートである。

本実施形態では、例えば図１８Ａ及びＢに示したように、マーク画像Ｍが合成された部分画像２１２（２１３）が表示されている場合を想定する。ステップ７０３において、ＣＰＵ１０１は、部分画像２１４の出力座標群内の任意の複数の座標と、テーブル内の１つの記録座標とが一致する場合、すなわち、出力座標群内に記録座標がある場合、その記録座標に対応するマーク画像Ｍをその部分画像２１２（２１３）に合成して出力する（ステップ７０４）。

ＣＰＵ１０１が、例えばマーク画像であるＧＵＩをクリックする等、マーク画像へのユーザーによる入力操作情報を取得したとする（ステップ７０５）。そうすると、ＣＰＵ１０１は、テーブル内の記録倍率に関係なく、どのような出力倍率でも、ユーザーによって操作されたマーク情報に関連付けられた音声情報を再生する（ステップ７０６）。

本実施形態によれば、記録倍率に関係なく、マーク画像Ｍへの入力操作によって、音声情報を再生することができる。

（提示処理の実施形態３）
上記提示処理の実施形態１及び２で説明したアルゴリズムによって、ＣＰＵ１０１は、図２０に示すような、指定処理によって出力される１つの部分画像２１４内に複数のマーク画像Ｍ（Ｍ１〜Ｍ４）を合成して出力することも可能である。本実施形態は、その部分画像２１４の出力座標群内の任意の複数の座標とそれぞれ一致する複数の記録座標、及び、それらに関連付けられた音声情報がある場合に適用される。

この場合、ＣＰＵ１０１は、その表示のために出力される部分画像２１４を構成する出力座標群内に複数の記録座標があり、かつ、その部分画像２１０の出力倍率よりも高い記録倍率を持つ１または複数のIDに対応するマーク画像Ｍを、当該部分画像２１４に合成してもよい。これにより、部分画像の出力倍率が１つの記録倍率より高くなった時に、その記録倍率以上の記録倍率を持つIDに関連付けられたマーク画像Ｍを表示することができ、または、それに関連付けられた音声情報を再生することができる。

あるいは、ＣＰＵ１０１は、図２０に示すように複数のマーク画像Ｍが表示されている場合に、それら複数のマーク画像Ｍのうち、１つのマーク画像Ｍ１へのユーザーによる入力操作（例えばクリック等）の情報を取得した場合、そのマーク画像Ｍ１に関連付けられた音声情報を再生してもよい。

あるいは、ＣＰＵ１０１は、次のように処理してもよい。すなわち、ＣＰＵ１０１は、その出力倍率と、複数の記録座標にそれぞれ対応する記録倍率との一致を判定する。この場合、ＣＰＵ１０１は、このように部分画像２１４内に複数の記録座標がある場合でも、出力倍率に一致した記録倍率を持つIDに対応する１つの音声情報を再生することができる。この場合、例えばユーザーがその部分画像２１４の倍率を上げるための入力操作を行った場合に、図２１に示すように、部分画像２１５の倍率と一致する記録倍率に対応するマーク画像Ｍ２のみをその部分画像２１５に合成して表示するようにしてもよい。すなわち、他の記録倍率に対応するマーク画像Ｍ１、Ｍ３及びＭ４は表示されない。

（提示処理の実施形態４）
図２２は、実施形態４に係る提示処理を示すフローチャートである。

本実施形態は、例えば、１つの部分画像２１０の出力座標群内に、複数の記録座標があり、かつ、それら複数の記録座標にそれぞれ関連付けられた記録倍率（あるいは記録解像度範囲である記録倍率範囲）同士が一致する場合に適用される。

具体的には、図２２に示すステップ８０３において、ＣＰＵ１０１は、出力座標群内の任意の複数の座標にそれぞれ一致する複数の記録座標があり、かつ、それら複数の記録座標にそれぞれ関連付けられた記録倍率同士（または記録倍率範囲同士）が一致するか、そうでないかを判定する。ステップ８０３でYesの場合、ＣＰＵ１０１は、図１５のテーブルに記録された優先度情報にしたがってそれら複数の記録座標にそれぞれ関連付けられた複数の音声情報のうち少なくとも１つの音声情報を提示するための処理、すなわちその音声情報を再生する（ステップ８０４）。

ＣＰＵ１０１は、音声情報の再生時の優先度を、例えば以下のように定義された指標として用いる。
１）それらの再生時間順序を表す指標、あるいは、再生するかしないかの指標
２）低い倍率で表示されている部分画像であっても、その音声情報を再生するための指標

「優先度」の意味については、ユーザーの主観的な見地から様々な解釈をとり得る。例えばそれは、複数のユーザー間で、どのユーザー（により記録された音声情報の再生）を優先するかという意味でもよい。あるいは、それは、記録された音声情報または記録され部分画像２１０の重要度（例えば医学的見地から見ての重要度）に応じた優先度でもよい。

優先度は、典型的にはユーザーにより設定される、しかし、ＰＣ１００が自動で設定してもよい。ＰＣ１００が自動で設定する場合、優先度は、例えばマーク情報の記録の時系列順であってもよい。

上記１）のように、優先度が再生順を表す指標である場合であって、テーブルに記録されたタイムスタンプがある場合には、それらタイムスタンプに関係なく、再生順の優先度にしたがって、音声情報が再生される。

優先度の定義として上記１）が適用される場合、ステップ８０４では、ＣＰＵ１０１は、優先度が高い順に、それらの音声情報を再生する。

上記１）が適用される場合、ＣＰＵ１０１は、優先度が最も高い音声情報（または、最も高い優先度を含む段階的な２以上の優先度を持つ音声情報）を再生し、他を再生しないという処理も可能である。

優先度の定義として上記２）が適用される場合、ＣＰＵ１０１は、次のような処理を実行する。ＣＰＵ１０１は、部分画像２１０の出力倍率を含む倍率範囲ごとに音声情報をそれぞれテーブルに関連付けて記録し、また、それら異なる優先度情報ごとにそれぞれ異なる記録倍率範囲を設定する。

この場合に、ＣＰＵ１０１は、ステップ８０４において、出力座標群内にある複数の記録座標にそれぞれ関連付けられた複数の音声情報のうち少なくとも１つの音声情報を、それぞれ設定された上記記録倍率範囲に応じて再生する。この場合、例えば、優先度が高いほど記録倍率範囲を広くするように設定することができ、これにより、低い倍率で表示されている部分画像２１０であっても、優先度が高ければ、それに関連する音声情報が再生される。

以上のように、本実施形態では、優先度の高い順に音声情報の提示を受けることができる。
なお、本実施形態４は、複数の記録座標にそれぞれ対応する記録倍率範囲同士の一部が重なる場合に、優先度にしたがってマーク情報が提示されてもよい。

（提示処理の実施形態５）
本実施形態は、実施形態４と同様に、１つの部分画像２１０の出力座標群内に複数の記録座標があり、かつ、それら複数の記録座標にそれぞれ関連付けられた記録倍率同士（あるいは記録倍率範囲同士）が一致する場合に適用される。この場合、実施形態４と同様に図１５に示した優先度情報にしたがって音声情報が再生される。実施形態４では説明していない技術は以下のようなものである。

本実施形態では、ＣＰＵ１０１は、例えば図２３Ａに示すように、比較的低い出力倍率の部分画像２１６では、緑色及び青色のマーク画像ＭＧ及びＭＢを両方とも部分画像２１０を合成する。そして、ユーザーの入力操作により出力倍率を上げていき、その出力倍率がこれらのマーク画像Ｍに対応する記録倍率に一致した時、図２３Ｂに示すように、ＣＰＵ１０１は、両方のマーク画像Ｍのうち優先度の高い方の青色のマーク画像ＭＢのみ部分画像２１７に合成して出力する。この時、ＣＰＵ１０１は青色のマーク画像ＭＢに関連付けられた音声情報を再生する。

あるいは、部分画像２１７が図２３Ｂに示す状態となった時、ＣＰＵ１０１は、そのマーク画像ＭＢへのユーザーによる入力操作情報を取得した場合（ユーザーがクリック等した場合）に、音声情報を再生するようにしてもよい。

ところで、１つの部分画像２１０の出力座標群内に、複数の記録座標があり、それらの記録倍率同士も一致し（あるいは記録倍率範囲同士も重なり）、さらに、それらの優先度も一致する場合、記録時においてＣＰＵ１０１は、異なるマーク画像Ｍをそれぞれ記録してもよい。図２４に示す部分画像２１８の例では、２つの異なる色（赤と黄）のマーク画像ＭＲ及びＭＹが合成されている。この場合、ＣＰＵ１０１は、例えば、赤色のマーク画像ＭＲを、黄色のマーク画像ＭＹに優先して、音声情報を再生することもできる。

（提示処理の実施形態６）
本実施形態に係る提示処理は、図１１に示したように、部分画像を表示するためのユーザーによる入力操作のうちの一部である所定の入力操作があった場合の提示処理である。図１１に示した処理があった場合、ＣＰＵ１０１は、図２５のID=1に示すようなデータを記録する。すなわち、所定の入力操作情報として、「ズームイン」操作の情報をＣＰＵ１０１が取得した場合に、そのズームインされた対象の画像である部分画像２１０の座標及び倍率を記録するとともに、これらに音声情報を関連付けて記録する。

この場合の音声情報の提示処理は、次のような処理である。ＣＰＵ１０１は、部分画像２１０を表示するためのユーザーによる入力操作情報及び部分画像２１０の出力座標を監視する。その表示のために出力された部分画像２１０を構成する出力座標群内に、ID=1に関連付けられた記録座標があり、かつ、その入力操作がズームインであった場合に、ＣＰＵ１０１は、それに関連付けられた音声情報を再生する。

これにより、記録倍率は関係なく、ズームインの入力操作があった場合に音声情報を再生することができる。

例えば、教育用途では、記録者（教師等）が行った操作と同等の操作をユーザー（生徒）が行い、部分画像中の重要な地点を探し出すことがユーザー求められる。このような用途では、ユーザーが部分画像を表示するための操作を行った場合、画面内で単に記録地点を通りすぎただけでは音声は再生されず、ズームインまで行って初めて音声が再生されるということになり、ユーザーは正しい操作を行ったと判断される。これは医療・病理分野に限られることではない。

一方で、音声情報を再生する条件として、上記記録倍率も含めた３つの条件がそろって初めて音声情報が再生されてもよい。つまり、ＣＰＵ１０１は、部分画像２１０の出力座標群内に記録座標があり、ズームイン操作があり、さらに、その出力倍率が記録倍率（または記録倍率範囲）と一致した場合に、音声情報を再生するようにしてもよい。

なお、この図２５のID=2に示す例では「ズームイン」ではなく、例えばユーザーカスタマイズにより、「パン」を所定の入力操作情報として設定されている。「パン」の場合、例えば記録時には、パン操作が終了した直後の部分画像２１０（パン操作の最後に表示された部分画像２１０）の座標及び倍率がテーブルに記録されていればよい。「ズームイン」や「ズームアウト」以外の入力操作を所定の入力操作とする場合、音声情報を再生する条件として、記録座標の一致及び所定の入力操作の一致、という２つの条件に限られない。その条件としては、上述したように３つの条件があってもよい。

（提示処理の実施形態７）
図２６は、実施形態７に係る提示処理を示すフローチャートである。本実施形態に係る提示処理は、図１２に示したように、ユーザーの連続的または断続的な一連の入力操作の情報である履歴情報に関連付けられた音声情報を再生する処理である。

ユーザーが、部分画像２１０を表示するための入力操作を行っている状態で、ＣＰＵ１０１は、その指定領域の部分画像２１０を構成する出力座標群内に、テーブル内の複数の記録座標のうち少なくとも１つの記録座標があり、かつ、その出力倍率がその記録座標に対応する記録倍率と一致する（または記録倍率範囲内にある）か、そうでないかを判定する（ステップ９０３）。ステップ９０３でYesの場合、ＣＰＵ１０１はそのIDに関連する音声情報を再生する（ステップ９０４）。

すなわち、本実施形態では、ユーザーの入力操作により得られる部分画像２１０の情報が、履歴情報内にある場合に音声情報が再生される。

本実施形態によれば、音声の記録途中の時点で表示のために出力されていた部分画像２１０を、その後にユーザーが入力操作により部分画像２１０として表示部１０６に表示させることにより、その音声情報を最初から再生することができる。つまり、音声の記録処理の開始時に出力された部分画像（図１２に示したテーブル内の「座標１」の部分画像）が、提示時に表示されなくても、その音声が最初から再生されるので、非常に便利である。

この場合、ＣＰＵ１０１は、音声を最初から再生する時、音声の記録処理の開始時に出力された部分画像２１０まで、現在の画面を移動させてこの部分画像２１０を表示してもよい。

あるいは、図１２に示すテーブルにおいて、ＣＰＵ１０１は音声の記録時に、座標１、２、・・・ごとに対応するように、連続した音声データを分割するようにして記録してもよい。こうすることにより、例えばユーザーの入力操作により表示される部分画像２１０が、その音声の記録途中に対応している場合に、その記録途中からその音声を再生することができる。

本実施形態では、部分画像２１０の出力座標群内に、テーブル内の記録座標がある場合に、記録倍率に関係なく、音声情報を再生するようにしてもよい。

（提示処理の実施形態８）
図２７は、実施形態８に係る提示処理を示すフローチャートである。本実施形態の処理は、図１６で示したように、倍率の閾値が設定された場合の提示処理である。

ユーザーが、部分画像２１０を表示するための入力操作を行っている状態で、ＣＰＵ１０１は、その指定領域の部分画像２１０を構成する出力座標群内に、テーブル内の複数の記録座標のうち少なくとも１つの記録座標があり、かつ、その出力倍率がその設定倍率以上であるか、そうでないかを判定する（ステップ１００３）。ステップ１００３でYesの場合、ＣＰＵ１０１はそのIDに関連する音声情報を再生する（ステップ１００４）。

これにより、部分画像２１０の出力倍率が、例えばユーザーが任意に定めた倍率になった時に初めて音声情報を再生することができる。

（提示処理のその他の実施形態）
上記提示処理の各実施形態、例えば図１７、２２、２６及び２７の各ステップ６０４、８０４、９０４及び１００４において、ＣＰＵ１０１は、音声情報を再生するステップに代えて、関連するマーク画像Ｍを表示するステップを実行してもよい。

[その他の実施形態]

本技術は、以上説明した実施形態に限定されず、他の種々の実施形態が実現される。

上記各実施形態では、アノテーション情報として、主に音声情報及びマーク画像Ｍ等の画像を例に挙げた。しかし、各実施形態において、上述した他のアノテーション情報が作成、提示されてもよい。

ＰＣ１００は、ユーザーの入力操作によらず、所定のアルゴリズムによって指定処理を実行し、自動で部分画像２１０を切り出して表示部１０６に出力するプログラムを有していてもよい。ＰＣ１００は、ユーザーの入力操作によらず、所定のアルゴリズムによって自動でマーク情報を生成し、それを出力された部分画像２１０に関連付けるプログラムを有していてもよい。

上記各実施形態では、ユーザーは、図４に示したコントローラー１を介して操作情報をＰＣ１００に入力したが、マウス、キーボード等、他の入力機器を用いてももちろん構わない。

上記各実施形態では、マーク情報として音声情報がユーザーにより作成される形態について説明した。しかし、マーク情報は、ＰＣが予め持っている記号、符号、インデックス、またはその他の情報であってもよい。

本技術は、医療、病理分野に適用される場合に限られず、巨大な全体画像２００内で指定された領域として部分画像２１０を異なる複数の倍率で表示する、といった分野であれば、何でも適用可能である。それらの分野としては、生物、植物、細菌の分野にとどまらず、地質、地球物理、宇宙物理にも本技術を適用可能である。

以上説明した各形態の特徴部分のうち、少なくとも２つの特徴部分を組み合わせることも可能である。

本技術は以下のような構成もとることができる。
（１）１つの対象物について異なる複数の解像度でそれぞれ生成された全体画像のうち、任意の１つの解像度の前記全体画像内の、一部の画像である部分画像を表示するために、前記部分画像を出力する出力部と、
前記出力された前記部分画像の、前記全体画像内の位置情報及び前記解像度の情報に、マーク情報を関連付けて記録する記録部と
を具備するマーク情報記録装置。
（２）（１）に記載のマーク情報記録装置であって、
前記記録部は、前記マーク情報として、アノテーション情報、及び、前記部分画像内に合成されるマーク画像を記録する
マーク情報記録装置。
（３）（２）に記載のマーク情報記録装置であって、
前記アノテーション情報の生成を開始するためのユーザーによる入力操作の情報を取得した場合、前記アノテーション情報の生成を開始するアノテーション情報生成部をさらに具備するマーク情報記録装置。
（４）（２）に記載のマーク情報記録装置であって、
ユーザーの発話による音声の情報を取得した場合、前記アノテーション情報の生成を開始するアノテーション情報生成部をさらに具備するマーク情報記録装置。
マーク情報記録装置。
（５）（１）から（４）のうちいずれか１つに記載のマーク情報記録装置であって、
前記部分画像を前記出力部に出力させるためのユーザーによる操作情報を取得する取得部をさらに具備し、
前記記録部は、前記取得部により取得された前記操作情報に応じて前記出力部により出力された前記部分画像の、前記位置情報及び前記解像度情報に、前記マーク情報を関連付ける
マーク情報記録装置。
（６）（５）に記載のマーク情報記録装置であって、
前記記録部は、前記取得部により取得された前記ユーザーの連続的または断続的な一連の前記操作情報に応じて前記出力部により出力される、前記位置情報及び前記解像度情報のうち少なくとも一方が互いに異なる前記部分画像ごとの位置情報及び解像度情報を関連付け、この関連付けによる情報を、前記各部分画像の出力の履歴情報として記録し、また、前記履歴情報に、前記マーク情報を関連付ける
マーク情報記録装置。
（７）（５）または（６）に記載のマーク情報記録装置であって、
前記記録部は、前記取得部により取得された前記操作情報のうち所定の操作情報が取得された場合、前記所定の操作情報に応じて出力された前記部分画像について、前記マーク情報の前記関連付け処理を実行する
マーク情報記録装置。
（８）（１）から（７）のうちいずれか１つに記載のマーク情報記録装置であって、
前記記録部は、複数のマーク情報のそれぞれの提示時の優先度を示す優先度情報を、前記複数のマーク情報に関連付けて記録する
マーク情報記録装置。
（９）（１）から（８）のうちいずれか１つに記載のマーク情報記録装置であって、
前記記録部は、前記出力部により出力された前記部分画像の解像度を含む少なくとも２以上の解像度範囲ごとに、前記マーク情報を前記関連付ける
マーク情報記録装置。
（１０）（１）から（９）のうちいずれか１つに記載のマーク情報記録装置であって、
前記記録部は、ユーザーの操作に応じて前記解像度の閾値を設定し、前記設定された解像度の閾値を、前記位置情報及び前記マーク情報に関連付けて記録する
マーク情報記録装置。
（１１）１つの対象物について異なる複数の解像度でそれぞれ生成された全体画像のうち、任意の１つの解像度の前記全体画像内の、一部の画像である部分画像を表示するために、前記部分画像を出力する出力部と、
前記出力された前記部分画像の、前記全体画像内の位置情報及び前記解像度の情報に、マーク情報を関連付け、前記マーク情報に関連付けられた前記位置情報及び前記解像度の情報を、記録位置情報及び記録解像度情報として記録する記録部と、
前記出力される部分画像を構成する出力位置情報群内に前記記録位置情報がある場合、少なくとも前記記録位置情報に関連付けられた前記マーク情報を提示するための処理を実行する処理部と
を具備するマーク情報提示装置。
（１２）（１１）に記載のマーク情報提示装置であって、
前記処理部は、前記出力位置情報群内に前記記録位置情報がある場合であって、かつ、前記出力部により出力される前記部分画像の出力解像度情報と、前記記録位置情報に対応する前記記録解像度情報とが一致する場合、前記記録位置情報及び前記記録解像度情報に関連付けられた前記マーク情報を提示するための処理を実行する
マーク情報提示装置。
（１３）（１２）に記載のマーク情報提示装置であって、
前記記録部は、前記マーク情報として、アノテーション情報、及び、前記部分画像内に合成されるマーク画像を記録し、
前記処理部は、前記アノテーション情報を提示するための処理を実行する
マーク情報提示装置。
（１４）（１３）に記載のマーク情報提示装置であって、
前記処理部は、前記出力される部分画像を構成する前記出力位置情報群内に複数の記録位置情報がある場合、前記複数の記録位置情報にそれぞれ関連付けられた複数のマーク画像を、前記出力される部分画像内に合成する
マーク情報提示装置。
（１５）（１４）に記載のマーク情報提示装置であって、
前記処理部は、前記複数の記録位置情報にそれぞれ関連付けられた複数の記録解像度情報のうち、前記出力部により出力される前記部分画像の前記出力解像度情報に一致するまたは記録された解像度範囲内の解像度情報に対応する画像を、前記出力される部分画像内に合成する
マーク情報提示装置。
（１６）（１４）に記載のマーク情報提示装置であって、
前記記録部は、前記複数の画像にそれぞれ対応する複数のアノテーション情報のそれぞれの提示時の優先度を示す優先度情報を、前記複数のマーク情報に関連付け、
前記処理部は、前記記録された優先度情報に応じて、前記複数のアノテーション情報を提示するかしないか、または、それらの提示の時間順序を設定する
マーク情報提示装置。
（１７）（１４）に記載のマーク情報提示装置であって、
前記記録部は、前記出力部により出力された前記部分画像の出力解像度を含む少なくとも２以上の解像度範囲ごとに前記アノテーション情報をそれぞれ関連付け、異なる前記優先度情報ごとにそれぞれ異なる記録解像度範囲を設定し、
前記処理部は、前記出力位置情報群内にある前記複数の記録位置情報にそれぞれ関連付けられた複数のアノテーション情報のうち少なくとも１つのアノテーション情報を、前記設定された記録解像度範囲に応じて提示するための処理を実行する
マーク情報提示装置。
（１８）（１１）から（１７）のうちいずれか１つに記載のマーク情報提示装置であって、
前記部分画像を前記出力部に出力させるためのユーザーによる操作情報を取得する取得部をさらに具備し、
前記記録部は、前記取得部により取得された前記操作情報のうち所定の操作情報が取得された場合、前記所定の操作情報に応じて出力された前記部分画像について、前記マーク情報の前記関連付け処理を実行し、
前記処理部は、前記ユーザーによる前記所定の操作情報に応じて出力された前記部分画像を構成する出力位置情報群内に前記記録位置情報がある場合、少なくとも前記記録位置情報に関連付けられた前記マーク情報を提示するための処理を実行する
マーク情報提示装置。
マーク情報記録方法及びマーク情報提示方法は、以下のような構成をとることができる。
（１９）１つの対象物について異なる複数の解像度でそれぞれ生成された全体画像のうち、任意の１つの解像度の前記全体画像内の、一部の画像である部分画像を表示するために、前記部分画像を出力し、
前記出力された前記部分画像の、前記全体画像内の位置情報及び前記解像度の情報に、マーク情報を関連付けて記録する
マーク情報記録方法。
（２０）１つの対象物について異なる複数の解像度でそれぞれ生成された全体画像のうち、任意の１つの解像度の前記全体画像内の、一部の画像である部分画像を表示するために、前記部分画像を出力し、
前記出力された前記部分画像の、前記全体画像内の位置情報及び前記解像度の情報に、マーク情報を関連付け、前記マーク情報に関連付けられた前記位置情報及び前記解像度の情報を、記録位置情報及び記録解像度情報として記録し、
前記出力される部分画像を構成する出力位置情報群内に前記記録位置情報がある場合、少なくとも前記記録位置情報に関連付けられた前記マーク情報を提示するための処理を実行する
マーク情報提示方法。

上記マーク情報提示装置は、以下のような構成をとることもできる。
（２１）（１８）に記載のマーク情報提示装置であって、
前記記録部は、前記取得部により取得された前記ユーザーの連続的または断続的な一連の前記操作情報に応じて前記出力部により出力される、前記位置情報及び前記解像度情報のうち少なくとも一方が互いに異なる前記部分画像ごとの位置情報及び解像度情報を関連付け、この関連付けによる情報を、前記各部分画像の前記記録位置情報及び前記記録解像度情報をそれぞれ含む履歴情報として記録し、また、前記履歴情報に、前記マーク情報を関連付け、
前記処理部は、前記出力部による出力される前記各部分画像をそれぞれ構成する前記出力位置情報群内に、前記履歴情報に含まれる少なくとも１つの前記記録位置情報がある場合、前記履歴情報に関連付けられた前記マーク情報を提示するための処理を実行する
マーク情報提示装置。
（２２）（１１）から（１８）、及び（２１）のうちいずれか１つに記載のマーク情報提示装置であって、
前記部分画像を前記出力部に出力させるためのユーザーによる操作情報を取得する取得部をさらに具備し、
前記記録部は、前記取得部により取得された前記操作情報に応じて、前記出力部により出力された前記部分画像の、前記位置情報及び前記解像度の情報に、前記マーク情報を関連付け、前記マーク情報に関連付けられた前記位置情報及び前記解像度の情報を、前記記録位置情報及び前記記録解像度情報として記録し、
前記処理部は、前記取得部により取得された前記操作情報に応じて前記出力部により出力される前記部分画像の前記出力位置情報群内に前記記録位置情報がある場合であって、かつ、前記出力部により出力される前記部分画像の前記出力解像度情報と、前記記録位置情報に対応する前記記録解像度情報とが一致する場合、前記記録位置情報及び前記記録解像度情報に関連付けられた前記マーク情報を提示するための処理を実行する
マーク情報提示装置。
（２３）（１１）から（１８）、（２１）及び（２２）のうちいずれか１つに記載のマーク情報提示装置であって、
前記記録部は、前記出力部により出力された前記部分画像の出力解像度を含む少なくとも２以上の解像度範囲ごとに、前記マーク情報を関連付け、前記マーク情報が関連付けられた前記解像度範囲の情報を、記録解像度範囲の情報として記録し、
前記処理部は、前記出力解像度が、前記記録解像度範囲内である場合、前記出力された部分画像に対応する前記マーク情報を提示するための処理を実行する
マーク情報提示装置。
（２４）（１１）に記載のマーク情報提示装置であって、
前記処理部は、前記出力位置情報群内に複数の記録位置情報がある場合、前記複数の記録位置情報にそれぞれ関連付けられた複数のマーク情報を提示するための処理を実行する
マーク情報提示装置。
（２５）（１３）に記載のマーク情報提示装置であって、
前記処理部は、前記マーク画像を用いた前記ユーザーによる操作情報に応じて、前記マーク画像に対応する前記アノテーション情報を提示するための処理を実行する
マーク情報提示装置。
（２６）（１１）から（１８）、及び（２１）〜（２３）のうちいずれか１つに記載のマーク情報提示装置であって、
前記記録部は、ユーザーの操作に応じて前記解像度の閾値を設定し、前記設定された解像度の閾値を、前記位置情報及び前記マーク情報に関連付けて記録し、
前記処理部は、前記出力部により出力される前記部分画像の解像度が、前記設定された閾値を超えた場合、前記出力される部分画像に対応するマーク情報を提示するための処理を実行する
マーク情報提示装置。

Ｍ…マーク画像
１５…観察対象物
１００…ＰＣ
１０１…ＣＰＵ
１０２…ＲＯＭ
１０３…ＲＡＭ
１０５…入出力インターフェース
１０６…表示部
１０８…記憶部
２００…全体画像
２１０〜２１８…部分画像

Claims (20)

1. １つの対象物について異なる複数の解像度でそれぞれ生成された全体画像のうち、任意の１つの解像度の前記全体画像内の、一部の画像である部分画像を表示するために、前記部分画像を出力する出力部と、
   前記出力された前記部分画像の、前記全体画像内の位置情報及び前記解像度の情報に、マーク情報を関連付けて記録する記録部と
   を具備するマーク情報記録装置。
2. 請求項１に記載のマーク情報記録装置であって、
   前記記録部は、前記マーク情報として、アノテーション情報、及び、前記部分画像内に合成されるマーク画像を記録する
   マーク情報記録装置。
3. 請求項２に記載のマーク情報記録装置であって、
   前記アノテーション情報の生成を開始するためのユーザーによる入力操作の情報を取得した場合、前記アノテーション情報の生成を開始するアノテーション情報生成部をさらに具備するマーク情報記録装置。
4. 請求項２に記載のマーク情報記録装置であって、
   ユーザーの発話による音声の情報を取得した場合、前記アノテーション情報の生成を開始するアノテーション情報生成部をさらに具備するマーク情報記録装置。
   マーク情報記録装置。
5. 請求項１に記載のマーク情報記録装置であって、
   前記部分画像を前記出力部に出力させるためのユーザーによる操作情報を取得する取得部をさらに具備し、
   前記記録部は、前記取得部により取得された前記操作情報に応じて前記出力部により出力された前記部分画像の、前記位置情報及び前記解像度情報に、前記マーク情報を関連付ける
   マーク情報記録装置。
6. 請求項５に記載のマーク情報記録装置であって、
   前記記録部は、前記取得部により取得された前記ユーザーの連続的または断続的な一連の前記操作情報に応じて前記出力部により出力される、前記位置情報及び前記解像度情報のうち少なくとも一方が互いに異なる前記部分画像ごとの位置情報及び解像度情報を関連付け、この関連付けによる情報を、前記各部分画像の出力の履歴情報として記録し、また、前記履歴情報に、前記マーク情報を関連付ける
   マーク情報記録装置。
7. 請求項５に記載のマーク情報記録装置であって、
   前記記録部は、前記取得部により取得された前記操作情報のうち所定の操作情報が取得された場合、前記所定の操作情報に応じて出力された前記部分画像について、前記マーク情報の前記関連付け処理を実行する
   マーク情報記録装置。
8. 請求項１に記載のマーク情報記録装置であって、
   前記記録部は、複数のマーク情報のそれぞれの提示時の優先度を示す優先度情報を、前記複数のマーク情報に関連付けて記録する
   マーク情報記録装置。
9. 請求項１に記載のマーク情報記録装置であって、
   前記記録部は、前記出力部により出力された前記部分画像の解像度を含む少なくとも２以上の解像度範囲ごとに、前記マーク情報を前記関連付ける
   マーク情報記録装置。
10. 請求項１に記載のマーク情報記録装置であって、
    前記記録部は、ユーザーの操作に応じて前記解像度の閾値を設定し、前記設定された解像度の閾値を、前記位置情報及び前記マーク情報に関連付けて記録する
    マーク情報記録装置。
11. １つの対象物について異なる複数の解像度でそれぞれ生成された全体画像のうち、任意の１つの解像度の前記全体画像内の、一部の画像である部分画像を表示するために、前記部分画像を出力する出力部と、
    前記出力された前記部分画像の、前記全体画像内の位置情報及び前記解像度の情報に、マーク情報を関連付け、前記マーク情報に関連付けられた前記位置情報及び前記解像度の情報を、記録位置情報及び記録解像度情報として記録する記録部と、
    前記出力される部分画像を構成する出力位置情報群内に前記記録位置情報がある場合、少なくとも前記記録位置情報に関連付けられた前記マーク情報を提示するための処理を実行する処理部と
    を具備するマーク情報提示装置。
12. 請求項１１に記載のマーク情報提示装置であって、
    前記処理部は、前記出力位置情報群内に前記記録位置情報がある場合であって、かつ、前記出力部により出力される前記部分画像の出力解像度情報と、前記記録位置情報に対応する前記記録解像度情報とが一致するか、または、それを超える場合、前記記録位置情報及び前記記録解像度情報に関連付けられた前記マーク情報を提示するための処理を実行する
    マーク情報提示装置。
13. 請求項１２に記載のマーク情報提示装置であって、
    前記記録部は、前記マーク情報として、アノテーション情報、及び、前記部分画像内に合成されるマーク画像を記録し、
    前記処理部は、前記アノテーション情報を提示するための処理を実行する
    マーク情報提示装置。
14. 請求項１３に記載のマーク情報提示装置であって、
    前記処理部は、前記出力される部分画像を構成する前記出力位置情報群内に複数の記録位置情報がある場合、前記複数の記録位置情報にそれぞれ関連付けられた複数のマーク画像を、前記出力される部分画像内に合成する
    マーク情報提示装置。
15. 請求項１４に記載のマーク情報提示装置であって、
    前記処理部は、前記複数の記録位置情報にそれぞれ関連付けられた複数の記録解像度情報のうち、前記出力部により出力される前記部分画像の前記出力解像度情報に一致するまたは記録された解像度範囲内の解像度情報に対応する画像を、前記出力される部分画像内に合成する
    マーク情報提示装置。
16. 請求項１４に記載のマーク情報提示装置であって、
    前記記録部は、前記複数の画像にそれぞれ対応する複数のアノテーション情報のそれぞれの提示時の優先度を示す優先度情報を、前記複数のマーク情報に関連付け、
    前記処理部は、前記記録された優先度情報に応じて、前記複数のアノテーション情報を提示するかしないか、または、それらの提示の時間順序を設定する
    マーク情報提示装置。
17. 請求項１４に記載のマーク情報提示装置であって、
    前記記録部は、前記出力部により出力された前記部分画像の出力解像度を含む少なくとも２以上の解像度範囲ごとに前記アノテーション情報をそれぞれ関連付け、異なる前記優先度情報ごとにそれぞれ異なる記録解像度範囲を設定し、
    前記処理部は、前記出力位置情報群内にある前記複数の記録位置情報にそれぞれ関連付けられた複数のアノテーション情報のうち少なくとも１つのアノテーション情報を、前記設定された記録解像度範囲に応じて提示するための処理を実行する
    マーク情報提示装置。
18. 請求項１１に記載のマーク情報提示装置であって、
    前記部分画像を前記出力部に出力させるためのユーザーによる操作情報を取得する取得部をさらに具備し、
    前記記録部は、前記取得部により取得された前記操作情報のうち所定の操作情報が取得された場合、前記所定の操作情報に応じて出力された前記部分画像について、前記マーク情報の前記関連付け処理を実行し、
    前記処理部は、前記ユーザーによる前記所定の操作情報に応じて出力された前記部分画像を構成する出力位置情報群内に前記記録位置情報がある場合、少なくとも前記記録位置情報に関連付けられた前記マーク情報を提示するための処理を実行する
    マーク情報提示装置。
19. １つの対象物について異なる複数の解像度でそれぞれ生成された全体画像のうち、任意の１つの解像度の前記全体画像内の、一部の画像である部分画像を表示するために、前記部分画像を出力し、
    前記出力された前記部分画像の、前記全体画像内の位置情報及び前記解像度の情報に、マーク情報を関連付けて記録する
    マーク情報記録方法。
20. １つの対象物について異なる複数の解像度でそれぞれ生成された全体画像のうち、任意の１つの解像度の前記全体画像内の、一部の画像である部分画像を表示するために、前記部分画像を出力し、
    前記出力された前記部分画像の、前記全体画像内の位置情報及び前記解像度の情報に、マーク情報を関連付け、前記マーク情報に関連付けられた前記位置情報及び前記解像度の情報を、記録位置情報及び記録解像度情報として記録し、
    前記出力される部分画像を構成する出力位置情報群内に前記記録位置情報がある場合、少なくとも前記記録位置情報に関連付けられた前記マーク情報を提示するための処理を実行する
    マーク情報提示方法。