JP2013045144A - 情報処理装置、情報処理システム情報処理方法及びプログラム - Google Patents

情報処理装置、情報処理システム情報処理方法及びプログラム Download PDF

Info

Publication number
JP2013045144A
JP2013045144A JP2011180438A JP2011180438A JP2013045144A JP 2013045144 A JP2013045144 A JP 2013045144A JP 2011180438 A JP2011180438 A JP 2011180438A JP 2011180438 A JP2011180438 A JP 2011180438A JP 2013045144 A JP2013045144 A JP 2013045144A
Authority
JP
Japan
Prior art keywords
information
image
location
information processing
processing apparatus
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2011180438A
Other languages
English (en)
Other versions
JP2013045144A5 (ja
JP5859771B2 (ja
Inventor
Hiroshi Kusogami
宏 久曽神
Yoichi Mizutani
陽一 水谷
Hiroshi Hasegawa
寛 長谷川
Masahiro Takahashi
正弘 高橋
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority to JP2011180438A priority Critical patent/JP5859771B2/ja
Application filed by Sony Corp filed Critical Sony Corp
Priority to CA2811889A priority patent/CA2811889A1/en
Priority to PCT/JP2012/004448 priority patent/WO2013027323A1/en
Priority to BR112013008721-8A priority patent/BR112013008721A2/pt
Priority to CN201280003348.5A priority patent/CN103154915B/zh
Priority to EP12825637.7A priority patent/EP2748709B1/en
Priority to US13/880,267 priority patent/US9398233B2/en
Publication of JP2013045144A publication Critical patent/JP2013045144A/ja
Publication of JP2013045144A5 publication Critical patent/JP2013045144A5/ja
Application granted granted Critical
Publication of JP5859771B2 publication Critical patent/JP5859771B2/ja
Priority to US15/185,284 priority patent/US20160301879A1/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H30/00ICT specially adapted for the handling or processing of medical images
    • G16H30/40ICT specially adapted for the handling or processing of medical images for processing medical images, e.g. editing
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment
    • H04N5/262Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/265Mixing
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H80/00ICT specially adapted for facilitating communication between medical practitioners or patients, e.g. for collaborative diagnosis, therapy or health monitoring
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00Data switching networks
    • H04L12/02Details
    • H04L12/16Arrangements for providing special services to substations
    • H04L12/18Arrangements for providing special services to substations for broadcast or conference, e.g. multicast
    • H04L12/1813Arrangements for providing special services to substations for broadcast or conference, e.g. multicast for computer conferences, e.g. chat rooms
    • H04L12/1827Network arrangements for conference optimisation or adaptation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M3/00Automatic or semi-automatic exchanges
    • H04M3/42Systems providing special services or facilities to subscribers
    • H04M3/56Arrangements for connecting several subscribers to a common circuit, i.e. affording conference facilities
    • H04M3/567Multimedia conference systems
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/14Systems for two-way working
    • H04N7/15Conference systems

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Health & Medical Sciences (AREA)
  • Medical Informatics (AREA)
  • General Health & Medical Sciences (AREA)
  • Epidemiology (AREA)
  • Public Health (AREA)
  • Primary Health Care (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • General Engineering & Computer Science (AREA)
  • Pathology (AREA)
  • Biomedical Technology (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Radiology & Medical Imaging (AREA)
  • Medical Treatment And Welfare Office Work (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

【課題】病理画像データの共有による遠隔会議の開催の準備にかかる時間を短縮するとともに、遠隔会議を効率よく円滑に進行すること。
【解決手段】情報処理装置は、通信部と、表示部と、制御部とを有する。制御部は、通信部が、複数の部分画像から構成される病理画像内の表示範囲を指定する範囲指定情報と、前記複数の部分画像の、当該部分画像ごとに異なり得る所在場所を示す所在場所情報とを、他の情報処理装置から受信し、前記受信された範囲指定情報に基づいて、前記表示範囲に属する部分画像の送信を要求する要求情報を、前記所在場所情報により示された所在場所へ送信し、前記要求情報に応じて前記所在場所から送信された前記部分画像を受信するように制御し、前記受信された部分画像を表示するように前記表示部を制御する。
【選択図】図6

Description

本技術は、他の情報処理装置との間で同一の病理画像を共有してユーザに観察させることが可能な情報処理装置、当該情報処理装置を有する情報処理システム、当該情報処理装置における情報処理方法及びプログラムに関する。
従来から、複数のユーザ間での遠隔会議を支援するために、各ユーザの端末間で共通の画面を共有情報資源として共有するシステム(例えばテレビ会議システムなど)が知られている。
例えば、下記特許文献1には、事前に登録されたコンテンツをユーザ端末が必要に応じて取り出しながら会議を行う情報通信サービスシステムが開示されている。このシステムでは、サーバが、複数の端末からリアルタイムに送信される映像及び音声を受信し、それらを合成して各端末へ配信する。
また、下記特許文献2及び3には、コンテンツが複製されて複数のサーバに分散されて記憶されるコンテンツ配信システムが記載されている。
また、下記特許文献4には、視聴者に提供される日時が決まっているコンテンツを、暗号化された状態で再生装置がサーバから事前にダウンロードし、視聴可能日時になったときにサーバから鍵を受信し、当該鍵によりコンテンツを復号して再生することが開示されている。
また、病理診断の分野においても、共通の病理診断用の画像を複数のユーザ(例えば医師)の端末間で共有して遠隔会議を行い、端末間で意見をやりとりしながら診断を行うことで、診断の効率化を図ることが行われている。
これに関連して、下記特許文献5には、サーバが、病理画像を構成する複数のタイル画像をクライアントへ配信し、クライアントが、それらタイル画像を合成して閲覧するサーバ・クライアントシステムが開示されている。
特許第3795772号公報 特開2003−115873号公報 特開2003−085070号公報 特開2010−119142号公報 米国特許第7542596号明細書
しかしながら、病理画像の共有システムを構築する場合、上記特許文献1に記載のような、配信データが一箇所に集中するツリー型のシステムでは、各端末(病院)で撮影された病理画像データはクラウドのサーバへ集約される必要があるため、そのアップロードに時間がかかってしまう。また、コンテンツが一箇所に集中すると、それがボトルネックとなって複数会議の同時開催等の規模拡張性(スケーラビリティ)が発揮できない。
通常のコンテンツの共有システムでは、上記スケーラビリティの問題は、上記特許文献2及び3に記載の技術によって解決されうる。しかしながら、極めて高解像度の病理画像データは、非常に容量が大きいため、複数のサーバ間でデータを複製するのにも、上記アップロードと同様、非常に時間がかかってしまう。
また、上記特許文献4に記載の技術では、会議中のデータ通信が減ることで、サーバの負荷が軽減されるが、通信対象が病理画像データの場合には、事前のダウンロードに非常に時間がかかってしまう。また、病理診断においては、非常に巨大な病理画像データのうちほんの一部分しか利用されないため、ダウンロードされたデータのほとんどは利用されない。したがって、上記事前ダウンロードは、ネットワーク帯域の有効利用という観点では非常に効率が悪い。
以上のような事情に鑑み、本技術の目的は、病理画像データの共有による遠隔会議の開催の準備にかかる時間を短縮するとともに、遠隔会議を効率よく円滑に進行することが可能な情報処理装置、情報処理システム、情報処理方法及びプログラムを提供することにある。
上記目的を達成するため、本技術の一形態に係る情報処理装置は、通信部と、表示部と、制御部とを有する。上記制御部は、複数の部分画像から構成される病理画像内の表示範囲を指定する範囲指定情報と、上記複数の部分画像の、当該部分画像ごとに異なり得る所在場所を示す所在場所情報とを、他の情報処理装置から受信するように前記通信部を制御可能である。また制御部は、上記受信された範囲指定情報に基づいて、上記表示範囲に属する部分画像の送信を要求する要求情報を、上記所在場所情報により示された所在場所へ送信するように前記通信部を制御可能である。また制御部は、上記要求情報に応じて上記所在場所から送信された上記部分画像を受信するように前記通信部を制御可能である。さらに制御部は、上記受信された部分画像を表示するように上記表示部を制御可能である。
これにより情報処理装置は、病理画像の各部分画像を、部分画像ごとに異なり得る任意の所在場所から受信できるため、それらが一箇所に集中する場合に比べて、他の情報処理装置との病理画像を用いた遠隔会議の準備に要する時間を短縮できる。また情報処理装置は、病理画像中の表示範囲を自ら判断する必要がないため、範囲指定情報にしたがって部分画像を受信して表示することで、病理画像を用いた遠隔会議を効率よく円滑に進行させることができる。
上記情報処理装置は、記憶部をさらに具備してもよい。この場合上記制御部は、上記表示範囲に属する部分画像が上記記憶部に記憶されているか否かを判断し、当該部分画像が上記記憶部に記憶されている場合には、上記要求情報を上記所在場所へ送信することなく上記部分画像を表示するように上記表示部を制御可能であってもよい。
これにより情報処理装置は、部分画像が記憶部に記憶されている場合には所在場所へのアクセスが不要となるため、ネットワーク上の通信量を削減し、病理画像を用いた遠隔会議をより効率よく進行させることができる。
上記制御部は、上記範囲指定情報及び上記所在場所情報の受信に先立って、上記他の情報処理装置との間で開催される遠隔会議で使用され得る病理画像を指定する画像指定情報と、当該指定された病理画像の当該時点での所在場所を示す一時所在場所情報と、当該指定された病理画像に関する過去の診断履歴を示す診断履歴情報とを上記他の情報処理装置から予め受信するように上記通信部を制御可能であってもよい。また制御部は、上記受信された画像指定情報により指定された病理画像を構成する複数の部分画像のうち、上記受信された診断履歴情報と関連付けられた部分画像を、上記一時所在場所情報により示された所在場所から受信するように上記通信部を制御可能であってもよい。さらに制御部は、上記受信された部分画像を記憶するように上記記憶部を制御可能であってもよい。
これにより情報処理装置は、遠隔会議で使用される可能性の高い特定の部分画像を事前にダウンロードして記憶部に記憶しておくことができるため、遠隔会議中の通信量を削減し、病理画像を用いた遠隔会議をより効率よく進行させることができる。
上記制御部は、上記診断履歴情報として、上記指定された病理画像内の過去の表示範囲または表示位置を示す表示履歴情報を受信するように上記通信部を制御可能であってもよい。
これにより情報処理装置は、遠隔会議で過去と同様に表示される可能性の高い部分画像を事前にダウンロードして遠隔会議をより効率よく進行させることができる。
上記制御部は、上記診断履歴情報として、上記指定された病理画像内の所定位置に付されたアノテーション情報を受信するように上記通信部を制御可能であってもよい。
これにより情報処理装置は、遠隔会議で過去と同様に注目される可能性の高いアノテーション情報が付された部分画像を事前にダウンロードして遠隔会議をより効率よく進行させることができる。
上記病理画像は、1つの生体組織からそれぞれ採取されそれぞれ異なる色で染色された複数の切片ごとに複数存在していてもよい。この場合上記制御部は、第1の色で染色された切片を表した第1の病理画像のうち、上記アノテーション情報が付された所定位置に存在する部分画像を受信するとともに、第2の色で染色された切片を表した第2の病理画像のうち、上記所定位置と同位置に存在する部分画像を受信するように上記通信部を制御可能であってもよい。
これにより情報処理装置は、アノテーション情報が付された第1の病理画像の部分画像のみならず、撮影対象の生体組織が当該第1の病理画像と共通し染色が異なる切片に関する第2の病理画像の部分画像も併せて事前にダウンロードできる。
上記病理画像は、1つの生体組織から採取された切片が異なる複数の解像度でそれぞれ撮像されることで、当該異なる解像度ごとに複数存在してもよい。この場合上記制御部は、第1の解像度で撮像された第1の病理画像のうち、上記アノテーション情報が付された所定位置に存在する部分画像を受信するとともに、第2の解像度で撮像された第2の病理画像のうち、上記所定位置と同位置に存在する部分画像を受信するように上記通信部を制御可能であってもよい。
これにより情報処理装置は、アノテーション情報が付された第1の病理画像の部分画像のみならず、撮影対象の生体組織が当該第1の病理画像と共通し解像度が異なる第2の病理画像の部分画像も併せて事前にダウンロードできる。
上記制御部は、上記範囲指定情報を、上記他の情報処理装置から第1のサーバ装置を介して受信するように上記通信部を制御可能であってもよい。この場合上記所在場所は、上記第1のサーバ装置とは異なる第2のサーバ装置を示してもよい。
これにより、病理画像と範囲指定情報とが別々のサーバで管理されることになるため、特定のサーバへの負荷の集中が遠隔会議の進行の妨げになることが防止される。
本技術の他の形態に係る情報処理システムは、サーバ装置と情報処理装置とを具備する。上記サーバ装置は、第1の通信部と、第1の制御部とを有する。当該第1の制御部は、複数の部分画像から構成される病理画像内の表示範囲を指定する範囲指定情報と、上記複数の部分画像の、当該部分画像ごとに異なり得る所在場所を示す所在場所情報とを送信するように上記第1の通信部を制御可能である。上記情報処理装置は、第2の通信部と、表示部と、第2の制御部とを有する。上記第2の制御部は、上記範囲指定情報及び上記所在場所情報とを上記サーバ装置から受信し、上記受信された範囲指定情報に基づいて、上記表示範囲に属する部分画像の送信を要求する要求情報を、上記所在場所情報により示された所在場所へ送信し、上記要求情報に応じて上記所在場所から送信された上記部分画像を受信するように上記第2の通信部を制御可能である。また第2の制御部は、上記受信された部分画像を表示するように上記表示部を制御可能である。
本技術の別の形態に係る情報処理方法は、複数の部分画像から構成される病理画像内の表示範囲を指定する範囲指定情報と、上記複数の部分画像の、当該部分画像ごとに異なり得る所在場所を示す所在場所情報とを他の情報処理装置から受信することを含む。上記受信された範囲指定情報に基づいて、上記表示範囲に属する部分画像の送信を要求する要求情報が、上記所在場所情報により示された所在場所へ送信される。上記要求情報に応じて上記所在場所から送信された上記部分画像が受信され、上記受信された部分画像が表示される。
本技術のまた別の形態に係るプログラムは、情報処理装置に、第1の受信ステップと、送信ステップと、第2の受信ステップと、表示ステップとを実行させる。上記第1の受信ステップでは、複数の部分画像から構成される病理画像内の表示範囲を指定する範囲指定情報と、上記複数の部分画像の、当該部分画像ごとに異なり得る所在場所を示す所在場所情報とが他の情報処理装置から受信される。上記送信ステップでは、上記受信された範囲指定情報に基づいて、上記表示範囲に属する部分画像の送信を要求する要求情報が、上記所在場所情報により示された所在場所へ送信される。上記第2の受信ステップでは、上記要求情報に応じて上記所在場所から送信された上記部分画像が受信される。上記表示ステップでは、上記受信された部分画像が表示される。
以上説明したように、本技術によれば、病理画像データの共有による遠隔会議の開催の準備にかかる時間を短縮するとともに、遠隔会議を効率よく円滑に進行することができる。
本技術の第1実施形態に係る遠隔会議システムの構成を示す図である。 上記システムにおけるPCのハードウェアの構成を示すブロック図である。 上記システムで扱われる病理画像の表示原理を説明するための画像ピラミッド構造を示す図である。 上記システムで扱われる病理画像の画像群が生成される場合の手順を示した図である。 上記システムで病理画像が表示される際の、司会者たるPCの処理の流れを示したフローチャートである。 上記システムで病理画像が表示される際の、聴衆たるPCの処理の流れを示したフローチャートである。 本技術の第2実施形態に係る遠隔会議システムの構成を示す図である。 第2実施形態に係るシステムにおいて、過去の操作履歴情報を基に、事前にダウンロードされるタイルが指定される様子を示した図である。 第2実施形態に係るシステムにおいて、過去の操作履歴情報を基に、事前にダウンロードされるタイルが指定される様子を示した図である。 第2実施形態に係るシステムにおいて、過去の操作履歴情報を基に、事前にダウンロードされるタイルが指定される様子を示した図である。 第2実施形態に係るシステムにおいて、過去のアノテーション情報を基に、事前にダウンロードされるタイルが指定される様子を示した図である。 生体組織の複数の切片から病理スライドが生成される様子を示した図である。 第2実施形態に係るシステムにおいて病理画像を事前にダウンロードする際のPC及びサーバの処理の流れの一例を示したフローチャートである。 第2実施形態に係るシステムにおいて病理画像を事前にダウンロードする際のPC及びサーバの処理の流れの他の例を示したフローチャートである。 第2実施形態に係るシステムで病理画像が表示される際の、聴衆たるPCの処理の流れを示したフローチャートである。 第3実施形態に係る遠隔会議システムの構成を示した図である。 第4実施形態に係る遠隔会議システムの構成を示した図である。 第5実施形態に係る遠隔会議システムの構成を示した図である。 第5実施形態におけるPCの処理の流れを示したフローチャートである。 第6実施形態に係る遠隔会議システムの構成を示した図である。 第7実施形態に係る遠隔会議システムの構成を示した図である。
以下、図面を参照しながら、本技術の実施形態を説明する。
<第1実施形態>
まず、本技術の第1実施形態を説明する。
[システムの概要]
図1は、本実施形態に係る、病理画像を用いた遠隔会議システムの構成を示した図である。このシステムは、共通の病理診断用の画像(病理画像)を複数のユーザ(例えば医師)のPC間で共有して遠隔会議を行い、PC間で意見をやりとりしながら診断を行うことで、診断の効率化を図るためのシステムである。
同図に示すように、本システムは、サーバ200と、複数のPC100と、スキャナ300とを有し、それらは互いにインターネット150を介して通信可能とされている。
スキャナ300で撮像された病理画像データは、インターネット150を介してサーバ200にアップロードされて記憶される。詳細は後述するが、病理画像は、ガラススライドに納められた生体組織等の切片が撮像されたものである。当該病理画像データは、サーバ200のみに記憶されるものではなく、いずれかのPC100に記憶されていてもよい。
本システムでは、複数のPC100のうち、1台が遠隔会議における「司会者」、その他が「聴衆」として機能し、司会者としてのPC100が指定した病理画像が聴衆としてのPC100により表示される。
詳細は後述するが、司会者としてのPC100は、予め作成されたデータリストに基づいて、遠隔会議における診断対象の病理画像内の表示範囲を指定する情報(範囲指定情報)と、当該病理画像データの所在場所を示す情報(URL;Uniform Resource Locator)とをサーバ200へ送信する。サーバ200は、当該範囲指定情報及びURLを、聴衆としてのPC100へ送信する。すなわち、司会者としてのPC100は、サーバ200を介して、聴衆としてのPC100へ、範囲指定情報及びURLを送信する。
聴衆としてのPC100は、病理画像のうち範囲指定情報によって指定された範囲の画像(部分画像)をURLから受信して表示する。これにより病理画像が各PC100で共有され、それらのユーザによる病理診断が可能となる。
[PCのハードウェア構成]
図2は、上記PC100のハードウェアの構成を示すブロック図である。
PC100は、CPU(Central Processing Unit)11、ROM12(Read Only Memory)、RAM(Random Access Memory)13、入出力インターフェース15、及び、これらを互いに接続するバス14を備える。
入出力インターフェース15には、表示部16、入力部17、記憶部18、通信部19、ドライブ部20等が接続される。
表示部16は、例えば液晶、EL(Electro-Luminescence)等を用いた表示デバイスである。
入力部17は、例えばポインティングデバイス、キーボード、タッチパネル、マイクロフォン、その他の操作装置である。入力部17がタッチパネルを含む場合、そのタッチパネルは表示部16と一体となり得る。
記憶部18は、不揮発性の記憶デバイスであり、例えばHDD(Hard Disk Drive)、フラッシュメモリ、その他の固体メモリである。記憶部には、上記病理画像データが記憶され得るほか、本システムにおいて病理画像データを受信及び表示するために実行されるアプリケーションプログラムも記憶される。
ドライブ部20は、例えば光学記録媒体、フロッピー(登録商標)ディスク、磁気記録テープ、フラッシュメモリ等、リムーバブルの記録媒体21を駆動することが可能なデバイスである。これに対し上記記憶部18は、主にリムーバブルでない記録媒体を駆動する、PC100に予め搭載されたデバイスとして使用される場合が多い。
通信部19は、LAN(Local Area Network)、WAN(Wide Area Network)等に接続可能な、他のデバイスと通信するためのモデム、ルーター、その他の通信機器である。通信部19は、有線及び無線のどちらを利用して通信するものであってもよい。通信部19は、PC100とは別体で使用される場合が多い。
サーバ200のハードウェア構成も、上記PC100のハードウェア構成と同様であり、制御部、記憶部、通信部等、コンピュータとして機能するために必要なブロックを有する。
次に、サーバ200やPC100の記憶部18に記憶され得る病理画像及びその表示原理について説明する。図3は、その表示原理を説明するための画像ピラミッド構造を示す図である。
本実施形態における画像ピラミッド構造50は、光学顕微鏡により同じ1つの観察の対象物40(図4参照)から得られる1つの病理画像について、異なる複数の解像度により生成された画像群(全体画像群)である。画像ピラミッド構造50の最下には、最も大きいサイズの画像が配置され、最上には最も小さいサイズの画像が配置される。最も大きいサイズの画像の解像度は、例えば50×50(Kpixel:キロピクセル)、あるいは30×40(Kpixel)である。最も小さいサイズの画像は、例えば256×256(pixel)、あるいは、256×512(pixel)である。
つまり、同じ表示部16が、これらの画像を例えば100%でそれぞれ表示(それらの画像のピクセル数と同じ物理的なドット数でそれぞれ表示)すると、最も大きいサイズの画像が最も大きく表示され、最も小さいサイズの画像が最も小さく表示される。ここで、図2では、その表示部16の表示範囲をDとして示している。
図4は、この画像ピラミッド構造50の画像群が生成される場合の手順を説明するための図である。
まず、図示しない光学顕微鏡により所定の観察倍率で得られた元画像(巨大画像)のデジタル画像が用意される。この元画像が、図3で示した画像ピラミッド構造50の最下の画像である最も大きいサイズの画像に相当し、つまり最も高い解像度の画像となる。したがって、画像ピラミッド構造50の最下の画像としては、比較的高倍率で観察されて得られる光学顕微鏡の画像が用いられる。
病理の分野一般においては、生体の臓器、組織、細胞、またはこれらの一部から、薄く切り取られた切片が観察対象物40となる。そして、光学顕微鏡の機能を有するスキャナ300により、ガラススライドに収められた観察対象物40が読み取られ、これにより得られたデジタル画像が、そのスキャナ300またはその他の記憶装置に記憶される。
このスキャナ300または図示しない汎用コンピュータは、図4に示すように、上記のように得られた最も大きいサイズの画像から、段階的に解像度を小さくした複数の画像を生成し、これらを例えば所定サイズの単位である「タイル」(部分画像)単位で記憶する。1タイルのサイズは、例えば256×256(pixel)である。各タイルには、それを識別する識別情報(IDや番号)が付加される。
このように生成された画像群が画像ピラミッド構造50を形成し、この画像ピラミッド構造50がPC100の記憶部18やサーバ200の記憶部に記憶される。実際には、PC100やサーバ200は、それら異なる複数の解像度の画像と、解像度の情報とをそれぞれ対応付けて記憶すればよい。画像ピラミッド構造50の生成及びその記憶は、PC100が実行してもよい。
これらの画像ピラミッド構造50を形成する全体画像群は、公知の圧縮方法により生成されてもよいし、例えばサムネイル画像を生成するときの公知の圧縮方法により生成されてもよい。
遠隔会議の場面ではなく、各PC100のユーザが、PC100の記憶部18に記憶された病理画像をスタンドアローンで閲覧する場合には、PC100は、入力部17から入力されるユーザの操作に応じて、画像ピラミッド構造50から所望の画像を抽出して表示部16に表示する。その際、PC100は、ユーザにより選択された任意の解像度の画像のうち、ユーザにより選択された任意の部位の画像を表示する。ユーザは、観察倍率を変えながら、実際に観察対象物40を観察しているような感覚を得ることができる。すなわち、この場合、PC100はバーチャル顕微鏡として機能する。ここでの仮想的な観察倍率は、実際には上記解像度に相当する。
[システムの動作]
次に、以上のように構成されたシステムの動作について説明する。以下では、特にPC100のCPU11を主な動作主体として説明がなされるが、これらの動作は、各機器のその他のブロック及びソフトウェア(アプリケーション)と協働して実行される。
図5は、本実施形態において病理画像が表示される際の、司会者たるPC100の処理の流れを示したフローチャートであり、図6は、その場合における聴衆たるPC100の処理の流れを示したフローチャートである。
図5に示すように、司会者たるPC100のCPU11は、そのユーザから、特定の病理画像内の表示範囲を特定するための操作入力を待ち(ステップ51)、当該操作入力があると、当該表示範囲を特定する(ステップ52)。
続いてCPU11は、上記特定された表示範囲を基に、上記病理画像のうち、表示処理に使用するタイル、すなわち、当該表示範囲に全てまたは一部が含まれるタイル(部分画像)を特定する(ステップ53)。
続いてCPU11は、サーバ200へ、当該特定されたタイルデータのリクエストを送信する(ステップ54)。またその一方でCPUは、上記表示範囲情報と、上記特定されたタイルデータのURLとをサーバ200へ送信する(ステップ55)。
続いてCPU11は、上記リクエストに応じてサーバ200から送信されたタイルデータを受信し(ステップ56)、それを表示部に表示する(ステップ57)。
一方、図6に示すように、聴衆たるPC100のCPU11は、司会者たるPC100から送信された表示範囲情報及びURLを、サーバ200を介して受信する(ステップ61)。
続いてCPU11は、当該表示範囲情報を基に、病理画像のうち、当該表示範囲の表示処理に必要となるタイルを特定する(ステップ62)。
続いてCPU11は、上記受信したURLを基に、上記特定されたタイルのリクエストをサーバ200へ送信する(ステップ63)。
続いてCPU11は、上記リクエストに応じて送信されたタイルを受信し(ステップ64)、表示部16に表示する(ステップ65)。
<第2実施形態>
次に、本技術の第2実施形態を説明する。
図7は、本実施形態における遠隔会議システムの構成を示した図である。
上述の第1実施形態では、病理画像はサーバ200に記憶されており、遠隔会議の当日にPC100にダウンロードされる例が示された。しかし、同図に示すように、遠隔会議の開催日及びそこで使用される病理画像が事前に決まっている場合には、PC100は、会議開催前に病理画像を記憶部18にダウンロードすることもできる。当該ダウンロードは、病理画像全体の単位ではなく、タイル単位で行われてもよい。
上記のような、タイル単位の事前のダウンロードでは、遠隔会議において使用される可能性の高いタイルがダウンロードされてもよい。使用される可能性の高いタイルは、例えば、過去に病理診断に用いられたタイルである。このような過去の病理診断に用いられたタイルは、例えば以下のような基準で指定される。
すなわち、PC100は、過去に診断を行った医師が、どのように座標または表示範囲を移動しながらどの程度の倍率(解像度)で病理画像を閲覧したかという表示操作履歴を基に、当該過去の診断において使用されたタイルを指定する。
図8、図9及び図10は、この操作履歴情報を基に指定されるタイルの例を示した図である。
図8に示すように、病理画像Iにおける操作履歴が、線による座標移動経路71として示されている場合には、当該線が横切るタイル70(線が属するタイル)が指定される。また、操作履歴が点(特定の座標)により示されている場合には、当該座標を含むタイルが指定される。
また、図9に示すように、図8と同様のケースでも、上記線を含む矩形のタイル70が指定されてもよい。
また、図10に示すように、病理画像Iにおける操作履歴が、矩形の表示範囲72として示されている場合には、その矩形に全部または一部が含まれるタイル70が指定される。
また、PC100は、過去の診断において、医師により病理画像に何らかの診断注記(アノテーション)が付されている場合には、そのアノテーションが付されたタイルを指定する。ここでアノテーションとは、病理画像が表示されたPCにおいてユーザの入力を基に、例えば記号、線図、テキスト、音声、画像、リンク(例えばURL)等の形式で形成される情報である。
例えば、図11に示すように、病理画像Iを構成するタイルのうち、×印としてアノテーション73が付されたタイル70が指定される。アノテーションが線、矩形、円として付されている場合には、上記図8〜図10と同様に、線が横切るタイルや矩形や円に含まれるタイルが指定される。
図12は、病理画像を撮影するための切片を収めたスライド(病理スライド)の作成の様子を示した図である。
同図に示すように、病理スライド80は、手術等で取り出した病理片(生体組織)Sから、観察対象物(切片)40が2〜3マイクロメートル程度の薄さで切り出され、それがスライドガラス81に載置され、カバーガラス82によって覆われることで作成される。
したがって、連続して切り出された切片は、細胞などの組織的な形状や医学的な特徴がほぼ同一となる。すなわち、同図に示すように、切片40Aの病理スライド80Aに付された診断情報は、隣の切片40Bの病理スライド80Bにとっても有用な情報となる。
ここで、上記異なる切片40A及び40Bは、異なる検査を行うため、異なる色で染色される場合がある。したがって、PC100は、異なる染色を施された連続切片に関する複数の病理画像が存在する場合、1つの病理画像においてアノテーションが付されたタイルを指定するとともに、当該アノテーションが付された位置に同座標に存在する、他の病理画像のタイルを指定する。
また、上述のように、ユーザは、1つの病理画像を観察倍率(解像度)を変化させて閲覧することが可能である。したがって、ある病理画像にアノテーションが付されている場合、そのアノテーションは、その病理画像とは倍率(解像度)が異なる同一観察対象の病理画像にとっても有用な情報となる。したがってPC100は、ある病理画像にアノテーションが付されている場合には、当該病理画像のうちアノテーションが付されたタイルを指定するとともに、同一観察対象の異なる解像度の病理画像のうち、上記アノテーションが付された座標と同座標を含むタイルも指定する。
図13は、上記病理画像の事前ダウンロードにおけるPC100及びサーバ200の処理の流れを示したフローチャートである。
同図に示すように、まず、遠隔会議の主催者のPC100から、遠隔会議で使用される病理画像データと、遠隔会議の参加者のリストがサーバ200へ送信されて登録される(ステップ131)。この処理は、例えば、サーバ200に存在する全ての病理画像データと、全てのユーザの一覧から、所望の病理画像とユーザが選択されることで実行される。
続いて、サーバ200が、各参加者のPC100へ会議開催通知を送信する(ステップ132)。
続いて、参加者のPC100は、病理画像を事前にダウンロード可能な容量のHDD等の記憶部18がPC100に存在するか否かを判断する(ステップ133)。
ダウンロード可能なHDDが存在する場合(Yes)、参加者のPC100は、遠隔会議で使用される病理画像データのリストをサーバ200から受信する(ステップ134)。この際、当該病理画像データに関する過去の診断履歴情報や、病理画像データ(タイル)のその時点におけるURLも共に受信される。
続いて、PC100は、受信した病理画像データのリストと、上記診断履歴情報を基に、上述した基準によりタイルを指定し、当該指定されたタイルをサーバ200からダウンロードする(ステップ135)。
そして、遠隔会議の開催時刻が到来した場合には、参加者のPC100は、サーバ200へ接続することで会議に参加することができる(ステップ136)。
上記図13の例では、主催者がサーバ200に病理画像データを登録した時点で、会議で使用されるデータのリストが決定している。しかし、実際には、開催通知が送信されてから会議が開催されるまでの間に、主催者が不要なデータを削除したり、他の参加者が自分の使いたいデータを追加したりすることで、リストが更新されることも考えられる。
そこで、図14のフローチャートに示すように、リストをポーリングして最新に保つことが考えられる。
すなわち、同図に示すように、PC100は、ステップ141〜ステップ145において、上記図13のステップ131〜ステップ135と同様の処理を実行した後、会議開催時刻が到来したか否かを判断する(ステップ146)。
続いて、会議開催時刻が未だ到来していない場合(No)には、サーバ200へアクセスして、使用される病理画像データのリストが更新されたか否かを判断する(ステップ147)。
そして、リストが更新されている場合(Yes)には、PC100は、新たにリストをサーバ200から受信して、上記ステップ144以下の処理を繰り返す。
ここで、上記ステップ146及び147の処理に代わり、サーバ200から各参加者のPC100にリストの更新が通知されることを契機として、PC100が新たにリストを受信してもよい。
また、タイルの事前ダウンロード先は、PC100の記憶部18でなくてもよい。例えば、PC100とネットワーク接続された近隣の記憶装置にダウンロードされてもよいし、サーバ200が複数存在する場合には、そのうちPC100に極力近いサーバ200にダウンロードされてもよい。
図15は、本実施形態に係るシステムで病理画像が表示される際の、聴衆たるPC100の処理の流れを示したフローチャートである。
同図に示すように、PC100のCPU11は、上記第1実施形態の図6のステップ61及び62と同様の処理を行った後(ステップ151、152)、特定されたタイルが記憶部18に存在するか(事前ダウンロードされているか)否かを判断する(ステップ153)。
タイルが記憶部18に存在しない場合(No)には、CPU11は、サーバ200へ当該タイルのリクエストを送信し(ステップ154)、タイルを受信する(ステップ155)。
タイルが記憶部18に存在する場合(Yes)には、CPU11は、記憶部18から当該タイルを読み出す(ステップ155)。
そしてCPU11は、受信したまたは読み出したタイルを表示部16に表示する(ステップ157)。
以上説明したようなこのような事前のダウンロードにより、遠隔会議当日における不要な通信が減ることで、聴衆たるPC100が増えた場合のサーバ200の負荷が削減され、ネットワーク上に不要なパケットが流れるのが回避される。
<第3実施形態>
次に、本技術の第3実施形態を説明する。
図16は、本実施形態に係る遠隔会議システムの構成を示した図である。
上記各実施形態では、表示範囲情報と病理画像のタイルデータとは、いずれもサーバ200に記憶されていた。しかし、両者は必ずしも同じサーバで処理されなくてもよい。そこで、同図に示すように、本実施形態では、タイルデータを記憶するタイルデータサーバ200Aと、表示範囲情報を処理する制御データサーバ200Bとが別個に設けられている。また制御データサーバ200Bでは、上記第2実施形態で説明した過去の診断履歴情報や、タイルデータのリスト及び参加者のリスト等も管理される(以下、これらのデータをまとめて制御データと称する)。
これにより、データ容量は小さいが即応性が必要な制御データと、データ容量が大きくスループットが求められるタイルデータに対して、サーバの最適化が行われる。
また、制御データを扱うサーバ200Bが存在せず、制御データが複数のPC100間のP2P通信で交換されてもよい。
<第4実施形態>
次に、本技術の第4実施形態を説明する。
図17は、本実施形態に係る遠隔会議システムの構成を示した図である。
同図に示すような、複数の病院間で、それらの院内ネットワーク170を接続して、遠隔会議を行う場合、会議で利用する病理画像データを1ヶ所に集めると、アップロードやダウンロードのコストが大きくなる。
一方、遠隔会議で利用する病理画像データは、もともと各病院のスキャナ300で撮影されて院内サーバ200Aに保存されているものである。そこで、同図に示すように、本実施形態では、各病院にある院内サーバ200Aを、上記第3実施形態におけるタイルデータサーバ200Aの代わりとして用いる。この場合も、制御データサーバ200Bは、インターネット150上に存在する。
このような構成により、インターネット150上のサーバへのタイルデータのアップロード作業が不要となる。
<第5実施形態>
次に、本技術の第5実施形態を説明する。
図18は、本実施形態に係る遠隔会議システムの構成を示した図である。
上記第4実施形態においては、院内サーバで遠隔会議参加者に対するタイルデータ配信を行わねばならず、ネットワーク帯域の大きさや、PC100の数によっては、サーバ負荷の点で問題が発生する可能性がある。
そこで本実施形態では、同図に示すように、ダウンロード対象となるタイルデータが予めクラウドサーバ200Cにアップロードされる。これにより、院内サーバ200Dの負荷が低下する。
図19は、本実施形態におけるPC100の表示処理の流れを示したフローチャートである。
同図に示すように、PC100のCPU11は、上記図6や図15の処理と同様にして、使用されるタイルを特定すると(ステップ191、192)、クラウドサーバ200Cへ、当該特定されたタイルのリクエストを送信する(ステップ193)。
続いてCPU11は、当該リクエスト対象のタイルの受信に成功したか否かを判断する(ステップ194)。
上記タイルの受信に失敗した場合(No)には、CPU11は、院内サーバ200Dへ当該タイルのリクエストを送信して(ステップ196)、当該タイルを受信する(ステップ197)。そして、受信されたタイルが表示される(ステップ197)。
このような処理により、サーバ200Cへのタイルデータのアップロードの作業量が抑えられるとともに、院内サーバ200Dの負荷も低下する。
<第6実施形態>
次に、本技術の第6実施形態を説明する。
図20は、本実施形態に係る遠隔会議システムの構成を示した図である。
上述の各実施形態では、タイルサーバの数は1つであったが、同図に示すように、本実施形態では、同一のタイルデータを配信するタイルサーバが複数設けられる(タイルサーバ200A−1、200A−2)。例えば、タイルサーバ200A−1がプライマリサーバ、タイルサーバ200B−1がセカンダリサーバとされる。
これにより、クライアントであるPC100毎に最適なサーバが決定されることで、PC100の数の増大に対応することが可能となる。この際のサーバ決定アルゴリズムとしては以下のようなものが考えられる。
・予めクライアント毎にサーバを静的に割り当てる。
・RTTが最小のサーバをクライアント(PC100)が選択する。
・帯域が最大のサーバをクライアント(PC100)が選択する。
・全体負荷を考慮してプライマリサーバ(タイルサーバ200A−1)が決定する。
‐ラウンドロビンを実行する。
‐サーバの負荷情報を定期的に(例えば10秒に1回等)集める。
<第7実施形態>
次に、本技術の第7実施形態を説明する。
図21は、本実施形態に係る遠隔会議システムの構成を示した図である。
同図に示すように、院内ネットワーク170における院内システムでは、診断の終わったタイルデータは、院内ネットワーク170から、インターネット150を介してクラウドサーバ200Cに退避される。
そして、上記院内システムにおいて上記退避されたデータを利用した院内会議の予約が行なわれた場合、その時点で、クラウドサーバ200Cに退避されたタイルデータが院内サーバ200Dに復帰される。
[変形例]
本技術は上述の実施形態にのみ限定されるものではなく、本開示の要旨を逸脱しない範囲内において種々変更され得る。
上述の第1〜第7実施形態の構成は、互いに矛盾しない限り如何様にも組み合わせることができる。例えば、第2実施形態における事前ダウンロード処理が、第3実施形態に説明したような、サーバがタイルデータサーバと制御データサーバとに別個に設けられた構成において実現されてもよい。
[その他]
本技術は以下のような構成も採ることができる。
(1)通信部と、
表示部と、
複数の部分画像から構成される病理画像内の表示範囲を指定する範囲指定情報と、前記複数の部分画像の、当該部分画像ごとに異なり得る所在場所を示す所在場所情報とを、他の情報処理装置から受信し、
前記受信された範囲指定情報に基づいて、前記表示範囲に属する部分画像の送信を要求する要求情報を、前記所在場所情報により示された所在場所へ送信し、
前記要求情報に応じて前記所在場所から送信された前記部分画像を受信する
ように前記通信部を制御可能であり、前記受信された部分画像を表示するように前記表示部を制御可能な制御部と
を具備する情報処理装置。
(2)上記(1)に記載の情報処理装置であって、
記憶部をさらに具備し、
前記制御部は、前記表示範囲に属する部分画像が前記記憶部に記憶されているか否かを判断し、当該部分画像が前記記憶部に記憶されている場合には、前記要求情報を前記所在場所へ送信することなく前記部分画像を表示するように前記表示部を制御可能である
情報処理装置。
(3)上記(1)または(2)に記載の情報処理装置であって、
前記制御部は、
前記範囲指定情報及び前記所在場所情報の受信に先立って、前記他の情報処理装置との間で開催される遠隔会議で使用され得る病理画像を指定する画像指定情報と、当該指定された病理画像の当該時点での所在場所を示す一時所在場所情報と、当該指定された病理画像に関する過去の診断履歴を示す診断履歴情報とを前記他の情報処理装置から予め受信し、
前記受信された画像指定情報により指定された病理画像を構成する複数の部分画像のうち、前記受信された診断履歴情報と関連付けられた部分画像を、前記一時所在場所情報により示された所在場所から受信する
ように前記通信部を制御可能であり、
前記受信された部分画像を記憶するように前記記憶部を制御可能である
情報処理装置。
(4)上記(3)に記載の情報処理装置であって、
前記制御部は、前記診断履歴情報として、前記指定された病理画像内の過去の表示範囲または表示位置を示す表示履歴情報を受信するように前記通信部を制御可能である
情報処理装置。
(5)上記(3)に記載の情報処理装置であって、
前記制御部は、前記診断履歴情報として、前記指定された病理画像内の所定位置に付されたアノテーション情報を受信するように前記通信部を制御可能である
情報処理装置。
(6)上記(5)に記載の情報処理装置であって、
前記病理画像は、1つの生体組織からそれぞれ採取されそれぞれ異なる色で染色された複数の切片ごとに複数存在し、
前記制御部は、第1の色で染色された切片を表した第1の病理画像のうち、前記アノテーション情報が付された所定位置に存在する部分画像を受信するとともに、第2の色で染色された切片を表した第2の病理画像のうち、前記所定位置と同位置に存在する部分画像を受信するように前記通信部を制御可能である
情報処理装置。
(7)上記(5)に記載の情報処理装置であって、
前記病理画像は、1つの生体組織から採取された切片が異なる複数の解像度でそれぞれ撮像されることで、当該異なる解像度ごとに複数存在し、
前記制御部は、第1の解像度で撮像された第1の病理画像のうち、前記アノテーション情報が付された所定位置に存在する部分画像を受信するとともに、第2の解像度で撮像された第2の病理画像のうち、前記所定位置と同位置に存在する部分画像を受信するように前記通信部を制御可能である
情報処理装置。
(8)上記(1)から(7)のうちいずれかに記載の情報処理装置であって、
前記制御部は、前記範囲指定情報を、前記他の情報処理装置から第1のサーバ装置を介して受信するように前記通信部を制御可能であり、
前記所在場所は、前記第1のサーバ装置とは異なる第2のサーバ装置を示す
情報処理装置。
11…CPU
16…表示部
18…記憶部
19…通信部
40…観察対象物
70…タイル
71…座標移動経路
72…表示範囲
73…アノテーション
100…PC
150…インターネット
170…院内ネットワーク
200…サーバ
300…スキャナ

Claims (11)

  1. 通信部と、
    表示部と、
    複数の部分画像から構成される病理画像内の表示範囲を指定する範囲指定情報と、前記複数の部分画像の、当該部分画像ごとに異なり得る所在場所を示す所在場所情報とを、他の情報処理装置から受信し、
    前記受信された範囲指定情報に基づいて、前記表示範囲に属する部分画像の送信を要求する要求情報を、前記所在場所情報により示された所在場所へ送信し、
    前記要求情報に応じて前記所在場所から送信された前記部分画像を受信する
    ように前記通信部を制御可能であり、前記受信された部分画像を表示するように前記表示部を制御可能な制御部と
    を具備する情報処理装置。
  2. 請求項1に記載の情報処理装置であって、
    記憶部をさらに具備し、
    前記制御部は、前記表示範囲に属する部分画像が前記記憶部に記憶されているか否かを判断し、当該部分画像が前記記憶部に記憶されている場合には、前記要求情報を前記所在場所へ送信することなく前記部分画像を表示するように前記表示部を制御可能である
    情報処理装置。
  3. 請求項1に記載の情報処理装置であって、
    記憶部をさらに具備し、
    前記制御部は、
    前記範囲指定情報及び前記所在場所情報の受信に先立って、前記他の情報処理装置との間で開催される遠隔会議で使用され得る病理画像を指定する画像指定情報と、当該指定された病理画像の当該時点での所在場所を示す一時所在場所情報と、当該指定された病理画像に関する過去の診断履歴を示す診断履歴情報とを前記他の情報処理装置から予め受信し、
    前記受信された画像指定情報により指定された病理画像を構成する複数の部分画像のうち、前記受信された診断履歴情報と関連付けられた部分画像を、前記一時所在場所情報により示された所在場所から受信する
    ように前記通信部を制御可能であり、
    前記受信された部分画像を記憶するように前記記憶部を制御可能である
    情報処理装置。
  4. 請求項3に記載の情報処理装置であって、
    前記制御部は、前記診断履歴情報として、前記指定された病理画像内の過去の表示範囲または表示位置を示す表示履歴情報を受信するように前記通信部を制御可能である
    情報処理装置。
  5. 請求項3に記載の情報処理装置であって、
    前記制御部は、前記診断履歴情報として、前記指定された病理画像内の所定位置に付されたアノテーション情報を受信するように前記通信部を制御可能である
    情報処理装置。
  6. 請求項5に記載の情報処理装置であって、
    前記病理画像は、1つの生体組織からそれぞれ採取されそれぞれ異なる色で染色された複数の切片ごとに複数存在し、
    前記制御部は、第1の色で染色された切片を表した第1の病理画像のうち、前記アノテーション情報が付された所定位置に存在する部分画像を受信するとともに、第2の色で染色された切片を表した第2の病理画像のうち、前記所定位置と同位置に存在する部分画像を受信するように前記通信部を制御可能である
    情報処理装置。
  7. 請求項5に記載の情報処理装置であって、
    前記病理画像は、1つの生体組織から採取された切片が異なる複数の解像度でそれぞれ撮像されることで、当該異なる解像度ごとに複数存在し、
    前記制御部は、第1の解像度で撮像された第1の病理画像のうち、前記アノテーション情報が付された所定位置に存在する部分画像を受信するとともに、第2の解像度で撮像された第2の病理画像のうち、前記所定位置と同位置に存在する部分画像を受信するように前記通信部を制御可能である
    情報処理装置。
  8. 請求項1に記載の情報処理装置であって、
    前記制御部は、前記範囲指定情報を、前記他の情報処理装置から第1のサーバ装置を介して受信するように前記通信部を制御可能であり、
    前記所在場所は、前記第1のサーバ装置とは異なる第2のサーバ装置を示す
    情報処理装置。
  9. 第1の通信部と、
    複数の部分画像から構成される病理画像内の表示範囲を指定する範囲指定情報と、前記複数の部分画像の、当該部分画像ごとに異なり得る所在場所を示す所在場所情報とを送信するように前記第1の通信部を制御可能な第1の制御部と
    を有するサーバ装置と、
    第2の通信部と、
    表示部と、
    前記範囲指定情報及び前記所在場所情報とを前記サーバ装置から受信し、
    前記受信された範囲指定情報に基づいて、前記表示範囲に属する部分画像の送信を要求する要求情報を、前記所在場所情報により示された所在場所へ送信し、
    前記要求情報に応じて前記所在場所から送信された前記部分画像を受信する
    ように前記第2の通信部を制御可能であり、前記受信された部分画像を表示するように前記表示部を制御可能な第2の制御部と
    を有する情報処理装置と
    を具備する情報処理システム。
  10. 情報処理装置における情報処理方法であって、
    複数の部分画像から構成される病理画像内の表示範囲を指定する範囲指定情報と、前記複数の部分画像の、当該部分画像ごとに異なり得る所在場所を示す所在場所情報とを他の情報処理装置から受信し、
    前記受信された範囲指定情報に基づいて、前記表示範囲に属する部分画像の送信を要求する要求情報を、前記所在場所情報により示された所在場所へ送信し、
    前記要求情報に応じて前記所在場所から送信された前記部分画像を受信し、
    前記受信された部分画像を表示する
    情報処理方法。
  11. 情報処理装置に、
    複数の部分画像から構成される病理画像内の表示範囲を指定する範囲指定情報と、前記複数の部分画像の、当該部分画像ごとに異なり得る所在場所を示す所在場所情報とを他の情報処理装置から受信するステップと、
    前記受信された範囲指定情報に基づいて、前記表示範囲に属する部分画像の送信を要求する要求情報を、前記所在場所情報により示された所在場所へ送信するステップと、
    前記要求情報に応じて前記所在場所から送信された前記部分画像を受信するステップと、
    前記受信された部分画像を表示するステップと
    を実行させるプログラム。
JP2011180438A 2011-08-22 2011-08-22 情報処理装置、情報処理システム情報処理方法及びプログラム Expired - Fee Related JP5859771B2 (ja)

Priority Applications (8)

Application Number Priority Date Filing Date Title
JP2011180438A JP5859771B2 (ja) 2011-08-22 2011-08-22 情報処理装置、情報処理システム情報処理方法及びプログラム
PCT/JP2012/004448 WO2013027323A1 (en) 2011-08-22 2012-07-10 Information processing apparatus, information processing system, method of processing information, and program
BR112013008721-8A BR112013008721A2 (pt) 2011-08-22 2012-07-10 aparelho de processamento de informação, método de operação de um aparelho de processamento de informação, e, sistema
CN201280003348.5A CN103154915B (zh) 2011-08-22 2012-07-10 信息处理装置、信息处理系统、处理信息的方法
CA2811889A CA2811889A1 (en) 2011-08-22 2012-07-10 Information processing apparatus, information processing system, method of processing information, and program
EP12825637.7A EP2748709B1 (en) 2011-08-22 2012-07-10 Information processing apparatus, information processing system, method of processing information, and program
US13/880,267 US9398233B2 (en) 2011-08-22 2012-07-10 Processing apparatus, system, method and program for processing information to be shared
US15/185,284 US20160301879A1 (en) 2011-08-22 2016-06-17 Information processing apparatus, information processing system, method of processing information, and program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2011180438A JP5859771B2 (ja) 2011-08-22 2011-08-22 情報処理装置、情報処理システム情報処理方法及びプログラム

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2015245832A Division JP2016105285A (ja) 2015-12-17 2015-12-17 情報処理装置、情報処理システム情報処理方法及びプログラム

Publications (3)

Publication Number Publication Date
JP2013045144A true JP2013045144A (ja) 2013-03-04
JP2013045144A5 JP2013045144A5 (ja) 2014-09-18
JP5859771B2 JP5859771B2 (ja) 2016-02-16

Family

ID=47746098

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2011180438A Expired - Fee Related JP5859771B2 (ja) 2011-08-22 2011-08-22 情報処理装置、情報処理システム情報処理方法及びプログラム

Country Status (7)

Country Link
US (2) US9398233B2 (ja)
EP (1) EP2748709B1 (ja)
JP (1) JP5859771B2 (ja)
CN (1) CN103154915B (ja)
BR (1) BR112013008721A2 (ja)
CA (1) CA2811889A1 (ja)
WO (1) WO2013027323A1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2020038600A (ja) * 2018-08-31 2020-03-12 ソニー株式会社 医療システム、医療装置および医療方法

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5859771B2 (ja) * 2011-08-22 2016-02-16 ソニー株式会社 情報処理装置、情報処理システム情報処理方法及びプログラム
JP6455829B2 (ja) * 2013-04-01 2019-01-23 キヤノン株式会社 画像処理装置、画像処理方法、およびプログラム
US10593017B2 (en) * 2016-09-29 2020-03-17 Ricoh Company, Ltd. Information processing apparatus, storage medium, and image output system
KR102192164B1 (ko) * 2018-08-08 2020-12-16 주식회사 딥바이오 생체 이미지 진단 시스템, 생체 이미지 진단 방법, 및 이를 수행하기 위한 단말

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006323448A (ja) * 2005-05-17 2006-11-30 Sony Corp データ共有システムおよび方法
JP2011117991A (ja) * 2009-11-30 2011-06-16 Sony Corp 情報処理装置、情報処理方法及びそのプログラム
JP2011133849A (ja) * 2009-11-30 2011-07-07 Sony Corp 情報処理装置、情報処理方法及びそのプログラム
JP2011150400A (ja) * 2010-01-19 2011-08-04 Sony Corp 情報処理装置、情報処理方法、及びそのプログラム

Family Cites Families (73)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5519436A (en) * 1994-06-21 1996-05-21 Intel Corporation Static image background reference for video teleconferencing applications
US6396941B1 (en) * 1996-08-23 2002-05-28 Bacus Research Laboratories, Inc. Method and apparatus for internet, intranet, and local viewing of virtual microscope slides
JP3629852B2 (ja) * 1996-12-06 2005-03-16 株式会社日立製作所 遠隔診療支援方法及び遠隔診療支援システム
US6182127B1 (en) 1997-02-12 2001-01-30 Digital Paper, Llc Network image view server using efficent client-server tilting and caching architecture
JPH10304330A (ja) * 1997-04-30 1998-11-13 Olympus Optical Co Ltd 画像連携システム
JPH10301830A (ja) * 1997-04-30 1998-11-13 Olympus Optical Co Ltd 画像登録システム
US5968120A (en) * 1997-05-02 1999-10-19 Olivr Corporation Ltd. Method and system for providing on-line interactivity over a server-client network
US6597392B1 (en) * 1997-10-14 2003-07-22 Healthcare Vision, Inc. Apparatus and method for computerized multi-media data organization and transmission
JP3794194B2 (ja) * 1999-03-24 2006-07-05 株式会社日立製作所 連携表示制御方法及びこれを用いた遠隔診療支援システム
JP2001331614A (ja) 2000-05-19 2001-11-30 Sony Corp ネットワーク会議システム及び議事録作成方法、会議管理サーバ及び議事録作成方法
JP2002117415A (ja) * 2000-10-06 2002-04-19 Kgt Inc 仮想共同作業環境発生装置
US7171030B2 (en) * 2000-11-30 2007-01-30 University Of Medicine & Denistry Of New Jersey Systems for analyzing microtissue arrays
CN100403282C (zh) 2000-12-06 2008-07-16 株式会社Ntt都科摩 提供内容的装置及方法
JP3795772B2 (ja) 2001-06-25 2006-07-12 株式会社ノヴァ マルチメディア情報通信サービスシステム
JP2003016021A (ja) * 2001-07-04 2003-01-17 Hitachi Ltd 画像連携システムおよびそのサーバ装置
JP2003085070A (ja) 2001-09-11 2003-03-20 Oki Electric Ind Co Ltd コンテンツ配信システム、コンテンツコピー方法及びマルチキャスト方法
JP2003115873A (ja) 2001-10-02 2003-04-18 Nippon Telegr & Teleph Corp <Ntt> コンテンツ配信サーバ選択方法
JP4263873B2 (ja) * 2002-04-18 2009-05-13 ヤマハ株式会社 サーバ装置、クライアント装置、配信システム、配信プログラム及びクライアントプログラム
US6826301B2 (en) * 2002-10-07 2004-11-30 Infocus Corporation Data transmission system and method
JP2004194108A (ja) * 2002-12-12 2004-07-08 Sony Corp 情報処理装置および情報処理方法、記録媒体、並びにプログラム
DE10309165A1 (de) * 2003-02-28 2004-09-16 Siemens Ag Medizinische Systemarchitektur zur interaktiven Übertragung und progressiven Darstellung von komprimierten Bilddaten
US8140980B2 (en) * 2003-08-05 2012-03-20 Verizon Business Global Llc Method and system for providing conferencing services
US7593918B2 (en) * 2004-11-24 2009-09-22 General Electric Company Enterprise medical imaging and information management system with enhanced communications capabilities
JP4297073B2 (ja) * 2005-04-01 2009-07-15 ソニー株式会社 画像生成装置、これらの装置の処理方法およびその方法をコンピュータに実行させるプログラム
US7552383B2 (en) * 2005-06-23 2009-06-23 International Business Machines Corporation Method for efficiently processing comments to records in a database, while avoiding replication/save conflicts
US7804983B2 (en) * 2006-02-24 2010-09-28 Fotonation Vision Limited Digital image acquisition control and correction method and apparatus
US7872650B2 (en) * 2006-04-27 2011-01-18 Microsoft Corporation Remotely viewing large tiled image datasets
US7581186B2 (en) * 2006-09-11 2009-08-25 Apple Inc. Media manager with integrated browsers
HU0700409D0 (en) * 2007-06-11 2007-08-28 3D Histech Kft Method and system for accessing a slide from a remote workstation
US8259157B2 (en) * 2008-01-11 2012-09-04 Sony Corporation Teleconference terminal apparatus and image transmitting method
US8200896B2 (en) * 2008-06-06 2012-06-12 Microsoft Corporation Increasing remote desktop performance with video caching
US8103441B2 (en) * 2008-06-26 2012-01-24 Microsoft Corporation Caching navigation content for intermittently connected devices
CN101350923B (zh) * 2008-09-03 2010-11-17 中国科学院上海技术物理研究所 一种交互式医学图像通信与显示方法
JPWO2010119522A1 (ja) * 2009-04-15 2012-10-22 パイオニア株式会社 画像共有システム
EP2478356A1 (en) * 2009-09-18 2012-07-25 Rutgers, The State University High-throughput biomarker segmentation utilizing hierarchical normalized cuts
JP5589366B2 (ja) * 2009-11-27 2014-09-17 ソニー株式会社 情報処理装置、情報処理方法及びそのプログラム
JP5568970B2 (ja) * 2009-11-30 2014-08-13 ソニー株式会社 情報処理装置、情報処理方法及びそのプログラム
US8386715B2 (en) * 2009-11-30 2013-02-26 Nokia Corporation Method and apparatus for tile mapping techniques
US8875038B2 (en) * 2010-01-19 2014-10-28 Collarity, Inc. Anchoring for content synchronization
JP4678068B2 (ja) 2010-02-24 2011-04-27 株式会社日立製作所 再生装置、再生方法、送受信方法ならびに送信方法
US20130093781A1 (en) * 2010-03-31 2013-04-18 Hitachi Medical Corporation Examination information display device and method
JP5531750B2 (ja) * 2010-04-16 2014-06-25 ソニー株式会社 情報処理装置、情報処理方法、プログラム、及び情報処理システム
US20110282686A1 (en) * 2010-05-12 2011-11-17 General Electric Company Medical conferencing systems and methods
US20120011568A1 (en) * 2010-07-12 2012-01-12 Cme Advantage, Inc. Systems and methods for collaborative, networked, in-context, high resolution image viewing
US8787651B2 (en) * 2010-09-28 2014-07-22 Flagship Biosciences, LLC Methods for feature analysis on consecutive tissue sections
US8863256B1 (en) * 2011-01-14 2014-10-14 Cisco Technology, Inc. System and method for enabling secure transactions using flexible identity management in a vehicular environment
NL2008690C2 (en) * 2011-04-25 2014-07-15 Google Inc Dynamic highlighting of geographic entities on electronic maps.
JP5701685B2 (ja) * 2011-05-26 2015-04-15 富士フイルム株式会社 医用情報表示装置およびその動作方法、並びに医用情報表示プログラム
US9098531B2 (en) * 2011-06-09 2015-08-04 MemoryWeb, LLC Method and application for managing digital files
US9159129B2 (en) * 2011-07-12 2015-10-13 Definiens Ag Generating image-based diagnostic tests by optimizing image analysis and data mining of co-registered images
US8699769B2 (en) * 2011-07-12 2014-04-15 Definiens Ag Generating artificial hyperspectral images using correlated analysis of co-registered images
JP5859771B2 (ja) * 2011-08-22 2016-02-16 ソニー株式会社 情報処理装置、情報処理システム情報処理方法及びプログラム
US8280414B1 (en) * 2011-09-26 2012-10-02 Google Inc. Map tile data pre-fetching based on mobile device generated event analysis
US8803920B2 (en) * 2011-12-12 2014-08-12 Google Inc. Pre-fetching map tile data along a route
US9389088B2 (en) * 2011-12-12 2016-07-12 Google Inc. Method of pre-fetching map data for rendering and offline routing
US11232481B2 (en) * 2012-01-30 2022-01-25 Box, Inc. Extended applications of multimedia content previews in the cloud-based content management system
JP5870840B2 (ja) * 2012-05-14 2016-03-01 ソニー株式会社 情報処理装置、情報処理方法、および情報処理プログラム
US20130332857A1 (en) * 2012-06-08 2013-12-12 Samsung Electronics Co., Ltd. Photo edit history shared across users in cloud system
US20140047332A1 (en) * 2012-08-08 2014-02-13 Microsoft Corporation E-reader systems
JP2015534160A (ja) * 2012-09-10 2015-11-26 カルガリー サイエンティフィック インコーポレイテッド クライアント・サーバー画像閲覧アーキテクチャにおけるクライアント側の画像描画
US9818190B2 (en) * 2013-03-14 2017-11-14 Ventana Medical Systems, Inc. Whole slide image registration and cross-image annotation devices, systems and methods
US9772754B2 (en) * 2013-06-27 2017-09-26 Progressly, Inc. Collaborative network-based graphical progress management tool
US9213684B2 (en) * 2013-09-13 2015-12-15 Box, Inc. System and method for rendering document in web browser or mobile device regardless of third-party plug-in software
AU2014331153A1 (en) * 2013-10-01 2016-02-25 Ventana Medical Systems, Inc. Line-based image registration and cross-image annotation devices, systems and methods
US10885104B2 (en) * 2014-02-27 2021-01-05 Dropbox, Inc. Systems and methods for selecting content items to store and present locally on a user device
US10042863B2 (en) * 2014-05-28 2018-08-07 Oracle International Corporation Automatic update for map cache
US10074027B2 (en) * 2014-09-08 2018-09-11 Apple Inc. Density sampling map data
CN107209091A (zh) * 2015-01-31 2017-09-26 豪夫迈·罗氏有限公司 用于中间解剖的系统和方法
US9600146B2 (en) * 2015-08-17 2017-03-21 Palantir Technologies Inc. Interactive geospatial map
US9741112B2 (en) * 2015-09-10 2017-08-22 Definiens Ag Generating image-based diagnostic tests by optimizing image analysis and data mining of co-registered images
JP6437902B2 (ja) * 2015-09-18 2018-12-12 富士フイルム株式会社 画像抽出システム,画像抽出方法,画像抽出プログラムおよびそのプログラムを格納した記録媒体
RU2632128C1 (ru) * 2016-04-04 2017-10-02 Общество С Ограниченной Ответственностью "Яндекс" Способ и система загрузки фрагментов изображения на клиентское устройство
RU2632150C1 (ru) * 2016-04-04 2017-10-02 Общество С Ограниченной Ответственностью "Яндекс" Способ и система загрузки фрагментов изображения на клиентское устройство

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006323448A (ja) * 2005-05-17 2006-11-30 Sony Corp データ共有システムおよび方法
JP2011117991A (ja) * 2009-11-30 2011-06-16 Sony Corp 情報処理装置、情報処理方法及びそのプログラム
JP2011133849A (ja) * 2009-11-30 2011-07-07 Sony Corp 情報処理装置、情報処理方法及びそのプログラム
JP2011150400A (ja) * 2010-01-19 2011-08-04 Sony Corp 情報処理装置、情報処理方法、及びそのプログラム

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2020038600A (ja) * 2018-08-31 2020-03-12 ソニー株式会社 医療システム、医療装置および医療方法
JP7322409B2 (ja) 2018-08-31 2023-08-08 ソニーグループ株式会社 医療システム、医療装置および医療方法

Also Published As

Publication number Publication date
CN103154915A (zh) 2013-06-12
EP2748709A4 (en) 2015-07-08
BR112013008721A2 (pt) 2020-11-03
US9398233B2 (en) 2016-07-19
WO2013027323A1 (en) 2013-02-28
EP2748709B1 (en) 2018-09-05
CN103154915B (zh) 2017-05-03
EP2748709A1 (en) 2014-07-02
CA2811889A1 (en) 2013-02-28
US20130208078A1 (en) 2013-08-15
JP5859771B2 (ja) 2016-02-16
US20160301879A1 (en) 2016-10-13

Similar Documents

Publication Publication Date Title
EP3657824A2 (en) System and method for multi-user control and media streaming to a shared display
JP5859771B2 (ja) 情報処理装置、情報処理システム情報処理方法及びプログラム
US8762856B2 (en) System and method for collaborative information display and markup
JP7084450B2 (ja) 分散メディアの相互作用かつリアルタイムの可視化のためのシステムおよび方法
JP2006345214A (ja) 3次元イメージデータ配信装置並びに3次元イメージデータ配信方法
JP2017228321A (ja) 情報処理装置、情報処理方法、情報記憶装置、情報処理システムおよび表示制御装置
JP2005327302A (ja) ネットワーク環境におけるレポート作成システム
JP6369581B2 (ja) 情報処理装置、情報処理方法及びプログラム
JP2016105285A (ja) 情報処理装置、情報処理システム情報処理方法及びプログラム
JP6787370B2 (ja) 情報処理装置、情報処理方法及びプログラム
JP5310427B2 (ja) 通信端末装置、通信制御方法、及び通信制御プログラム、
JP6640464B2 (ja) 会議管理装置、会議管理方法及び会議管理プログラム
US9628530B2 (en) System and method for moderated and on-demand visual file distribution
US11893541B2 (en) Meeting and collaborative canvas with image pointer
Bohak et al. Remote interaction in web-based medical visual application
JP2002312403A (ja) サムネイル管理装置及び方法、文書管理システム、記憶媒体並びにプログラム
CN118200305A (zh) 远程协助方法、电子设备及存储介质
JP2013232125A (ja) 電子会議システム
JP2005215758A (ja) 分散オフィスシステム
JP2006260478A (ja) 分散協調作業支援システム

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20140804

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20140804

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20150616

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20150806

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20150825

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20151023

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20151117

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20151217

R150 Certificate of patent or registration of utility model

Ref document number: 5859771

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees