JP2012528403A - 専用ウェブポータルを用いた医療用スキャンの高度可視化高速アクセス方法およびシステム - Google Patents

専用ウェブポータルを用いた医療用スキャンの高度可視化高速アクセス方法およびシステム Download PDF

Info

Publication number
JP2012528403A
JP2012528403A JP2012513248A JP2012513248A JP2012528403A JP 2012528403 A JP2012528403 A JP 2012528403A JP 2012513248 A JP2012513248 A JP 2012513248A JP 2012513248 A JP2012513248 A JP 2012513248A JP 2012528403 A JP2012528403 A JP 2012528403A
Authority
JP
Japan
Prior art keywords
client device
server
frame
frames
data set
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2012513248A
Other languages
English (en)
Other versions
JP5681706B2 (ja
Inventor
コヴァラン、コーヴェイ
Original Assignee
ケイジャヤ、エルエルシー
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Family has litigation
First worldwide family litigation filed litigation Critical https://patents.darts-ip.com/?family=43223360&utm_source=google_patent&utm_medium=platform_link&utm_campaign=public_patent_search&patent=JP2012528403(A) "Global patent litigation dataset” by Darts-ip is licensed under a Creative Commons Attribution 4.0 International License.
Application filed by ケイジャヤ、エルエルシー filed Critical ケイジャヤ、エルエルシー
Publication of JP2012528403A publication Critical patent/JP2012528403A/ja
Application granted granted Critical
Publication of JP5681706B2 publication Critical patent/JP5681706B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T15/003D [Three Dimensional] image rendering
    • G06T15/08Volume rendering
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H30/00ICT specially adapted for the handling or processing of medical images
    • G16H30/20ICT specially adapted for the handling or processing of medical images for handling medical images, e.g. DICOM, HL7 or PACS
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H30/00ICT specially adapted for the handling or processing of medical images
    • G16H30/40ICT specially adapted for the handling or processing of medical images for processing medical images, e.g. editing
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H40/00ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices
    • G16H40/60ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the operation of medical equipment or devices
    • G16H40/63ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the operation of medical equipment or devices for local operation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L63/00Network architectures or network communication protocols for network security
    • H04L63/02Network architectures or network communication protocols for network security for separating internal from external traffic, e.g. firewalls
    • H04L63/0272Virtual private networks
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L63/00Network architectures or network communication protocols for network security
    • H04L63/04Network architectures or network communication protocols for network security for providing a confidential data exchange among entities communicating through data packet networks
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L63/00Network architectures or network communication protocols for network security
    • H04L63/04Network architectures or network communication protocols for network security for providing a confidential data exchange among entities communicating through data packet networks
    • H04L63/0428Network architectures or network communication protocols for network security for providing a confidential data exchange among entities communicating through data packet networks wherein the data content is protected, e.g. by encrypting or encapsulating the payload
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L63/00Network architectures or network communication protocols for network security
    • H04L63/08Network architectures or network communication protocols for network security for authentication of entities
    • H04L63/083Network architectures or network communication protocols for network security for authentication of entities using passwords
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L63/00Network architectures or network communication protocols for network security
    • H04L63/10Network architectures or network communication protocols for network security for controlling access to devices or network resources
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/02Protocols based on web technology, e.g. hypertext transfer protocol [HTTP]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/10Protocols in which an application is distributed across nodes in the network
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2210/00Indexing scheme for image generation or computer graphics
    • G06T2210/08Bandwidth reduction
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2210/00Indexing scheme for image generation or computer graphics
    • G06T2210/41Medical
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/10Protocols in which an application is distributed across nodes in the network
    • H04L67/1097Protocols in which an application is distributed across nodes in the network for distributed storage of data in networks, e.g. transport arrangements for network file system [NFS], storage area networks [SAN] or network attached storage [NAS]

Landscapes

  • Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Computer Security & Cryptography (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • General Engineering & Computer Science (AREA)
  • Computing Systems (AREA)
  • Computer Hardware Design (AREA)
  • General Health & Medical Sciences (AREA)
  • Medical Informatics (AREA)
  • Primary Health Care (AREA)
  • Public Health (AREA)
  • Epidemiology (AREA)
  • Theoretical Computer Science (AREA)
  • Biomedical Technology (AREA)
  • Radiology & Medical Imaging (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Graphics (AREA)
  • General Business, Economics & Management (AREA)
  • Business, Economics & Management (AREA)
  • Human Computer Interaction (AREA)
  • Information Transfer Between Computers (AREA)
  • Apparatus For Radiation Diagnosis (AREA)
  • Medical Treatment And Welfare Office Work (AREA)
  • Magnetic Resonance Imaging Apparatus (AREA)
  • Image Generation (AREA)
  • Computer And Data Communications (AREA)

Abstract

インターネット上で集中データベースのボリュームビジュアライゼーション・データセットの一連の三次元仮想ビューをクライアント装置に表示するシステムは、遠隔地から集中データベースへボリュームビジュアライゼーション・データセットを確実に送るための通信装置と、ボリュームビジュアライゼーション・データセットを含む1つ以上の中央データ記憶媒体と、クライアントの要求に基づいて仮想ビューを生成するように集中データベースと通信する複数のサーバを用いる。リソースマネージャはサーバの負荷バランスを取り、セキュリティ装置はクライアント装置とサーバとリソースマネージャと中央記憶媒体の間の通信を制御する。物理的に固定されたサイトはコンポーネントを含む。ウェブアプリケーションはボリュームビジュアライゼーション・データセットの仮想ビューに対する遠隔地のユーザの要求を受け入れ、その要求をサーバに伝送し、結果としての仮想ビューをサーバから受け取り、そして結果としての仮想ビューを遠隔地のユーザに表示する。
【選択図】図1

Description

〔関連出願〕
本出願は、2009年5月28日に出願された米国仮出願番号第61/181,695号の優先権を主張する。
本発明は、1つまたはそれ以上の集中データベースに含まれたボリュームビジュアライゼーション・データセットの、インターネットで伝送された一連の三次元仮想ビューをクライアントのコンピュータで表示するための方法およびシステムに関する。
医療用スキャンの簡便なアクセスに対する要求は増大しており、これらの大容量スキャンを解釈実行するより簡単かつより高速なウェイに対する期待が増している。科学技術は患者看護の改善と同様により良好な診断および予後を導き出し得る現在の二次元(2D)スキャンからより高度な三次元(3D)ビューを提供するように存在している。しかしながら、現用のソリュージョンはユビキタスであるべき3Dには非現実的である。
患者の身体のコンピュータ断層撮影(CT)スキャンまたは磁気共鳴断層撮影(MRI)スキャンは、インターネット上で伝送されるときに時間のかかる大容量の3Dデータセットになる。スキャンは、典型的に、患者の身体または臓器のような身体の一部の離間された二次元平面断面である。これらまたはその他の目的物のスキャンは、コンピュータまたはその他の専用プロセッサにより受け入れ可能な、どちらか言うと通常のデータ記憶媒体にボリュームビジュアライゼーション・データセットとして記憶される。スキャンはスキャン目的物に表れる連続して配列された平行なイメージであると仮定すると、ボリュームビジュアライゼーション・データセットの3D仮想ビューは特定の位置および角度で目的物の体積を通って切断された面を選定することにより作成される。選定された面はスキャンに或いはスキャンにある角度を持って平行である。位置はスキャンされた目的物の体積内のいかなる場所でもよい。3D仮想イメージは、所望の透視ビューを示す3Dオブジェクトの二次元表現であり、そして、目的物の深さまたは目的物を直角方向に通って選択された面のビューの後方を示すイメージを含む。
ダイナミック3Dビューを生成することは、生の2Dスキャンを3Dに処理し、生のスキャンから関心ある特徴を分離するように処理する必要がある。それ故、3Dを可能にするためには、ユーザのコンピュータか専用のサーバのいずれかは、この処理能力を十分に維持するように高能力である必要があり、2Dスキャンは高速通信リンクを介してユーザのコンピュータに直接利用できる必要がある。ホスピタル・アンド・イメージングセンタのような施設は、ソフトウェア、ハードウェア、およびネットワーク基盤を提供し、彼ら内科医の3Dへのアクセスを可能にするIT運営を支持する必要がある。このことは高額となり、選ばれた幾つかだけがこのような「贅沢」な機能性を彼ら内科医に提供する管理負担を追加する。本発明は、経済的規模を豊富に適用できる低バンド幅のウェブポータルを介して大容量の医療用スキャンを受信し、記憶し、処理しそして表示するために、共通および集中型基盤の方法およびシステムを教示することによりこの制限を克服する。
特に辺地の低バンド幅で高待ち時間状況のウェブポータルを介するインターネット接続は、3Dで提供されるユーザ情報の双方向性をより高めることができる。待ち時間、すなわち、特定のポイントから要求に応答する別のポイントへのデータのパケットの移送を行う時間的な遅延は、低バンド幅のインターネット通信を有するユーザにとって特に問題である。他に断らない限り、用語「低バンド幅」は約1.5Mbps以下の通信速度を言い、そして用語「高待ち時間」は約125ms以上の応答時間を言う。ユーザは任意にかつ動的に生成されたビューを要求し得る。この要求は、通常、処置のために生のスキャンデータがユーザのコンピュータに示される必要があることを命じる。大容量の3D、四次元(4D)、またはそれより高次元のスキャンのために、回収または処理用の生のスキャンは低バンド幅ネットワーク上では非実用的であり不可能である。(4Dにおけるスキャンは3Dの時間変化の形式で、或いは1つに組み合わされたPETおよびCTスキャナ・データセットのような、2つのデータセットの組合せ結果として現れる。また、PET−CTが組み合わされそして時間成分を有する場合、これは非常に大きなデータセットを伴う5Dスキャンと言うことができる。)クラウス・エンゲルにより「イメージストリーミング技術を用いた遠隔3D可視化(Remote 3D Visualization using Image-streaming Techniques)」で発表されたものは、ユーザの機械装置に生のスキャンを受信させる必要なしにウェブ上でクライアントとサーバのインタラクションを介して、いかにしてボリュームビジュアライゼーションを得ることができかを教示している。しかしながら、このような技術は双方向式のフレームレートで情報を与えるのに十分なバンド幅および低待ち時間ネットワークを必要とする。このことは辺地にとって医療用スキャンに高度な可視化フォーマットで双方向の接続を得ることに問題がある。
さらに、医療サービスプロバイダは6年間またはそれ以上の医療記録の保管を要求されており、そして最大限の保安と漏洩防止を持ってそれを行わなければならない。このことは経費が高騰し、そしてIT、物理的空間および費用管理制限できるように施設に管理負担を加える。末端効果は施設の運営がその場限りの処置を残すことである。
Remote 3D Visualization using Image-streaming Techniques (National Science Foundation発行, 1999年)
従来技術の問題点および欠点に鑑み、本発明の目的は次の1つまたはそれ以上のものを提供することにある。1)特に、いかなるインターネット接続において大容量の医療用スキャンおよびその他のボリュームビジュアライゼーション・データセットの可視化ための双方向ウェブアプリケーションのために、標準的なインターネットの固有特性である低バンド幅および高待ち時間の制限を解消しそしてバンド幅の使用を最適化できる方法およびシステム。2)豊富な規模の経営を適用できるウェブポータルを介して大容量の医療用スキャンを受信、記憶、処理および表示するために共通および集中化基盤を提供することにより保安および漏洩防止の下で医療記録を長時間保持する問題を解消する方法およびシステム。
本発明のさらに別の目的および利点は本明細書からある程度明らかとなるであろう。
上述および当業者にとって自明なその他の目的の一つまたはそれ以上は、本発明において達成され、それは、少なくとも1つの集中データベースに含まれるボリュームビジュアライゼーション・データセットの一連の三次元仮想ビューをインターネット上でクライアント装置で表示するためのシステムを指向しており、遠隔地からボリュームビジュアライゼーション・データセットを受け入れて集中データベースに確実に伝送するための少なくとも1つの送信機と、ボリュームビジュアライゼーション・データセットを含む少なくとも1つの中央データ記憶媒体と、少なくとも1つの集中データベースと通信し、クライアントの要求に基づいて仮想ビューを生成するようにボリュームビジュアライゼーション・データセットを処理することができる複数のサーバとから構成される。本システムはまた、複数のサーバの負荷バランスを取るためのリソースマネージャ装置と、クライアント装置と、サーバとの間、リソースマネージャと中央記憶媒体との間の複数の通信を制御するセキュリティ装置と、集中データベース、複数のサーバ、少なくとも1つのリソースマネージャおよび少なくとも1つのセキュリティ装置を収容するための少なくとも1つの物理的に固定されたサイトとを含む。本システムはさらに、ボリュームビジュアライゼーション・データセットの仮想ビューに対する少なくとも1つのユーザの要求を遠隔地で受け付け、その要求を少なくとも1つのサーバに伝送し、当該少なくとも1つのサーバから生成仮想ビューを受領し、遠隔地のユーザに当該生成仮想ビューを表示することによりユーザの要求を満足させるように適合されたウェブアプリケーションを含む。
システム保護サイトはSAS70タイプII対応或いは同等な監査済または検査済データセンタであってもよい。離隔した物理的位置に配置された複合的な保護サイトはインターネットを介して接続される。
ウェブアプリケーションはウェブブラウザのドメインネームアドレスまたはドメインネームシステムによるリソースマネージャの保護サイトIPアドレスを用いることにより保護サイトを選定することもできる。ウェブアプリケーションは診断用イメージ表示目的のための医療用装置であってもよい。ウェブアプリケーションは要求を少なくとも1つのサーバに伝送する前に、認可されたユーザの認証情報を用いて確認することもできる。
認証されたウェブアプリケーションは認証済みユーザにより視認可能なボリュームビジュアライゼーション・データセットをリストアップしてもよく、そしてボリュームビジュアライゼーション・データセットを選択することにより仮想ビュー表示を開始することもできる。ボリュームビジュアライゼーション・データセットの仮想ビューに対する要求はXMLドキュメントまたはハイパーテキスト転送プロトコルセキュア(HTTPS)上のウェブサーバを用いることもできる。
ウェブアプリケーションはリソースマネージャ装置と通信することもでき、そしてリソースマネージャ装置により少なくとも1つのサーバに割り当ててもよい。ウェブアプリケーションはユーザの要求を満足させるようにサーバとインタラクションを開始するように適合され、そしてアクティブXコンポーネント、ジャバアプレットまたはジャバスクリプト、フラッシュまたはシルバーライト或いはその他のウェブブラウザスクリプト化可能な言語であってもよい。
本システムはさらに、要求および生成された仮想ビューが伝送される暗号化通信接続を含むこともできる。暗号化通信接続はSSL/TLSを用いることもでき、そしてSSL/TLSでのみ接続される安全な通信ポートをさらに含むこともできる。
別の観点において、本発明は、少なくとも1つの集中データベースに含まれるボリュームビジュアライゼーション・データセットの一連の三次元仮想ビューをインターネット上でクライアント装置に表示するための方法を指向する。本方法は、ボリュームビジュアライゼーション・データセットを備えた中央データ記憶媒体を提供することと、少なくとも1つの集中データベースと通信しそしてクライアントの要求に基づいて仮想ビューを生成するようにボリュームビジュアライゼーション・データセットを処理できる少なくとも1つのサーバを提供することと、インターネット上で少なくとも1つのサーバおよび中央データ記憶媒体にリンクされ、ボリュームビジュアライゼーション・データセットのビューのフレームを記憶するためのローカルデータ記憶媒体を有するクライアント装置を提供することとから構成される。本方法は次いで、ボリュームビジュアライゼーション・データセットの少なくとも一部の少なくとも1つの三次元仮想ビューをクライアント装置で要求することと、ボリュームビジュアライゼーション・データセットの要求された少なくとも1つのビューのいずれかのフレームがローカルデータ記憶媒体に記憶されたときを決定することと、ローカルデータ記憶媒体に記憶されていない要求された少なくとも1つのビューのいずれかのフレームに対する要求をクライアント装置からサーバへ送信することとを含む。本方法はさらに、サーバで、要求された少なくとも1つのビューの要求フレームを中央データ記憶媒体のボリュームビジュアライゼーション・データセットから生成することと、要求された少なくとも1つのビューの生成フレームをサーバからクライアント装置へ伝送することと、サーバから伝送されたフレームか或いはローカルデータ記憶媒体に記憶されている要求された一連のビューのいずれかのフレームを表示することによりボリュームビジュアライゼーション・データセットの要求された少なくとも1つの三次元仮想ビューをクライアント装置で表示することとを含む。
請求項17の方法は、クライアント装置のローカルデータ記憶媒体に前もっては記憶されていない、サーバから伝送された要求された一連のビューの1つまたはそれ以上のフレームをローカルデータ記憶媒体に記憶することを含む。
ボリュームビジュアライゼーション・データセットは離間間隔で目的物を通って得られる複数の断面イメージにより構成され得る。クライアント装置は複数の分離したビューフレームから構成される一連のビューを有するボリュームビジュアライゼーション・データセットの少なくとも一部の一連の三次元仮想ビューを要することもできる。ボリュームビジュアライゼーション・データセットの要求された一連の三次元仮想ビューはローカルデータ記憶媒体に記憶された要求された一連のビューのいずれかのフレームに加えてサーバから伝送されたフレームを連続して表示することによりクライアント装置で表示され得る。クライアント装置でボリュームビジュアライゼーション・データセットの要求された一連の三次元仮想ビューを表示する間に、ローカルデータ記憶媒体に記憶されたフレームはサーバから伝送されたフレームに加えて表示され得る。
本方法はまた、各データ記憶媒体がボリュームビジュアライゼーション・データセットの全部または一部を含む複数の中央データ記憶媒体を提供することを含むこともでき、そしてデータ記憶媒体を選択することを含むこともでき、そこからボリュームビジュアライゼーション・データセットから要求された一連のビューの要求されたフレームが生成されて伝送される。
ローカルデータ記憶媒体に要求された少なくとも1つのボリュームビジュアライゼーション・データセットのいずれかのフレームを記憶することを決定することは、ボリュームビジュアライゼーション・データセット三次元仮想ビューのクライアント装置による要求の固有識別キーを生成することと、三次元仮想ビューのクライアント装置による前回の要求の固有識別キーをローカルデータ記憶媒体に記憶することと、三次元仮想ビューのクライアント装置による現在の要求の固有識別キーを三次元仮想ビューのクライアント装置による前回の要求の記憶された固有識別キーと比較することと、現在および前回の固有識別キーの値が等しくなるときを決定することとにより行われ得る。値が等しいとき、本方法は、前回の要求の三次元仮想ビューの記憶されたフレームをローカルデータ記憶媒体から表示することを含むこともできる。値が等しくないとき、クライアント装置による現在の要求の三次元仮想ビューのサーバから伝送されたフレームを表示することを含むこともできる。本方法はさらに、クライアント装置による前回の要求の三次元仮想ビューの固有識別キーを前回の要求の三次元仮想ビューの記憶されたフレームと関連付けてもよい。値が等しいとき、本方法は、ローカルデータ記憶媒体の前回の要求の三次元仮想ビューの記憶されたフレームの位置を決定し、そしてその位置を用いて記憶されたフレームを表示することもできる。
さらに別の観点において、本発明は、少なくとも1つの集中データベースに含まれたボリュームビジュアライゼーション・データセットの一連の三次元仮想ビューをクライアント装置で表示するための方法を指向する。本方法は、ボリュームビジュアライゼーション・データセットを含む少なくとも1つの中央データ記憶媒体を提供することと、少なくとも1つの集中データベースと通信し、クライアントの要求に基づいて仮想ビューを生成するようにボリュームビジュアライゼーション・データセットを処理することができる少なくとも1つのサーバを提供することと、そしてインターネット上でサーバおよび中央記憶媒体にリンクされるクライアント装置を提供することとから構成される。本方法は次いで、ボリュームビジュアライゼーション・データセットの少なくとも一部の複数の三次元仮想ビューに対する要求をクライアント装置からサーバへ送信することを含む。複数のビューは複数の個別のビューフレームから構成され、要求はフレームのより低位のイメージ品質パラメータに対する要求とフレームのより高位のイメージ品質パラメータに対する要求とを含む。本方法はまた、サーバで、ボリュームビジュアライゼーション・データセットから要求されたフレームをより低位のイメージ品質パラメータで生成することと、より低位のイメージ品質パラメータフレームをクライアント装置へ伝送することと、そして要求されたより低位のイメージ品質パラメータフレームの少なくとも一部をクライアント装置で表示することとを含む。本方法はさらに、サーバで、ボリュームビジュアライゼーション・データセットから要求されたより高位のイメージ品質パラメータフレームを生成することと、より高位のイメージ品質パラメータフレームをクライアント装置へ伝送することと、そして要求されたより高位のイメージ品質パラメータフレームをクライアント装置で表示することとを含む。
より低位のイメージ品質パラメータフレームをクライアント装置に伝送した後に、サーバはクライアント装置がより低位のイメージ品質パラメータフレームを表示している間により高位のイメージ品質パラメータフレームをクライアント装置に伝送してもよい。クライアント装置はより低位のイメージ品質パラメータフレームの表示を完了する前または後により高位のイメージ品質パラメータフレームを表示することもできる。フレームは圧縮ビデオストリームまたは1つまたはそれ以上の単一フレームとしてサーバからクライアント装置に伝送してもよい。
さらに別の観点において、本発明は、少なくとも1つの集中データベースに含まれたボリュームビジュアライゼーション・データセットの一連の三次元仮想ビューをクライアント装置で表示するための方法を指向する。本方法は、ボリュームビジュアライゼーション・データセットを含む少なくとも1つの中央データ記憶媒体を提供することと、少なくとも1つの集中データベースと通信し、クライアントの要求に基づいて仮想ビューを生成するようにボリュームビジュアライゼーション・データセットを処理することができるサーバを提供することと、インターネット上でサーバと中央記憶媒体とにリンクされるクライアント装置を提供することとから構成される。本方法は次いで、複数の個別のビューフレームから構成される一連のビューを有する、ボリュームビジュアライゼーション・データセットの少なくとも一部の一連の三次元仮想ビューをクライアント装置で要求することを含む。本方法はまた、要求された一連の三次元仮想ビューを異なったグループのフレームにクライアント装置で分離することと、第1グループのフレームに対する要求をクライアント装置からサーバに送る一方、第2グループのフレームに対する要求をサーバに遅延して送ることとを含む。本方法はさらに、サーバで、ボリュームビジュアライゼーション・データセットから要求された第1グループのフレームを生成して、第1グループのフレームをクライアント装置へ伝送することと、要求された第1グループのフレームをクライアント装置で表示する一方、クライアント装置からサーバに第2グループのフレームに対する要求を同時に送ることとを含む。本方法はまた、サーバで、ボリュームビジュアライゼーション・データセットから要求された第2グループのフレームを生成して、クライアント装置が第1グループのフレームを表示している間にクライアント装置に第2グループのフレームを伝送することと、要求された一連の三次元仮想ビューの適切な継続的表示を維持するように、第1グループのフレームに続いて直ちに要求された第2グループのフレームをクライアント装置で表示することとを含む。
少なくとも1つの集中データベースと通信してクライアントの要求に基づいて仮想ビューを生成するようにボリュームビジュアライゼーション・データセットを処理できる複数のサーバと、クライアント装置との間、およびサーバと中央記憶媒体との間の複数の通信を制御するセキュリティ装置とをさらに備えることもできる。
本方法は、以前のグループのフレームが表示されている間に次続のグループのフレームに対する要求をクライアント装置からサーバへ送ることと、要求された第2グループのフレームをボリュームビジュアライゼーション・データセットからサーバで生成することと、クライアント装置が以前のグループのフレームを表示している間に第2グループのフレームをクライアント装置に伝送することと、そして、適当な連続した表示を維持するように要求された次続のグループのフレームを以前のグループのフレームに続いてクライアント装置で直ちに表示することとをさらに含むこともできる。
クライアント装置とサーバとは待ち時間を有するネットワークにより接続され、要求されたグループのフレームは待ち時間に従ってクライアント装置からサーバへの送信時に遅延されてもよい。フレームのグループは圧縮ビデオストリームとして、或いは1つまたはそれ以上の個別のフレームとしてサーバからクライアント装置に伝送してもよい。要求されたフレームはクライアント装置のローカルデータ記憶媒体に記憶してもよい。
第1グループのフレームに対する要求もまたフレームのより低位のイメージ品質パラメータに対する要求を含み得る。第1グループのフレームを要求されたより低位のイメージ品質パラメータでクライアント装置に伝送した後に、サーバはより高位のイメージ品質パラメータでフレームをクライアント装置に伝送し得る。
本発明の新規な特色および本発明の特徴とする構成要素は添付の請求の範囲の特徴に述べられている。図は例示の目的のみで示されており、縮尺を合わせたものではない。しかしながら、本発明自体は構成および操作方法の両者に関して添付の図面と共に後述する詳細な説明から良好に理解されよう。
図1は、少なくとも1つの集中データベースに含まれたボリュームビジュアライゼーション・データセットの一連の三次元仮想ビューをインターネット上でクライアントのコンピュータに表示するための本発明のシステムおよび方法の要部と動作時の相互作用を示す模式図である。 図2は、性能(送信レート)およびイメージ品質の異なった組み合わせでボリュームビジュアライゼーション・データセットのビューのフレームを伝送するための、クライアントのコンピュータにより作成される要求を示す図である。 図3は、ボリュームビジュアライゼーション・データセットのフレームのローカル記憶イメージとサーバ記憶イメージとを組み合わせる本方法の一実施例を示すフロー図である。 図4は、ネットワーク待ち時間による、中央サーバおよびデータ記憶装置から伝送されるビューフレームを表示する際の遅延を縮小する本方法の一実施例を示すフロー図である。 図5は、要求されたビューフレームがユーザのローカル記憶媒体で利用できるときを迅速に決定する本方法の一実施例を示すフロー図である。
本発明の実施例の説明において、参照符号は図面の図1−5について同様な符号が本発明の同様な特徴に付されている。
一実施例における本発明は、専用のウェブポータルを用いて医療用スキャンの高度な可視化、特に、容積測定データ、例えば、医療用スキャンの高度な可視化の高速アクセスのための方法およびシステムを提供する。図1に示されるように、本発明の方法およびシステム20の一実施例は、いくつかの機能コンポーネントまたはレイヤ、すなわち、アプリケーションレイヤ30、外部ネットワークレイヤ40、セキュリティレイヤ80、負荷バランサレイヤ90、並びに記憶および処理レイヤ100から構成される。サーバやユーザを有する場合と同様に個々のシステムコンポーネントまたはレイヤ間の通信および伝送接続は、無線、有線、光ファイバケーブル、高周波(RF)或いは同様な手段により形成され、そしてまた、内部ネットワーク(LAN)、広域ネットワーク(WAN)、および/またはインターネット或いはその他の接続手段を介して形成され得る。個々のシステムコンポーネントはハードウェアまたはコンピュータ内のソフトウェアモジュールとして協働され得る。より高い伝送速度を可能にする通信および伝送接続が望ましいが、本発明は、ユーザと容積測定データとの間が低バンド幅および高待ち時間状況であるところでも特に有効である。
顧客またはユーザは、イントラネットまたはインターネットを通して通信できる遠隔地でコンピュータまたはその他の電子装置22のどちらかと言えば通常のウェブブラウザアプリケーション32を使用し、その装置もまた、顧客のデータソースとして使用され得るローカルコンピュータ・読取り可能記憶媒体24との接続23を有し得る。記憶媒体24は、後述されるように、ほかの場所で作成されたCTまたはMRIスキャンのようなボリュームビジュアライゼーション・データセットのすべてまたは一部を受信し、そして集中データベースへのそのようなデータセットの送信装置として機能するように用いられ得る。記憶媒体24はまた集中データベースから、そこから生成されたボリュームビジュアライゼーション・データセットまたはビューのすべてまたは一部のダウンロードを受信して記憶するようにも用いられ得る。1つまたはそれ以上のコンピュータ読取り可能媒体は単独または組み合わされて利用され得る。好適なコンピュータ読取り可能記憶媒体は、例えば、しかしこれに制限されるものではないが、電子的、磁気的、光学的、電磁気的、赤外線または半導体システム、設備または装置、或いはそれらの適当な組合せをも利用し得る。適当なコンピュータ読取り可能記憶媒体のその他の例は、制限なしに、次のものを含む。1つまたはそれ以上のワイヤを有する電気的接続、携帯用コンピュータディスケット、ハードディスク、ランダムアクセスメモリ(RAM)、リードオンリーメモリ(ROM)、消去可能プログラマブルROM (EPROMまたはフラッシュメモリ)、光ファイバ、携帯用コンパクトディスクROM(例えば、CD−ROM)、光記憶装置(例えば、DVD−ROM)、磁気記憶装置(例えば、ディスケット)、或いはそれらの適当な組合せ。適当なコンピュータ読取り可能記憶媒体は、命令実行システム、設備または装置により、または協働して使用するためのプログラムを含む、または記憶することができるどのような有形媒体でもあり得る。
アプリケーションレイヤ30には、1つまたは多くのウェブブラウザアプリケーション32と1つまたは多くのオンサイトルータ34があり得る。アプリケーションレイヤは、通信の暗号化チャネル(SSL/TLSのような)を用いてアプリケーションレイヤのローカルネットワークをレイヤのレストに接続するインターネット50またはその他のネットワークを用いる外部ネットワークレイヤ40に接続される。安全な通信ポートは、SSL/TLSでのみ作動する通信、例えば、443/8443/9443/カスタムポートを使用し得る。この接続は、ウェブブラウザとインターネットの間の高または低バンド幅接続51であり得、そして顧客データソース24とオンサイトルータ34の間の接続54と、オンサイトルータとインターネットの間の接続54を含み得る。仮想プライベートネットワーク(VPN)36もまた顧客データソースとインターネットの間に用い得る。接続は、1つまたは多くのドメインネームサービス(DNS)ルックアップサービス42により容易にされ得、そしてその中の1つまたは多くのサービス用物理的サイトまたはサーバがダウンしたときのために、トラフィックを導くのと同様に負荷バランサとして機能するように使用され得る。
外部ネットワークレイヤは、セキュリティレイヤ80、負荷バランサレイヤ90および記憶および処理レイヤ100を危険にさらす1つまたは多くのサービス用サイト70,70’に接続55を介して接続する。セキュリティレイヤは1つまたは多くのファイアウォール76、侵入検知システム72、および侵入防止システム72により構成される。負荷バランサレイヤ90はマスターおよびスレーブ構成を有する少なくとも2つのリソース管理サーバ92を含み得る。負荷バランサレイヤ90は、記憶容量のスケーラビリティを取り扱いそしてセキュリティレイヤを通してユーザ22と通信する記憶および処理レイヤ100として仕事率を動的に処理するようにサーバの割当ておよび拡張を管理する。記憶および処理レイヤには、記憶能力および高性能ベクトルプロセッサを有するサーバ102のクラスタに置き得る。サーバ102は、リソースマネージャ90を通って接続57および58を介して、或いは接続59を介して直接セキュリティレイヤ80と通信する。セキュリティ、負荷バランサならびに記憶および処理レイヤはサービス用サイト70に物理的に配置され得る。冗長性のために、1つまたは多くの二重セキュリティ、負荷バランサ並びに記憶および処理レイヤが、1つまたは多くの追加のサービス用サーバ70’に物理的に配置される。サービス用サイト70,70’は外部ネットワークレイヤ40を介して互いに接続され得る。追加的または互換的に、異なる位置70,70’ のプライベートネットワークの記憶および処理レイヤ100は、それらの間の情報交換を急速にできるように、プライベートネットワーク60を介し、接続56を介して接続される。
記憶および処理レイヤサーバ102は、1つまちはそれ以上のコンピュータ読取り可能ボリュームデータ記憶媒体(前述のような)、ボリューム処理サーバ、およびアプリケーション相互作用のためのウェブまたはアプリケーションサーバを有するサーバクラスタから構成し得る。サーバ102はサービス用サイトでコンピュータ読取り可能ボリュームデータ記憶媒体と通信し、そしてこのデータ記憶媒体のボリュームデータセットを処理して処理済情報の可視化の表示アプリケーションと通信できる。記憶および処理サーバは、ウェブブラウザアプリケーション30を介して手動式にアップロードすることによりユーザの記憶媒体24から伝送されるデータを受信し得る。互換的に、記憶および処理サーバは、一方向または双方向VPN36,136を介してそれぞれ接続される、データソースに組み込まれたオンサイトルータ34またはセキュリティレイヤ80に組み込まれたオフサイトルータ78を通して伝送されるデータを記憶媒体24から受信し得る。ルータ34,78は、ソース位置の現在の記憶基盤にアクセスするように構成され得、ソース位置から記憶および処理サーバへのソースデータを移動するように構成され得る。データ移動は、認証された個人がルータにアクセスすることによる手動的な方法を介して行われるか、或いは使用前にくみ上げられた自動的な規則を介するかのいずれかであり得る。規則の基準は、これらに制限されるものでないが、特定の日付間隔を用いる、或いはボリュームタイプまたは特定のユーザや機関などに属するボリュームデータに基づいてデータを移動することであり得る。ルータは、記憶装置サーバが特定のデータを受け入れ可能であることを確認するように負荷バランサレイヤと交渉する。記憶装置が受け入れ可能であることを選択する基準は、これに限定されるものではないが、ボリュームデータのサイズおよびボリュームデータを受け入れるサーバの性能により決定できる。データがボリュームデータ記憶装置サーバに受け入れ可能であると、データに関する情報はデータベースに入力されてウェブポータルによる可視化のためにユーザら提示され得る。
ボリュームデータセットの高度な可視化は、ユーザ相互作用パラメータとして特定される、可視化するボリュームデータセットまたはデータセットのサブセットの確認から始める。この確認は、(a)完全なボリュームデータセット、(b)各平面ビューが可変の厚さを有する、ボリュームデータセットを通る1つまたは多くの平面ビュー、(c)ボリュームデータセットの曲線サンプリング、(d)ボリュームデータセットの関心サンプリングの領域、または(d)分析をより重要かつより容易にするなにかにボリュームデータセットの表現を単純化および/または変更するようなボリュームデータセットの分割を含み得る。ボリュームデータセットの識別セットは次いで、(a)色調、不透明度、グラデーション、および/または各独立したボクセルの輝度値への多次元ベースの変移機能を適用し、そして(b)光線配分またはテクスチャ付けベースの表現技術を用いることにより可視化され得る。ユーザ相互作用パラメータに基づいて、目的物変形、投影変形、切落しおよび画面変形が、描画フレームを制作するように適用され、ユーザ相互作用シーケンスのリストが1つまたは多くのフレームを生成する。
ウェブポータルを介して容積測定データの高度な可視化にアクセスするユーザ22の相互作用は、ユーザまたはプログラムのログインを容認しそしてログインと協働するボリュームデータ記述をリストアップし、次いでウェブブラウザを通して実行可能である表示アプリケーションを起動するためのウェブアプリケーション30を有して開始され得る。表示アプリケーションはユーザまたはプログラム入力を取って1つまたは多くの記憶および処理サーバ102と通信し、そしてボリュームデータの高度可視化として処理された情報を表示する。例えば、医師、患者またはプログラムのような顧客またはオペレータは、ウェブブラウザを用いてボリュームビジュアライゼーション・ウェブポータルにログインし、認証済みユーザ22として認証される。認証済みユーザと協働される、患者のCTスキャンのリストのようなボリュームデータのリストがウェブアプリケーション30に提示される。ユーザはボリュームビジュアライゼーション・データセットから1つまたはそれ以上の静的または動的仮想イメージを選択してそのイメージをウェブアプリケーションに表示するよう要求し得る。
静的3D仮想イメージは、対象物のスキャンされる容積内の所望位置で、対象物の容積を特定の角度で切断されるべき面を選定することにより制作される。動的3D仮想イメージはスキャンされる対象物の容積を通る選定されたビュー面を移動することにより、例えば、直線の周りで回転されることにより、またはその中心を通路に沿って移動することにより、或いは両者を組み合わせることにより制作される。このことは結果として一連の3D仮想ビューを得る。この一連のビューはビュー面の移動中に異なった時間に連続的に生成された複数の個別のビューフレームから構成される。各フレームは、それが横断する元のスキャンの部分からのイメージ情報を含み、そしてさらに元のスキャン間に挿入されるイメージ情報を含み得る。ビューフレームが再生されて画面に同じ順序で表示されるとき、ユーザは要求した一連の3D仮想ビューをビデオを表示する方法で見ることができる。3D仮想ビューに対する要求はここでは相互作用として参照され、そしてビュー面の動きはここでは相互作用シーケンスとして参照される。
1つまたはそれ以上の生成されたフレームはビデオストリームとして圧縮されて表示アプリケーションに配布され得る。1つ以上のフレームを有するビデオストリームは、圧縮アルゴリズムがイントラフレームだけでなくインターフレームにおいても存在する冗長度および多くのフレームの時間的動き補償情報を利用できるので、圧縮率を増加することができる。
1つまたはそれ以上のビューへのユーザの相互作用に続いて、それと相互作用する記憶および処理サーバ102を識別するように負荷バランサ90に要求が伝えられる。ローカルバランササーバは、ユーザの要求に対応できる記憶および処理サーバ102を利用可能な集団から決定する。どのサーバが決定されるのかを選定するための判定基準は、これに限定されるものではないが、ボリュームデータのサイズ、ボリュームデータを表現するサーバの能力、サーバの現在の付加、およびデータの位置による。サーバ102が選択されると、負荷バランサはウェブアプリケーションに応答しそしてウェブアプリケーションは表示アプリケーションを記憶および処理サーバにリンクする適切な生成パラメータを有する表示アプリケーションを生成する。表示アプリケーションはねアクティブXコンポーネント、またはジャバアプレット或いはジャバスクリプト、フラッシュまたはシルバーライトのようなウェブブラウザ・スクリプト可能言語の形態のウェブアプリケーションであり得る。ウェブアプリケーションは動的ウインドウサイズまたはフルスクリーンモードを有する1つまたはそれ以上の新規なウェブページとして、または現在または新規なウェブページの埋め込みビューア、またはスタンドアローンビューアとして起動されるかのいずれかで表示アプリケーションを表示し得る。フルスクリーンモードは画面全体またはデスクトップ或いはマルチモニタに可視化像を表示する。
アプリケーションが起動されると、ユーザ22は、所望のボリュームデータ情報を得るように記憶および処理サーバ102に要求を行う。ボリュームデータ情報は、これに限定されるものではないが、ボクセルの縦横比、ボクセル間隔、次元およびビット深さを含み得る。このことはユーザへのボリュームデータの適切な起動提示をアプリケーションに用意することを可能にする。記憶および処理サーバはその記憶媒体からデータを読み込む。ボリュームデータの読み込み進行は、ビデオストリームを送信するボリュームビジュアライゼーション・ウェブサーバを有し、ストリームを表示するアプリケーションを有することによりユーザに提示され得る。ビデオストリームは、記憶および処理サーバにより生成されたフレームの集合であり得、そして、(i)処理されたイメージのビジュアライゼーションの品質と、(ii)相互作用フレームレートに対するユーザの選択に依拠して、周知の無損失または損失圧縮方法のいずれかを介して圧縮され得る。これらの2つのパラメータ並びにネットワークバンド幅および待ち時間(後に詳述する)に依拠して、記憶および処理サーバは適切な圧縮タイプを選択し得る。圧縮アルゴリズムは、サーバ102の中央演算処理装置(CPU)かグラフィック処理装置(GPU)のいずれかで実行できる。GPUおよび機械学習技術の使用は圧縮比および性能を高めるように適用できる。
圧縮パラメータは、これに限定されるものではないが、ユーザのイメージ品質の要求およびネットワークバンド幅サイズに適合され得る。イメージ品質パラメータは、相互作用中に異なったイメージ品質または性能に適合するように、そして相互作用が停止されたときのために、ユーザによりアプリケーションのオプションとして設定し得る。フレームのためのより低位のイメージ品質パラメータがフレームのためのより高位のイメージ品質パラメータよりも速いレートでサーバ102からユーザ装置22へインターネット上を伝送され得る。図2に示されるように、要求110がフレーム解像度を、例えば512×512ピクセルに制限し、ユーザ相互作用が生じている間に圧縮フレームの伝送を流すようにユーザ装置22により作成され得る。フレーム解像度のバランスは左側の高性能(伝送率)および低位のイメージ品質から右側の低性能(伝送率)および高位のイメージ品質までの範囲、或いはその間におけるいかなる組合せのスライドにより設定され得る。図2はまた、イメージ品質を更新するように、例えば、ユーザ相互作用が停止したときに性能(伝送率)およびイメージ品質に更新するように、ユーザ装置22がまた要求120を伝送し得ることを示す。これらのオプションは、高フレームレートの配布を容易にするようにより低位の品質イメージを使用することを許容し、相互作用が停止したとき、最高の忠実度を有するイメージ品質が復元され得る。アプリケーション30がストリームを受信すると、ビデオストリーム内に含まれた個々のフレームを回収するようにストームを復元し得、そして各フレームを適切なタイミングでもってユーザ装置で連続的に表示する。
サーバは、クライアント装置がより低位のイメージ品質パラメータフレームを表示している間にクライアント装置へより高位のイメージ品質パラメータフレームを伝送し得、そしてクライアント装置はより低位のイメージ品質パラメータフレームの表示を完了する前または後により高位のイメージ品質パラメータフレームを表示し得る。
ボリュームデータが完全に読み込まれたとき或いはボリュームが読み込まれているとき、ユーザ22は部分的かつ累進的に読み込まれたボリュームと相互作用することを許容される。このような相互作用は、これに限定されるものではないが、ズームのような配向、回転、パン、相互参照、閾値調整、ウィンドウ/レベル調整、変換関数操作、多重ボリュームのレイアウトを制御するドラッグおよびドロップ、2つまたは多くのボリュームの結合を操作する融合、ボリュームの一部を取り除くまたはボリュームの可視化を単純化するセグメント化、機械学習入力のための監視、等のような機能を遂行するようにユーザがアプリケーション30ユーザインターフェイスを操作することにより開始する。
ユーザ相互作用シーケンスは簡単なキーボードまたはマウス動作として、或いはオープンGL、標準化、またはボリュームデータセットの高度な可視化を生成するのに手儀号するその他の周辺情報と組み合わせのような複合図表状態として説明され得る。相互作用シーケンスは、これに限定されるものではないが、XML文書としてカプセル化される。ユーザ相互作用シーケンスは、適切な手続きを呼び出すことにより標準的プロセス間通信(IPC)技術を用いて記憶および処理サーバ102と通信し得る。IPC要求において、サーバ102処理手順名およびパラメータは、これに限定されるものではないが、XML文書を用いてカプセル化され得る。処理手順は、これに限定されるものではないが、安全なリモートプロシージャコール(RPC)を通すかまたは、ハイパーテキスト転送プロトコル(HTTP)上の暗号化XMLを通すか或いは、ハイパーテキスト転送プロトコルセキュア(HTTPS)を通すかのいずれかを用いることで実行され得る。処理手順のユーザに戻される情報もまたXML文書の形態であり得る。IPC通信はチャンネルを暗号化することにより保護され、例えば、HTTPSプロトコルは規定値のSSL/TSL暗号化を提供する一方、その他のプロトコルは公開キーと秘密キーの組合せを用いて暗号化され得る。ユーザはアプリケーションの閉鎖機能を用いて、例えば、ユーザまたはプログラムが最初にログインしたウェブページでログアウトコマンドを選択することによりアプリケーションを終了し得る。
アプリケーション30とサーバ102の間のネットワーク待ち時間を解消するために、ユーザ相互作用はネットワーク待ち時間(通常、300〜350ミリ秒以下)まで待機され、次いでユーザ相互作用の収集が記憶および処理サーバに送られる。図4に示されるように、中央サーバ300から伝送されたビューフレームを表示する際の遅れを縮減する方法は、情報に対するユーザの要求がネットワーク待ち時間(例えば、350ms)に等しい時間だけアプリケーション30で待機される多数の要求に分散されるステップ310を備える。次いで、ステップ320において、要求はサーバ102へ順次に送られる。記憶および処理サーバは各ユーザ情報のためのフレームとしてイメージを生成し、そしてフレームの収集からビデオストリームを生成する。ステップ330において、第1要求のフレームで作成されたビデオストリームは、無損失または損失圧縮スキームのいずれかを通してサーバ102によって圧縮され、そして、例えば、圧縮ビデオストリームとしてアプリケーション30に送られ得る。アプリケーションは次いで、ストリームを復元して各フレームを正しいタイミングで表示する(ステップ340)ことによりこのビデオストリームを再生し得る。その時間中、ボリュームビジュアライゼーション・ウェブサーバはレンダリングしてアプリケーションにビデオストリームを送り返し、ユーザ相互作用シーケンスはアプリケーションによって連続的に受け入れ、そしてその相互作用は前述したようにネットワーク待ち時間に従って待機されてサーバに送られ得る(ステップ350)。相互作用シーケンスの蓄積、これらのシーケンスのウェブサーバへの送信および前回の相互作用シーケンスのビデオストリームの再生の処理は、ユーザ22が相互作用を停止するまで繰り返され得る。サーバは次続の要求から圧縮ビデオストリームを送り続け、アプリケーションはそのときユーザにそれを表示する(ステップ360)。アプリケーション側でユーザ相互作用シーケンスの収集を上書きし、そしてサーバ102によるビデオストリーム生成のための処理時間を有することにより、ネットワーク待ち時間およびレンダリング時間を実質的に隠すことができる。例えば、ネットワーク待ち時間が300msと仮定すると、その時間中、ユーザ相互作用シーケンスは収集される。シーケンスが300ms時で投入されたとき、前回のシーケンスのビデオストリームはそのとき利用できることになる。それ故、最初の300msの遅滞の後は、アプリケーションは新しいユーザ相互作用シーケンスを連続的に収集しそして前回のシーケンスのビデオストリームを再生するので、相互作用は円滑に行われ得る。ビデオストリーム要求の再生はイメージのビデオストリームを途切れなく再生させるように正しいタイミングで行われ得る。
記憶および処理サーバから入手された対応するフレームまたはビデオストリームにそったユーザ相互作用および/または相互作用シーケンスは追跡されそしてアプリケーションによってユーザのコンピュータの利用可能なコンピュータ読取り可能記憶媒体24に保持され得る。フレームはそのまままたは圧縮形態、好ましくは、元のイメージ品質を維持するように無損失圧縮であるが、無損失に近似または損失圧縮アルゴリズムもまた利用可能である、で保持され得る。このことは、ユーザが同じ相互作用または相互作用シーケンスを遂行するときにボリュームビジュアライゼーション・ウェブサーバからそれを求める必要なしにアプリケーションがフレームまたはビデオストリームを再使用することを可能にし、それによりネットワークトラフィックを削除して表示性能を高める。
本発明は、図3に示されるように、ボリュームビジュアライゼーション・データセットのフレームのローカルおよびサーバ記憶イメージを組み合わせる方法を提供する。本方法200は、ユーザ22がユーザ装置のアプリケーション30から相互作用、すなわち、ボリュームビジュアライゼーション・データセットの3次元仮想ビューの1つまたはそれ以上のフレームを要求(ステップ210)し得ることを提供する。アプリケーションはいずれの要求フレームがローカル記憶媒体24に記憶されたかを知るように確認する(ステップ220)。その場合、アプリケーションはローカル記憶媒体からフレームを表示する。すべての要求されたフレームをローカル的に利用できない場合、アプリケーションは利用不可能なフレームに対する要求をサーバ102に送信する(ステップ240)。サーバはそのとき要求されたフレーム、すなわち、3Dビューを生データ、すなわち、中央記憶媒体のボリュームビジュアライゼーション・データセットに記憶された2Dスキャンから生成する(ステップ250)。サーバは次いで、生成されたフレームをクライアント装置のアプリケーションに、例えば、ビデオストリームとして伝送する(ステップ260)。アプリケーションはそのときサーバから受信したフレームを、選択的に、ローカル記憶装置から利用可能なフレームと混合して表示する(ステップ270)。
このように繰り返されるユーザ相互作用および対応する記憶済みフレームまたはビデオストリームの識別は、フレームのシーケンスがユーザに表示されるように迅速に行われるべきである。例えば、完全な検索およびレンダリングは、1秒間に利用可能な8フレーム(FPS)の相互作用および表示を配布するように少なくとも8分の1秒以内に行わなければならない。急速な検索のための一つの方法400は、図5のフロー図に示されるように、ローカル記憶媒体24のソートされた連合性コンテナを用いることである。3Dビューフレームがサーバ102からユーザ22に伝送されると、コピーがユーザのローカル記憶媒体24に記憶される。ローカル記憶媒体は、ユーザの3Dビューにより前回の要求によって生成される記録に保存されたフレームを有するコンテナを含み得る(ステップ410)。ソートされた連合性コンテナにおいて、同定可能性キーをコンテナに設けることにより記録が得られる(ステップ420)。このようなコンテナ内の2つの記録は、いずれの方も他方より小さくないときに同等物であると看做す2つの別々のキーを有する(ステップ430)。ユーザ相互作用XML文書のエレメントは、いずれか一方のエレメントの値が他方と違うかを決定するように相互に比較できる。それ故、ユーザ相互作用XML文書のエレメントにユニークな同定可能性キーが作成され得る。ユーザ相互作用シーケンスをコンテナに与えることは、最終的に一致するか一致しないかをコンテナに戻すことになる(ステップ440)。
一致は、特定のユーザ相互作用、例えば、フレームのメモリアドレスまたはフレームのファイル名と協働されるフレームの位置を含み得る(ステップ450)。ジャバスクリプトのようなスクリプト言語でウェブアプリケーションが書かれている場合、レンダリングされたフレームの再収集はウェブブラウザのキャッシュ機構を用いることにより行われ得る。ブラウザはそのユニフォームリソースロケータ(URL)アドレスを介してこのようなイメージを識別し得る。以前に実行されたユーザ相互作用のためと同じURLを有するブラウザを提供することにより、サーバへのネットワーク通信は排除される。かくして、ユーザの要求に応じて相互作用シーケンスが生成されるとき、相互作用シーケンスはXML文書としてカプセル化され得、そしてこのXML文書は連合性コンテナを照会するように用いられ得る。一致することが判ると、サーバへの往復通信が完全に回避されて代わりに記憶されたフレームが用いられる。
ユーザ相互作用シーケンスおよびその対応するレンダリングされたフレームの通路を保持することにより、バンド幅の利用およびサーバリソースは、低バンド幅状況におけるアプリケーションの相互作用性能が可能であるので、十分に増強され得る。例えば、放射線科医のユーザは一つの矢状断面から別のもの(一般的に「スタッキング」として知られている)へ移動し得る。ユーザが以前の断面に戻るとき、レンダリングされたフレームはサーバーの往復通信を行うことなしにただちに取り戻される。同様に、ユーザが10度間隔で360度回転を行うと(通常、「360度ビュー」として知られている)、要求がサーバに36回行われた後、その後の360度回転を遂行するのに必要なすべてのフレームは既に得られている。このことは、アプリケーション30がサーバ102からフレームを求める必要なしに、ローカル記憶媒体に24に記録されたフレームだけを用いることによってユーザが360度のいずれの方向にも連続して回転することを可能にする。また、ユーザのインターフェイスが特定のツール、例えば、スタッキングや360度ビューに設定されているとき、アプリケーションはユーザ相互作用シーケンスのすべての組合せを予測できる。ユーザは、アプリケーションによる予測が可能である場合、相互作用シーケンスの先読みを自動化するように選定し得る。短時間の待機の後、すべてのフレームは相互作用シーケンスの所定のセットの相互作用のために利用可能である。要約すると、ユーザ相互作用パラメータのトラックおよび対応するローカルに記録されたフレームを保持することにより、そして相互作用シーケンスの自動的な先読みと同様に、現在のユーザ相互作用を前回の相互作用パラメータと識別する急速ウェイを有することにより、本発明は低バンド幅および高待ち時間ネットワーク上でインタラクティビティを達成することができる。
ユーザ相互作用パラメータのトラックおよび対応するレンダリングされたフレームを保持することはまた、低バンド幅上において相互作用フレームレートで4Dまたはそれより高い次元のデータセットの表示を可能にする。ユーザ相互作用シーケンスのエレメントは現在どのスキャンがレンダリングされているかを支持するように留保される。患者の心臓スキャンの場合は心拍動サイクルの種々の間隔で行われる16スキャンの時系列を含む。それ故、16スキャンを経る繰り返しおよび各ビューのレンダリングの後にそして固定されたユーザ相互作用シーケンスのその他のエレメントを有して、16スキャンの再生は心臓のシーケンスをリアルタイムで描画することになる。このことは、16ビューのいずれもサーバへの往復を要求しないからである。このことは低バンド幅上で4Dまたはそれより高い次元のデータを相互作用的に表示することを可能にする。
記憶および処理サーバは、2007年2月8日に出願された米国特許出願番号第11/672,581号、公開番号第2008/195843号、「ボリュームビジュアライゼーション・データセットを処理するための方法およびシステム」に述べられているように、ボリュームビジュアライゼーション・データセットをレンダリングし得るものであり、この開示内容は本説明において参照文献として組み込まれる。例えば、ボリュームのセグメント化中に非監視および監視学習技術を介して半自動的なセグメント化を提供するように、機械学習アルゴリズムがボリュームビジュアライゼーション・データセットの処理に適用され得る。ボリュームビジュアライゼーション・データセットを処理するのに遺伝的アルゴリズム、自己組織化マップおよび神経回路網が用いられ得る。
記憶および処理レイヤ100は、1)ゼロまたは複数の仮想マシンを用いる1つまたは複数のオペレーティングシステムを装備されたサーバハードウェア、2)HTTPおよび/またはHTTPSに従って表示アプリケーションを受け取りおよび応答することに責任を持つ1つまたは多くのコンピュータプログラム、3)ユーザデータグラムプロトコルに従って表示アプリケーションを受け取りおよび応答することに責任を持つ1つまたは多くのコンピュータプログラム、4)1つまたは多くの中央演算処理装置(CPU)を有するネットワーク監視システムに責任を持ちかつ応答する1つまたは多くのコンピュータプログラム、5)フィールドプログラマブルゲートアレイ(FPGAs)、グラフィック処理装置のようなベクトルプロセッサ(GPU)、セルプロセッサ、またはCPUとして同じ物理的チップに組み込まれるコプロセッサを備え得る1つまたは多くのコプロセッサ、および/または6)ランダムアクセスメモリ、フラッシュメモリ、ソリッドステートドライブまたはハードディスク、または追加の前述したコンピュータ読取り可能記憶媒体のような記憶装置を有し得る。
ファイアウォール76の背後のサーバ102のクラスタ全体は、これに限定されるものではないが、カテゴリ5規格のケーブルまたは光ファイバケーブルを通ってGigE、10GigEまたはインフィニバンドスイッチのような高速リンクで接続され得る。このことはサーバがそれらのサーバ間で高速でデータを伝送または交換できることである。クラスタ化されたサーバは、外部リンクをスイッチに接続することによりAT&Tネットワークキャリアのような外部サービスプロバイダを用いてインターネットに接続55され得る。サーバクラスタはキャリア中間データセンタ内に私設のネットワークを張り得、それ故、各サーバは異なったサイトに迅速に通信できる。過負荷および/または故障したサーバ、ネットワーク接続またはネットワークにおけるその他の装置により発生した問題についてネットワークを識別するようにネットワーク監視システムが利用される。
適用すべき規定を遵守するためそして記憶および処理サーバクラスタを保護するために、サービス用サイト70,70’の各々におけるセキュリティ、負荷バランサおよび記憶および処理レイヤは、米国公認会計士協会(AICPA)の監査規格委員会により発行された定期的基準書に準じたSAS70タイプII準拠データセンタに組み立てられ得る。このようなデータセンタにおいて、ユーザ出入のログが記録され、その設備は、これに限定されるものではないが、指紋、手形またはその他の生体識別の基づく識別入場システムを介して物理的に保護され、ラックまたはケージは錠を掛けられてカメラで監視され、そしてハードウェアファイアウォールおよび侵入検知が組み込まれてサイバー攻撃を回避するように監視される。ウェブ方法を可能にするポートだけがファイアウォールに開けられる。標準的なポートの例は、HTTPにおける80またはHTTPSにおける443である。プライベートUDPポートもまた表示アプリケーションにとってより良好なビデオストリームを提供するように開放され得る。クラスタ化システムの安全性および信頼性を危うくできるいくつかのタイプの悪意のある行為を検出するように侵入検出および防止システム74が使用され得る。このことは、脆弱なサービスに対するネットワーク攻撃、アプリケーションに対するデータドライブ攻撃、権限昇格や非認証ログインや慎重に扱うべきファイルへのアクセスのようなホストベースの攻撃、および破壊工作ソフト(ウイルス、トロイの木馬およびワーム)を含む。ウェブアプリケーションと記憶および処理サーバとの間の通信は暗号化され得る。ファイアウォール装置の機能を通るVPNアクセスは、ファイアウォールの背後のサーバのクラスタの遠隔監視および更新を可能にされ得る。VPNセッション内から、認証された遠隔デスクトップアプリケーションがサーバにリモートアクセスすることも可能である。
本発明はシステム、方法またはコンピュータプログラム製品として実施され得る。本発明は完全にハードウェアの実施形態、完全にソフトウェアの実施形態(ファームウェア、常駐ソフトウェア、マイクロコード、等を含む)、または本説明において「回路」、「モジュール」または「システム」としてすべて総体的に参照される、ソフトウェアおよびハードウェア態様を組み合わせる実施形態の形を取り得る。本発明はそこに具体化されたコンピュータ読取り可能プログラムコードを有する1つまたはそれ以上のコンピュータ読取り可能媒体に実施されたコンピュータプログラム製品の形を取り得る。コンピュータ読取り可能媒体に実施されたプログラムコードは、これに限定されるものではないが、無線、有線、光ファイバケーブル、無線周波(RF)または同様なもの、あるいは前述のいずれかの組合せのいずれか適切な媒体を用いて伝送され得る。
本発明の観点の動作を実行するためのコンピュータプログラムコードは、ジャバ、スモールトーク、C++または同様なもののようなオブジェクト指向プログラミング言語、および「C」プログラミング言語または同様なプログラミング言語のような慣用の手続き型プログラミング言語を含む1つまたはそれ以上のプログラム言語の組合せで書かれ得る。プログラムコードはユーザのコンピュータで完全に、独立型ソフトウェアパッケージのように、ユーザのコンピュータで部分的に、ユーザのコンピュータで部分的にかつリモートコンピュータで部分的にまたはリモートコンピュータまたはサーバで完全に実行し得る。後者の状況において、リモートコンピュータは、ローカルエリアネットワーク(LAN)またはワイドエリアネットワーク(WAN)を含む、いかなるタイプのネットワークをも介してユーザのコンピュータに接続され得るか或いは、接続は外部コンピュータに行われる(例えば、インターネットサービスプロバイダを用いるインターネットを介して)。
本発明は、本発明の実施例による方法、装置(システム)およびコンピュータプログラム製品を示す図面の機能ブロックまたはモジュールの図を参照して説明する。図面における各ブロックおよびブロックの組合せがコンピュータプログラム命令により実施されることは理解されよう。こけらのコンピュータプログラム命令は汎用コンピュータ、特殊用途コンピュータ、またはその他のマシンを作り出すようにプログラム可能なデータ処理装置のプロセッサに与えられ、それにより、コンピュータまたはその他のプログラム可能なデータ処理装置のプロセッサを介して実行する命令は、図面の機能ブロックまたはモジュールに特定される機能/作用を実行する手段を生成する。
これらのコンピュータプログラム命令はまた、コンピュータ、その他のプログラム可能なデータ処理装置、または特有な方法で機能するその他の装置を指向できるコンピュータ読取り可能媒体に記録され得、それによりコンピュータ読取り可能媒体に記録された命令は、図面の機能ブロックまたはモジュールに特定される機能/作用を実行する命令を含む製造品を生産する。
コンピュータプログラム命令はまた、コンピュータ実行処理を行うようにコンピュータ、その他のプログラム可能なデータ処理装置、またはその他の装置で一連の動作ステップを遂行させるようにコンピュータ、その他のプログラム可能なデータ処理装置、またはその他の装置に読み込まれ得、それによりコンピュータまたはその他のプログラム可能な装置で実行する命令は、図面の機能ブロックまたはモジュールに特定される機能/作用を実行するプロセスを提供する。
図面の機能ブロックまたはモジュールは、本発明の種々の実施形態によるシステム、方法およびコンピュータプログラム製品の可能な実行の基本設計概念、機能性、および操作を示す。この点において、図面の各ブロックは、特定の論理関数を実行するために1つまたはそれ以上の命令から構成されるモジュール、セグメントまたはコードの部分を表し得る。いくつかの互換的な実施において、ブロックに述べられた機能は図に示された順序の範囲外でも起こり得ることもまた留意すべきである。例えば、連続して示される2つのブロックの機能は、実際には、実質的に同時に実行されるか、または関与される機能性によってブロックはしばしば逆順で実行される。図面の各ブロックおよびブロックの組合せは、特定の機能または作用、或いは特定目的のハードウェアおよびコンピュータ命令の組合せを遂行する特定目的のハードウェアベースのシステムにより実行され得る。また、機能ブロックまたはモジュール間の通信は図面に一方向で示されているが、このような通信もまた両方向であり得る。
本発明は、それ故、標準的インターネット特有の特性である低バンド幅および高待ち時間制限を解消し、特にいかなるインターネット接続でも大きな医療用スキャンの可視化のための相互作用ウェブアプリケーションのためにバンド幅の利用を最適化できる処理およびアクセス機構を提供する。
本発明はまた、経済的な規模を豊富に適用できるウェブポータルを介して大きな医療用スキャンを受信、記録、処理および表示するために共有および集中化インフラの方法およびシステムを提供することにより保安および個人情報に基づく長期間の医療記録の維持の問題を解消する。
本発明は、標準、低バンド幅ねインターネット接続上での画像診断およびデータセットの即時の3Dマニピュレーションへの迅速なアクセスをさらに提供する。本発明は放射線科医、臨床医、外科医および患者に医療用スキャンにアクセスする権限を与える1つまたはそれ以上の次の特定目的を実現することを可能にする:内科医および患者による迅速なアクセスのためのHIPAA遵守および安全なウェブポータルはDICOMおよびHL7規格を用いる参画健康管理機関システム間で医療用スキャンを共有できる。また、患者はそれらのスキャンをCDから或いは患者の利益になるように非参画機関からスキャンを得るように彼等の同意を条件とすることによりアップロードできる。このことは病院がどこからもどの内科医またはスペシャリストとも接続でき、内科医が彼等自身間でかつ事実上患者と通信することを許容し、そして特に農村地域にいる患者がどこかのどの内科医にもアクセスして適切な診断およびセカンドオピニオンを得ることができる。ポータルは大規模スキャンの理解を容易にする2D、3Dまたは4Dインテリジェント可視化を生成して、それらのビューをエンドユーザに伝送するために集中化および高性能ベクトルプロセッサベースのクラスタサーバに基づくものである。
本発明は、特定の好適な実施例とともに説明されたが、当業者にとって上述の説明を踏まえて多くの互換、変形および変更が行われ得ることは明らかである。それ故、添付の請求の範囲は本発明の真正な範囲および要旨内にあるようなこのようないかなる互換、変形および変更も包含することは予期される。

Claims (38)

  1. 少なくとも1つの集中データベースに含まれるボリュームビジュアライゼーション・データセットの一連の三次元仮想ビューをインターネット上でクライアント装置で表示するためのシステムであって、
    遠隔地からボリュームビジュアライゼーション・データセットを受け入れて集中データベースに確実に伝送するための少なくとも1つの送信機と、
    ボリュームビジュアライゼーション・データセットを含む少なくとも1つの中央データ記憶媒体と、
    少なくとも1つの集中データベースと通信し、クライアントの要求に基づいて仮想ビューを生成するようにボリュームビジュアライゼーション・データセットを処理することができる複数のサーバと、
    複数のサーバの負荷バランスを取るためのリソースマネージャ装置と、
    クライアント装置と、リソースマネージャおよび中央記憶媒体を含むサーバとの間の複数の通信を制御するセキュリティ装置と、
    集中データベース、複数のサーバ、少なくとも1つのリソースマネージャおよび少なくとも1つのセキュリティ装置を収容するための少なくとも1つの物理的に固定されたサイトと、
    ボリュームビジュアライゼーション・データセットの仮想ビューに対する少なくとも1つのユーザの要求を遠隔地で受け付け、その要求を少なくとも1つのサーバに伝送し、当該少なくとも1つのサーバから生成仮想ビューを受領し、遠隔地のユーザに当該生成仮想ビューを表示することによりユーザの要求を満足させるように適合されたウェブアプリケーションと
    から構成される、システム。
  2. 固定サイトはSAS70タイプII準拠或いは同等な監査済または試験済データセンタである、請求項1に記載のシステム。
  3. 異なる物理的位置に配置された複数の固定サイトはインターネットを介して接続される、請求項1に記載のシステム。
  4. ウェブアプリケーションはウェブブラウザのドメインネームアドレスを用いることにより固定サイトを選定するように適合される、請求項1に記載のシステム。
  5. ウェブアプリケーションはドメインネームシステムによりリソースマネージャの固定サイトIPアドレスを選定するように適合される、請求項4に記載のシステム。
  6. ウェブアプリケーションは画像診断表示目的のための医療装置として分類される、請求項1に記載のシステム。
  7. ウェブアプリケーションは少なくとも1つのサーバに要求を伝送する前に認可されたユーザ認証情報を用いて認証されるように適合される、請求項1に記載ののシステム。
  8. 認証されたウェブアプリケーションは認可されたユーザにより視認可能であるボリュームビジュアライゼーションをリストアップする、請求項7に記載のシステム。
  9. ウェブアプリケーションはボリュームビジュアライゼーション・データセットを選択することにより仮想ビューイングを起動する、請求項8に記載のシステム。
  10. ウェブアプリケーションはリソースマネージャ装置と通信するように適合される、請求項7に記載のシステム。
  11. ウェブアプリケーションはリソースマネージャ装置により少なくとも1つのサーバで割り当てられる、請求項10に記載のシステム。
  12. ウェブアプリケーションはユーザ要求を満たすために少なくとも1つのサーバとのインタラクションを開始するように適合される、請求項11に記載のシステム。
  13. ウェブアプリケーションはアクティブXコンポーネント、ジャバアプレットまたはジャバスクリプト、フラッシュまたはシルバーライト或いはその他のウェブブラウザ・スクリプト化可能な言語である、請求項1に記載のシステム。
  14. 要求および得られた仮想ビューが伝送される暗号化通信接続をさらに備える、請求項1に記載のシステム。
  15. 暗号化通信接続はSSL/TLSを採用し、そしてSSL/TLSを用いた通信のみが通じる安全な通信ポートをさらに備える、請求項14に記載のシステム。
  16. ボリュームビジュアライゼーション・データセットの仮想ビューに対する要求はXMLドキュメントまたはハイパーテキスト・トランスファプロトコル・セキュア(HTTPS)上のウェブサーバを用いる、請求項1に記載のシステム。
  17. 少なくとも1つの集中データベースに含まれるボリュームビジュアライゼーション・データセットの一連の三次元仮想ビューをインターネット上でクライアント装置で表示するための方法であって、
    ボリュームビジュアライゼーション・データセットを備えた中央データ記憶媒体を提供することと、
    少なくとも1つの集中データベースと通信しそしてクライアントの要求に基づいて仮想ビューを生成するようにボリュームビジュアライゼーション・データセットを処理できる少なくとも1つのサーバを提供することと、
    インターネット上で少なくとも1つのサーバおよび中央データ記憶媒体にリンクされ、ボリュームビジュアライゼーション・データセットのビューのフレームを記憶するためのローカルデータ記憶媒体を有するクライアント装置を提供することと、
    ボリュームビジュアライゼーション・データセットの少なくとも一部の少なくとも1つの三次元仮想ビューをクライアント装置で要求することと、
    ボリュームビジュアライゼーション・データセットの要求された少なくとも1つのビューのいずれかのフレームがローカルデータ記憶媒体に記憶されたときを決定することと、
    ローカルデータ記憶媒体に記憶されていない要求された少なくとも1つのビューのいずれかのフレームに対する要求をクライアント装置からサーバへ送信することと、
    要求された少なくとも1つのビューの要求フレームを中央データ記憶媒体のボリュームビジュアライゼーション・データセットからサーバで生成することと、
    要求された少なくとも1つのビューの生成フレームをサーバからクライアント装置へ伝送することと、そして
    サーバから伝送されたフレームか或いはローカルデータ記憶媒体に記憶されている要求された一連のビューのいずれかのフレームを表示することによりボリュームビジュアライゼーション・データセットの要求された少なくとも1つの三次元仮想ビューをクライアント装置で表示することと
    から構成される、方法。
  18. クライアント装置がボリュームビジュアライゼーション・データセットの少なくとも一部の一連の三次元仮想ビューを要求し、当該一連のビューが複数の個別のビューフレームから構成され、そしてローカルデータ記憶媒体に記憶されている要求された一連のビューのいずれかフレームと同調してサーバから伝送されたフレームを連続的に表示することによりボリュームビジュアライゼーション・データセットの要求された一連の三次元仮想ビューがクライアント装置で表示される、請求項17に記載の方法。
  19. ボリュームビジュアライゼーション・データセットの要求された一連の三次元仮想ビューをクライアント装置で表示している間、ローカルデータ記憶媒体に記憶されたフレームがサーバから伝送されたフレームと同調して表示される、請求項17に記載の方法。
  20. ボリュームビジュアライゼーション・データセットはオブジェクトを通って離間した間隔で得られる複数の断面イメージから構成される、請求項17に記載の方法。
  21. 各々がボリュームビジュアライゼーション・データセットの全部または一部を含む複数の中央データ記憶媒体を提供することを含み、そして要求された一連のビューの要求フレームをボリュームビジュアライゼーション・データセットから生成して伝送するデータ記憶媒体を選択することを含む、請求項17に記載の方法。
  22. 以前にローカルデータ記憶媒体に記憶されていない要求された一連のビューのサーバから伝送された1つまたはそれ以上のフレームをクライアント装置のローカルデータ記憶媒体に記憶することを含む、請求項17に記載の方法。
  23. ボリュームビジュアライゼーション・データセットの要求された少なくとも1つのビューのいずれのフレームをローカルデータ記憶媒体に記憶するかの決定は、
    クライアント装置によるボリュームビジュアライゼーション・データセットの三次元仮想ビューの要求の固有識別キーを生成することと、
    クライアント装置による前回の要求の三次元仮想ビューの固有識別キーをローカルデータ記憶媒体に記憶することと、
    クライアント装置による現在の要求の三次元仮想ビューの固有識別キーをクライアント装置による前回の要求の三次元仮想ビューの記憶された固有識別キーと比較することと、
    現在および前回の固有識別キーの値が等しくなるときを決定することと、
    値が等しいとき、前回の要求の三次元仮想ビューの記憶されたフレームをローカルデータ記憶媒体から表示することと、そして
    値が等しくないとき、クライアント装置による現在の要求の三次元仮想ビューのサーバから伝送されたフレームを表示することと
    による、請求項17に記載の方法。
  24. クライアント装置による前回の要求の三次元仮想ビューの固有識別キーを前回の要求の三次元仮想ビューの記憶されたフレームと関連付けることをさらに含む、請求項23に記載の方法。
  25. 値が等しいとき、ローカルデータ記憶媒体の前回の要求の三次元仮想ビューの記憶されたフレームの位置を決定し、そしてその位置を用いて記憶されたフレームを表示する、請求項23に記載の方法。
  26. 少なくとも1つの集中データベースに含まれたボリュームビジュアライゼーション・データセットの一連の三次元仮想ビューをクライアント装置で表示するための方法であって、
    ボリュームビジュアライゼーション・データセットを含む少なくとも1つの中央データ記憶媒体を提供することと、
    少なくとも1つの集中データベースと通信し、クライアントの要求に基づいて仮想ビューを生成するようにボリュームビジュアライゼーション・データセットを処理することができる少なくとも1つのサーバを提供することと、
    インターネット上でサーバと中央記憶媒体とにリンクされるクライアント装置を提供することと、
    ボリュームビジュアライゼーション・データセットの少なくとも一部の複数の三次元仮想ビューに対する要求をクライアント装置からサーバへ送信することとであって、複数のビューが複数の個別のビューフレームから構成され、要求がフレームのより低位のイメージ品質パラメータに対する要求とフレームのより高位の品質パラメータに対する要求とを含むことと、
    サーバで、ボリュームビジュアライゼーション・データセットから要求されたフレームをより低位のイメージ品質パラメータで生成し、より低位のイメージ品質パラメータフレームをクライアント装置へ伝送することと、
    要求されたより低位のイメージ品質パラメータフレームの少なくとも一部をクライアント装置で表示することと、
    サーバで、ボリュームビジュアライゼーション・データセットから要求されたフレームをより高位のイメージ品質パラメータフレームを生成し、より高位のイメージ品質パラメータフレームをクライアント装置へ伝送することと、そして
    要求されたより高位のイメージ品質パラメータフレームをクライアント装置で表示することと
    から構成される、方法。
  27. より低位のイメージ品質パラメータフレームをクライアント装置に伝送した後に、サーバはクライアント装置がより低位のイメージ品質パラメータフレームを表示している間により高位のイメージ品質パラメータフレームをクライアント装置に伝送する、請求項26に記載の方法。
  28. クライアント装置はより低位のイメージ品質パラメータフレームの表示を完了する前により高位のイメージ品質パラメータフレームを表示する、請求項27に記載の方法。
  29. クライアント装置はより低位のイメージ品質パラメータフレームの表示を完了した後により高位のイメージ品質パラメータフレームを表示する、請求項27に記載の方法。
  30. フレームは圧縮ビデオストリームとしてサーバからクライアント装置に伝送される、請求項26に記載の方法。
  31. フレームは1つまたはそれ以上の単一フレームとしてサーバからクライアント装置に伝送される、請求項26に記載の方法。
  32. 少なくとも1つの集中データベースに含まれたボリュームビジュアライゼーション・データセットの一連の三次元仮想ビューをクライアント装置で表示するための方法であって、
    ボリュームビジュアライゼーション・データセットを含む少なくとも1つの中央データ記憶媒体を提供することと、
    少なくとも1つの集中データベースと通信し、クライアントの要求に基づいて仮想ビューを生成するようにボリュームビジュアライゼーション・データセットを処理することができるサーバを提供することと、
    インターネット上でサーバと中央記憶媒体とにリンクされるクライアント装置を提供することと、
    複数の個別のビューフレームから構成される、ボリュームビジュアライゼーション・データセットの少なくとも一部の一連の三次元仮想ビューをクライアント装置で要求することと、
    要求された一連の三次元仮想ビューを異なったグループのフレームにクライアント装置で分離することと、
    第1グループのフレームに対する要求をクライアント装置からサーバに送る一方、第2グループのフレームに対する要求をサーバに遅延して送ることと、
    サーバで、ボリュームビジュアライゼーション・データセットから要求された第1グループのフレームを生成して、第1グループのフレームをクライアント装置へ伝送することと、
    要求された第1グループのフレームをクライアント装置で表示する一方、クライアント装置からサーバに第2グループのフレームに対する要求を同時に送ることと、
    サーバで、ボリュームビジュアライゼーション・データセットから要求された第2グループのフレームを生成して、クライアント装置が第1グループのフレームを表示している間にクライアント装置に第2グループのフレームを伝送することと、そして
    要求された一連の三次元仮想ビューの適切な継続的表示を維持するように、第1グループのフレームに続いて直ちに要求された第2グループのフレームをクライアント装置で表示することと
    から構成される、方法。
  33. 少なくとも1つの集中データベースと通信してクライアントの要求に基づいて仮想ビューを生成するようにボリュームビジュアライゼーション・データセットを処理できる複数のサーバを備え、クライアント装置との間、およびサーバと中央記憶媒体との間の複数の通信を制御するセキュリティ装置をさらに備える、請求項32に記載の方法。
  34. 以前のグループのフレームが表示されている間に次続のグループのフレームに対する要求をクライアント装置からサーバへ送ることと、要求された第2グループのフレームをボリュームビジュアライゼーション・データセットからサーバで生成することと、クライアント装置が以前のグループのフレームを表示している間に第2グループのフレームをクライアント装置に伝送することと、そして、適当な連続した表示を維持するように要求された次続のグループのフレームを以前のグループのフレームに続いてクライアント装置で直ちに表示することとをさらに含む、請求項32に記載の方法。
  35. クライアント装置とサーバとは待ち時間を有するネットワークにより接続され、要求されたグループのフレームは待ち時間に従ってクライアント装置からサーバへの送信時に遅延される、請求項32に記載の方法。
  36. フレームのグループは圧縮ビデオストリームとしてサーバからクライアント装置に伝送される、請求項32に記載の方法。
  37. 第1グループのフレームに対する要求はフレームのためのより低位のイメージ品質パラメータに対する要求を含み、そして、第1グループのフレームを要求されたより低位のイメージ品質パラメータでクライアント装置に伝送した後に、サーバがより高位のイメージ品質パラメータでフレームをクライアント装置に伝送する、請求項32に記載の方法。
  38. クライアント装置がボリュームビジュアライゼーション・データセットのビューのフレームを記憶するためのローカルデータ記憶媒体を有し、そして、クライアント装置で要求されたフレームをローカルデータ記憶媒体に記憶することを含む、請求項32に記載の方法。
JP2012513248A 2009-05-28 2010-05-27 専用ウェブポータルを用いた医療用スキャンの高度可視化高速アクセス方法およびシステム Active JP5681706B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US18169509P 2009-05-28 2009-05-28
US61/181,695 2009-05-28
PCT/US2010/036355 WO2010138691A2 (en) 2009-05-28 2010-05-27 Method and system for fast access to advanced visualization of medical scans using a dedicated web portal

Publications (2)

Publication Number Publication Date
JP2012528403A true JP2012528403A (ja) 2012-11-12
JP5681706B2 JP5681706B2 (ja) 2015-03-11

Family

ID=43223360

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2012513248A Active JP5681706B2 (ja) 2009-05-28 2010-05-27 専用ウェブポータルを用いた医療用スキャンの高度可視化高速アクセス方法およびシステム

Country Status (5)

Country Link
US (5) US8701167B2 (ja)
EP (1) EP2438570B1 (ja)
JP (1) JP5681706B2 (ja)
ES (1) ES2627762T3 (ja)
WO (1) WO2010138691A2 (ja)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2013248375A (ja) * 2012-06-01 2013-12-12 Toshiba Corp コンピュータシステム、医用画像診断装置、画像表示方法、及び画像表示プログラム
JP2018514031A (ja) * 2015-05-13 2018-05-31 グーグル エルエルシー DeepStereo:実世界の画像から新たなビューを予測するための学習

Families Citing this family (33)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8392529B2 (en) 2007-08-27 2013-03-05 Pme Ip Australia Pty Ltd Fast file server methods and systems
US8548215B2 (en) 2007-11-23 2013-10-01 Pme Ip Australia Pty Ltd Automatic image segmentation of a volume by comparing and correlating slice histograms with an anatomic atlas of average histograms
WO2009067675A1 (en) 2007-11-23 2009-05-28 Mercury Computer Systems, Inc. Client-server visualization system with hybrid data processing
US10311541B2 (en) 2007-11-23 2019-06-04 PME IP Pty Ltd Multi-user multi-GPU render server apparatus and methods
KR101329346B1 (ko) * 2011-11-23 2013-12-19 건국대학교 산학협력단 의료용 단말기를 통한 의료정보 처리 시스템 및 그 방법
WO2013130988A1 (en) * 2012-03-02 2013-09-06 Care Cam Innovations, Llc Apparatus, method and computer-readable storage medium for media processing and delivery
US9298730B2 (en) 2012-07-04 2016-03-29 International Medical Solutions, Inc. System and method for viewing medical images
US9516079B2 (en) * 2012-07-16 2016-12-06 Ricoh Company, Ltd. Media stream modification based on channel limitations
JP5801269B2 (ja) * 2012-09-14 2015-10-28 株式会社 日立産業制御ソリューションズ 医用装置制御システムおよび医用装置制御サーバ
US20140143298A1 (en) * 2012-11-21 2014-05-22 General Electric Company Zero footprint dicom image viewer
US20140153796A1 (en) * 2012-11-30 2014-06-05 General Electric Company Medical imaging system and method for acquiring image using a remotely accessible medical imaging device infrastructure
WO2014085918A1 (en) * 2012-12-03 2014-06-12 International Medical Solutions, Inc. System and method of viewing digital medical images
CA2895993A1 (en) 2012-12-21 2014-06-26 Jason Spencer System and method for graphical processing of medical data
US9584544B2 (en) * 2013-03-12 2017-02-28 Red Hat Israel, Ltd. Secured logical component for security in a virtual environment
US9215075B1 (en) 2013-03-15 2015-12-15 Poltorak Technologies Llc System and method for secure relayed communications from an implantable medical device
US9509802B1 (en) 2013-03-15 2016-11-29 PME IP Pty Ltd Method and system FPOR transferring data to improve responsiveness when sending large data sets
US8976190B1 (en) 2013-03-15 2015-03-10 Pme Ip Australia Pty Ltd Method and system for rule based display of sets of images
US11183292B2 (en) 2013-03-15 2021-11-23 PME IP Pty Ltd Method and system for rule-based anonymized display and data export
US10347286B2 (en) * 2013-07-25 2019-07-09 Ssh Communications Security Oyj Displaying session audit logs
CN105814903A (zh) * 2013-09-10 2016-07-27 卡尔加里科技股份有限公司 用于分布式服务器侧和客户端侧图像数据渲染的体系结构
US9270919B2 (en) 2013-09-24 2016-02-23 Karl Storz Imaging, Inc. Simultaneous display of two or more different sequentially processed images
US9876804B2 (en) * 2013-10-20 2018-01-23 Cyber-Ark Software Ltd. Method and system for detecting unauthorized access to and use of network resources
US9712548B2 (en) 2013-10-27 2017-07-18 Cyber-Ark Software Ltd. Privileged analytics system
WO2015069837A1 (en) 2013-11-06 2015-05-14 Calgary Scientific, Inc. Apparatus and method for client-side flow control in a remote access environment
US9497206B2 (en) 2014-04-16 2016-11-15 Cyber-Ark Software Ltd. Anomaly detection in groups of network addresses
US20160117796A1 (en) * 2014-10-27 2016-04-28 Microsoft Technology Licensing, Llc Content Adaptive Decoder Quality Management
US9565203B2 (en) * 2014-11-13 2017-02-07 Cyber-Ark Software Ltd. Systems and methods for detection of anomalous network behavior
US9984478B2 (en) 2015-07-28 2018-05-29 PME IP Pty Ltd Apparatus and method for visualizing digital breast tomosynthesis and other volumetric images
US11599672B2 (en) 2015-07-31 2023-03-07 PME IP Pty Ltd Method and apparatus for anonymized display and data export
EP3356971B1 (en) * 2015-10-02 2024-03-13 Koninklijke Philips N.V. System for mapping findings to pertinent echocardiogram loops
US10496789B2 (en) * 2016-09-02 2019-12-03 Siemens Healthcare Gmbh Display of preloaded predicted data
CN108259543B (zh) * 2016-12-29 2021-07-06 广东中科遥感技术有限公司 分布式云存储数据库以及其部署在多个数据中心的方法
US10909679B2 (en) 2017-09-24 2021-02-02 PME IP Pty Ltd Method and system for rule based display of sets of images using image content derived parameters

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001313937A (ja) * 2000-05-01 2001-11-09 Kddi Research & Development Laboratories Inc 動画像変換を制御するシステム、そのサーバ、そのゲートウェイ及びその制御プログラムを記録した記録媒体
JP2002176609A (ja) * 2000-08-25 2002-06-21 Matsushita Electric Ind Co Ltd データ受信再生方法及びデータ受信再生装置
JP2002215810A (ja) * 2001-01-22 2002-08-02 Medei Net Security Kenkyusho:Kk 携帯無線通信端末を用いた生体情報管理システム
JP2007080161A (ja) * 2005-09-16 2007-03-29 Nec Personal Products Co Ltd データ配信システム、部分コンテンツ格納サーバ、応答高速化方法、及びプログラム
JP2009027598A (ja) * 2007-07-23 2009-02-05 Hitachi Ltd 映像配信サーバおよび映像配信方法

Family Cites Families (32)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100263936B1 (ko) * 1997-12-30 2000-08-16 윤종용 가상 스테레오 영상을 이용한 2차원 연속 영상의 3차원 영상 변환 장치 및 방법
US6674430B1 (en) * 1998-07-16 2004-01-06 The Research Foundation Of State University Of New York Apparatus and method for real-time volume processing and universal 3D rendering
US6608628B1 (en) * 1998-11-06 2003-08-19 The United States Of America As Represented By The Administrator Of The National Aeronautics And Space Administration (Nasa) Method and apparatus for virtual interactive medical imaging by multiple remotely-located users
US6377257B1 (en) * 1999-10-04 2002-04-23 International Business Machines Corporation Methods and apparatus for delivering 3D graphics in a networked environment
US6384821B1 (en) * 1999-10-04 2002-05-07 International Business Machines Corporation Method and apparatus for delivering 3D graphics in a networked environment using transparent video
US6621918B1 (en) * 1999-11-05 2003-09-16 H Innovation, Inc. Teleradiology systems for rendering and visualizing remotely-located volume data sets
AU2001239926A1 (en) * 2000-02-25 2001-09-03 The Research Foundation Of State University Of New York Apparatus and method for volume processing and rendering
KR100426396B1 (ko) * 2000-11-28 2004-04-08 김종찬 3차원 영상처리방법을 이용한 가상 내시경 방법
US7039723B2 (en) 2001-08-31 2006-05-02 Hinnovation, Inc. On-line image processing and communication system
WO2003045223A2 (en) * 2001-11-21 2003-06-05 Viatronix Incorporated Imaging system and method for cardiac analysis
KR20030057669A (ko) 2001-12-29 2003-07-07 엘지전자 주식회사 지지에스엔 시스템의 인터페이스 장치 및 그 방법
WO2003087994A2 (en) 2002-04-10 2003-10-23 Imagine Xd, Inc. System and method for visualizing data
EP1634248B1 (en) * 2003-06-05 2008-10-08 Philips Intellectual Property & Standards GmbH Adaptive image interpolation for volume rendering
WO2005036457A2 (en) 2003-10-10 2005-04-21 Viatronix Incorporated Virtual endoscopy methods and systems
US7817829B2 (en) * 2004-03-15 2010-10-19 Koninklijke Philips Electronics N.V. Image visualization
US7525541B2 (en) * 2004-04-05 2009-04-28 Actuality Systems, Inc. Data processing for three-dimensional displays
US20050237336A1 (en) * 2004-04-23 2005-10-27 Jens Guhring Method and system for multi-object volumetric data visualization
US20090226065A1 (en) * 2004-10-09 2009-09-10 Dongqing Chen Sampling medical images for virtual histology
US7689539B2 (en) * 2005-11-22 2010-03-30 Sectra Ab Systems for fast efficient retrieval of medical image data from multidimensional data sets, related methods and computer products
WO2008022282A2 (en) * 2006-08-16 2008-02-21 Michael Valdiserri Online volume rendering system and method
US20080094398A1 (en) * 2006-09-19 2008-04-24 Bracco Imaging, S.P.A. Methods and systems for interacting with a 3D visualization system using a 2D interface ("DextroLap")
US7830381B2 (en) * 2006-12-21 2010-11-09 Sectra Ab Systems for visualizing images using explicit quality prioritization of a feature(s) in multidimensional image data sets, related methods and computer products
US10621203B2 (en) * 2007-01-26 2020-04-14 Information Resources, Inc. Cross-category view of a dataset using an analytic platform
US20080195843A1 (en) * 2007-02-08 2008-08-14 Jaya 3D Llc Method and system for processing a volume visualization dataset
US20090001664A1 (en) 2007-05-18 2009-01-01 Elogiq, Inc. Strategy game
US8063901B2 (en) * 2007-06-19 2011-11-22 Siemens Aktiengesellschaft Method and apparatus for efficient client-server visualization of multi-dimensional data
US8538184B2 (en) * 2007-11-06 2013-09-17 Gruntworx, Llc Systems and methods for handling and distinguishing binarized, background artifacts in the vicinity of document text and image features indicative of a document category
US8330763B2 (en) * 2007-11-28 2012-12-11 Siemens Aktiengesellschaft Apparatus and method for volume rendering on multiple graphics processing units (GPUs)
EP2098994A1 (en) * 2008-03-04 2009-09-09 Agfa HealthCare NV System for real-time volume rendering on thin clients via a render server
US20100094758A1 (en) * 2008-10-13 2010-04-15 Experian Marketing Solutions, Inc. Systems and methods for providing real time anonymized marketing information
US20100134484A1 (en) * 2008-12-01 2010-06-03 Microsoft Corporation Three dimensional journaling environment
WO2010098757A1 (en) * 2009-02-26 2010-09-02 Hewlett-Packard Development Company, L.P. Network aware storage device

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001313937A (ja) * 2000-05-01 2001-11-09 Kddi Research & Development Laboratories Inc 動画像変換を制御するシステム、そのサーバ、そのゲートウェイ及びその制御プログラムを記録した記録媒体
JP2002176609A (ja) * 2000-08-25 2002-06-21 Matsushita Electric Ind Co Ltd データ受信再生方法及びデータ受信再生装置
JP2002215810A (ja) * 2001-01-22 2002-08-02 Medei Net Security Kenkyusho:Kk 携帯無線通信端末を用いた生体情報管理システム
JP2007080161A (ja) * 2005-09-16 2007-03-29 Nec Personal Products Co Ltd データ配信システム、部分コンテンツ格納サーバ、応答高速化方法、及びプログラム
JP2009027598A (ja) * 2007-07-23 2009-02-05 Hitachi Ltd 映像配信サーバおよび映像配信方法

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
CSND200100611002; 上谷 一: 'パンクしないサイトの作り方' インターネットデータセンター完全ガイド2 , 20010701, pp.90-103, 株式会社インプレス *
JPN6013064130; 上谷 一: 'パンクしないサイトの作り方' インターネットデータセンター完全ガイド2 , 20010701, pp.90-103, 株式会社インプレス *

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2013248375A (ja) * 2012-06-01 2013-12-12 Toshiba Corp コンピュータシステム、医用画像診断装置、画像表示方法、及び画像表示プログラム
JP2018514031A (ja) * 2015-05-13 2018-05-31 グーグル エルエルシー DeepStereo:実世界の画像から新たなビューを予測するための学習

Also Published As

Publication number Publication date
WO2010138691A3 (en) 2011-08-04
US20170374126A1 (en) 2017-12-28
ES2627762T3 (es) 2017-07-31
US9106609B2 (en) 2015-08-11
EP2438570A2 (en) 2012-04-11
US8701167B2 (en) 2014-04-15
WO2010138691A2 (en) 2010-12-02
EP2438570B1 (en) 2017-03-15
US20140195922A1 (en) 2014-07-10
EP2438570A4 (en) 2014-10-15
US10084846B2 (en) 2018-09-25
US20160373514A1 (en) 2016-12-22
US9438667B2 (en) 2016-09-06
US9749389B2 (en) 2017-08-29
JP5681706B2 (ja) 2015-03-11
US20150304403A1 (en) 2015-10-22
US20120096524A1 (en) 2012-04-19

Similar Documents

Publication Publication Date Title
JP5681706B2 (ja) 専用ウェブポータルを用いた医療用スキャンの高度可視化高速アクセス方法およびシステム
US11676721B2 (en) Method and system for fast access to advanced visualization of medical scans using a dedicated web portal
EP1955187B1 (en) Multi-user display proxy server
US9313227B2 (en) Gateway-based audit log and method for prevention of data leakage
Philbin et al. Will the next generation of PACS be sitting on a cloud?
CA2721174C (en) Method and system for virtually delivering software applications to remote clients
US20150193586A1 (en) Multi-site video based computer aided diagnostic and analytical platform
US20150135264A1 (en) Method and system for prevention of malware infections
WO2021108771A1 (en) Medical imaging processing system
CN105656893B (zh) 通过直接获取医疗影像数据实现医院无胶片化的方法
CN100477717C (zh) 用于图形图像数据的远程和自适应显示的方法和系统
Pang et al. Towards low latency multi-viewpoint 360 interactive video: A multimodal deep reinforcement learning approach
US20230025754A1 (en) Privacy-preserving machine learning training based on homomorphic encryption using executable file packages in an untrusted environment
Bogen et al. White paper: technology for surgical telementoring—SAGES Project 6 Technology Working Group
Arka et al. Collaborative compressed I-cloud medical image storage with decompress viewer
Noor et al. Strategizing secured image storing and efficient image retrieval through a new cloud framework
US20110055895A1 (en) Shared scalable server to control confidential sensory event traffic among recordation terminals, analysis engines, and a storage farm coupled via a non-proprietary communication channel
US20230260657A1 (en) Method and system for fast access to advanced visualization of medical scans using a dedicated web portal
US20200168319A1 (en) Computational architecture for managing medical images
Marwan et al. Protecting medical images in cloud using visual cryptography scheme
EP4261840A2 (en) Real time cloud image processing for endoscopy analysis
Mukta Cloud framework for efficient and secured multimedia image communication
Basu et al. 3d Online Multimedia And Games: Processing, Visualization And Transmission

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20130515

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20131220

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20140107

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20140325

A602 Written permission of extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A602

Effective date: 20140401

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20140704

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20141216

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20150109

R150 Certificate of patent or registration of utility model

Ref document number: 5681706

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250