JP2013169308A - 画像表示装置及び画像表示方法、撮影システム - Google Patents
画像表示装置及び画像表示方法、撮影システム Download PDFInfo
- Publication number
- JP2013169308A JP2013169308A JP2012034536A JP2012034536A JP2013169308A JP 2013169308 A JP2013169308 A JP 2013169308A JP 2012034536 A JP2012034536 A JP 2012034536A JP 2012034536 A JP2012034536 A JP 2012034536A JP 2013169308 A JP2013169308 A JP 2013169308A
- Authority
- JP
- Japan
- Prior art keywords
- image
- frame
- moving images
- wide
- image display
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims description 89
- 238000003384 imaging method Methods 0.000 claims description 36
- 238000012545 processing Methods 0.000 claims description 31
- 230000004075 alteration Effects 0.000 claims description 29
- 238000012937 correction Methods 0.000 claims description 19
- 230000002123 temporal effect Effects 0.000 claims description 8
- 238000012935 Averaging Methods 0.000 claims description 2
- 230000000052 comparative effect Effects 0.000 abstract description 9
- 230000001360 synchronised effect Effects 0.000 abstract description 5
- 238000003745 diagnosis Methods 0.000 abstract description 4
- 210000004220 fundus oculi Anatomy 0.000 abstract 3
- 230000008569 process Effects 0.000 description 38
- 210000004204 blood vessel Anatomy 0.000 description 31
- 230000010349 pulsation Effects 0.000 description 18
- 210000000601 blood cell Anatomy 0.000 description 11
- 238000006243 chemical reaction Methods 0.000 description 11
- 238000010586 diagram Methods 0.000 description 11
- 210000001508 eye Anatomy 0.000 description 11
- 230000006870 function Effects 0.000 description 9
- 230000003287 optical effect Effects 0.000 description 9
- 230000004397 blinking Effects 0.000 description 8
- 230000003044 adaptive effect Effects 0.000 description 7
- 230000017531 blood circulation Effects 0.000 description 6
- 230000000694 effects Effects 0.000 description 6
- 230000003902 lesion Effects 0.000 description 6
- 230000001575 pathological effect Effects 0.000 description 5
- 238000004458 analytical method Methods 0.000 description 4
- 230000008859 change Effects 0.000 description 4
- 239000006185 dispersion Substances 0.000 description 4
- 238000000605 extraction Methods 0.000 description 4
- 238000005259 measurement Methods 0.000 description 4
- 230000004044 response Effects 0.000 description 4
- 230000005856 abnormality Effects 0.000 description 3
- 230000007547 defect Effects 0.000 description 3
- 201000010099 disease Diseases 0.000 description 3
- 208000037265 diseases, disorders, signs and symptoms Diseases 0.000 description 3
- 238000010187 selection method Methods 0.000 description 3
- WBMKMLWMIQUJDP-STHHAXOLSA-N (4R,4aS,7aR,12bS)-4a,9-dihydroxy-3-prop-2-ynyl-2,4,5,6,7a,13-hexahydro-1H-4,12-methanobenzofuro[3,2-e]isoquinolin-7-one hydrochloride Chemical compound Cl.Oc1ccc2C[C@H]3N(CC#C)CC[C@@]45[C@@H](Oc1c24)C(=O)CC[C@@]35O WBMKMLWMIQUJDP-STHHAXOLSA-N 0.000 description 2
- PXFBZOLANLWPMH-UHFFFAOYSA-N 16-Epiaffinine Natural products C1C(C2=CC=CC=C2N2)=C2C(=O)CC2C(=CC)CN(C)C1C2CO PXFBZOLANLWPMH-UHFFFAOYSA-N 0.000 description 2
- 239000002131 composite material Substances 0.000 description 2
- 238000007405 data analysis Methods 0.000 description 2
- 210000000624 ear auricle Anatomy 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 210000000608 photoreceptor cell Anatomy 0.000 description 2
- 210000001525 retina Anatomy 0.000 description 2
- 210000001210 retinal vessel Anatomy 0.000 description 2
- 201000004569 Blindness Diseases 0.000 description 1
- 208000031636 Body Temperature Changes Diseases 0.000 description 1
- 206010025421 Macule Diseases 0.000 description 1
- 210000003484 anatomy Anatomy 0.000 description 1
- 210000005252 bulbus oculi Anatomy 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 210000004027 cell Anatomy 0.000 description 1
- 238000011156 evaluation Methods 0.000 description 1
- 208000030533 eye disease Diseases 0.000 description 1
- 230000004424 eye movement Effects 0.000 description 1
- 210000000744 eyelid Anatomy 0.000 description 1
- 230000010365 information processing Effects 0.000 description 1
- 230000004660 morphological change Effects 0.000 description 1
- 210000003733 optic disk Anatomy 0.000 description 1
- 239000013307 optical fiber Substances 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 238000012958 reprocessing Methods 0.000 description 1
- 230000009466 transformation Effects 0.000 description 1
- 238000013519 translation Methods 0.000 description 1
- 230000002792 vascular Effects 0.000 description 1
- 230000006496 vascular abnormality Effects 0.000 description 1
- 231100000216 vascular lesion Toxicity 0.000 description 1
- 230000004382 visual function Effects 0.000 description 1
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B3/00—Apparatus for testing the eyes; Instruments for examining the eyes
- A61B3/0016—Operational features thereof
- A61B3/0041—Operational features thereof characterised by display arrangements
- A61B3/0058—Operational features thereof characterised by display arrangements for multiple images
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B3/00—Apparatus for testing the eyes; Instruments for examining the eyes
- A61B3/10—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions
- A61B3/1025—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions for confocal scanning
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B3/00—Apparatus for testing the eyes; Instruments for examining the eyes
- A61B3/0016—Operational features thereof
- A61B3/0025—Operational features thereof characterised by electronic signal processing, e.g. eye models
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B3/00—Apparatus for testing the eyes; Instruments for examining the eyes
- A61B3/10—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions
- A61B3/12—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions for looking at the eye fundus, e.g. ophthalmoscopes
- A61B3/1241—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions for looking at the eye fundus, e.g. ophthalmoscopes specially adapted for observation of ocular blood flow, e.g. by fluorescein angiography
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B3/00—Apparatus for testing the eyes; Instruments for examining the eyes
- A61B3/10—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions
- A61B3/14—Arrangements specially adapted for eye photography
- A61B3/145—Arrangements specially adapted for eye photography by video means
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/02—Detecting, measuring or recording pulse, heart rate, blood pressure or blood flow; Combined pulse/heart-rate/blood pressure determination; Evaluating a cardiovascular condition not otherwise provided for, e.g. using combinations of techniques provided for in this group with electrocardiography or electroauscultation; Heart catheters for measuring blood pressure
- A61B5/024—Detecting, measuring or recording pulse rate or heart rate
- A61B5/02416—Detecting, measuring or recording pulse rate or heart rate using photoplethysmograph signals, e.g. generated by infrared radiation
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/02—Detecting, measuring or recording pulse, heart rate, blood pressure or blood flow; Combined pulse/heart-rate/blood pressure determination; Evaluating a cardiovascular condition not otherwise provided for, e.g. using combinations of techniques provided for in this group with electrocardiography or electroauscultation; Heart catheters for measuring blood pressure
- A61B5/026—Measuring blood flow
- A61B5/0261—Measuring blood flow using optical means, e.g. infrared light
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/74—Details of notification to user or communication with user or patient ; user input means
- A61B5/742—Details of notification to user or communication with user or patient ; user input means using visual displays
- A61B5/7425—Displaying combinations of multiple images regardless of image source, e.g. displaying a reference anatomical image with a live image
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T3/00—Geometric image transformations in the plane of the image
- G06T3/40—Scaling of whole images or parts thereof, e.g. expanding or contracting
- G06T3/4038—Image mosaicing, e.g. composing plane images from plane sub-images
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/0002—Inspection of images, e.g. flaw detection
- G06T7/0012—Biomedical image inspection
- G06T7/0014—Biomedical image inspection using an image reference approach
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/30—Determination of transform parameters for the alignment of images, i.e. image registration
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B3/00—Apparatus for testing the eyes; Instruments for examining the eyes
- A61B3/10—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions
- A61B3/1015—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions for wavefront analysis
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B3/00—Apparatus for testing the eyes; Instruments for examining the eyes
- A61B3/10—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions
- A61B3/12—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions for looking at the eye fundus, e.g. ophthalmoscopes
- A61B3/1225—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions for looking at the eye fundus, e.g. ophthalmoscopes using coherent radiation
- A61B3/1233—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions for looking at the eye fundus, e.g. ophthalmoscopes using coherent radiation for measuring blood flow, e.g. at the retina
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2200/00—Indexing scheme for image data processing or generation, in general
- G06T2200/24—Indexing scheme for image data processing or generation, in general involving graphical user interfaces [GUIs]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20016—Hierarchical, coarse-to-fine, multiscale or multiresolution image processing; Pyramid transform
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30004—Biomedical image processing
- G06T2207/30041—Eye; Retina; Ophthalmic
Landscapes
- Health & Medical Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Medical Informatics (AREA)
- General Health & Medical Sciences (AREA)
- Veterinary Medicine (AREA)
- Heart & Thoracic Surgery (AREA)
- Biomedical Technology (AREA)
- Molecular Biology (AREA)
- Surgery (AREA)
- Animal Behavior & Ethology (AREA)
- Public Health (AREA)
- Biophysics (AREA)
- Ophthalmology & Optometry (AREA)
- Cardiology (AREA)
- Theoretical Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Pathology (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Radiology & Medical Imaging (AREA)
- Physiology (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Hematology (AREA)
- Quality & Reliability (AREA)
- Multimedia (AREA)
- Vascular Medicine (AREA)
- Signal Processing (AREA)
- Eye Examination Apparatus (AREA)
Abstract
【解決手段】画像表示装置は、眼底の複数の撮影範囲を撮影して得られた複数の動画像と、眼底における上記複数の撮影範囲を含む範囲を撮影して得られた広画角画像とを取得する。ここで、複数の動画像は、それぞれの撮影時に取得された生体信号に基づく時相データと関連付けられている。画像表示装置は、広画角画像上の上記複数の撮影範囲の位置に関する情報に基づいて決定される位置に、上記複数の動画像それぞれの少なくとも1フレームを重畳して表示する。画像表示装置は、この重畳表示において、これら複数の動画像を時相データに基づいて同期した表示タイミングで表示する。
【選択図】図1
Description
眼底の複数の撮影範囲を撮影して得られた複数の動画像と、前記眼底の前記複数の撮影範囲を含む範囲を撮影して得られた広画角画像とを取得する画像取得手段と、前記複数の動画像は、それぞれの撮影時に取得された生体信号に基づく時相データと関連付けられており、
前記複数の動画像それぞれの少なくとも1フレームを、前記広画角画像上の、前記複数の撮影範囲の位置に関する情報に基づいて決定される位置に重畳して表示する表示手段と、
前記表示手段による前記複数の動画像の表示タイミングを前記時相データに基づいて同期させる同期手段と、を備える。
第1実施形態に係る画像表示装置は、撮影位置の異なる複数のSLO動画像を、広画角画像上の撮影位置情報に基づいた位置に、脈波データに基づいて同期表示する。また、この同期表示は、複数のSLO動画像群において固視ずれや瞬目、収差補正不良による影響を略同一にした上で行われる。
・時相データ取得装置30が取得する時相データPiのある位相に合わせて画像取得部110がSLO動画像Diを取得開始する、或いは、
・SLO動画像Diの取得要求後直ちに脈波データPiとSLO動画像Diの取得を同時に開始する、などの手順が考えられる。本実施形態ではSLO動画像Diの取得要求後直ちに時相データPiとSLO動画像Diの取得を開始するものとする。
<ステップS470> 指示取得部150は画像表示装置10によるSLO動画像の表示処理を終了するか否かの指示を外部から取得する。この指示はキーボード306やポインティングデバイス307を介して操作者により入力される。処理終了の指示を取得した場合は解析処理を終了する。一方、処理継続の指示を取得した場合にはステップS410に処理を戻し、次の披検眼に対する処理(または同一披検眼に対する再処理を)行う。
<ステップS620> 同期部143は、例外フレーム判定部142がステップS420にて判定したSLO動画像Diの例外フレーム番号系列を取得する。
<ステップS630> 画像選択部1432はSLO動画像Diから、例外フレームができるだけ少なくなるように、表示部144において表示させるフレーム番号系列を選択する。
・Hi<Hrの場合には前後のフレームを補間処理することにより生成したフレームを内挿し、
・Hi>Hrの場合にはフレームを削減する、
処理を行なうことにより、拍動周期Hiが基準周期Hrと略同一となるように調整する。
第1実施形態では、SLO動画像Diを固視標位置Fiに基づいて広画角画像W上に配置した。第2実施形態では、位置合わせ部145(図8)により得られた位置合わせパラメータに基づいてSLO動画像を広画角画像W上により正確に配置する構成を説明する。
(i)SLO動画像Diにおけるフレーム間位置合わせ、
(ii)広画角画像WとSLO動画像Diとの位置合わせ、
を行う。以下、図10(a)に示すフローチャートを参照してステップS920で実行される処理についてより詳細に説明する。
<ステップS1011> 例外フレーム判定部142は、SLO動画像Diの各フレームについて単独フレームでの例外フレーム判定を行う。本実施形態においては、例外フレーム判定部142が各フレームの平均輝度値Aij及びS/N比SNjを算出し、Aijが閾値T2以下、もしくはS/N比SNjがT4以下であれば輝度異常もしくは低画質であるとみなして例外フレームと判定する。
<ステップS1021> 位置合わせ部145は、記憶部130からSLO動画像Diの撮影時に用いた固視標位置Fiを取得し、広画角画像WとSLO動画像Diとの位置合わせにおける位置合わせパラメータの探索初期点とする。本実施形態においては、位置合わせパラメータとして並進(x及びy)・回転θ・拡大率sを求める。該パラメータの初期値として、
(x0,y0,θ0,s0)
=(Fiのx成分、Fiのy成分、0、(広画角画像の画素サイズ/動画像Diの画素サイズ))
を設定する。
・SLO動画像Diの各フレームもしくは広画角画像Wにおいて観察対象の画像特徴(病変や中心窩などの部位、血管の分岐などの特徴点)を検出し、
・該画像特徴の位置が最も精密に合うようにSLO動画像Diのフレーム間もしくは広画角画像WとSLO動画像Diとの間で位置合わせを行う、ようにしても良い。
・ステップS920では、広画角画像Wを含めた全ての動画像のフレーム間位置合わせを行い、
・ステップS930では、第1実施形態で述べたような同期処理を行い、
・広画角画像WのフレームjとSLO動画像Diの対応するフレームDijとの間で画像間類似度が最大となる位置合わせパラメータの組み合わせを求め、これを広画角画像Wの各フレームについて行ない広画角画像W上の相対位置を決定する、ようにしても良い。
第3実施形態では、第2実施形態の構成に加えて、表示部144が撮影位置の異なるSLO動画像Di間、及び/または、広画角画像WとSLO動画像Diとの間、で輝度調整を行うように構成したものである。これにより、撮影位置の異なるSLO動画像Di間あるいはSLO動画像Diと広画角画像Wとの間で位置関係や表示タイミングだけでなく輝度特性も調整されるので、観察者はより血管形状変化や血球動態を比較観察しやすくなる。
・詳しく比較観察したい対象物の位置または範囲をユーザがポインティングデバイスを用いて(たとえば、マウスクリックにより)指定する、
・該指定した位置または範囲を、指示取得部150を通じて画像間表示調整部1441が取得し、両位置の近傍における輝度特性(輝度平均及び輝度分散)が一致するようにSLO動画像D1とSLO動画像D2の輝度値を調整する。
第4実施形態では、第3実施形態の機能構成(図11)に、更に背景画像生成部1442(図14)が追加されている。背景画像生成部1442は、動画として得られた広画角画像Wの重ね合わせを行って高画質な背景画像を生成したり、撮影位置の異なるSLO動画像Diと位置や輝度が合うように広画角画像Wから代表フレームを選択したりするように構成したものである。これにより、SLO動画像により適した広画角画像Wを生成することができ、撮影位置が異なるSLO動画像Di間の血管形状変化や血球動態をより比較観察しやすくすることができる。
・同期処理によって選択された広画角画像Wの各フレームWfと、各SLO動画像Diの同期処理によって選択された全フレームとの間で画像類似度(たとえば輝度特性の類似度)の総和Σfを求め、
・この総和Σfが最大となるフレーム番号の広画角画像フレームWfを背景画像(代表フレーム)として選択する。
・広画角画像Wの複数フレームの重ね合わせを行うことでより高画質な背景画像を生成して広画角画像として表示する、あるいは、
・広画角画像Wの複数フレームの中から、撮影位置の異なるSLO動画像Diと位置や輝度が合うように代表フレームを選択し、これを広画角画像として表示する。これにより、撮影位置が異なるSLO動画像Di間の血管形状変化や血球動態を比較観察しやすくする。
上述の実施形態では、複数の動画像を同期再生することとしたが、これに限らず各動画像から対応する1フレームをそれぞれ取得し表示することとしてもよい。ユーザの指示に応じてフレーム画像のコマ送りをさせるように画像処理装置10が表示部144を制御することとすれば、時相の合った各フレーム画像をユーザが比較しやすくなる。
Claims (16)
- 眼底の複数の撮影範囲を撮影して得られた複数の動画像と、前記眼底の前記複数の撮影範囲を含む範囲を撮影して得られた広画角画像とを取得する画像取得手段と、前記複数の動画像は、それぞれの撮影時に取得された生体信号に基づく時相データと関連付けられており、
前記複数の動画像それぞれの少なくとも1フレームを、前記広画角画像上の、前記複数の撮影範囲の位置に関する情報に基づいて決定される位置に重畳して表示する表示手段と、
前記表示手段による前記複数の動画像の表示タイミングを前記時相データに基づいて同期させる同期手段と、を備えることを特徴とする画像表示装置。 - 前記複数の動画像の各々において、複数のフレームのそれぞれの画像特徴に基づいて、前記複数のフレームから例外フレームを判定する判定手段をさらに備え、
前記同期手段は、前記例外フレームの表示が制限されるように前記複数の動画像から同期して再生すべき区間を選択することを特徴とする請求項1に記載の画像表示装置。 - 前記同期手段は、前記複数の動画像にわたって前記時相データの時相が共通し、前記例外フレームの数が所定数以下である区間から、前記再生すべき区間を選択することを特徴とする請求項2に記載の画像表示装置。
- 前記画像特徴は、輝度、画像歪み量、信号対雑音比、フレーム間移動量の少なくとも何れかであることを特徴とする請求項2または3に記載の画像表示装置。
- 前記複数の動画像の各々において、各フレームの画像特徴を用いてフレーム間の位置を合わせる位置合わせ手段をさらに備え、
前記判定手段は、前記位置合わせの前にはフレーム単独の画像特徴に基づいて前記例外フレームを判定し、前記位置合わせの後には他のフレームとの差異に関連した画像特徴に基づいて前記例外フレームを判定することを特徴とする請求項2乃至4のいずれか1項に記載の画像表示装置。 - 前記判定手段は、前記位置合わせに用いられた画像特徴を用いて前記例外フレームを判定することを特徴とする請求項5に記載の画像表示装置。
- 前記同期手段は、前記再生すべき区間において前記時相データの一周期あたりのフレーム数の差が前記複数の動画像間で所定の範囲に収まるように、フレームを内挿して追加する、もしくはフレームを削減することを特徴とする請求項2乃至6のいずれか1項に記載の画像表示装置。
- 前記広画角画像は動画像であり、
前記広画角画像の前記再生すべき区間のフレームを加算平均することにより前記表示手段が表示する広画角画像を生成する生成手段を更に備えることを特徴とする請求項2乃至6のいずれか1項に記載の画像表示装置。 - 前記表示手段は、動画像である広画角画像の前記再生すべき区間のフレームの中から、前記複数の動画像との画像類似度が最も高いフレームを選択し、該選択されたフレームを前記複数の動画像が重畳される広画角画像として表示することを特徴とする請求項2乃至6のいずれか1項に記載の画像表示装置。
- 前記複数の動画像の間において、もしくは、前記表示手段が表示する前記広画角画像と前記動画像との間において、輝度の特性が一致するよう調整する調整手段をさらに備えることを特徴とする請求項1乃至7のいずれか1項に記載の画像表示装置。
- 前記調整手段は、前記動画像の指定された部位について輝度の特性が一致するように調整することを特徴とする請求項10に記載の画像表示装置。
- 前記表示手段は、前記複数の動画像から抽出した特定の領域のみを前記広画角画像上に重畳して表示することを特徴とする請求項1乃至11のいずれか1項に記載の画像表示装置。
- 前記複数の動画像及び前記広画角画像は、収差補正デバイスを有する走査型レーザ検眼鏡により得られた眼底の画像であり、
前記複数の動画像は、前記収差補正デバイスにより収差補正をして得られた画像であり、前記広画角画像は前記収差補正デバイスによる収差補正をせずに得られた画像であることを特徴とする請求項1乃至12のいずれか1項に記載の画像表示装置。 - 請求項1乃至13のいずれか1項に記載の画像表示装置と、
前記複数の動画像と前記広画角画像を撮影するための、収差補正デバイスを有する走査型レーザ検眼鏡と、を備えることを特徴とする撮影システム。 - 画像表示装置による画像表示方法であって、
画像取得手段が、眼底の複数の撮影範囲を撮影して得られた複数の動画像と、前記眼底の前記複数の撮影範囲を含む範囲を撮影して得られた広画角画像とを取得する工程と、前記複数の動画像は、それぞれの撮影時に取得された生体信号に基づく時相データと関連付けられており、
表示手段が、前記複数の動画像それぞれの少なくとも1フレームを、前記広画角画像上の、前記複数の撮影範囲の位置に関する情報に基づいて決定される位置に重畳して表示する工程と、
同期手段が、前記表示する工程における前記複数の動画像の表示タイミングを前記時相データに基づいて同期させる工程と、を有することを特徴とする画像表示方法。 - コンピュータを、請求項1乃至13のずれか1項に記載の画像表示装置の各手段として機能させるためのプログラム。
Priority Applications (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2012034536A JP6114495B2 (ja) | 2012-02-20 | 2012-02-20 | 画像表示装置及び画像表示方法、撮影システム |
CN201380010115.2A CN104125798B (zh) | 2012-02-20 | 2013-02-13 | 图像显示设备、图像显示方法和摄像系统 |
US14/370,519 US9320424B2 (en) | 2012-02-20 | 2013-02-13 | Image display apparatus, image display method and imaging system |
PCT/JP2013/054062 WO2013125546A1 (en) | 2012-02-20 | 2013-02-13 | Image display apparatus, image display method and imaging system |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2012034536A JP6114495B2 (ja) | 2012-02-20 | 2012-02-20 | 画像表示装置及び画像表示方法、撮影システム |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017053105A Division JP6420859B2 (ja) | 2017-03-17 | 2017-03-17 | 画像表示装置及び画像表示方法、撮影システム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2013169308A true JP2013169308A (ja) | 2013-09-02 |
JP6114495B2 JP6114495B2 (ja) | 2017-04-12 |
Family
ID=49005730
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2012034536A Expired - Fee Related JP6114495B2 (ja) | 2012-02-20 | 2012-02-20 | 画像表示装置及び画像表示方法、撮影システム |
Country Status (4)
Country | Link |
---|---|
US (1) | US9320424B2 (ja) |
JP (1) | JP6114495B2 (ja) |
CN (1) | CN104125798B (ja) |
WO (1) | WO2013125546A1 (ja) |
Cited By (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2015091309A (ja) * | 2013-09-30 | 2015-05-14 | 株式会社ニデック | 眼科用画像処理装置および画像処理プログラム |
JP2016054787A (ja) * | 2014-09-05 | 2016-04-21 | キヤノン株式会社 | 画像処理装置及び画像処理装置の作動方法 |
JP2017514650A (ja) * | 2014-05-02 | 2017-06-08 | オプトス ピーエルシー | 眼の撮像の改良 |
JP2018138215A (ja) * | 2018-05-14 | 2018-09-06 | 株式会社ニデック | 眼科撮影装置 |
JP2018143434A (ja) * | 2017-03-03 | 2018-09-20 | 株式会社トプコン | 眼科画像表示装置、眼科画像表示方法及びプログラム |
JP2019042263A (ja) * | 2017-09-05 | 2019-03-22 | 株式会社トプコン | 眼科システム、眼科撮影装置及び眼科情報処理装置 |
WO2019203313A1 (ja) * | 2018-04-18 | 2019-10-24 | 株式会社ニコン | 画像処理方法、プログラム、及び画像処理装置 |
Families Citing this family (16)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6225430B2 (ja) * | 2013-02-09 | 2017-11-08 | 株式会社ニデック | 眼鏡レンズ周縁加工システム、および眼鏡レンズ周縁加工プログラム |
JP6174908B2 (ja) * | 2013-05-27 | 2017-08-02 | キヤノン株式会社 | 情報処理装置、情報処理方法、及び、コンピュータプログラム |
US9386920B2 (en) | 2013-09-30 | 2016-07-12 | Nidek Co., Ltd. | Ophthalmologic image processing apparatus |
CN105025215B (zh) * | 2014-04-23 | 2019-09-24 | 南京中兴新软件有限责任公司 | 一种终端基于多摄像头实现合照的方法及装置 |
JP6527717B2 (ja) * | 2015-03-05 | 2019-06-05 | 株式会社トプコン | レーザ治療装置 |
JP6470604B2 (ja) | 2015-03-25 | 2019-02-13 | キヤノン株式会社 | 画像処理装置及び画像処理方法及びプログラム |
CN106303499B (zh) * | 2015-05-30 | 2018-10-16 | 北京智谷睿拓技术服务有限公司 | 视频显示控制方法和装置、显示设备 |
CN106303498B (zh) * | 2015-05-30 | 2018-10-16 | 北京智谷睿拓技术服务有限公司 | 视频显示控制方法和装置、显示设备 |
CN106303315B (zh) | 2015-05-30 | 2019-08-16 | 北京智谷睿拓技术服务有限公司 | 视频显示控制方法和装置、显示设备 |
JP6736304B2 (ja) * | 2016-02-18 | 2020-08-05 | 株式会社トプコン | 眼科撮影装置 |
JP6835080B2 (ja) * | 2016-05-25 | 2021-02-24 | ソニー株式会社 | 情報処理装置、情報処理方法、及びプログラム |
JP6420859B2 (ja) * | 2017-03-17 | 2018-11-07 | キヤノン株式会社 | 画像表示装置及び画像表示方法、撮影システム |
KR101938984B1 (ko) * | 2017-08-09 | 2019-04-10 | 연세대학교 산학협력단 | Spad 거리측정 센서 기반의 2단계 트래킹을 이용한 거리 측정 장치 및 방법 |
US10973406B2 (en) | 2018-03-06 | 2021-04-13 | Canon Kabushiki Kaisha | Image processing apparatus, image processing method, and non-transitory computer readable medium |
KR102521408B1 (ko) * | 2018-08-27 | 2023-04-14 | 삼성전자주식회사 | 인포그래픽을 제공하기 위한 전자 장치 및 그에 관한 방법 |
KR102225540B1 (ko) | 2019-05-21 | 2021-03-09 | 한국과학기술연구원 | 망막 이미지 촬영 방법 및 장치, 및 망막 및 시신경 기능 평가 시스템 |
Citations (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH0428348A (ja) * | 1990-05-24 | 1992-01-30 | Hitoshi Fujii | 血流状態画像化装置 |
JPH05192299A (ja) * | 1992-01-21 | 1993-08-03 | Topcon Corp | 眼底カメラ |
JP2003175004A (ja) * | 2001-12-10 | 2003-06-24 | Topcon Corp | 眼科撮影装置 |
WO2004004556A1 (ja) * | 2002-07-03 | 2004-01-15 | Bml, Inc. | 脈波伝播の検出システム |
JP2009022459A (ja) * | 2007-07-18 | 2009-02-05 | Toshiba Corp | 医用画像処理表示装置、およびその処理プログラム |
WO2009148067A1 (ja) * | 2008-06-04 | 2009-12-10 | 株式会社 網膜情報診断研究所 | 網膜情報診断システム |
JP2010259543A (ja) * | 2009-04-30 | 2010-11-18 | Nidek Co Ltd | 眼底撮影装置 |
JP2011120657A (ja) * | 2009-12-08 | 2011-06-23 | Canon Inc | 画像処理装置、画像処理方法、及びプログラム |
US20130070201A1 (en) * | 2009-11-30 | 2013-03-21 | Mahnaz Shahidi | Assessment of microvascular circulation |
JP2013517842A (ja) * | 2010-01-21 | 2013-05-20 | フィジカル サイエンシーズ, インコーポレイテッド | 多機能適合的光学網膜撮像 |
Family Cites Families (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5098426A (en) | 1989-02-06 | 1992-03-24 | Phoenix Laser Systems, Inc. | Method and apparatus for precision laser surgery |
ZA200608191B (en) | 2004-04-01 | 2008-07-30 | William C Torch | Biosensors, communicators, and controllers monitoring eye movement and methods for using them |
CN101181152B (zh) * | 2006-11-14 | 2010-05-26 | 深圳大学 | 时间分辨自体荧光寿命成像用于眼底病变早期诊断的方法及其装置 |
JP4909378B2 (ja) | 2009-06-02 | 2012-04-04 | キヤノン株式会社 | 画像処理装置及びその制御方法、コンピュータプログラム |
CN101926640B (zh) | 2009-06-22 | 2012-05-09 | 中国科学院光电技术研究所 | 活体人眼视网膜动态成像仪 |
JP5582772B2 (ja) | 2009-12-08 | 2014-09-03 | キヤノン株式会社 | 画像処理装置及び画像処理方法 |
JP4764521B2 (ja) | 2010-10-12 | 2011-09-07 | 株式会社東芝 | 超音波診断装置 |
JP5702991B2 (ja) | 2010-11-19 | 2015-04-15 | キヤノン株式会社 | 画像処理装置及び画像処理方法 |
JP5904711B2 (ja) | 2011-02-01 | 2016-04-20 | キヤノン株式会社 | 画像処理装置、画像処理方法およびプログラム |
JP6025311B2 (ja) | 2011-08-01 | 2016-11-16 | キヤノン株式会社 | 眼科診断支援装置および方法 |
JP5955163B2 (ja) | 2011-09-06 | 2016-07-20 | キヤノン株式会社 | 画像処理装置および画像処理方法 |
JP6200168B2 (ja) | 2013-02-28 | 2017-09-20 | キヤノン株式会社 | 画像処理装置及び画像処理方法 |
JP6092659B2 (ja) | 2013-02-28 | 2017-03-08 | キヤノン株式会社 | 画像処理装置及び画像処理方法 |
JP6198410B2 (ja) | 2013-02-28 | 2017-09-20 | キヤノン株式会社 | 画像処理装置及び画像処理方法 |
-
2012
- 2012-02-20 JP JP2012034536A patent/JP6114495B2/ja not_active Expired - Fee Related
-
2013
- 2013-02-13 US US14/370,519 patent/US9320424B2/en not_active Expired - Fee Related
- 2013-02-13 WO PCT/JP2013/054062 patent/WO2013125546A1/en active Application Filing
- 2013-02-13 CN CN201380010115.2A patent/CN104125798B/zh not_active Expired - Fee Related
Patent Citations (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH0428348A (ja) * | 1990-05-24 | 1992-01-30 | Hitoshi Fujii | 血流状態画像化装置 |
JPH05192299A (ja) * | 1992-01-21 | 1993-08-03 | Topcon Corp | 眼底カメラ |
JP2003175004A (ja) * | 2001-12-10 | 2003-06-24 | Topcon Corp | 眼科撮影装置 |
WO2004004556A1 (ja) * | 2002-07-03 | 2004-01-15 | Bml, Inc. | 脈波伝播の検出システム |
JP2009022459A (ja) * | 2007-07-18 | 2009-02-05 | Toshiba Corp | 医用画像処理表示装置、およびその処理プログラム |
WO2009148067A1 (ja) * | 2008-06-04 | 2009-12-10 | 株式会社 網膜情報診断研究所 | 網膜情報診断システム |
JP2010259543A (ja) * | 2009-04-30 | 2010-11-18 | Nidek Co Ltd | 眼底撮影装置 |
US20130070201A1 (en) * | 2009-11-30 | 2013-03-21 | Mahnaz Shahidi | Assessment of microvascular circulation |
JP2011120657A (ja) * | 2009-12-08 | 2011-06-23 | Canon Inc | 画像処理装置、画像処理方法、及びプログラム |
JP2013517842A (ja) * | 2010-01-21 | 2013-05-20 | フィジカル サイエンシーズ, インコーポレイテッド | 多機能適合的光学網膜撮像 |
Cited By (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2015091309A (ja) * | 2013-09-30 | 2015-05-14 | 株式会社ニデック | 眼科用画像処理装置および画像処理プログラム |
JP2017514650A (ja) * | 2014-05-02 | 2017-06-08 | オプトス ピーエルシー | 眼の撮像の改良 |
JP2016054787A (ja) * | 2014-09-05 | 2016-04-21 | キヤノン株式会社 | 画像処理装置及び画像処理装置の作動方法 |
JP2018143434A (ja) * | 2017-03-03 | 2018-09-20 | 株式会社トプコン | 眼科画像表示装置、眼科画像表示方法及びプログラム |
JP2019042263A (ja) * | 2017-09-05 | 2019-03-22 | 株式会社トプコン | 眼科システム、眼科撮影装置及び眼科情報処理装置 |
WO2019203313A1 (ja) * | 2018-04-18 | 2019-10-24 | 株式会社ニコン | 画像処理方法、プログラム、及び画像処理装置 |
JPWO2019203313A1 (ja) * | 2018-04-18 | 2021-04-22 | 株式会社ニコン | 画像処理方法、プログラム、及び画像処理装置 |
JP2018138215A (ja) * | 2018-05-14 | 2018-09-06 | 株式会社ニデック | 眼科撮影装置 |
Also Published As
Publication number | Publication date |
---|---|
WO2013125546A1 (en) | 2013-08-29 |
CN104125798A (zh) | 2014-10-29 |
JP6114495B2 (ja) | 2017-04-12 |
US20140340638A1 (en) | 2014-11-20 |
US9320424B2 (en) | 2016-04-26 |
CN104125798B (zh) | 2017-02-22 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6114495B2 (ja) | 画像表示装置及び画像表示方法、撮影システム | |
JP6101048B2 (ja) | 画像処理装置及び画像処理方法 | |
JP5947561B2 (ja) | 画像形成装置及び画像形成方法 | |
JP6200168B2 (ja) | 画像処理装置及び画像処理方法 | |
JP6198410B2 (ja) | 画像処理装置及び画像処理方法 | |
JP6092659B2 (ja) | 画像処理装置及び画像処理方法 | |
JP2013169296A (ja) | 画像処理装置及び画像処理方法 | |
JP2012176094A (ja) | 画像処理装置、画像処理方法、画像処理システム、slo装置、およびプログラム | |
JP6463048B2 (ja) | 画像処理装置及び画像処理装置の作動方法 | |
JP2020089768A (ja) | 画像処理装置及び画像処理方法 | |
JP6516597B2 (ja) | 画像処理装置及び画像処理方法 | |
JP2019000728A (ja) | 眼底画像処理装置及び眼底画像処理方法、撮影システム | |
JP6420859B2 (ja) | 画像表示装置及び画像表示方法、撮影システム | |
JP6590513B2 (ja) | 情報処理装置、その作動方法、及びコンピュータプログラム | |
JP6468907B2 (ja) | 画像処理装置及び画像処理方法及びプログラム | |
JP6604743B2 (ja) | 情報処理装置、その作動方法、及びコンピュータプログラム | |
JP6470604B2 (ja) | 画像処理装置及び画像処理方法及びプログラム | |
JP6602043B2 (ja) | 情報処理装置、その作動方法、及びコンピュータプログラム | |
JP2017136205A (ja) | 画像表示装置、画像表示方法及びプログラム | |
JP2018164814A (ja) | 画像処理装置及び画像処理装置の作動方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20150130 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20160129 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20160329 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20160805 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20160927 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20170217 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20170317 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 6114495 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
|
LAPS | Cancellation because of no payment of annual fees |