TW202304371A - 醫療用程式及醫療用檢查系統 - Google Patents
醫療用程式及醫療用檢查系統 Download PDFInfo
- Publication number
- TW202304371A TW202304371A TW111122421A TW111122421A TW202304371A TW 202304371 A TW202304371 A TW 202304371A TW 111122421 A TW111122421 A TW 111122421A TW 111122421 A TW111122421 A TW 111122421A TW 202304371 A TW202304371 A TW 202304371A
- Authority
- TW
- Taiwan
- Prior art keywords
- mentioned
- real
- animation data
- function
- data
- Prior art date
Links
- 230000006870 function Effects 0.000 claims description 223
- 238000002558 medical inspection Methods 0.000 claims description 100
- 238000000605 extraction Methods 0.000 claims description 91
- 238000004364 calculation method Methods 0.000 claims description 45
- 238000004891 communication Methods 0.000 claims description 45
- 238000007689 inspection Methods 0.000 claims description 37
- 230000005540 biological transmission Effects 0.000 claims description 13
- 239000000284 extract Substances 0.000 claims description 12
- 230000008859 change Effects 0.000 claims description 7
- 238000009434 installation Methods 0.000 claims description 3
- 238000000034 method Methods 0.000 abstract description 42
- 230000008569 process Effects 0.000 abstract description 20
- 238000003384 imaging method Methods 0.000 abstract description 12
- 238000012545 processing Methods 0.000 description 172
- 238000010586 diagram Methods 0.000 description 22
- 238000007726 management method Methods 0.000 description 12
- 238000003860 storage Methods 0.000 description 10
- 238000012217 deletion Methods 0.000 description 6
- 230000037430 deletion Effects 0.000 description 6
- 239000000203 mixture Substances 0.000 description 6
- 239000003086 colorant Substances 0.000 description 4
- 238000003745 diagnosis Methods 0.000 description 4
- 238000005286 illumination Methods 0.000 description 4
- 241001270131 Agaricus moelleri Species 0.000 description 3
- 241001465754 Metazoa Species 0.000 description 3
- 238000004043 dyeing Methods 0.000 description 3
- 230000007717 exclusion Effects 0.000 description 3
- 208000003556 Dry Eye Syndromes Diseases 0.000 description 2
- 206010013774 Dry eye Diseases 0.000 description 2
- 210000004087 cornea Anatomy 0.000 description 2
- 238000010339 medical test Methods 0.000 description 2
- 238000012015 optical character recognition Methods 0.000 description 2
- 230000009471 action Effects 0.000 description 1
- 230000000903 blocking effect Effects 0.000 description 1
- 238000012790 confirmation Methods 0.000 description 1
- 238000005520 cutting process Methods 0.000 description 1
- 238000013075 data extraction Methods 0.000 description 1
- 238000013523 data management Methods 0.000 description 1
- 230000007423 decrease Effects 0.000 description 1
- 238000002059 diagnostic imaging Methods 0.000 description 1
- 238000009826 distribution Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 210000000720 eyelash Anatomy 0.000 description 1
- 239000007850 fluorescent dye Substances 0.000 description 1
- 230000001771 impaired effect Effects 0.000 description 1
- 230000001678 irradiating effect Effects 0.000 description 1
- 239000000049 pigment Substances 0.000 description 1
- 238000002360 preparation method Methods 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 230000000717 retained effect Effects 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 238000012360 testing method Methods 0.000 description 1
- 230000001960 triggered effect Effects 0.000 description 1
Images
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B3/00—Apparatus for testing the eyes; Instruments for examining the eyes
- A61B3/10—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions
- A61B3/13—Ophthalmic microscopes
- A61B3/135—Slit-lamp microscopes
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H30/00—ICT specially adapted for the handling or processing of medical images
- G16H30/20—ICT specially adapted for the handling or processing of medical images for handling medical images, e.g. DICOM, HL7 or PACS
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H40/00—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices
- G16H40/60—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the operation of medical equipment or devices
- G16H40/67—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the operation of medical equipment or devices for remote operation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/76—Television signal recording
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B3/00—Apparatus for testing the eyes; Instruments for examining the eyes
- A61B3/0016—Operational features thereof
- A61B3/0025—Operational features thereof characterised by electronic signal processing, e.g. eye models
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B3/00—Apparatus for testing the eyes; Instruments for examining the eyes
- A61B3/0016—Operational features thereof
- A61B3/0041—Operational features thereof characterised by display arrangements
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B3/00—Apparatus for testing the eyes; Instruments for examining the eyes
- A61B3/10—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions
- A61B3/12—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions for looking at the eye fundus, e.g. ophthalmoscopes
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B3/00—Apparatus for testing the eyes; Instruments for examining the eyes
- A61B3/10—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions
- A61B3/14—Arrangements specially adapted for eye photography
- A61B3/145—Arrangements specially adapted for eye photography by video means
Landscapes
- Health & Medical Sciences (AREA)
- Engineering & Computer Science (AREA)
- Life Sciences & Earth Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Medical Informatics (AREA)
- Public Health (AREA)
- Biomedical Technology (AREA)
- Veterinary Medicine (AREA)
- Heart & Thoracic Surgery (AREA)
- Molecular Biology (AREA)
- Surgery (AREA)
- Animal Behavior & Ethology (AREA)
- Physics & Mathematics (AREA)
- Biophysics (AREA)
- Primary Health Care (AREA)
- Epidemiology (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Radiology & Medical Imaging (AREA)
- Ophthalmology & Optometry (AREA)
- Pathology (AREA)
- Business, Economics & Management (AREA)
- General Business, Economics & Management (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Medical Treatment And Welfare Office Work (AREA)
- Ultra Sonic Daignosis Equipment (AREA)
Abstract
本發明之醫療用程式用以於與具備攝像機之醫療用檢查裝置一起使用之終端裝置中實現各種處理,為了維持具備攝像機之醫療用檢查裝置之使用感,並且進行藉由醫療用檢查裝置之拍攝而生成之動畫之實時播放及錄影,該醫療用程式實現以下功能:藉由實時播放將由醫療用檢查裝置拍攝同時即時發送之動畫資料顯示於終端裝置之顯示部;及基於既定操作對實時播放中之動畫資料之錄影之開始/停止進行控制。
Description
本發明係關於一種用於檢查對象之檢查之醫療用程式及醫療用檢查系統。
習知,使用一種藉由拍攝檢查對象而進行該檢查對象之檢查之醫療用檢查裝置。例如,於專利文獻1中,揭示一種醫療用檢查裝置,其藉由拍攝檢查對象生成拍攝資料,將生成之資料記錄於既定之記錄手段。
[現有技術文獻]
[專利文獻]
[專利文獻1]日本專利第4136559號
[發明所欲解決之問題]
根據上述專利文獻1所記載之醫療用檢查裝置,可將藉由拍攝檢查對象而生成之複數個拍攝資料記錄於本機裝置所具備之記錄手段中。但是,若醫療用檢查裝置中採用對動畫進行錄影之構成,則有時會損害醫療用檢查裝置之使用感。例如,由於醫療用檢查裝置需要具備儲存功能,因此有導致醫療用檢查裝置之尺寸變大之問題。又,存在如下問題:例如於在醫療用檢查裝置側無法將資訊寫入至錄影資料,且於醫療用檢查裝置中對複數個受檢者進行拍攝錄影後將資料傳送至其他終端之情形時,有弄錯受檢者之虞。
本發明係鑒於上述問題點而成者,目的在於提供一種可維持具備攝像機之醫療用檢查裝置之使用感,並且對藉由該醫療用檢查裝置之拍攝而生成之動畫資料進行錄影的醫療用程式及醫療用檢查系統。
[解決問題之手段]
本發明之醫療用程式係用以於與具備攝像機之醫療用檢查裝置一起使用之終端裝置中實現各種處理者,其特徵在於實現如下功能:接收功能,其接收包含由上述醫療用檢查裝置拍攝同時即時發送之動畫資料(以下稱為即時動畫資料)之各種資料;顯示控制功能,其藉由實時播放將所接收之上述即時動畫資料所示之動畫顯示於上述終端裝置所具備之顯示部;錄影功能,其基於對上述終端裝置之既定操作,對實時播放中之上述即時動畫資料之錄影之開始/停止進行控制;及記錄控制功能,其將由該錄影功能開始錄影至停止期間之上述即時動畫資料記錄於上述終端裝置所具備之記錄手段中作為記錄完成之動畫資料。
又,關於本發明之醫療用程式,其特徵亦可在於:於上述顯示控制功能中實現如下功能,即,將用於指示實時播放中之上述即時動畫資料之錄影之開始/停止之第1按鍵顯示於上述終端裝置所具備之作為觸控面板之上述顯示部;於上述錄影功能中實現如下功能,即,基於對上述第1按鍵之輸入操作,對實時播放中之上述即時動畫資料之錄影之開始/停止進行控制。
又,關於本發明之醫療用程式,其特徵亦可在於:於上述接收功能中實現如下功能,即,自上述醫療用檢查裝置接收表示上述即時動畫資料之錄影之開始/停止之控制要求之資訊,該資訊基於針對物理設置於上述醫療用檢查裝置之既定操作部之操作;於上述錄影功能中實現如下功能,即,基於自上述醫療用檢查裝置接收之表示上述控制要求之資訊,對實時播放中之上述即時動畫資料之錄影之開始/停止進行控制。
又,關於本發明之醫療用程式,其特徵亦可在於:於上述顯示控制功能中實現如下功能,即,於播放上述記錄完成之動畫資料顯示於上述顯示部時,將用於接受自該記錄完成之動畫資料提取靜止圖像資料之提取要求之輸入操作之第2按鍵顯示於上述顯示部;於上述記錄控制功能中實現如下功能,即,將與於進行對上述第2按鍵之輸入操作時顯示於上述顯示部之靜止圖像對應之靜止圖像資料記錄於上述記錄手段。
又,關於本發明之醫療用程式,其特徵亦可在於:實現接受用於識別檢查對象之識別資訊之輸入操作之接受功能,於上述記錄控制功能中實現如下功能,即,僅於上述識別資訊之輸入操作被接受之情形時,將上述即時動畫資料記錄於上述記錄手段作為上述記錄完成之動畫資料。
又,關於本發明之醫療用程式,其特徵亦可在於:於上述記錄控制功能中實現如下功能,即,將上述即時動畫資料與輸入被接受之上述識別資訊建立對應關係而記錄於上述記錄手段作為上述記錄完成之動畫資料。
又,關於本發明之醫療用程式,其特徵亦可在於:實現接受用於識別檢查對象之識別資訊之輸入操作之接受功能,於上述顯示控制功能中實現如下功能,即,僅於上述識別資訊之輸入操作被接受之情形時,藉由實時播放將所接收之上述即時動畫資料所示之動畫顯示於上述顯示部。
又,關於本發明之醫療用程式,其特徵亦可在於:於上述顯示控制功能中實現如下功能,即,於顯示上述即時動畫資料所示之動畫時,將表示檢查對象之上述識別資訊一併顯示於上述顯示部。
又,關於本發明之醫療用程式,其特徵亦可在於:上述醫療用檢查裝置係用於檢查受檢眼之裝置,於上述顯示控制功能中實現如下功能,即,將用於選擇上述受檢者之左右哪個受檢眼為檢查對象之第3按鍵顯示於上述顯示部;於上述記錄控制功能中實現如下功能,即,基於對上述第3按鍵之選擇操作,將上述即時動畫資料與受檢眼之左右之選擇資訊建立對應關係而記錄於上述記錄手段作為上述記錄完成之動畫資料。
又,關於本發明之醫療用程式,其特徵亦可在於:於上述顯示控制功能中實現如下功能,即,於顯示上述記錄完成之動畫資料所示之動畫時,將上述左右之選擇資訊對應於該動畫顯示於上述顯示部。
又,關於本發明之醫療用程式,其特徵亦可在於實現如下功能:發送功能,其將上述記錄完成之動畫資料發送至既定之伺服器裝置;及通訊控制功能,其以如下方式控制,即,於利用上述接收功能進行上述即時動畫資料之接收之通訊、及利用上述發送功能進行上述記錄完成之動畫資料之發送之通訊中,於一通訊正在進行時禁止與另一者之通訊。
本發明之醫療用檢查系統係具備具有攝像機之醫療用檢查裝置、終端裝置及伺服器裝置者,其特徵在於:上述醫療用檢查裝置將藉由拍攝檢查對象而生成之動畫資料即時發送至上述終端裝置,上述終端裝置具備:接收部,其接收包含由上述醫療用檢查裝置拍攝同時即時發送之動畫資料(以下稱為即時動畫資料)之各種資料;顯示控制部,其藉由實時播放將所接收之上述即時動畫資料所示之動畫顯示於上述終端裝置所具備之顯示部;錄影部,其基於對上述終端裝置之既定操作,對實時播放中之上述即時動畫資料之錄影之開始/停止進行控制;記錄控制部,其將由該錄影部開始上述即時動畫資料之錄影至停止期間之上述即時動畫資料記錄於本機終端所具備之記錄手段作為記錄完成之動畫資料;及發送部,其將上述記錄完成之動畫資料發送至上述伺服器裝置。
又,關於本發明之醫療用檢查系統,其特徵亦可在於:上述伺服器裝置基於用於識別檢查對象之資訊且由上述終端裝置建立對應關係之識別資訊,將自上述終端裝置接收之上述記錄完成之動畫資料分類而進行管理。
又,關於本發明之醫療用檢查系統,其特徵亦可在於:上述醫療用檢查裝置作為1個存取點發揮功能,於與上述終端裝置確立通訊連接時不可與其他裝置進行通訊連接。
本發明之圖像處理程式係用於使電腦實現與圖像處理相關之功能者,其特徵在於使上述電腦實現如下功能:動畫資料獲取功能,其獲取處理對象之動畫資料;合焦度運算功能,其算出構成上述動畫資料之一部分或全部幀之合焦度;靜止圖像提取功能,其提取已算出上述合焦度之幀中之上述合焦度為既定值以上之幀(候選幀)之一部分或全部作為提取靜止圖像資料;及記錄功能,其將上述提取靜止圖像資料記錄於上述電腦所具備之記錄手段。
又,關於本發明之圖像處理程式,其特徵亦可在於:於上述靜止圖像提取功能中,於在上述候選幀按時間序列順序排列時預先設定之時間範圍內存在複數個上述候選幀之情形時,自上述合焦度較小者中將既定數量之上述候選幀自提取對象排除。
又,關於本發明之圖像處理程式,其特徵亦可在於:於上述靜止圖像提取功能中,自上述候選幀提取上述提取靜止圖像資料時,於按照時間序列順序依次關注上述候選幀時,自該關注幀之時點起,於既定之時間範圍內存在上述合焦度小於該關注幀之上述候選幀之情形時,將該候選幀自提取對象排除。
又,關於本發明之圖像處理程式,其特徵亦可在於:於上述靜止圖像提取功能中,自上述候選幀提取上述提取靜止圖像資料時,將上述候選幀中之上述合焦度最小之幀自提取對象排除以使上述提取靜止圖像資料之合計數不超過既定之上限數。
又,關於本發明之圖像處理程式,其特徵亦可在於上述合焦度運算功能中之上述合焦度之運算係藉由如下處理實現:邊緣提取圖像生成處理,其對上述幀執行邊緣提取處理而生成邊緣提取圖像;及運算處理,其基於上述邊緣提取圖像中之邊緣之方差算出與該邊緣提取圖像對應之幀之上述合焦度。
又,關於本發明之圖像處理程式,其特徵亦可在於:於上述合焦度運算功能中,執行提取構成上述幀之各像素之色資訊中之綠色成分生成綠色成分圖像資料的綠色成分圖像生成處理、及將上述綠色成分圖像資料進行灰階化而生成灰階圖像資料的灰階化處理,基於由該灰階化處理而獲得之上述灰階圖像資料算出上述合焦度。
又,關於本發明之圖像處理程式,其特徵亦可在於:於上述合焦度運算功能中,執行對上述灰階圖像資料之黑位準進行調整之調整處理,基於由該調整處理調整黑位準之上述灰階圖像資料算出上述合焦度。
又,關於本發明之圖像處理程式,其特徵亦可在於:於上述合焦度運算功能中,將構成上述動畫資料之幀中每隔既定時間間隔或既定張數之1張幀設定為運算上述合焦度之對象幀。
又,關於本發明之圖像處理程式,其特徵亦可在於:上述動畫資料為拍攝受檢者之眼睛而得之動畫之資料,於上述合焦度運算功能中,以除上述幀之上側及/或下側之既定範圍之區域以外之區域作為對象算出上述合焦度。
又,關於本發明之圖像處理程式,其特徵亦可在於:於上述動畫資料獲取功能中,將獲取之上述動畫資料記憶於上述電腦所具備之記憶手段中,使上述電腦實現刪除功能,即於在上述靜止圖像提取功能中提取上述提取靜止圖像資料後之既定時機,刪除記憶於上述記憶手段之上述動畫資料。
又,關於本發明之圖像處理程式,其特徵亦可在於使上述電腦實現如下功能:顯示控制功能,其將上述提取靜止圖像資料所示之提取靜止圖像顯示於上述電腦所具備之顯示部;及接受功能,其自上述用戶接受對於所顯示之上述提取靜止圖像之選擇操作;於上述記錄功能中實現如下功能,即,將表示已接受上述選擇操作之上述提取靜止圖像之上述提取靜止圖像資料記錄於上述記錄手段。
又,關於本發明之圖像處理程式,其特徵亦可在於:於上述顯示控制功能中,實現於已進行既定之第1輸入操作之情形時,將包含上述提取靜止圖像之動畫資料所示之動畫顯示於上述顯示部的功能,於上述接受功能中,實現接受對於所顯示之上述動畫之上述幀之選擇操作的功能,於上述記錄功能中,實現將表示已接受上述選擇操作之上述幀之靜止圖像資料記錄於上述記錄手段的功能。
又,關於本發明之圖像處理程式,其特徵亦可在於:於上述顯示控制功能中,於對上述提取靜止圖像資料所示之提取靜止圖像之任一者進行既定之第2輸入操作之情形時,繼該提取靜止圖像資料之後播放上述動畫資料。
[發明之效果]
根據本發明,可提供一種可維持具備攝像機之醫療用檢查裝置之使用感,並且對藉由該醫療用檢查裝置之拍攝而生成之動畫資料進行錄影的醫療用程式及醫療用檢查系統
又,根據本發明,可提供一種可自動畫資料自動提取靜止圖像資料並記錄之圖像處理程式。
[第1實施形態]
以下,參照圖式對本發明之實施形態之醫療用檢查系統100之例進行說明。圖1係對與本發明之實施形態之至少1個對應之醫療用檢查系統100之構成之一例進行說明的說明圖。如該圖1所示,本發明之實施形態之醫療用檢查系統100具備醫療用檢查裝置110、終端裝置120及伺服器裝置130。
醫療用檢查裝置110係用於對檢查對象進行檢查之裝置。檢查對象例如為人類或動物。醫療用檢查裝置110至少具備攝像機,具有拍攝檢查對象之功能。又,醫療用檢查裝置110具有通訊功能,於本例之情形時,與終端裝置120進行無線通訊。再者,於醫療用檢查裝置110與終端裝置120進行有線通訊之情形時,醫療用檢查裝置110與終端裝置120之間例如由USB(Universal Serial Bus)電纜等連接。
醫療用檢查裝置110拍攝檢查對象之同時即時將動畫資料發送至終端裝置120。此處,所謂拍攝之同時即時發送動畫資料,意指將拍攝之動畫資料直接發送至終端裝置120以不產生時滯。以下,將拍攝之同時即時發送之動畫資料稱為「即時動畫資料」。
於本例中,醫療用檢查裝置110係所謂之稱為裂隙燈之手提式裝置,其用於藉由對受檢體之眼(以下稱為受檢眼)照射裂隙光,觀察由於受檢眼下之散射生成之散射光而檢查受檢眼之角膜或晶狀體等。再者,醫療用檢查裝置110不限定於該例,除手提式裂隙燈以外,還可為手提式眼底照相機等手提式醫療用檢查裝置或乾眼症檢查裝置等固定型醫療裝置等各種醫療用裝置。
再者,醫療用檢查裝置110可構成為作為1個無線LAN(Local Area Network)存取點發揮功能,且將可同時通訊連接之其他裝置限定為1個。例如,醫療用檢查裝置110於與終端裝置120確立通訊連接時不可與其他裝置通訊連接。藉由以此方式進行通訊控制,可防止於檢查中執行拍攝時預料外之裝置接收動畫資料並顯示該動畫資料所示之動畫的事態,結果可保護個人資訊。又,此種通訊控制方法係醫療用檢查裝置110可不具有用於區分通訊對象之資訊的方法。該通訊控制方法與例如藉由附加於裝置間之收發訊號之相同ID實現一對一通訊之方法不同,原因在於最初與醫療用檢查裝置110進行通訊確立(例如WiFi(註冊商標)連接確立)之裝置往往最早。
終端裝置120係與醫療用檢查裝置110一起使用之裝置。於本例中,終端裝置120為具備觸控面板之平板終端。
終端裝置120可為設計為專用機器之裝置,可由普通電腦實現。即,關於終端裝置120,至少具備普通電腦通常具備之CPU(Central Processing Unit:中央運算處理裝置)、及記憶體。終端裝置120中之處理係藉由自記憶體讀取用於執行該處理之程式並於作為控制電路(Processing circuit、Processing circuitry)發揮功能之CPU或GPU(Graphics Processing Unit:圖像處理裝置)中執行而實現。換言之,藉由該程式之執行,處理器(處理電路)構成為可執行各裝置之各處理。以下,終端裝置120只要為可執行與電腦同等之處理者,則可採用任一種機器,例如亦可藉由智慧型手機或平板終端等實現。如上述所示,於本例中,終端裝置120為平板終端。
終端裝置120具有可與醫療用檢查裝置110及伺服器裝置130進行通訊之功能。具體而言,終端裝置120與醫療用檢查裝置110進行無線通訊,與伺服器裝置130進行有線或無線通訊,進行各種資訊之收發。更具體而言,終端裝置120接收由醫療用檢查裝置110發送之即時動畫資料,將該資料記錄於本機裝置所具備之記錄手段(以下稱為終端側記錄手段)。而且,終端裝置120將所記錄之即時動畫資料(以下亦稱為記錄完成之動畫資料)發送至伺服器裝置130。再者,於終端裝置120與伺服器裝置130進行有線通訊之情形時,終端裝置120與伺服器裝置130之間例如由USB電纜等連接。
又,終端裝置120具備顯示部(以下稱為終端顯示部),藉由終端顯示部顯示各種資訊。具體而言,終端裝置120將自醫療用檢查裝置110接收之即時動畫資料所示之動畫或終端側記錄手段中記錄之記錄完成之動畫資料所示之動畫顯示於終端顯示部上。於本例中,作為平板終端之終端裝置120具備作為終端顯示部發揮功能之觸控面板,將包含即時動畫資料所示之動畫或記錄完成之動畫資料所示之動畫等之各種資訊顯示於觸控面板上,藉由對觸控面板之觸控操作接受來自使用者之各種輸入操作。
伺服器裝置130係用於對自終端裝置120發送之動畫資料等各種資訊進行管理之裝置。伺服器裝置130具備記錄自終端裝置120接收之記錄完成之動畫資料或靜止圖像資料之記錄手段。記錄於該記錄手段之記錄完成之動畫資料可基於由終端裝置120建立對應關係(利用終端裝置120進行錄影時附加)之識別資訊分類而進行管理。於本例中,伺服器裝置130基於由終端裝置120建立對應關係之識別資訊,將記錄完成之動畫資料與對應於受檢者之電子病歷建立對應關係而記錄於伺服器裝置130所具備之記錄手段。再者,記錄自終端裝置120發送之記錄完成之動畫資料之記錄手段只要為不同於終端側記錄手段者,則無特別限定。記錄自終端裝置120發送之記錄完成之動畫資料之記錄手段之其他例中,有屬於與伺服器裝置130相同之網路之記錄手段。
伺服器裝置130與終端裝置120之間之通訊可藉由USB電纜等有線之連接進行通訊,亦可藉由利用無線LAN等無線進行通訊。再者,伺服器裝置130為管理例如設置於醫院之內部LAN之電子病歷等之裝置。
圖2係表示與本發明之實施形態之至少1個對應之終端裝置120之功能構成之一例的方塊圖。
如該圖2所示,終端裝置120具備接收部121、顯示控制部122、錄影部123、記錄控制部124、接受部125、發送部126及通訊控制部127。首先,對終端裝置120之功能構成例之概要進行說明。
接收部121具有藉由包含由醫療用檢查裝置110拍攝同時即時發送之動畫資料(即時動畫資料)之各種資料的功能。
又,接收部121可自醫療用檢查裝置110接收表示對終端側記錄手段之即時動畫資料之錄影之開始/停止控制要求之資訊,該資訊基於針對物理設置於醫療用檢查裝置110之既定操作部之操作。此處,操作部例如為按鍵或撥號盤式開關。表示錄影之開始/停止之控制要求之資訊並無特別限定,較佳為事先於醫療用檢查裝置110與終端裝置120之間共有之內容之資訊。
顯示控制部122具有藉由實時播放將接收之即時動畫資料所示之動畫顯示於終端顯示部的功能。具體而言,顯示控制部122具有於接收部121接收到即時動畫資料時立即將該即時動畫資料所示之動畫顯示於終端顯示部的功能。藉由以此方式進行實時播放顯示,可確認醫療用檢查裝置110之拍攝狀況並且推進該拍攝之作業。
錄影部123具有基於對終端裝置120之既定操作,對實時播放中之即時動畫資料之錄影之開始/停止進行控制的功能。此處,所謂對實時播放中之即時動畫資料之錄影之開始/停止進行控制,意指基於作為錄影開始之觸發之既定操作開始將即時動畫資料記錄於終端側記錄手段,基於作為錄影結束之觸發之既定操作停止將即時動畫資料記錄於終端側記錄手段。又,既定操作之例中,有對顯示於終端顯示部之錄影開始按鍵、停止按鍵之輸入操作,或對物理設置於終端裝置120之作為錄影開始按鍵、停止按鍵發揮功能之操作部之操作。錄影之開始/停止例如由既定之旗標管理。再者,錄影部123可基於由接收部121接收之表示來自醫療用檢查裝置110之控制要求之資訊,控制實時播放中之即時動畫資料之錄影之開始/停止。
記錄控制部124具有將由錄影部123開始錄影至停止期間之即時動畫資料記錄於終端側記錄手段作為記錄完成之動畫資料的功能。此處,將即時動畫資料記錄於終端側記錄手段作為記錄完成之動畫資料之構成無特別限定,較佳為與既定資訊建立對應關係而記錄之構成。既定資訊之例中,有用於唯一識別檢查對象之識別資訊或醫療用檢查裝置110之拍攝日期時間。此處之識別資訊無特別限定,只要為可識別檢查對象者即可。
接受部125具有接受用於識別檢查對象之識別資訊之輸入操作的功能。於該接受部125獲取之識別資訊係與記錄控制部124中記錄之記錄完成之動畫資料建立關聯而記錄。此處,輸入操作除了利用顯示於終端顯示部之軟體鍵進行輸入以外,於終端裝置120設有硬體鍵(物理鍵)之情形時利用該硬體鍵進行輸入,或者於終端裝置120具有麥克風功能之情形時利用聲音進行輸入,又,於終端裝置120具有條碼讀取器功能或照相機功能之情形時,亦可利用藉由以條碼讀取器功能或照相機功能讀取表示識別資訊之一維/二維條形碼而輸入識別資訊之方法。又,於輸入操作中,於終端裝置120具有照相機功能之情形時,可利用藉由OCR(光學字元辨識,Optical Character Recognition)技術讀取終端裝置120所拍攝之卡片上記載之識別資訊而進行輸入。當然,可將該等併用。顯示控制部122可僅於識別資訊之輸入操作被接受之情形時,藉由實時播放將接收到之即時動畫資料所示之動畫顯示於終端顯示部。又,顯示控制部122可於顯示即時動畫資料所示之動畫時將識別資訊一併顯示於終端顯示部。而且,記錄控制部124可僅於識別資訊之輸入操作被接受之情形時,將即時動畫資料記錄於終端側記錄手段作為記錄完成之動畫資料。此處,記錄控制部124可將即時動畫資料與輸入被接受之識別資訊建立對應關係而記錄於終端側記錄手段作為記錄完成之動畫資料。藉由設為此種構成,容易管理記錄完成之動畫資料。
發送部126具有將記錄完成之動畫資料發送至既定之伺服器裝置的功能。既定之伺服器裝置對應於圖1中之伺服器裝置130。此處,發送至伺服器裝置130之記錄完成之動畫資料例如由用戶之選擇操作決定。以下,將發送至伺服器裝置130之記錄完成之動畫資料稱為「伺服器管理動畫資料」。再者,伺服器裝置130將所接收之伺服器管理動畫資料記錄於本機裝置之記錄手段或者屬於與本機裝置相同之網路之其他裝置所具備之記錄手段。
通訊控制部127具有如下功能,即,於利用接收部121進行即時動畫資料之接收之通訊、及利用發送部126進行記錄完成之動畫資料之發送之通訊中,以於一通訊正在進行時禁止與另一者進行通訊之方式控制。例如,通訊控制部127於利用接收部121進行即時動畫資料之接收之通訊正在進行時,禁止利用發送部126進行記錄完成之動畫資料之發送之通訊。此處,利用接收部121進行即時動畫資料之接收之通訊可視作一直持續直至由於停止來自醫療用檢查裝置110之即時動畫資料之發送而由接收部121停止該資料之接收。
以下,對藉由顯示控制部122控制顯示於終端裝置120之終端顯示部之GUI(圖形使用者介面,Graphical User Interface)之構成進行說明。
顯示控制部122可將用於指示對終端側記錄手段之實時播放中之即時動畫資料之錄影之開始/停止之第1按鍵顯示於終端裝置120所具備之作為觸控面板之終端顯示部。而且,錄影部123可基於對第1按鍵之輸入操作,對實時播放中之即時動畫資料之錄影之開始/停止進行控制。例如,於對顯示於觸控面板上之第1按鍵進行觸控操作之情形時,可執行對實時播放中之即時動畫資料之錄影之開始/停止進行控制之處理。第1按鍵之顯示態樣無特別限定,較佳為用戶可辨識其與錄影之開始/停止之控制處理相關之態樣。
又,顯示控制部122於播放記錄完成之動畫資料使其顯示於終端顯示部時,可將用於接受自該記錄完成之動畫資料提取靜止圖像資料之提取要求之輸入操作之第2按鍵顯示於終端顯示部。此處之輸入操作例如為觸控操作。第2按鍵之顯示態樣無特別限定,較佳為用戶可辨識其與靜止圖像之提取要求相關之態樣。而且,記錄控制部124可將與進行對第2按鍵之輸入操作時顯示於終端顯示部之靜止圖像對應之靜止圖像資料記錄於終端側記錄手段。藉由設為此種構成,於需要靜止圖像之情形時可容易地自動畫提取靜止圖像。再者,記錄於終端側記錄手段之靜止圖像資料可由發送部126發送至既定之伺服器裝置(例如伺服器裝置130)。
又,於醫療用檢查裝置110為用於檢查受檢眼之裝置時,顯示控制部122可將用於選擇受檢者之左右哪個受檢眼為檢查對象之第3按鍵顯示於終端顯示部。第3按鍵之顯示態樣無特別限定,較佳為用戶可辨識其與左右哪個受檢眼為檢查對象之選擇相關之態樣。
而且,記錄控制部124於記錄即時動畫資料作為記錄完成之動畫資料時,可將基於對第3按鍵之選擇操作而決定之受檢眼之左右之選擇資訊與該記錄完成之動畫資料建立關聯而記錄於終端側記錄手段。藉由設為此種構成,例如由於之後不需要整理受檢眼為左右哪一個,因此可容易地進行資料之管理。
進而,顯示控制部122於顯示記錄完成之動畫資料所示之動畫時,可使左右之選擇資訊與該動畫對應而顯示於終端顯示部。左右之選擇資訊之例中,有表示左或右之文字資訊或圖標。藉由設為此種構成,可確認當前選擇左右哪一個,並可容易地確認左右之選擇資訊是否正確。
再者,顯示控制部122對於要顯示之記錄完成之動畫資料所示之動畫,可基於放大播放等播放時之既定操作進行變更動畫之播放範圍或播放方法之處理。此處,既定操作意指針對終端顯示部上之既定部位的既定種類之操作。既定操作之例中,有觸控或拖動、雙指放大、雙指縮小、長按、滑動。又,變更動畫之播放範圍或播放方法之處理之例中,有變更為動畫之某一幀中之靜止圖像之顯示範圍之處理或動畫中之顯示時間之調整(動畫中之複數個幀中要顯示之幀之調整)。例如,顯示控制部122於播放記錄完成之動畫資料將動畫顯示於終端顯示部時,可基於既定操作,對該動畫進行放大/縮小來變更顯示範圍而顯示。又,記錄控制部124可進而記錄由顯示控制部122變更顯示範圍而顯示之動畫。又,記錄控制部124於已進行變更動畫之播放範圍或播放方法之處理之情形時,可將與進行對第2按鍵之輸入操作時動畫中顯示於終端顯示部之靜止圖像對應之靜止圖像資料記錄於終端側記錄手段。例如,記錄控制部124於在顯示基於顯示控制部122變更顯示範圍而顯示之動畫之過程中進行對第2按鍵之輸入操作之情形時,可將與顯示於終端顯示部之顯示範圍之靜止圖像對應之靜止圖像資料記錄於終端側記錄手段。當於將記錄完成之動畫資料所示之動畫放大顯示之情形時進行對第2按鍵之輸入操作時,進行對第2按鍵之輸入操作時顯示之放大靜止圖像被記錄於終端側記錄手段。
又,可於終端裝置120中執行記錄完成之動畫資料之編輯處理。例如,可於顯示控制部122執行用於將動畫資料之連續之幀按時間序列排列顯示而容易刪除不需要之幀的顯示。
圖3係表示與本發明之實施形態之至少1個對應之醫療用檢查裝置110之動作流程之一例的流程圖。
於圖3中,醫療用檢查裝置110之動作係藉由拍攝檢查對象而開始(步驟S101)。其次,醫療用檢查裝置110藉由檢查對象之拍攝生成動畫資料(步驟S102)。此處,動畫資料之生成處理與步驟S101之動作並行執行。其次,醫療用檢查裝置110開始將生成之動畫資料即時向終端裝置120發送(步驟S103)。於本例中,步驟S103之後,繼續利用醫療用檢查裝置110進行動畫資料之發送。
圖4係表示與本發明之實施形態之至少1個對應之終端裝置120之處理流程之一例的流程圖。
於該圖4中,終端裝置120之動作係藉由與醫療用檢查裝置110確立通訊連接後,進行對顯示於終端顯示部之拍攝開始按鍵之輸入操作而開始(步驟S151)。其次,終端裝置120接受識別資訊之輸入操作(步驟S152)。於本例中,終端裝置120接受顯示於終端顯示部之軟體鍵之輸入操作。其次,終端裝置120於步驟S152接受識別資訊之輸入操作後,開始接收包含由醫療用檢查裝置110拍攝之即時動畫資料之各種資料(步驟S153)。其次,終端裝置120開始藉由實時播放將即時動畫資料所示之動畫顯示於終端顯示部(步驟S154)。再者,於該流程圖中,對於輸入識別資訊後開始即時動畫資料之實時播放之構成進行了說明,但未必限定於該構成。亦可為於醫療用檢查裝置110與終端裝置120之通訊連接確立之時點開始實時播放之構成。
其次,終端裝置120將用於指示對終端側記錄手段之實時播放中之即時動畫資料之錄影之開始/停止的第1按鍵顯示於作為觸控面板之終端顯示部(步驟S155)。於本例中,終端裝置120於終端顯示部之顯示畫面中之實時播放中之即時動畫資料所示之動畫之下側顯示錄影控制按鍵作為第1按鍵。此處之錄影控制按鍵為兼備開始錄影之按鍵及停止錄影之按鍵兩者之撥動式按鍵。
其次,於終端裝置120接受了結束即時動畫資料所示之動畫之實時播放之操作之情形時(步驟S156,Y),終端裝置120結束即時動畫資料所示之動畫之實時播放(步驟S157),終端裝置120結束動作。於本例中,於對自顯示於終端裝置120之觸控面板之實時播放畫面返回啟動畫面之按鍵的觸控操作被接受之情形時,即時動畫資料所示之動畫之實時播放結束。
另一方面,於終端裝置120未接受結束即時動畫資料所示之動畫之實時播放之操作之情形(步驟S156,N),且終端裝置120未接受對第1按鍵之輸入操作之情形時(步驟S158,N),返回步驟S156之判定。
另一方面,於終端裝置120未接受結束即時動畫資料所示之動畫之實時播放之操作之情形(步驟S156、N),且終端裝置120接受了對第1按鍵之輸入操作之情形時(步驟S158,Y),終端裝置120對實時播放中之即時動畫資料之錄影之開始/停止進行控制(步驟S159)。於本例中,於接受對錄影控制按鍵之觸控操作時,於未開始錄影之情形時控制為開始,於已開始之情形時控制為停止。再者,於本例中,即時動畫資料所示之動畫之實時播放已開始後,於最初接受對第1按鍵之輸入操作之情形時,控制該動畫資料之錄影開始。
其次,於步驟S159中已開始實時播放中之即時動畫資料之錄影之情形時(步驟S160,Y),終端裝置120開始對終端側記錄手段之即時動畫資料作為記錄完成之動畫資料之記錄處理(步驟S161),返回步驟S156之判定。
另一方面,於步驟S159中已停止實時播放中之即時動畫資料之錄影之情形時(步驟S160,N),終端裝置120停止對終端側記錄手段之即時動畫資料作為記錄完成之動畫資料之記錄處理(步驟S162),返回步驟S156之判定。
以上,對醫療用檢查裝置110及終端裝置120之處理流程之一例進行了說明。
圖5~圖9係表示與本發明之實施形態之至少1個對應之終端裝置20之顯示畫面之例的說明圖。
圖5係表示於終端裝置120上啟動醫療用應用之情形時之終端裝置120之顯示畫面例的圖。圖5中示出作為醫療用應用之啟動畫面之顯示畫面A1。於作為剛啟動醫療用應用後之畫面之顯示畫面A1中,顯示終端裝置120之終端側記錄手段中記錄有記錄完成之動畫資料之受檢者之識別資訊一覽。
於本應用中,可執行記錄由醫療用檢查裝置110所具備之攝像機拍攝之受驗者之動畫資料作為記錄完成之動畫資料的操作,記錄完成之動畫資料針對每一管理用受檢者識別資訊B1以檔案夾分開管理動畫資料,檢查日期時間資訊(檢查開始日期時間資訊)C及拍攝開始按鍵D1顯示於顯示畫面A1。檢查日期時間資訊C係表示與各管理用受檢者識別資訊B1對應之檢查日期時間之資訊。拍攝開始按鍵D1係用於藉由實時播放將即時動畫資料所示之動畫顯示於終端顯示部之按鍵。再者,於顯示畫面A1基於對至少1個檔案夾之選擇操作而劃分為該檔案夾之記錄完成之動畫資料或靜止圖像資料可傳送至伺服器裝置130。
圖6係表示於顯示畫面A1中接受對拍攝開始按鍵D1之輸入操作時之終端裝置120之顯示畫面例的圖。圖6(A)及圖6(B)中示出作為醫療用應用之動畫顯示準備畫面之顯示畫面A2及顯示畫面A3。於顯示畫面A2中,提示識別資訊之輸入之消息F1、識別資訊之輸入窗體E及識別資訊之輸入完成按鍵D2疊加顯示。再者,對輸入窗體E之識別資訊之輸入係於顯示畫面A1使用顯示中之軟體鍵進行。
於顯示畫面A3中,輸入識別資訊B2、輸入識別資訊之確認消息F2、用於重新輸入識別資訊之按鍵D3及用於當識別資訊之輸入沒有問題時開始拍攝之按鍵D4疊加顯示。此處之輸入識別資訊B2為輸入至輸入窗體E之資訊。再者,輸入識別資訊B2與已作為管理用受檢者識別資訊B1管理動畫資料者相同。此處,於進行對按鍵D4之觸控操作之情形時,開始進行即時動畫資料所示之動畫之實時播放。再者,圖6中為了識別拍攝受檢眼之受檢者而要求輸入識別資訊,但例如於檢查對象為動物之情形等利用識別資訊進行管理之必要性相對較低時,可不一定如圖6那樣要求輸入識別資訊。
圖7係表示於顯示畫面A3中接受對用於開始拍攝之按鍵D4之輸入操作時之終端裝置120之顯示畫面例的圖。圖7(A)及圖7(B)中示出作為醫療用應用之實時播放畫面之顯示畫面A4及顯示畫面A5。於顯示畫面A4及顯示畫面A5中,顯示受檢者識別資訊B3、即時動畫資料所示之動畫G、錄影控制按鍵D5、右眼選擇按鍵D6、左眼選擇按鍵D7及返回按鍵D8。
錄影控制按鍵D5為第1按鍵之一例,為用於對實時播放中之即時動畫資料之錄影之開始/停止進行控制之撥動式按鍵。於顯示畫面A4中進行對錄影控制按鍵D5之觸控操作後,開始對終端側記錄手段之錄影並轉換為顯示畫面A5。另一方面,於顯示畫面A5中進行對錄影控制按鍵D5之觸控操作後,停止對終端側記錄手段之錄影並轉換為顯示畫面A4。錄影控制按鍵D5根據即時動畫資料之錄影之開始/停止控制改變顯示態樣。
右眼選擇按鍵D6及左眼選擇按鍵D7為第3按鍵之一例,為用於選擇受檢者之左右哪個受檢眼為檢查對象之按鍵。於對標記為「R」之右眼選擇按鍵D6進行觸控操作之情形時選擇右眼,於對標記為「L」之左眼選擇按鍵D7進行觸控操作之情形時選擇左眼。於選擇右眼選擇按鍵D6及左眼選擇按鍵D7之何者時,右眼選擇按鍵D6及左眼選擇按鍵D7以不同之態樣顯示,可由用戶確認選擇哪一個。
於圖7(A)及圖7(B)之例中,為對右眼選擇按鍵D6進行操作而選擇右眼之狀態。再者,對於右眼選擇按鍵D6及左眼選擇按鍵D7,於進一步選擇了與已選擇之眼對應之按鍵之情形時,選擇狀態被解除且成為左右兩者均未被選擇之狀態。於在選擇一隻眼時選擇了與另一隻眼對應之按鍵之情形時,變化為所選擇者之選擇狀態解除並選擇另一者之狀態。選擇右眼選擇按鍵D6或左眼選擇按鍵D7後,於即時動畫資料之錄影之開始至停止期間,動畫G與受檢眼之左右之選擇資訊建立對應關係而記錄於終端側記錄手段。
返回按鍵D8係用於結束即時動畫資料所示之動畫G之實時播放並轉換為作為啟動畫面之顯示畫面A1的按鍵。
圖8係表示於顯示畫面A1中接受對任一管理用受檢者識別資訊B1之選擇操作時之終端裝置120之顯示畫面例的圖。圖8中示出作為醫療用應用之已記錄資料一覽畫面之顯示畫面A6。於顯示畫面A6中,顯示受檢者識別資訊B3、動畫縮略圖J、靜止圖像縮略圖H1~H3及左右選擇資訊K1~K4。
動畫縮略圖J係表示記錄完成之動畫資料所示之動畫之內容之圖像。於本例中,針對每一記錄完成之動畫資料顯示動畫縮略圖J,各動畫縮略圖J係與自身對應之動畫中之任一瞬間之靜止圖像。又,靜止圖像縮略圖H1~H3係與記錄於終端側記錄手段之靜止圖像資料(已記錄靜止圖像資料)對應之靜止圖像。
此處,已記錄靜止圖像資料指從記錄完成之動畫資料所示之動畫中剪切而記錄於終端側記錄手段之靜止圖像之資料。關於自動畫剪切出靜止圖像之顯示畫面例將於下文敘述。於對動畫縮略圖J及靜止圖像縮略圖H1~H3進行觸控操作之情形時,進行動畫之播放或靜止圖像之顯示。
左右選擇資訊K1~K4係與各記錄完成之動畫資料或已記錄靜止圖像資料建立對應關係之受檢眼之左右選擇資訊。關於動畫縮略圖J及靜止圖像縮略圖H1~H3,由左右選擇資訊K1~K4分別示出選擇左右受檢眼之哪一動畫資料或靜止圖像資料。左右選擇資訊K1~K4中所示之「R」或「L」由對圖7中所示之右眼選擇按鍵D6及左眼選擇按鍵D7之觸控操作決定。
再者,於顯示畫面A6中,可基於既定操作將至少1個記錄完成之動畫資料或已記錄靜止圖像資料傳送至伺服器裝置130。例如,於顯示畫面A6中,於對動畫縮略圖J及靜止圖像縮略圖H1~H3進行觸控操作之情形時,疊加顯示用於選擇動畫之播放或靜止圖像之顯示及資料傳送之何者之按鍵,執行所選擇之動作。此處,關於資料之傳送,可將複數個記錄完成之動畫資料及/或已記錄靜止圖像資料匯總發送至伺服器裝置130。
圖9係表示於顯示畫面A6中接受對動畫縮略圖J之選擇操作時之終端裝置120之顯示畫面例的圖。圖9中示出作為醫療用應用之動畫播放畫面之顯示畫面A7。於顯示畫面A7中,顯示記錄完成之動畫資料所示之動畫L、受檢者識別資訊B3、剪切按鍵D9及返回按鍵D10。記錄完成之動畫資料所示之動畫L對應於顯示畫面A6中進行觸控操作後之動畫縮略圖J。返回按鍵D10係用於結束動畫L之播放且轉換為作為已記錄資料一覽畫面之顯示畫面A6之按鍵。
剪切按鍵D9為第2按鍵之一例,係用於進行自動畫提取靜止圖像之提取要求之按鍵。對剪切按鍵D9進行觸控操作時,動畫L中與顯示畫面A7上顯示之靜止圖像對應之靜止圖像資料記錄於終端側記錄手段。
再者,於顯示畫面A7中,可藉由既定操作對動畫L中之複數個幀中要顯示之幀進行調整。例如,於顯示畫面A7中對動畫L顯示區域之左側或右側(或顯示於左側或右側之圖標)進行觸控操作時,執行逐幀倒退或逐幀前進。又,於顯示畫面A7中對動畫L顯示區域之中央部分(或顯示於中央部分之圖標)進行觸控操作時,執行動畫L之播放之暫時停止或重新開始。
又,於顯示畫面A7中,亦可藉由既定操作變更動畫L之播放範圍。例如,於顯示畫面A7中對動畫L顯示區域進行雙指放大操作、雙指縮小操作時,執行動畫L之放大顯示、縮小顯示。此處之縮小顯示意指動畫L之放大顯示之減輕。於進行動畫L之放大顯示之情形時,對動畫L顯示區域進行滑動操作時顯示於動畫L顯示區域之圖像中之放大顯示之部位發生變化。
再者,當於進行動畫L之放大顯示之情形時對剪切按鍵D9進行觸控操作時,與動畫L中之放大顯示之部位之靜止圖像對應之靜止圖像資料記錄於終端側記錄手段。也就是說,不論有無動畫L之放大顯示,與於對剪切按鍵D9進行觸控操作時顯示之靜止圖像對應之靜止圖像資料均記錄於終端側記錄手段。
如以上所示,根據用以於與本發明之具備攝像機之醫療用檢查裝置110一起使用之終端裝置120中實現各種處理之醫療用程式,由於接收包含由醫療用檢查裝置110拍攝同時即時發送之動畫資料(即時動畫資料)之各種資料,藉由實時播放將所接收之即時動畫資料所示之動畫顯示於終端裝置120所具備之終端顯示部,基於對終端裝置120之既定操作,對實時播放中之即時動畫資料之錄影之開始/停止進行控制,將開始錄影至停止期間之即時動畫資料記錄於終端側記錄手段作為記錄完成之動畫資料,因此可維持醫療用檢查裝置110之使用感,並且進行藉由醫療用檢查裝置110之拍攝而生成之動畫資料之實時播放及錄影。
即,藉由可利用對終端裝置120中執行之應用之顯示畫面之操作進行動畫之實時播放或錄影,可不變更如損害醫療用檢查裝置110之使用感之該裝置之構成而進行動畫之實時播放或錄影。
[第2實施形態]
習知,進行自動畫資料提取靜止圖像資料而記錄。作為記錄靜止圖像資料之理由,可例舉想將動畫資料中之特定幀之靜止圖像用於特定之目的。例如,存在如下裝置:將利用醫療用拍攝裝置拍攝患者之受檢眼而生成之動畫暫時保存,顯示該動畫,並將用戶以用於診察等之目的而選擇之幀之靜止圖像資料記錄於本機裝置所具備之記錄手段。
此處,於上述裝置中,為了將靜止圖像資料記錄於記錄手段,用戶需要選擇所需之靜止圖像資料,因此有用戶之作業負擔較大之問題。另一方面,若將動畫資料直接保存於HDD(Hard Disk Drive)或SSD(Solid State Drive)等儲存器而不以幀為單位記錄,則以後進行靜止圖像資料之提取可能會花費時間,與靜止圖像資料相比,動畫資料之容量非常大,因此有壓迫該裝置所具備之記錄手段之剩餘可記錄容量,使用戶產生考慮剩餘容量之動畫資料之管理等負擔之問題。
以下,參照圖式對本發明之實施形態之圖像處理裝置220之例進行說明。
圖10係表示與本發明之實施形態之至少1個對應之圖像處理裝置220之功能構成之一例的方塊圖。
圖像處理裝置220係本發明之電腦之一例。圖像處理裝置220獲取處理對象之動畫資料,算出構成所獲取之動畫資料之一部分或全部幀之合焦度。而且,圖像處理裝置220提取已算出合焦度之幀中之合焦度為既定值以上之幀(候選幀)之一部分或全部作為提取靜止圖像資料,將提取靜止圖像資料記錄於本機裝置所具備之記錄手段。此處,合焦度意指焦點對準投射於幀之對象之程度。基於合焦度較大之圖像資料為用戶所需圖像之可能性較高之前提自動進行提取靜止圖像資料之提取的構成為本發明之特徵。
如該圖10所示,圖像處理裝置220具備動畫資料獲取部221、合焦度運算部222、靜止圖像提取部223、顯示控制部224、接受部225、記錄部226及刪除部227。
動畫資料獲取部221具有獲取處理對象之動畫資料之功能。處理對象之動畫資料並無特別限定,較佳為拍攝之動畫資料。於本例中,動畫資料為自外部裝置發送之動畫資料,動畫資料獲取部221藉由接收該動畫資料而獲取。如下述所示,假設由眼科拍攝裝置拍攝之動畫資料作為處理對象之一,但本例之圖像處理裝置220並不僅應用於眼科領域,還可應用於廣泛領域之動畫資料。
又,動畫資料獲取部221將所獲取之動畫資料記憶於電腦所具備之記憶手段。此處之記憶手段係暫時保存動畫資料之手段。例如,記憶手段藉由記憶體實現。又,記憶手段可藉由將動畫資料以臨時檔案之形式處理而實現。例如由與提取靜止圖像資料之提取相關之應用之結束等觸發刪除記憶手段中記憶之動畫資料。於動畫資料以臨時檔案之形式處理之情形時,動畫資料可保持於HDD或SSD等儲存器。
合焦度運算部222具有算出構成動畫資料之一部分或全部幀之合焦度的功能。
此處,合焦度係對於作為運算對象之各幀分別運算。特定出構成動畫資料之幀中算出合焦度之幀之構成並無特別限定。又,較佳為基於自靜止圖像資料提取之邊緣量而運算。算出之合焦度作為焦點得分用於下述靜止圖像提取部223。
又,合焦度運算部222中之合焦度之運算可藉由如下處理實現:邊緣提取圖像生成處理,其對構成動畫資料之幀執行邊緣提取處理而生成邊緣提取圖像;及運算處理,其基於邊緣提取圖像中之邊緣之方差算出與該邊緣提取圖像對應之幀之合焦度。
此處,邊緣提取處理意指提取圖像內之亮度值之變化敏銳之處(亮度值不連續變化之處)作為邊緣的處理。邊緣提取處理可使用拉普拉斯濾波器執行邊緣提取處理。此處之拉普拉斯濾波器例如為3×3之8方向拉普拉斯濾波器。再者,邊緣提取處理只要可進行邊緣之提取,則可使用各種公知技術之任一者執行。又,運算處理只要為基於邊緣提取圖像中之邊緣量者,則無特別限定,作為一例,考慮將邊緣提取圖像中之邊緣之方差作為與該邊緣提取圖像對應之幀之合焦度的處理。
又,合焦度運算部222執行提取構成幀之各像素之色資訊中之綠色成分生成綠色成分圖像資料之綠色成分圖像生成處理、及將綠色成分圖像資料灰階化而生成灰階圖像資料之灰階化處理,可基於由該灰階化處理所獲得之灰階圖像資料算出合焦度。
此處之綠色成分意指作為圖像之表現形式之一之RGB(Red Green Blue)中使用之三原色中之綠色成分。綠色成分圖像係自幀之靜止圖像去除RGB中使用之三原色中之紅色成分及藍色成分之圖像。又,灰階化意指使圖像中使用之顏色僅為白色、黑色及至少1階灰色。一般而言,進行自彩色圖像僅提取亮度資訊,使自黑向白之階段性變化對應於亮度之灰階範圍表現。
例如,於動畫資料為在藍色背景照明下拍攝對象之動畫之資料之情形時,藉由生成提取了綠色成分之綠色成分圖像而將該圖像灰階化,與未灰階化之情形時相比生成對比度更強之圖像,因此可更正確地提取合焦度較大之幀。又,即便於背景照明不為藍色之動畫資料之情形時生成綠色成分圖像,合焦度之運算結果亦不會受到較大影響。因此,若採用生成綠色成分圖像之構成,則無論背景照明之顏色如何,均可進行足夠精度之合焦度運算。
尤其是於眼科領域之檢查中,將藍色背景照明及螢光色素染色組合使用。利用該組合拍攝受檢眼而得之圖像之藍色成分及綠色成分與紅色成分相比而言變多。若對構成以此方式拍攝之動畫資料之幀直接進行邊緣提取處理,則無法順利地提取邊緣,結果存在未算出充分之合焦度之情況。此處,於藍色背景照明及螢光色素染色之組合中實際想要觀察之部分為綠色成分之部分。因此,藉由在合焦度運算中採用生成綠色成分圖像而灰階化之構成,可極大地算出聚焦於想要觀察之部分之幀之合焦度。此處,由於將阻擋濾光片應用於藍色背景照明及螢光色素染色之組合而拍攝之動畫資料去除藍色成分,因此即便亦使用提取了綠色成分之綠色成分圖像,合焦度之運算亦沒有問題。又,對於以其他顏色之背景照明拍攝之受檢眼之動畫資料,即便於生成綠色成分圖像而進行邊緣提取處理之情形時,合焦度運算結果亦不會受到較大影響。因此,可一律採用生成綠色成分圖像之構成。
又,合焦度運算部222執行對灰階圖像資料之黑位準進行調整之調整處理,可基於藉由該調整處理調整了黑位準之灰階圖像資料算出合焦度。
此處,黑位準之調整程度根據動畫之拍攝對象之種類適當決定。藉由設為調整黑位準之構成,可削減灰階圖像之雜訊而降低合焦度運算時之雜訊之影響,結果可更正確地算出合焦度。
又,合焦度運算部222可將構成動畫資料之幀中每隔既定時間間隔或既定張數之1張幀設定為運算合焦度之對象幀。既定時間間隔及既定張數例如根據圖像處理裝置220之處理性能或軟體之規格等適當決定。藉由設為此種構成,可縮短圖像處理裝置220之處理時間。
又,合焦度運算部222於動畫資料為拍攝受檢者之眼睛之動畫之資料之情形時,可將除構成動畫資料之幀之上側及/或下側之既定範圍之區域以外之區域作為對象算出合焦度。
例如於運算拍攝受檢者之眼睛之動畫資料之合焦度時,儘管於診察時未使用幀之上側及/或下側之既定範圍之區域,但合焦度之運算結果受到該區域之影響。例如,診察時未使用之幀之上側區域為受檢者之睫毛區域。與此相對,藉由自合焦度運算之對象中去除包含診察時未使用之部分之區域,而極大地算出聚焦於診察時可使用之範圍之區域之幀之合焦度。進而,藉由限定作為合焦度運算之對象之區域,削減圖像處理裝置220之處理時間。再者,幀之上側及/或下側之既定範圍之區域適當決定,例如幀之上側及下側之分別四分之一之區域。
靜止圖像提取部223具有提取已算出合焦度之幀中之合焦度為既定值以上之幀(候選幀)之一部分或全部作為提取靜止圖像資料的功能。此處,既定值為預定之合焦度之閾值。閾值例如根據動畫資料中之拍攝對象之內容、與關於提取之上限數之均衡而適當設定。
又,於在候選幀按時間序列順序排列時預先設定之時間範圍內存在複數個候選幀之情形時,靜止圖像提取部223可自合焦度較小者中將既定數量之候選幀自提取對象排除。
適當決定預先設定之時間範圍。又,所謂將既定數量之候選幀自提取對象排除,意指不將既定數量之候選幀作為提取靜止圖像資料處理。藉由在預先設定之時間範圍內進行提取對象之排除,可抑制於特定之時間範圍內提取之候選幀之數量而削減記錄於記錄手段之提取靜止圖像資料之合計容量。作為一例,於在預先設定之時間範圍內存在5個候選幀之狀況下,於設定自合焦度較小者中將2張候選幀自提取對象排除之情形時,對於該時間範圍內,合焦度較小之2張被排除,而剩餘3張候選幀。
又,靜止圖像提取部223於提取來自候選幀之提取靜止圖像資料時,於按時間序列順序依次關注候選幀時,自該關注幀之時點起,於既定之時間範圍內存在合焦度小於該關注幀之候選幀之情形時,可將該候選幀自提取對象排除。
此處,所謂按時間序列順序依次關注候選幀,意指按時間序列順序特定出候選幀作為關注幀。此處之時間序列順序可為自時間序列之前向後,亦可為自時間序列之後向前。又,自該關注幀之時點起特定出既定之時間範圍內之構成並無特別限定,可為特定出較該關注幀之時點早既定之時間範圍之時點之構成,亦可為特定出晚既定之時間範圍之時點之構成。
例如於處理對象之動畫資料為連續拍攝複數個拍攝對象(例如受檢者之右眼及左眼)之動畫之資料之情形時,若對每一拍攝對象算出幀之合焦度大小之平均值,有時平均度會因拍攝對象而不同。即,於相同動畫資料內,有時由於拍攝對象發生變化而產生合焦度之大小分布不一樣之狀況,例如產生合焦度較大之幀聚集之拍攝對象之部位、及產生合焦度稍微小於其之幀聚集之拍攝對象之部位等。於此種狀況中,若達到既定上限數之前自合焦度較大者依次選擇候選幀而執行提取處理,則導致產生未提取充分數量之幀之拍攝對象,產生無法充分獲得關於各拍攝對象之提取靜止圖像資料之狀況。與此相對,於自關注幀之時點起於既定時間範圍內存在複數個候選幀之情形時,進行將既定時間範圍內之複數個候選幀之一部分自提取對象排除之處理,藉此可避免僅自一部分拍攝對象執行提取靜止圖像資料之提取之狀況,結果提高與其他拍攝對象對應之候選幀作為提取對象保留之可能性。即,可謂各拍攝對象可無遺漏地獲得提取靜止圖像資料之可能性增大。
又,靜止圖像提取部223於提取來自候選幀之提取靜止圖像資料時,可將候選幀中之合焦度最小之幀自提取對象排除,以使提取靜止圖像資料之合計數不超過既定之上限數。此處,提取靜止圖像資料之合計數無特別限定,較佳為基於圖像處理裝置220之記錄手段之可記錄容量等決定。又,使合計數不超過既定上限數之構成無特別限定,可為於合計數超過上限數之狀態之情形時減少合計數以避免該狀態的構成,亦可為於合計數達到較上限數小之預定閾值之情形時減少合計數的構成。藉由設為此種構成,可減輕用戶對提取靜止圖像資料之記錄容量之管理負擔。
顯示控制部224具有將提取靜止圖像資料所示之提取靜止圖像顯示於圖像處理裝置220所具備之顯示部的功能。顯示部之例中有觸控面板顯示器。
又,顯示控制部224於進行既定之第1輸入操作之情形時,可將包含提取靜止圖像之動畫資料所示之動畫顯示於顯示部。於第1輸入操作之例中,有選擇顯示於顯示部之提取靜止圖像資料所示之提取靜止圖像或該提取靜止圖像之縮略圖圖像、既定之動畫播放按鍵的操作。
又,顯示控制部224於對提取靜止圖像資料所示之提取靜止圖像之任一者進行既定之第2輸入操作之情形時,可繼該提取靜止圖像資料之後播放動畫資料。於第2輸入操作之例中,有如下操作:選擇提取靜止圖像資料所示之提取靜止圖像或該提取靜止圖像之縮略圖圖像,或者於提取靜止圖像顯示於顯示部時選擇既定之動畫播放按鍵。設為此種構成,用戶可確認於對應於提取靜止圖像資料之幀之時點前後是否存在想要記錄之幀。
接受部225具有自用戶接受對顯示於顯示部之提取靜止圖像之選擇操作的功能。又,接受部225可接收對顯示之動畫之幀之選擇操作。與對提取靜止圖像或顯示之動畫之幀相應之選擇操作之例中,有選擇與對提取靜止圖像或顯示之動畫之幀對應之按鍵之操作。
記錄部226具有將提取靜止圖像資料記錄於圖像處理裝置220所具備之記錄手段的功能。此處,記錄手段係與上述記憶手段不同且恆常保持資料之手段。例如記錄手段由HDD或SSD等儲存器實現。
又,記錄部226於對顯示於顯示部之提取靜止圖像之選擇操作被接受之情形時,可將表示已接受該選擇操作之提取靜止圖像之提取靜止圖像資料記錄於記錄手段。如此,藉由記錄表示用戶所選擇之提取靜止圖像之提取靜止圖像資料,可抑制所記錄之提取靜止圖像資料之合計容量之增加。
又,記錄部226於對顯示於顯示部之動畫之幀之選擇操作被接受之情形時,可將表示已接受該選擇操作之幀之靜止圖像資料記錄於記錄手段。如此,即便於提取靜止圖像中不存在想要記錄者之情形時,亦可基於來自用戶之操作播放動畫而將用戶所需之幀之靜止圖像資料記錄於記錄手段。
刪除部227具有於在靜止圖像提取部223中對提取靜止圖像資料進行提取後之既定時機(第1時機),刪除記憶於記憶手段之動畫資料的功能。
此處,第1時機只要為提取靜止圖像資料之提取後,則無特別限定,可為於靜止圖像提取部223中對提取靜止圖像資料進行提取之時機,亦可為藉由記錄部226將提取靜止圖像資料記錄於記錄手段之時機。又,第1時機可為經過對提取靜止圖像資料進行提取後之既定時間之時機,亦可為與提取靜止圖像資料之提取相關之應用結束之時機。
以上,對與本發明之實施形態之至少1個對應之圖像處理裝置220之功能構成之一例進行了說明。再者,於圖10所說明之例中,關於動畫資料獲取部221中獲取之動畫資料,被刪除部227於對提取靜止圖像資料進行提取後之第1時機自記憶手段中刪除,但刪除動畫資料之時機並不限定於此。即便於在靜止圖像提取部223中未對提取靜止圖像資料進行提取之情形時,刪除部227亦可於動畫資料記憶於記憶手段後之既定時機(第2時機)將記憶於記憶手段之動畫資料刪除。第2時機之條件只要為動畫資料記憶於記憶手段之後,則無特別限定,例如,認為將以下情況作為第2時機之觸發,即,考慮到用戶想要保留記憶於臨時記憶手段之動畫資料,而執行對可恆常記錄之記錄手段複製動畫資料之處理。於可確認動畫資料複製到可恆常記錄之HDD或SSD等儲存器之情形時,失去將動畫資料保留於臨時記憶手段之必要性,因此自臨時記憶手段刪除動畫資料。
圖11係對應用與本發明之實施形態之至少1個對應之圖像處理裝置220之環境之一例進行說明的說明圖。圖11中示出醫療用檢查裝置210、圖像處理裝置220及伺服器裝置230。
醫療用檢查裝置210係用於對檢查對象進行檢查之裝置。檢查對象例如為人類或動物。醫療用檢查裝置210至少具備攝像機,具有拍攝檢查對象而生成動畫資料之功能。又,醫療用檢查裝置210具有通訊功能,於本例之情形時,與圖像處理裝置220進行無線通訊。醫療用檢查裝置210將由拍攝生成之動畫資料發送至圖像處理裝置220。再者,於醫療用檢查裝置210與圖像處理裝置220進行有線通訊之情形時,醫療用檢查裝置210與圖像處理裝置220之間例如由USB電纜等連接。再者,於圖11所示之例中,進行動畫拍攝之裝置為醫療用檢查裝置210,但只要為可進行動畫拍攝之裝置,則並不限定於此。
於本例中,醫療用檢查裝置210係所謂之稱為裂隙燈之手提式裝置,其用於藉由對受檢眼照射裂隙光,觀察由於受檢眼下之散射生成之散射光而檢查受檢眼之角膜或晶狀體等。再者,醫療用檢查裝置210不限定於該例,除手提式裂隙燈以外,還可為手提式眼底照相機等手提式醫療用檢查裝置或乾眼症檢查裝置等固定型醫療裝置等各種醫療用裝置。
圖11中之圖像處理裝置(終端裝置)220係與醫療用檢查裝置210一起使用之裝置。於圖11中,終端裝置作為圖像處理裝置220發揮功能。
圖像處理裝置220可為設計為專用機器之裝置,可由普通電腦實現。即,關於圖像處理裝置220,至少具備普通電腦通常具備之CPU及記憶體。圖像處理裝置220中之處理係藉由自記憶體讀取用於執行該處理之程式並於作為控制電路發揮功能之CPU或GPU中執行而實現。換言之,藉由該程式之執行,處理器構成為可執行各裝置之各處理。以下,圖像處理裝置220只要為可執行與電腦同等之處理者,則可採用任一種機器,例如亦可藉由智慧型手機或平板終端等實現。於本例中,圖像處理裝置220為平板終端。
圖像處理裝置220具有進行與醫療用檢查裝置210及伺服器裝置230之通訊之功能。具體而言,圖像處理裝置220與醫療用檢查裝置210進行無線通訊,與伺服器裝置230進行有線或無線通訊,進行各種資訊之收發。
又,圖像處理裝置220具備顯示部,由該顯示部顯示各種資訊。具體而言,圖像處理裝置220藉由顯示部顯示提取靜止圖像或動畫資料所示之動畫。於本例中,作為平板終端之圖像處理裝置220具備作為顯示部發揮功能之觸控面板,將包含提取靜止圖像或動畫資料所示之動畫等之各種資訊顯示於觸控面板上,藉由對觸控面板之觸控操作接受來自用戶之各種輸入操作。
伺服器裝置230係用於對自圖像處理裝置220發送之動畫資料等各種資訊進行管理之裝置。伺服器裝置230具備記錄自圖像處理裝置220接收之動畫資料或靜止圖像資料之伺服器側記錄手段。記錄於伺服器側記錄手段之資料可基於識別資訊分類而進行管理。於本例中,伺服器裝置230基於與提取靜止圖像建立對應關係之識別資訊,將提取靜止圖像資料與對應於受檢者之電子病歷建立對應關係而記錄於伺服器裝置230所具備之伺服器側記錄手段。再者,記錄自圖像處理裝置220發送之提取靜止圖像資料之伺服器側記錄手段無特別限定。記錄自圖像處理裝置220發送之靜止圖像資料之伺服器側記錄手段之其他例中,有屬於與伺服器裝置230相同之網路之記錄手段。
伺服器裝置230與圖像處理裝置220之間之通訊可藉由USB電纜等有線之連接進行通訊,亦可藉由利用無線LAN等無線進行通訊。再者,伺服器裝置230為管理例如設置於醫院之內部LAN之電子病歷等之裝置。
圖12係表示與本發明之實施形態之至少1個對應之圖像處理裝置220之幀之提取處理流程之一例的流程圖。
於該圖12中,圖像處理裝置220之提取處理係藉由自動畫資料提取處理對象之幀而開始(步驟S201)。於本例中,圖像處理裝置220之提取處理係藉由每隔既定時間間隔自構成動畫資料之複數個幀中提取1張幀作為處理對象之幀而開始。
其次,圖像處理裝置220選擇步驟S201中提取之處理對象之幀中之任一者(步驟S202)。於本例中,圖像處理裝置220選擇於將處理對象之幀按時間序列順序排列時還未被選擇之最早時點之1個幀。
其次,圖像處理裝置220算出步驟S202中選擇之幀之合焦度(步驟S203)。於本例中,圖像處理裝置220對步驟S202中選擇之幀執行使用拉普拉斯濾波器之邊緣提取處理而生成邊緣提取圖像,基於邊緣提取圖像中之邊緣之方差而算出與該邊緣提取圖像對應之幀之合焦度。
其次,圖像處理裝置220於步驟S203中算出之合焦度不為既定值以上之情形時(步驟S204,N),進入步驟S211。
另一方面,圖像處理裝置220於步驟S203中算出之合焦度為既定值以上之情形時(步驟S204,Y),自既定之時間範圍內之候選幀中檢索最小合焦度(步驟S205)。於本例中,圖像處理裝置220檢索候選幀清單中追加之候選幀中存在於既定時間範圍內且合焦度最小之幀。
其次,圖像處理裝置220於步驟S202中所選擇之幀之合焦度小於步驟S205中所檢索之合焦度之最小值之情形時(步驟S206,N),進入步驟S208。
另一方面,圖像處理裝置220於步驟S202中所選擇之幀之合焦度大於步驟S205中所檢索之最小合焦度之情形時(步驟S206,Y),將步驟S205中檢索到之作為最小合焦度之候選幀自提取對象排除(步驟S207)。於本例中,圖像處理裝置220將步驟S205中檢索到之作為最小合焦度之候選幀自候選幀清單刪除。
其次,圖像處理裝置220於候選幀之合計數未超過上限數之情形時(步驟S208,N),進入步驟S210。
另一方面,圖像處理裝置220於候選幀之合計數超過上限數之情形時(步驟S208,Y),將候選幀中之合焦度最小之幀自提取對象中排除(步驟S209)。於本例中,圖像處理裝置220將候選幀中之合焦度最小之幀自候選幀清單中刪除。
其次,圖像處理裝置220將選擇中之幀追加為候選幀(步驟S210)。於本例中,圖像處理裝置220將特定出選擇中之幀之資訊追加於候選幀清單中。
其次,圖像處理裝置220於所選擇之幀不為處理對象之幀中最後選擇之幀之情形時(步驟S211,N),返回步驟S202。
另一方面,圖像處理裝置220於所選擇之幀為處理對象之幀中最後選擇之幀之情形時(步驟S211,Y),結束幀之提取處理。
以上,對圖像處理裝置220之幀之提取處理流程之一例進行了說明。再者,於圖12所示之例中,圖像處理裝置220藉由一系列處理進行自對1個幀之合焦度運算至候選幀之排除及追加處理之判定,但本發明並不限定於此。例如,圖像處理裝置220可為如下構成,即,對複數個幀各者集中進行合焦度之運算處理,其後集中進行候選幀之排除及追加處理。
圖13係表示與本發明之實施形態之至少1個對應之圖像處理裝置220之幀之合焦度運算處理流程之一例的流程圖。於圖13中,對圖12中之步驟S203之合焦度運算處理之詳細流程之一例進行說明。
於該圖13中,圖像處理裝置220之合焦度運算處理係藉由自動畫資料獲取處理對象之幀而開始(步驟S251)。於本例中,圖像處理裝置220之合焦度運算處理係藉由獲取構成動畫資料之複數個幀中之圖12之步驟S202中所選擇之幀而開始。
其次,圖像處理裝置220生成提取了構成所選擇之幀之各像素之色資訊中之綠色成分的綠色成分圖像資料(步驟S252)。於本例中,圖像處理裝置220生成已去除幀之紅色成分及藍色成分之僅綠色成分之綠色成分圖像資料。
其次,圖像處理裝置220將綠色成分圖像資料灰階化而生成灰階圖像資料(步驟S253)。
其次,圖像處理裝置220調整灰階圖像資料之黑位準(步驟S254)。於本例中,圖像處理裝置220以圖像上之雜訊消失之方式調整灰階圖像資料之黑位準。
其次,圖像處理裝置220對已調整黑位準之灰階圖像資料執行邊緣提取處理而生成邊緣提取圖像(步驟S255)。於本例中,圖像處理裝置220對已調整黑位準之灰階圖像資料執行使用拉普拉斯濾波器之邊緣提取處理而生成邊緣提取圖像。
其次,圖像處理裝置220算出邊緣提取圖像之合焦度(步驟S256),結束合焦度運算處理。於本例中,圖像處理裝置220執行算出邊緣提取圖像中之邊緣之方差而作為與該邊緣提取圖像對應之幀之合焦度的處理,結束合焦度運算處理。又,於本例中,將算出之合焦度視作焦點得分。
以上,對圖像處理裝置220之幀之合焦度運算處理流程之一例進行了說明。
圖14係對與本發明之實施形態之至少1個對應之圖像處理裝置10-1中之動畫資料及靜止圖像資料之管理例進行說明的說明圖。
於圖14所示之例中,圖像處理裝置220利用臨時檔案夾管理動畫資料,利用靜止圖像檔案夾管理提取靜止圖像資料。圖14中示出於受檢者之眼睛檢查中,拍攝受檢者之眼睛並選擇聚焦之幀而保存之流程。此處,將自受檢者眼睛之拍攝至聚焦之幀對圖像處理裝置220之記錄手段之記錄的作業設為「檢查」。
首先,圖14所示之拍攝畫面係表示受檢者之檢查中之醫療用檢查裝置210之拍攝情況之畫面,且為圖像處理裝置220即時接收而於顯示部顯示中之畫面。圖像處理裝置220將所接收之動畫資料作為臨時檔案保存於臨時檔案夾。而且,圖像處理裝置220對構成保存於臨時檔案夾之動畫資料之幀算出合焦度,將合焦度為既定值以上之幀視為提取靜止圖像資料。
圖14所示之提取靜止圖像一覽畫面係於受檢者眼睛之拍攝後顯示提取靜止圖像資料之提取靜止圖像之一覽的畫面。此處,用戶於提取靜止圖像一覽畫面中對想要保存之提取靜止圖像進行觸控選擇操作。圖像處理裝置220將表示用戶選擇之提取靜止圖像之提取靜止圖像資料記錄於靜止圖像檔案夾。圖像處理裝置220以提取靜止圖像資料向靜止圖像檔案夾之記錄為觸發,自臨時檔案夾刪除動畫資料。
圖14所示之動畫播放畫面係根據於提取靜止圖像一覽畫面中進行既定操作而播放動畫資料的畫面。圖像處理裝置220例如於對顯示於提取靜止圖像一覽畫面之提取靜止圖像進行動畫播放操作之情形時,繼該提取靜止圖像之後播放動畫。而且,於在動畫播放畫面中進行既定之幀指定操作之情形時,指定之幀之靜止圖像資料可記錄於靜止圖像檔案夾。
藉由以此方式管理動畫資料及靜止圖像資料,可保留用戶所需之靜止圖像資料,並且削減圖像處理裝置220中保存之資料容量。
以上,對圖像處理裝置220中之動畫資料及靜止圖像資料之管理例進行了說明。再者,於圖14所說明之例中,動畫資料保存於臨時檔案夾後,以提取靜止圖像資料向靜止圖像檔案夾之記錄作為觸發而被刪除,但動畫資料之管理方法並不限定於此。例如,圖像處理裝置220可為如下構成,即,於接受用戶對保存於臨時檔案夾之動畫資料之記錄指示操作之情形時,將該動畫資料記錄於恆常保存之動畫記錄檔案夾中(未圖示)。藉由設為此種構成,即便於檢查結束後,亦可為用戶提供保留動畫資料而不消除之選項,用戶可更靈活地管理動畫資料或靜止圖像資料。
圖15係對與本發明之實施形態之至少1個對應之圖像處理裝置220中之來自候選幀之提取靜止圖像資料之提取處理例進行說明的說明圖。圖15中,示出將動畫資料中之候選幀按時間序列順序排列時之合焦度變化之圖解。
於圖15所示之例中,首先拍攝受檢者之左眼,其後拍攝受檢者之右眼。於圖15所示之圖解中,合焦度較大之部位於左眼拍攝側存在1個且於左眼拍攝側存在1個,其間之時間產生合焦度較小之部位。其原因在於自左眼拍攝向右眼拍攝轉變拍攝對象時,合焦度暫時降低。對拍攝左眼之時間範圍及拍攝右眼之時間範圍進行比較,可知與左眼部分之幀相比,右眼部分之幀平均更大地算出合焦度。
此處,若僅提取構成動畫資料之複數個幀整體中之合焦度為上位之幀,則產生右眼部分之幀成為提取對象,而左眼部分之幀不包含於提取對象中的狀況。為了將左眼部分之幀亦作為提取對象,而按時間序列順序依次關注構成動畫資料之複數個幀,於在自該關注幀之時點至既定時間(例如1秒)之前之範圍內存在合焦度小於該關注幀之幀之情形時將該幀自提取對象中排除。藉此方式,不偏向於右眼部分之幀而左眼部分之幀亦作為提取對象保留之可能性提高。而且,亦可抑制所記錄之提取靜止圖像資料之合計容量之增加。
以上,對圖像處理裝置220中之來自候選幀之提取靜止圖像資料之提取處理例進行了說明。
如以上所示,根據本發明之用於使電腦(例如圖像處理裝置220)實現各種功能之圖像處理程式,使電腦實現:動畫資料獲取部221,其獲取處理對象之動畫資料;合焦度運算部222,其算出構成動畫資料之一部分或全部幀之合焦度;靜止圖像提取部223,其提取已算出合焦度之幀中之合焦度為既定值以上之幀之一部分或全部作為提取靜止圖像資料;及記錄部226,其將提取靜止圖像資料記錄於電腦所具備之記錄手段中;因此可自動畫資料自動提取靜止圖像資料並記錄。
[附記]
上述第1實施形態之說明至少記載了下述發明,使本發明所屬領域中具有通常知識者可進行其實施。
[1]
一種醫療用程式,其係用以於與具備攝像機之醫療用檢查裝置一起使用之終端裝置中實現各種處理者,且用於實現如下功能:
接收功能,其接收包含由上述醫療用檢查裝置拍攝同時即時發送之動畫資料(以下稱為即時動畫資料)之各種資料;
顯示控制功能,其藉由實時播放將所接收之上述即時動畫資料所示之動畫顯示於上述終端裝置所具備之顯示部;
錄影功能,其基於對上述終端裝置之既定操作,對實時播放中之上述即時動畫資料之錄影之開始/停止進行控制;及
記錄控制功能,其將由該錄影功能開始錄影至停止期間之上述即時動畫資料記錄於上述終端裝置所具備之記錄手段中作為記錄完成之動畫資料。
[2]
如[1]所記載之醫療用程式,其中
於上述顯示控制功能中實現如下功能,即,將用於指示實時播放中之上述即時動畫資料之錄影之開始/停止之第1按鍵顯示於上述終端裝置所具備之作為觸控面板之上述顯示部,
於上述錄影功能中實現如下功能,即,基於對上述第1按鍵之輸入操作,對實時播放中之上述即時動畫資料之錄影之開始/停止進行控制。
[3]
如[1]或[2]所記載之醫療用程式,其中
於上述接收功能中實現如下功能,即,自上述醫療用檢查裝置接收表示上述即時動畫資料之錄影之開始/停止之控制要求之資訊,該資訊基於針對物理設置於上述醫療用檢查裝置之既定操作部之操作,
於上述錄影功能中實現如下功能,即,基於自上述醫療用檢查裝置接收之表示上述控制要求之資訊,對實時播放中之上述即時動畫資料之錄影之開始/停止進行控制。
[4]
如[1]至[3]中任一項所記載之醫療用程式,其中
於上述顯示控制功能中實現如下功能,即,於播放上述記錄完成之動畫資料將動畫顯示於上述顯示部時,將用於接受自該記錄完成之動畫資料提取靜止圖像資料之提取要求之輸入操作之第2按鍵顯示於上述顯示部,
於上述記錄控制功能中實現如下功能,即,將與於進行對上述第2按鍵之輸入操作時顯示於上述顯示部之靜止圖像對應之靜止圖像資料記錄於上述記錄手段。
[5]
如[1]至[4]中任一項所記載之醫療用程式,其
實現接受用於識別檢查對象之識別資訊之輸入操作之接受功能,
於上述記錄控制功能中實現如下功能,即,僅於上述識別資訊之輸入操作被接受之情形時,將上述即時動畫資料記錄於上述記錄手段作為上述記錄完成之動畫資料。
[6]
如[5]所記載之醫療用程式,其中
於上述記錄控制功能中實現如下功能,即,將上述即時動畫資料與輸入被接受之上述識別資訊建立對應關係而記錄於上述記錄手段作為上述記錄完成之動畫資料。
[7]
如[1]至[6]中任一項所記載之醫療用程式,其
實現接受用於識別檢查對象之識別資訊之輸入操作之接受功能,
於上述顯示控制功能中實現如下功能,即,僅於上述識別資訊之輸入操作被接受之情形時,藉由實時播放將所接收之上述即時動畫資料所示之動畫顯示於上述顯示部。
[8]
如[7]所記載之醫療用程式,其中
於上述顯示控制功能中實現如下功能,即,於顯示上述即時動畫資料所示之動畫時,將表示檢查對象之上述識別資訊一併顯示於上述顯示部。
[9]
如[1]至[8]中任一項所記載之醫療用程式,其中
上述醫療用檢查裝置係用於檢查受檢眼之裝置,
於上述顯示控制功能中實現如下功能,即,將用於選擇上述受檢者之左右哪個受檢眼為檢查對象之第3按鍵顯示於上述顯示部,
於上述記錄控制功能中實現如下功能,即,基於對上述第3按鍵之選擇操作,將上述即時動畫資料與受檢眼之左右之選擇資訊建立對應關係而記錄於上述記錄手段作為上述記錄完成之動畫資料。
[10]
如[9]所記載之醫療用程式,其中
於上述顯示控制功能中實現如下功能,即,於顯示上述記錄完成之動畫資料所示之動畫時,將上述左右之選擇資訊對應於該動畫顯示於上述顯示部。
[11]
如[1]至[10]中任一項所記載之醫療用程式,其實現如下功能:
發送功能,其將上述記錄完成之動畫資料發送至既定之伺服器裝置;及
通訊控制功能,其以如下方式控制,即,於利用上述接收功能進行上述即時動畫資料之接收之通訊、及利用上述發送功能進行上述記錄完成之動畫資料之發送之通訊中,於一通訊正在進行時禁止與另一者之通訊。
[12]
如[1]至[11]中任一項所記載之醫療用程式,其中
於上述顯示控制功能中,可於播放上述記錄完成之動畫資料將動畫顯示於上述顯示部時,基於既定操作,對該動畫進行放大/縮小來變更顯示範圍而顯示,
於上述記錄控制功能中,可進而記錄藉由上述顯示控制功能變更顯示範圍而顯示之動畫。
[13]
如[12]所記載之醫療用程式,其中
於上述記錄控制功能中實現如下功能,即,於將基於上述顯示控制功能變更顯示範圍而顯示之動畫於顯示中進行對上述第2按鍵之輸入操作之情形時,將與顯示於上述顯示部之顯示範圍之靜止圖像對應之靜止圖像資料記錄於上述記錄手段。
[14]
一種醫療用檢查系統,其係具備具有攝像機之醫療用檢查裝置、終端裝置及伺服器裝置者,其特徵在於:
上述醫療用檢查裝置將藉由拍攝檢查對象而生成之動畫資料即時發送至上述終端裝置,
上述終端裝置具備:
接收部,其接收包含由上述醫療用檢查裝置拍攝同時即時發送之動畫資料(以下稱為即時動畫資料)之各種資料;
顯示控制部,其藉由實時播放將所接收之上述即時動畫資料所示之動畫顯示於上述終端裝置所具備之顯示部;
錄影部,其基於對上述終端裝置之既定操作,對實時播放中之上述即時動畫資料之錄影之開始/停止進行控制;
記錄控制部,其將由該錄影部開始上述即時動畫資料之錄影至停止期間之上述即時動畫資料記錄於本機終端所具備之記錄手段作為記錄完成之動畫資料;及
發送部,其將上述記錄完成之動畫資料發送至上述伺服器裝置
[15]
如[14]所記載之醫療用檢查系統,其特徵在於:
上述伺服器裝置基於用於識別檢查對象之資訊且由上述終端裝置建立對應關係之識別資訊,將自上述終端裝置接收之上述記錄完成之動畫資料分類而進行管理。
[16]
如[14]或[15]所記載之醫療用檢查系統,其特徵在於:
上述醫療用檢查裝置作為1個存取點發揮功能,於與上述終端裝置確立通訊連接時不可與其他裝置進行通訊連接。
又,上述第2實施形態之說明至少記載了下述發明,使本發明所屬領域中具有通常知識者可進行其實施。
[17]
一種圖像處理程式,其係用於使電腦實現與圖像處理相關之功能者,且
用於使上述電腦實現如下功能:
動畫資料獲取功能,其獲取處理對象之動畫資料;
合焦度運算功能,其算出構成上述動畫資料之一部分或全部幀之合焦度;
靜止圖像提取功能,其提取已算出上述合焦度之幀中之上述合焦度為既定值以上之幀(候選幀)之一部分或全部作為提取靜止圖像資料;及
記錄功能,其將上述提取靜止圖像資料記錄於上述電腦所具備之記錄手段。
[18]
如[17]所記載之圖像處理程式,其中
於上述靜止圖像提取功能中,於在上述候選幀按時間序列順序排列時預先設定之時間範圍內存在複數個上述候選幀之情形時,自上述合焦度較小者中將既定數量之上述候選幀自提取對象排除。
[19]
如[18]所記載之圖像處理程式,其中
於上述靜止圖像提取功能中,自上述候選幀提取上述提取靜止圖像資料時,於按照時間序列順序依次關注上述候選幀時,自該關注幀之時點起,於既定之時間範圍內存在上述合焦度小於該關注幀之上述候選幀之情形時,將該候選幀自提取對象排除。
[20]
如[17]至[19]中任一項所記載之圖像處理程式,其中
於上述靜止圖像提取功能中,自上述候選幀提取上述提取靜止圖像資料時,將上述候選幀中之上述合焦度最小之幀自提取對象排除以使上述提取靜止圖像資料之合計數不超過既定之上限數。
[21]
如[17]至[20]中任一項所記載之圖像處理程式,其中
上述合焦度運算功能中之上述合焦度之運算係藉由如下處理實現:
邊緣提取圖像生成處理,其對上述幀執行邊緣提取處理而生成邊緣提取圖像;及
運算處理,其基於上述邊緣提取圖像中之邊緣之方差算出與該邊緣提取圖像對應之幀之上述合焦度。
[22]
如[17]至[21]中任一項所記載之圖像處理程式,其中
於上述合焦度運算功能中,執行如下處理:
綠色成分圖像生成處理,其提取構成上述幀之各像素之色資訊中之綠色成分生成綠色成分圖像資料;及
灰階化處理,其將上述綠色成分圖像資料進行灰階化而生成灰階圖像資料;
基於由該灰階化處理而獲得之上述灰階圖像資料算出上述合焦度。
[23]
如[22]所記載之圖像處理程式,其中
於上述合焦度運算功能中,
執行對上述灰階圖像資料之黑位準進行調整之調整處理,
基於由該調整處理調整黑位準之上述灰階圖像資料算出上述合焦度。
[24]
如[17]至[23]中任一項所記載之圖像處理程式,其中,
於上述合焦度運算功能中,將構成上述動畫資料之幀中每隔既定時間間隔或既定張數之1張幀設定為運算上述合焦度之對象幀。
[25]
如[17]至[23]中任一項所記載之圖像處理程式,其中
上述動畫資料為拍攝受檢者之眼睛而得之動畫之資料,
於上述合焦度運算功能中,以除上述幀之上側及/或下側之既定範圍之區域以外之區域作為對象算出上述合焦度。
[26]
如[17]至[25]中任一項所記載之圖像處理程式,其中
於上述動畫資料獲取功能中,
將獲取之上述動畫資料記憶於上述電腦所具備之記憶手段中,
使上述電腦實現刪除功能,即於在上述靜止圖像提取功能中提取上述提取靜止圖像資料後之既定時機,刪除記憶於上述記憶手段之上述動畫資料。
[27]
如[17]至[26]中任一項所記載之圖像處理程式,其
使上述電腦實現如下功能:
顯示控制功能,其將上述提取靜止圖像資料所示之提取靜止圖像顯示於上述電腦所具備之顯示部;及
接受功能,其自用戶接受對於所顯示之上述提取靜止圖像之選擇操作;
於上述記錄功能中實現如下功能,即,將表示已接受上述選擇操作之上述提取靜止圖像之上述提取靜止圖像資料記錄於上述記錄手段。
[28]
如[27]所記載之圖像處理程式,其中
於上述顯示控制功能中實現如下功能,即,於已進行既定之第1輸入操作之情形時,將包含上述提取靜止圖像之動畫資料所示之動畫顯示於上述顯示部,
於上述接受功能中實現如下功能,即,接受對於所顯示之上述動畫之上述幀之選擇操作,
於上述記錄功能中實現如下功能,即,將表示已接受上述選擇操作之上述幀之靜止圖像資料記錄於上述記錄手段。
[29]
如[28]所記載之圖像處理程式,其中
於上述顯示控制功能中,於對上述提取靜止圖像資料所示之提取靜止圖像之任一者進行既定之第2輸入操作之情形時,繼該提取靜止圖像資料之後播放上述動畫資料。
100:醫療用檢查系統
110:醫療用檢查裝置
120:終端裝置
121:接收部
122:顯示控制部
123:錄影部
124:記錄控制部
125:接受部
126:發送部
127:通訊控制部
130:伺服器裝置
210:醫療用檢查裝置
220:圖像處理裝置
221:動畫資料獲取部
222:合焦度運算部
223:靜止圖像提取部
224:顯示控制部
225:接受部
226:記錄部
227:刪除部
230:伺服器裝置
A1~A7:顯示畫面
B1:管理用受檢者識別資訊
B2:輸入識別資訊
B3:受檢者識別資訊
C:檢查日期時間資訊
D1~D10:按鍵
E:輸入窗體
F1~F2:消息
G:動畫
H1~H3:靜止圖像縮略圖
J:動畫縮略圖
K1~K4:左右選擇資訊
L:動畫
[圖1]係對與本發明之實施形態之至少1個對應之醫療用檢查系統100之構成之一例進行說明的說明圖。
[圖2]係表示與本發明之實施形態之至少1個對應之終端裝置20之功能構成之一例的方塊圖。
[圖3]係表示與本發明之實施形態之至少1個對應之醫療用檢查裝置10之處理流程之一例的流程圖。
[圖4]係表示與本發明之實施形態之至少1個對應之終端裝置20之處理流程之一例的流程圖。
[圖5]係表示與本發明之實施形態之至少1個對應之終端裝置20之顯示畫面之例的說明圖。
[圖6]係表示與本發明之實施形態之至少1個對應之終端裝置20之顯示畫面之例的說明圖。
[圖7]係表示與本發明之實施形態之至少1個對應之終端裝置20之顯示畫面之例的說明圖。
[圖8]係表示與本發明之實施形態之至少1個對應之終端裝置20之顯示畫面之例的說明圖。
[圖9]係表示與本發明之實施形態之至少1個對應之終端裝置20之顯示畫面之例的說明圖。
[圖10]係表示與本發明之實施形態之至少1個對應之圖像處理裝置10-1之功能構成之一例的方塊圖。
[圖11]係對應用與本發明之實施形態之至少1個對應之圖像處理裝置10-1之環境之一例進行說明的說明圖。
[圖12]係表示與本發明之實施形態之至少1個對應之圖像處理裝置10-1之幀之提取處理流程之一例的流程圖。
[圖13]係表示與本發明之實施形態之至少1個對應之圖像處理裝置10-1之幀之合焦度運算處理流程之一例的流程圖。
[圖14]係對與本發明之實施形態之至少1個對應之圖像處理裝置10-1中之動畫資料及靜止圖像資料之管理例進行說明的說明圖。
[圖15]係對與本發明之實施形態之至少1個對應之圖像處理裝置10-1中之來自候選幀之提取靜止圖像資料之提取處理例進行說明的說明圖。
100:醫療用檢查系統
110:醫療用檢查裝置
120:終端裝置
130:伺服器裝置
Claims (15)
- 一種醫療用程式,其係用以於與具備攝像機之醫療用檢查裝置一起使用之終端裝置中實現各種處理者,且用於實現如下功能: 接收功能,其接收包含由上述醫療用檢查裝置拍攝同時即時發送之動畫資料(以下稱為即時動畫資料)之各種資料; 顯示控制功能,其藉由實時播放將所接收之上述即時動畫資料所示之動畫顯示於上述終端裝置所具備之顯示部; 錄影功能,其基於對上述終端裝置之既定操作,對實時播放中之上述即時動畫資料之錄影之開始/停止進行控制;及 記錄控制功能,其將由該錄影功能開始錄影至停止期間之上述即時動畫資料記錄於上述終端裝置所具備之記錄手段中作為記錄完成之動畫資料。
- 如請求項1之醫療用程式,其中, 於上述顯示控制功能中實現如下功能,即,將用於指示實時播放中之上述即時動畫資料之錄影之開始/停止之第1按鍵顯示於上述終端裝置所具備之作為觸控面板之上述顯示部; 於上述錄影功能中實現如下功能,即,基於對上述第1按鍵之輸入操作,對實時播放中之上述即時動畫資料之錄影之開始/停止進行控制。
- 如請求項1之醫療用程式,其中, 於上述接收功能中實現如下功能,即,自上述醫療用檢查裝置接收表示上述即時動畫資料之錄影之開始/停止之控制要求之資訊,該資訊基於針對物理設置於上述醫療用檢查裝置之既定操作部之操作; 於上述錄影功能中實現如下功能,即,基於自上述醫療用檢查裝置接收之表示上述控制要求之資訊,對實時播放中之上述即時動畫資料之錄影之開始/停止進行控制。
- 如請求項1之醫療用程式,其中, 於上述顯示控制功能中實現如下功能,即,於播放上述記錄完成之動畫資料將動畫顯示於上述顯示部時,將用於接受自該記錄完成之動畫資料提取靜止圖像資料之提取要求之輸入操作之第2按鍵顯示於上述顯示部; 於上述記錄控制功能中實現如下功能,即,將與於進行對上述第2按鍵之輸入操作時顯示於上述顯示部之靜止圖像對應之靜止圖像資料記錄於上述記錄手段。
- 如請求項1之醫療用程式,其實現接受用於識別檢查對象之識別資訊之輸入操作之接受功能; 於上述記錄控制功能中實現如下功能,即,僅於上述識別資訊之輸入操作被接受之情形時,將上述即時動畫資料記錄於上述記錄手段作為上述記錄完成之動畫資料。
- 如請求項1之醫療用程式,其實現接受用於識別檢查對象之識別資訊之輸入操作之接受功能; 於上述顯示控制功能中實現如下功能,即,僅於上述識別資訊之輸入操作被接受之情形時,藉由實時播放將所接收之上述即時動畫資料所示之動畫顯示於上述顯示部。
- 如請求項1之醫療用程式,其中, 上述醫療用檢查裝置係用於檢查受檢眼之裝置; 於上述顯示控制功能中實現如下功能,即,將用於選擇上述受檢者之左右哪個受檢眼為檢查對象之第3按鍵顯示於上述顯示部; 於上述記錄控制功能中實現如下功能,即,基於對上述第3按鍵之選擇操作,將上述即時動畫資料與受檢眼之左右之選擇資訊建立對應關係而記錄於上述記錄手段作為上述記錄完成之動畫資料。
- 如請求項1之醫療用程式,其實現如下功能: 發送功能,其將上述記錄完成之動畫資料發送至既定之伺服器裝置;及 通訊控制功能,其以如下方式進行控制,即,於利用上述接收功能進行上述即時動畫資料之接收之通訊、及利用上述發送功能進行上述記錄完成之動畫資料之發送之通訊中,於一通訊正在進行時禁止與另一者之通訊。
- 如請求項1之醫療用程式,其中, 於上述顯示控制功能中,可於播放上述記錄完成之動畫資料將動畫顯示於上述顯示部時,基於既定操作,對該動畫進行放大/縮小來變更顯示範圍而顯示; 於上述記錄控制功能中,可進而記錄藉由上述顯示控制功能變更顯示範圍而顯示之動畫。
- 如請求項1之醫療用程式,其實現如下功能: 合焦度運算功能,其算出構成上述記錄完成之動畫資料之一部分或全部幀之合焦度; 靜止圖像提取功能,其提取已算出上述合焦度之幀中之上述合焦度為既定值以上之幀(以下稱為候選幀)之一部分或全部作為提取靜止圖像資料;及 記錄功能,其將上述提取靜止圖像資料記錄於上述終端裝置所具備之記錄手段。
- 如請求項10之醫療用程式,其中, 於上述靜止圖像提取功能中,於在上述候選幀按時間序列順序排列時預先設定之時間範圍內存在複數個上述候選幀之情形時,自上述合焦度較小者中將既定數量之上述候選幀自提取對象排除。
- 如請求項10之醫療用程式,其中, 於上述靜止圖像提取功能中,自上述候選幀提取上述提取靜止圖像資料時,將上述候選幀中之上述合焦度最小之幀自提取對象排除以使上述提取靜止圖像資料之合計數不超過既定之上限數。
- 一種醫療用檢查系統,其係具備具有攝像機之醫療用檢查裝置、終端裝置及伺服器裝置者,其中, 上述醫療用檢查裝置將藉由拍攝檢查對象而生成之動畫資料即時發送至上述終端裝置; 上述終端裝置具備: 接收部,其接收包含由上述醫療用檢查裝置拍攝同時即時發送之動畫資料(以下稱為即時動畫資料)之各種資料; 顯示控制部,其藉由實時播放將所接收之上述即時動畫資料所示之動畫顯示於上述終端裝置所具備之顯示部; 錄影部,其基於對上述終端裝置之既定操作,對實時播放中之上述即時動畫資料之錄影之開始/停止進行控制; 記錄控制部,其將由該錄影部開始上述即時動畫資料之錄影至停止期間之上述即時動畫資料記錄於本機終端所具備之記錄手段中作為記錄完成之動畫資料;及 發送部,其將上述記錄完成之動畫資料發送至上述伺服器裝置。
- 如請求項13之醫療用檢查系統,其中, 上述伺服器裝置基於用於識別檢查對象之資訊且由上述終端裝置建立對應關係之識別資訊,將自上述終端裝置接收之上述記錄完成之動畫資料分類而進行管理。
- 如請求項13之醫療用檢查系統,其中, 上述醫療用檢查裝置作為1個存取點發揮功能,於與上述終端裝置確立通訊連接時不可與其他裝置進行通訊連接。
Applications Claiming Priority (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2021-101006 | 2021-06-17 | ||
JP2021101006 | 2021-06-17 | ||
JP2021-154875 | 2021-09-22 | ||
JP2021154875 | 2021-09-22 |
Publications (1)
Publication Number | Publication Date |
---|---|
TW202304371A true TW202304371A (zh) | 2023-02-01 |
Family
ID=84527561
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
TW111122421A TW202304371A (zh) | 2021-06-17 | 2022-06-16 | 醫療用程式及醫療用檢查系統 |
Country Status (4)
Country | Link |
---|---|
EP (1) | EP4356818A1 (zh) |
JP (1) | JPWO2022265064A1 (zh) |
TW (1) | TW202304371A (zh) |
WO (1) | WO2022265064A1 (zh) |
Family Cites Families (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4136559B2 (ja) | 2002-09-12 | 2008-08-20 | 興和株式会社 | 眼科撮影装置 |
US9867533B2 (en) * | 2015-04-02 | 2018-01-16 | Coopervision International Holding Company, Lp | Systems and methods for determining an angle of repose of an asymmetric lens |
JP6586260B2 (ja) * | 2015-04-27 | 2019-10-02 | 成範 李 | ネットワーク閲覧システム |
WO2016179370A1 (en) * | 2015-05-05 | 2016-11-10 | The Arizona Board Of Regents On Behalf Of The University Of Arizona | Smartphone-based handheld ophthalmic examination devices |
JP6633322B2 (ja) * | 2015-08-20 | 2020-01-22 | 興和株式会社 | 情報提供システムおよび情報提供方法 |
KR20170122981A (ko) * | 2016-04-28 | 2017-11-07 | 주식회사 파인트리시스템 | 실시간 내시경 진료정보 공유 시스템 및 그 방법 |
JP6822875B2 (ja) * | 2017-03-06 | 2021-01-27 | 株式会社トプコン | 眼科検査システム及び眼科検査管理装置 |
-
2022
- 2022-06-16 TW TW111122421A patent/TW202304371A/zh unknown
- 2022-06-16 JP JP2023530402A patent/JPWO2022265064A1/ja active Pending
- 2022-06-16 EP EP22825052.8A patent/EP4356818A1/en active Pending
- 2022-06-16 WO PCT/JP2022/024128 patent/WO2022265064A1/ja active Application Filing
Also Published As
Publication number | Publication date |
---|---|
EP4356818A1 (en) | 2024-04-24 |
WO2022265064A1 (ja) | 2022-12-22 |
JPWO2022265064A1 (zh) | 2022-12-22 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US8532345B2 (en) | Camera and image recording program product | |
US10217022B2 (en) | Image acquisition and management | |
EP2567536B1 (en) | Generating a combined image from multiple images | |
US9491366B2 (en) | Electronic device and image composition method thereof | |
US7869658B2 (en) | Representative image selection based on hierarchical clustering | |
US9118876B2 (en) | Automatic skin tone calibration for camera images | |
CN103269635B (zh) | 图像管理装置和方法 | |
US10136050B2 (en) | Image acquisition and management using a reference image | |
WO2019064704A1 (ja) | 内視鏡画像観察支援システム、内視鏡画像観察支援装置、内視鏡画像観察支援方法 | |
US8718344B2 (en) | Image processing apparatus and medical image diagnosis apparatus | |
JP5490477B2 (ja) | 充血度算出プログラム及び充血度算出装置 | |
JP3649468B2 (ja) | 撮影機能付き電子アルバムシステム | |
JP6425868B1 (ja) | 内視鏡画像観察支援システム、内視鏡画像観察支援装置、内視鏡画像観察支援方法 | |
TW202304371A (zh) | 醫療用程式及醫療用檢查系統 | |
US11595584B2 (en) | Imaging apparatus, method of controlling imaging apparatus and computer-readable medium | |
JP2013121097A (ja) | 撮像装置及び方法、並びに画像生成装置及び方法、プログラム | |
CN117500429A (zh) | 医疗用程序以及医疗用检查系统 | |
US20210042924A1 (en) | Information processing apparatus, method for controlling information processing apparatus, and storage medium | |
JP2007215086A (ja) | 動画撮影可能なカメラ | |
JP7158471B2 (ja) | 検査動画処理装置、検査動画処理装置の作動方法及び検査動画処理プログラム | |
JP2022121091A (ja) | 口腔粘膜疾患診断支援システム,方法およびプログラム | |
JP5093784B2 (ja) | 画像表示装置、画像表方法、およびそのプログラム | |
JP2008167028A (ja) | 撮像装置 | |
JP4946332B2 (ja) | 情報処理プログラム、および情報処理装置 | |
WO2023228659A1 (ja) | 画像処理装置及び内視鏡システム |