TW201936114A - 用於遠距醫療的方法和設備 - Google Patents

用於遠距醫療的方法和設備 Download PDF

Info

Publication number
TW201936114A
TW201936114A TW108106535A TW108106535A TW201936114A TW 201936114 A TW201936114 A TW 201936114A TW 108106535 A TW108106535 A TW 108106535A TW 108106535 A TW108106535 A TW 108106535A TW 201936114 A TW201936114 A TW 201936114A
Authority
TW
Taiwan
Prior art keywords
electronic device
user
imaging device
instructor
ultrasonic imaging
Prior art date
Application number
TW108106535A
Other languages
English (en)
Inventor
馬興 扎斯拉夫斯基
瓊吉 馬修 迪
托梅爾 加夫納
埃蒙 達菲
強納森 Ｍ 羅斯貝格
Original Assignee
美商蝴蝶網路公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 美商蝴蝶網路公司 filed Critical 美商蝴蝶網路公司
Publication of TW201936114A publication Critical patent/TW201936114A/zh

Links

Classifications

    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/42—Details of probe positioning or probe attachment to the patient
    • A61B8/4245—Details of probe positioning or probe attachment to the patient involving determining the position of the probe, e.g. with respect to an external reference frame or to the patient
    • A61B8/4263—Details of probe positioning or probe attachment to the patient involving determining the position of the probe, e.g. with respect to an external reference frame or to the patient using sensors not mounted on the probe, e.g. mounted on an external reference frame
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/54—Control of the diagnostic device
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/46—Ultrasonic, sonic or infrasonic diagnostic devices with special arrangements for interfacing with the operator or the patient
    • A61B8/461—Displaying means of special interest
    • A61B8/463—Displaying means of special interest characterised by displaying multiple images or images and diagnostic data on one display
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/56—Details of data transmission or power supply
    • A61B8/565—Details of data transmission or power supply involving data transmission via a network
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/58—Testing, adjusting or calibrating the diagnostic device
    • A61B8/582—Remote testing of the device
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482—Interaction with lists of selectable items, e.g. menus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/006—Mixed reality
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H40/00—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices
    • G16H40/60—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the operation of medical equipment or devices
    • G16H40/67—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the operation of medical equipment or devices for remote operation
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/46—Ultrasonic, sonic or infrasonic diagnostic devices with special arrangements for interfacing with the operator or the patient
    • A61B8/461—Displaying means of special interest
    • A61B8/465—Displaying means of special interest adapted to display user selection data, e.g. icons or menus

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Biomedical Technology (AREA)
  • Public Health (AREA)
  • General Health & Medical Sciences (AREA)
  • Medical Informatics (AREA)
  • Animal Behavior & Ethology (AREA)
  • Veterinary Medicine (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Pathology (AREA)
  • Molecular Biology (AREA)
  • Surgery (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Biophysics (AREA)
  • Radiology & Medical Imaging (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Computer Graphics (AREA)
  • Computer Hardware Design (AREA)
  • Software Systems (AREA)
  • Business, Economics & Management (AREA)
  • General Business, Economics & Management (AREA)
  • Epidemiology (AREA)
  • Primary Health Care (AREA)
  • Ultra Sonic Daignosis Equipment (AREA)

Abstract

在此所述的技術的特點有關於利用遠距醫療的超音波資料的收集。一指導者電子裝置可以產生一指導者擴增實境介面以用於顯示，並且在該指導者擴增實境介面上接收一用於移動一超音波成像裝置的指令。該指導者擴增實境介面可包含一顯示該超音波成像裝置的視訊、以及箭頭在該視訊上的一重疊，其中該些箭頭的每一個係對應於一可能的用於移動該超音波成像裝置的指令。一使用者電子裝置可以從該指導者電子裝置接收一用於移動一超音波成像裝置的指令，並且產生用於移動該超音波成像裝置的該指令以用於顯示在該使用者電子裝置上所展示的一使用者擴增實境介面上。該使用者擴增實境介面可包含顯示該超音波成像裝置的該視訊、以及一重疊在該視訊上的對應於該指令的箭頭。

Description

用於遠距醫療的方法和設備
大致而言，在此所述的技術的特點係有關於超音波資料收集。某些特點係有關於利用遠距醫療的超音波資料的收集。
相關申請案之交互參照
此申請案係根據第35號美國法典第119條(e)項來主張2018年2月27日申請，在代理人文件編號B1348.70074US00下，並且名稱為“遠距醫療”的美國臨時專利申請案序號62/636,127的益處，該美國臨時專利申請案茲在此以其整體被納入作為參考。
此申請案係根據第35號美國法典第119條(e)項來主張2018年3月21日申請、在代理人文件編號B1348.70074US01下，並且名稱為“用於遠距醫療的方法及設備”的美國臨時專利申請案序號62/646,333的益處，該美國臨時專利申請案茲在此以其整體被納入作為參考。
超音波裝置可被用來執行診斷的成像及/或治療，其係利用具有相對於人可聽見的那些聲波更高頻率的聲波。超音波成像可被用來看見內部的軟組織的身體結構，例如是用以找出疾病的來源、或是排除任何病狀。當超音波的脈衝被發送到組織之中時(例如，其係藉由利用一探針)，聲波係從該組織被反射，其中不同的組織係反射不同程度的聲音。這些被反射的聲波接著可被記錄並且作為一超音波影像來顯示給操作者。該聲音信號的強度(振幅)以及該波行進穿過身體所花的時間係提供被用來產生該超音波影像的資訊。包含即時影像的許多不同類型的影像可以利用超音波裝置來加以形成。例如，影像可被產生，其係展示組織的二維的橫截面、血液流動、組織隨著時間的運動、血液的位置、特定分子的存在、組織的硬度、或是一個三維的區域的解剖學。
根據一特點，一種設備係包含一使用者電子裝置，其係被配置以接收一用於移動一超音波成像裝置的外部產生的指令；以及在一內含於該使用者電子裝置上的使用者擴增實境介面上顯示用於移動該超音波成像裝置的該外部產生的指令。
在某些實施例中，該使用者電子裝置係進一步被配置以接收藉由一攝影機所捕捉的一視訊，該視訊係描繪該超音波成像裝置；並且該使用者擴增實境介面係包含描繪該超音波成像裝置的該視訊。在某些實施例中，該使用者電子裝置係包含該攝影機。在某些實施例中，該使用者電子裝置係被配置以在該使用者擴增實境介面上顯示該外部產生的指令時，顯示一被重疊在顯示該超音波成像裝置的該視訊上的箭頭。在某些實施例中，該超音波成像裝置係包含一或多個基準標記。在某些實施例中，該使用者電子裝置係進一步被配置以判斷在一第一時間從該攝影機相對於該一或多個基準標記的一預設的姿勢至該攝影機相對於該一或多個基準標記的一第一姿勢的一第一轉換；以及根據該第一轉換來顯示該使用者擴增實境介面。在某些實施例中，該使用者電子裝置係進一步被配置以判斷在該第一時間之後的一第二時間從該攝影機相對於該一或多個基準標記的該預設的姿勢至該攝影機相對於該一或多個基準標記的一第二姿勢的一第二轉換，其中該第一轉換係不同於該第二轉換；以及根據該第二轉換來顯示該使用者擴增實境介面。在某些實施例中，該使用者電子裝置係進一步被配置以產生在一方向上顯示該箭頭，該箭頭在該使用者擴增實境介面中看起來是垂直於該一或多個基準標記中之一。在某些實施例中，該使用者電子裝置係進一步被配置以顯示該箭頭，使得該箭頭在該使用者擴增實境介面中看起來是形成一平行於該一或多個基準標記中之一的一平面的環形的路徑。在某些實施例中，該使用者電子裝置係進一步被配置以顯示該箭頭，使得該箭頭在該使用者擴增實境介面中看起來是形成一與該一或多個基準標記中之一的一平面正交的環形的路徑。在某些實施例中，該外部產生的指令係從藉由一指導者所操作的一指導者電子裝置接收到的。
在某些實施例中，該使用者電子裝置係進一步被配置以接收一用以停止移動該超音波成像裝置的外部產生的指令；以及在該使用者電子裝置上顯示用以停止移動該超音波成像裝置的該外部產生的指令。在某些實施例中，該使用者電子裝置係進一步被配置以接收一用以停止移動該超音波成像裝置的外部產生的指令；以及停止在內含於該使用者電子裝置上的該使用者擴增實境介面上顯示用於移動該超音波成像裝置的該外部產生的指令。在某些實施例中，該使用者電子裝置係進一步被配置以接收一用以改變一成像的預設值的外部產生的指令；以及改變該成像的預設值。在某些實施例中，該使用者電子裝置係進一步被配置以接收一用以改變一成像的增益的外部產生的指令；以及改變該成像的增益。在某些實施例中，該使用者電子裝置係進一步被配置以接收一用以改變該成像的深度的外部產生的指令；以及改變該成像的深度。在某些實施例中，該使用者電子裝置係進一步被配置以接收一用以在該使用者電子裝置的一顯示器螢幕上定格(freeze)一超音波影像的外部產生的指令；以及在該使用者電子裝置上的該顯示器螢幕上定格該超音波影像。在某些實施例中，該使用者電子裝置係進一步被配置以接收一用以儲存一或多個超音波影像至記憶體的外部產生的指令；以及儲存該一或多個超音波影像至記憶體。在某些實施例中，該使用者電子裝置係進一步被配置以接收一用以移動該超音波成像裝置到一特定的解剖構造的(anatomical)區域之內的外部產生的指令；以及顯示用以移動該超音波成像裝置到該特定的解剖構造的區域之內的該外部產生的指令。在某些實施例中，該使用者電子裝置係進一步被配置以接收一用以指示一對象深呼吸並且屏住氣的外部產生的指令；以及顯示用以指示該對象深呼吸並且屏住氣的該外部產生的指令。
在某些實施例中，該使用者電子裝置係進一步被配置以接收一用以移動該超音波成像裝置到該攝影機的視野之內的指令；以及顯示用以移動該超音波成像裝置到該攝影機的視野之內的該指令。在某些實施例中，該使用者電子裝置係進一步被配置以接收一用以更用力按壓該超音波成像裝置到一對象之上的外部產生的指令；以及顯示用以更用力按壓該超音波成像裝置到該對象之上的該外部產生的指令。在某些實施例中，該使用者電子裝置係進一步被配置以接收一用以較短及/或較小的增量來移動該超音波成像裝置的外部產生的指令；以及顯示用以較短及/或較小的增量來移動該超音波成像裝置的該外部產生的指令。在某些實施例中，該使用者電子裝置係進一步被配置以發送藉由該超音波成像裝置所收集的超音波資料、及/或從該超音波資料所產生的一超音波影像至一指導者電子裝置。
根據另一特點，一種設備係包含一指導者電子裝置，其係被配置以顯示一描繪一超音波成像裝置的指導者擴增實境介面；在該指導者擴增實境介面接收一用於移動該超音波成像裝置的指令；以及發送用於移動該超音波成像裝置的該指令至一使用者電子裝置。
在某些實施例中，用於移動該超音波成像裝置的該指令係從一操作該指導者電子裝置的指導者接收到的。在某些實施例中，該指導者電子裝置係進一步被配置以接收藉由一攝影機所捕捉的一視訊，該視訊係描繪該超音波成像裝置；並且該指導者擴增實境介面係展示該顯示該超音波成像裝置的視訊。在某些實施例中，該指導者電子裝置係進一步被配置以在該指導者擴增實境介面上顯示複數個箭頭在顯示該超音波成像裝置的該視訊上的一重疊，其中該複數個箭頭的每一個係對應於一可能的用於移動該超音波成像裝置的指令。在某些實施例中，該指導者電子裝置係進一步被配置以接收在該指導者擴增實境介面上的該複數個箭頭中之一的一選擇，其中該複數個箭頭中之所選的一箭頭係對應於用於移動該超音波成像裝置的該指令；以及發送該指令至該使用者電子裝置。在某些實施例中，該指導者電子裝置係進一步被配置以接收一用以停止移動該超音波成像裝置的指令的一選擇；以及發送用以停止移動該超音波成像裝置的該指令至該使用者電子裝置。在某些實施例中，該指導者電子裝置係被配置以在接收在該指導者擴增實境介面上的該複數個箭頭中之一的該選擇時，接收在該指導者擴增實境介面上的一連續的選擇；並且該指導者電子裝置係進一步被配置以在該指導者電子裝置接收一用以停止移動該超音波成像裝置的指令，其中接收用以停止移動該超音波成像裝置的該指令係包含偵測在該指導者擴增實境介面上的該連續的選擇的停止；以及從該指導者電子裝置發送用以停止移動該超音波成像裝置的該指令至該使用者電子裝置。在某些實施例中，該指導者電子裝置係被配置以在接收該連續的選擇時，接收一連續的滑鼠點選、或是利用在一顯示器螢幕上的觸控的感測器來接收一連續的接觸。在某些實施例中，該指導者電子裝置係進一步被配置以在該指導者電子裝置上接收一用以改變一成像的預設值的指令的一選擇；以及從該指導者電子裝置發送用以改變該成像的預設值的該指令至該使用者電子裝置。在某些實施例中，該指導者電子裝置係進一步被配置以接收一用以改變一成像的增益的指令的一選擇；以及發送用以改變該成像的增益的該指令至該使用者電子裝置。在某些實施例中，該指導者電子裝置係進一步被配置以接收一用以改變一成像的深度的指令的一選擇；以及發送用以改變該成像的深度的該指令至該使用者電子裝置。在某些實施例中，該指導者電子裝置係進一步被配置以接收一用以定格在該使用者電子裝置的一顯示器螢幕上的一超音波影像的指令的一選擇；以及發送用以定格在該使用者電子裝置的該顯示器螢幕上的該超音波影像的該指令至該使用者電子裝置。在某些實施例中，該指導者電子裝置係進一步被配置以接收一用以儲存一或多個超音波影像至記憶體的指令的一選擇；以及發送用以儲存該一或多個超音波影像至記憶體的該指令至該使用者電子裝置。在某些實施例中，該指導者電子裝置係進一步被配置以接收一針對於該第一使用者以將該超音波成像裝置移動到一特定的解剖構造的區域之內的指令的一選擇；以及發送針對於該第一使用者以將該超音波成像裝置移動到該特定的解剖構造的區域之內的該指令至該使用者電子裝置。在某些實施例中，該指導者電子裝置係進一步被配置以接收一針對於該第一使用者以指示一對象深呼吸並且屏住氣的指令的一選擇；以及發送針對於該第一使用者以指示該對象深呼吸並且屏住氣的該指令至該使用者電子裝置。在某些實施例中，該指導者電子裝置係進一步被配置以接收一針對於該第一使用者以將該超音波成像裝置移動到該使用者電子裝置的該攝影機的視野之內的指令的一選擇；以及發送針對於該第一使用者以將該超音波成像裝置移動到該使用者電子裝置的該攝影機的視野之內的該指令至該使用者電子裝置。在某些實施例中，該指導者電子裝置係進一步被配置以接收一針對於該第一使用者以更用力按壓該超音波成像裝置到一對象之上的指令的一選擇；以及發送針對於該第一使用者以更用力按壓該超音波成像裝置到一對象之上的該指令至該使用者電子裝置。在某些實施例中，該指導者電子裝置係進一步被配置以接收一針對於該第一使用者以較短及/或較小的增量來移動該超音波成像裝置的指令的一選擇；以及發送針對於該第一使用者以較短及/或較小的增量來移動該超音波成像裝置的該指令至該使用者電子裝置。在某些實施例中，該指導者電子裝置係進一步被配置以從該使用者電子裝置接收一超音波影像；以及顯示該超音波影像。
某些特點係包含至少一儲存處理器可執行的指令的非暫態的電腦可讀取的儲存媒體，當該些指令藉由至少一處理器來加以執行時，其係使得該至少一處理器執行以上的功能。某些特點係包含一種執行以上的功能的方法。
根據另一特點，一種設備係包含一超音波成像裝置以及一或多個結合至該超音波成像的基準標記。
在某些實施例中，該設備進一步包含一耦接至該超音波成像裝置的一端的立方體，其中該一或多個基準標記係耦接至該立方體的一或多個表面。在某些實施例中，該一或多個基準標記係包含ArUco標記。在某些實施例中，該立方體係包含兩個半部，其係被配置以在該超音波成像裝置的該端的周圍耦接在一起。在某些實施例中，該設備進一步包含一電纜線，該立方體係包含一延伸穿過該立方體的孔洞，並且該電纜線係從該超音波成像裝置的該端延伸穿過該立方體。
超音波檢查通常包含超音波影像的獲取，該些超音波影像係包含一對象的一特定的解剖構造的結構(例如，一器官)的一切面。這些超音波影像的獲取通常需要相當高的技能。例如，操作一超音波裝置的超音波技術員可能需要知道將被成像的解剖結構是位在該對象上的何處、以及如何進一步適當地將該超音波裝置設置在該對象上以捕捉該解剖構造的結構的一醫學相關的超音波影像。在該對象上握持該超音波裝置太高或是太低幾吋都可能會造成在捕捉到一與醫學相關的超音波影像以及捕捉到一與醫學無關的超音波影像之間的差別。因此，超音波裝置的非專家的操作者在捕捉一對象的醫學相關的超音波影像上可能會有相當大的困難。這些非專家的操作者常犯的錯誤係包含：捕捉到不正確的解剖構造的結構的超音波影像、捕捉到正確的解剖構造的結構的縮短(或是截頭)的超音波影像、以及未能執行相關的解剖構造的完整的研究(例如，未能掃描所有具有一特定規則的解剖構造的區域)。
習知的超音波系統是大型、複雜且昂貴的系統，其通常是只被擁有相當大的金融資源的大型醫療設施所購買的。近來，較便宜且較不複雜的超音波成像裝置係已經被採用。此種成像裝置可包含單石地被整合到單一半導體晶粒之上的超音波換能器，以形成一單石超音波裝置。此種超音波單晶片裝置的特點係被描述在2017年1月25日申請(並且被讓與給本申請案的受讓人)的美國專利申請案號15/415,434中，其名稱為“通用的超音波裝置以及相關的設備和方法”，該美國專利申請案係以其整體被納入在此作為參考。比起習知的超音波裝置，這些新穎的超音波裝置的降低的成本以及增高的可攜性可以使得其顯著地更可被一般大眾所利用。
本發明人已經認知且體認到儘管超音波成像裝置的降低的成本以及增高的可攜性係使得其更可被一般民眾所利用，但是可能會利用到此種裝置的人們只有很少或沒有如何使用其的訓練。例如，全體員工中並無受過訓練的超音波技術員的小型診所可能會購買一超音波裝置來幫助診斷患者。在此例子中，在該小型診所的護士可能熟悉超音波技術以及人體生理學，但是可能既不知道一病患的哪些解剖構造的切面需要被成像以便於識別出有關該病患的醫學相關的資訊、也不知道如何利用該超音波裝置來獲得此種解剖構造的切面。在另一例子中，一超音波裝置可能是由醫師配給一病患，以用於在家使用來監視該病患的心臟。該病患很有可能既不瞭解人體生理學、也不瞭解如何利用該超音波裝置來成像他或她本身的心臟。
於是，本發明人已經發展出遠距醫療技術，其中一位指導者可以是在一超音波成像裝置的一使用者的遠端，其可以指示一使用者如何移動該超音波成像裝置，以便於收集一超音波影像。本發明人已經體認到指示一使用者來移動一超音波成像裝置可能會牽涉到該使用者需要調和該超音波成像裝置的姿勢與該使用者本身的姿勢。例如，考量一顯示器係顯示一指令，其係構成一超音波成像裝置以及一背對該超音波成像裝置的一特定的面而指向的箭頭的一影像。尤其，考量該超音波成像裝置的該特定的面是如同在該影像中所示的在該超音波成像裝置的右側上，因而該箭頭係因此指向右邊。根據該使用者相對於該超音波成像裝置的姿勢，有可能在該影像中所展示的超音波成像裝置的該特定的面可能是在該使用者的左邊。因此，該使用者可能會需要調和他或她本身相對於該超音波成像裝置的姿勢，並且判斷依照該指令是表示將該超音波成像裝置移動到他或她的左邊，儘管在該指令中的箭頭是指向右邊。
本發明人已經體認到利用擴增實境(AR)介面來自動地調和該超音波成像裝置的姿勢與該使用者本身的姿勢可以是可行的。若該使用者係握持一使用者電子裝置，並且觀看藉由該使用者電子裝置的攝影機所捕捉的一使用者AR介面，則該使用者的姿勢可以是與該攝影機的姿勢相同或類似的。該使用者電子裝置可以在該攝影機移動時，根據該攝影機相對於該超音波成像裝置的姿勢來自動地計算轉換。該使用者電子裝置於是可以利用此轉換來產生一用於顯示在該使用者AR介面上的箭頭，此係自動地維持其相對於該超音波成像裝置的方向，即使當該攝影機以及該使用者移動時也是如此。例如，考量該使用者AR介面係顯示一背對該超音波成像裝置的一特定的面來指向的箭頭，其中該箭頭係在該使用者AR介面中指向右邊(從該攝影機的觀點來看)。因為該使用者AR介面係展示藉由該攝影機所捕捉的視訊，並且因為該攝影機的觀點係與該使用者的觀點相同或類似的，於是該超音波成像裝置的該特定的面可以是在該使用者的右邊，並且該使用者可以是能夠藉由將該超音波成像裝置移動到他或她的右邊來遵照此指令，該右邊係與該箭頭在該使用者AR介面中所指向的相同的方向。若該使用者以及該攝影機移動而使得該超音波成像裝置的該特定的面現在是面對該使用者的左邊，則該使用者電子裝置可以根據從該攝影機新捕捉的視訊來計算一轉換，並且利用該轉換來改變該箭頭以在該使用者AR介面上指向左邊(從該攝影機的觀點來看)。該使用者可以能夠如同之前地藉由將該超音波成像裝置移動到他或她的左邊來遵照相同的指令，該左邊係與在該使用者AR介面中的該箭頭所指向的相同的方向。因為該使用者電子裝置可以自動地調和該使用者的姿勢與該超音波成像裝置的姿勢，因此該使用者可以不需要在遵照在該使用者AR介面上所展示的一指令之前，先自身來執行此調和。
應該體認到的是，在此所述的實施例可以用許多方式的任一種來加以實施。特定的實施方式的例子係在以下只是為了舉例說明之目的而被提供。應該體認到的是，所提供的這些實施例以及特點/功能可以個別地、全部一起、或是以兩個或多個的任意組合而被利用，因為在此所述的技術的特點並不在此方面受到限制。
如同在此所參照到的，一用以移動一超音波成像裝置的指令應該被理解為表示該超音波成像裝置的一移動的任何指示，其具有意圖是應該發生該超音波成像裝置的移動。例如，一指向某一方向的箭頭可被視為一用以在該方向上移動一超音波成像裝置的指令。
如同在此所參照到的，接收一用於移動一超音波成像裝置的指令應該被理解為表示接收包含/編碼一用以移動該超音波成像裝置的指令的一指示的任意類型的資料。
如同在此所參照到的，在一第一裝置接收到的一外部產生的指令係應該被理解為表示不同於該第一裝置的一個別裝置或是一第二裝置係產生該指令。
如同在此所參照到的，產生該超音波成像裝置的一移動的任何指示以用於顯示係具有意圖是應該發生該超音波成像裝置的移動。例如，產生指向某一方向的一箭頭以用於顯示可被視為產生一指令以用於顯示。
如同在此所參照到的，一擴增實境(AR)介面應該被理解為表示任何將非真實的二維圖形重疊在真實的三維世界的即時影像/視訊上的介面。
如同在此所參照到的，一箭頭應該被理解為表示任何指出一移動的方向的圖形，其中該移動的方向可包含平移、旋轉、或是傾斜的一方向。
如同在此所參照到的，一基準標記應該被理解為表示在一成像器(例如，一攝影機)的視野中的任何物體，其係出現在一藉由該成像器所產生的影像/視訊中，以使用作為一參考點或是一量測。例如，一ArUco標記(亦即，一根據用於擴增實境應用的ArUco函式庫所產生的標記)可被視為一基準標記。
如同在此所參照到的，一姿勢應該被理解為表示一物體相對於另一物體的一位置及/或方位。例如，一攝影機相對於一基準標記的位置及/或方位可被視為該攝影機相對於該基準標記的一姿勢。
如同在此所參照到的，一轉換應該被理解為表示從一姿勢至另一姿勢的一改變的任何量化。例如，一轉換可以是一描述平移、旋轉、等等的轉換矩陣。
如同在此所參照到的，根據一轉換來產生一物體以用於顯示應該被理解為表示當判斷如何產生該物體以用於顯示時，其係利用該轉換。例如，一轉換可以描述在一攝影機相對於一基準標記的姿勢上，從一預設的姿勢到一目前的姿勢的一改變。一電子裝置可以根據該轉換來產生一箭頭以用於顯示在一AR介面上，使得從該攝影機的觀點所見的一箭頭係指向在與從一基準標記的觀點來看相同的方向上，儘管有在該攝影機相對於該基準標記的姿勢上的改變。
圖1是描繪在此所述的技術的各種特點可被實施在其上的一種範例的超音波系統100的概要的方塊圖。該超音波系統100係包含一超音波成像裝置114、一使用者電子裝置102、一指導者電子裝置122、以及一網路116。
該使用者電子裝置102係包含一攝影機106、一顯示器螢幕108、一處理器110、一記憶體112、一輸入裝置118、以及一揚聲器109。該指導者電子裝置122係包含一顯示器螢幕128、一處理器130、一記憶體132、一輸入裝置138、以及一揚聲器141。該使用者電子裝置102係與該超音波成像裝置114為有線的通訊(例如，透過一lightning連接器或是一mini-USB連接器)、及/或無線通訊(例如，利用藍芽、ZIGBEE、及/或WiFi無線協定)。該使用者電子裝置102係透過該網路116來和該指導者電子裝置122無線通訊。該使用者電子裝置102以及該指導者電子裝置122係透過該網路116來和一或多個伺服器134無線通訊。
該超音波成像裝置114可被配置以產生可被採用以產生一超音波影像的超音波資料。該超音波成像裝置114可以用各種方式的任一種來加以建構。在某些實施例中，該超音波成像裝置114係包含一發送器，該發送器係發送一信號至一發送波束成形器，該發送波束成形器於是驅動在一換能器陣列之內的換能器元件以發射脈衝式超音波信號到例如是病患的一結構之中。該些脈衝式超音波信號可能會從在身體中的例如是血細胞或肌肉組織的結構背向散射，以產生返回至該些換能器元件的回音。這些回音接著可以藉由該些換能器元件而被轉換成為電性信號，並且該些電性信號係藉由一接收器來加以接收。代表接收到的回音的該些電性信號係被傳送至一接收波束成形器，其係輸出超音波資料。該超音波成像裝置114可包含一或多個被單石地整合到單一半導體晶粒之上的超音波換能器。該些超音波換能器例如可包含一或多個電容式微加工超音波換能器(CMUT)、一或多個壓電式微加工超音波換能器(PMUT)、及/或一或多個其它適當的超音波換能器胞。在某些實施例中，該些超音波換能器可以從或是在和其它電子構件(例如，發送電路、接收電路、控制電路、電源管理電路、以及處理電路)相同的晶片上來加以形成，以形成一單石超音波裝置。
現在參照該使用者電子裝置102，該處理器110可包含特殊程式化及/或特殊用途的硬體，例如是一特殊應用積體電路(ASIC)。例如，該處理器110可包含一或多個圖形處理單元(GPU)及/或一或多個張量(tensor)處理單元(TPU)。TPU可以是被特定設計用於機器學習(例如，深度學習)的ASIC。該些TPU例如可被採用來加速一神經網路的推論階段。該使用者電子裝置102可被配置以處理從該超音波成像裝置114接收到的來自該超音波成像裝置114的超音波資料，以產生超音波影像以用於顯示在該顯示器螢幕108上。該處理可以例如是藉由該處理器110來加以執行。該處理器110亦可以是適配於控制超音波資料的利用該超音波成像裝置114的獲取。該超音波資料可以在一掃描對話期間，當該些回音信號被接收到時予以即時地處理。在某些實施例中，所顯示的超音波影像可以在一至少5Hz、至少10Hz、至少20Hz的速率、在一介於5到60Hz之間的速率、在一超過20Hz的速率下加以更新。例如，超音波資料甚至可以在影像正根據先前獲取的資料來加以產生、以及在一實況的超音波影像正被顯示時來加以獲取。當額外的超音波資料被獲取時，從更近所獲取的超音波資料產生的額外的幀或影像係依序地被顯示。額外或替代的是，該超音波資料可以在一掃描對話期間暫時被儲存在一緩衝器中，因而較不即時地加以處理。
該使用者電子裝置102可被配置以利用該處理器110(例如，一或多個電腦硬體處理器)以及一或多個包含例如是該記憶體112的非暫態的電腦可讀取的儲存媒體的製品，來執行在此所述的方法中的某些方法。該處理器110可以用任何適當的方式來控制寫入資料至該記憶體112、以及從該記憶體112讀取資料。為了執行在此所述的方法中的某些方法，該處理器110可以執行被儲存在一或多個非暫態的電腦可讀取的儲存媒體(例如，該記憶體112)中的一或多個處理器可執行的指令，其可以作為儲存以供該處理器110執行的處理器可執行的指令的非暫態的電腦可讀取的儲存媒體。該攝影機106可被配置以偵測光(例如，可見光)以形成一影像。該顯示器螢幕108可被配置以顯示影像及/或視訊，並且例如可以是在該使用者電子裝置102上的一液晶顯示器(LCD)、一電漿顯示器、及/或一有機發光二極體(OLED)顯示器。該輸入裝置118可包含一或多個能夠從一使用者接收輸入並且發送該輸入至該處理器110的裝置。例如，該輸入裝置118可包含一鍵盤、一滑鼠、一麥克風、及/或在該顯示器螢幕108上的觸控的感測器。該揚聲器109可被配置以輸出音訊。該顯示器螢幕108、該輸入裝置118、該攝影機106、以及該揚聲器109可以通訊地耦接至該處理器110，且/或受到該處理器110的控制。
應該體認到的是，該使用者電子裝置102可以用各種方式的任一種來加以實施。例如，該使用者電子裝置102可被實施為一手持式裝置，例如是一行動智慧型手機或一平板電腦。藉此，該超音波成像裝置114的一使用者可以能夠用一手來操作該超音波成像裝置114，並且用另一手來握持該使用者電子裝置102。在其它例子中，該使用者電子裝置102可被實施為一種並非手持式裝置的可攜式的裝置，例如是一膝上型電腦。在另外其它的例子中，該使用者電子裝置102可被實施為一靜態的裝置，例如是桌上型電腦。該使用者電子裝置102可以透過一有線的連線(例如，經由一乙太網路電纜線)、及/或一無線的連線(例如，透過一WiFi網路)來連接至該網路116。該使用者電子裝置102可以藉此透過該網路116來和該指導者電子裝置122及/或該些伺服器134通訊。
現在參照該指導者電子裝置122，該處理器130可包含特殊程式化及/或特殊用途的硬體，例如是一特殊應用積體電路(ASIC)。例如，該處理器130可包含一或多個圖形處理單元(GPU)及/或一或多個張量處理單元(TPU)。TPU可以是被特定設計用於機器學習(例如，深度學習)的ASIC。該些TPU例如可被採用來加速一神經網路的推論階段。該指導者電子裝置122可被配置以利用該處理器130(例如，一或多個電腦硬體處理器)以及一或多個包含例如是該記憶體132的非暫態的電腦可讀取的儲存媒體的製品，來執行在此所述的方法中的某些方法。該處理器130可以用任何適當的方式來控制寫入資料至該記憶體132、以及從該記憶體132讀取資料。為了執行在此所述的方法中的某些方法，該處理器130可以執行被儲存在一或多個非暫態的電腦可讀取的儲存媒體(例如，該記憶體132)中的一或多個處理器可執行的指令，其可以作為儲存以供該處理器130執行的處理器可執行的指令的非暫態的電腦可讀取的儲存媒體。該顯示器螢幕128可被配置以顯示影像及/或視訊，例如是在該使用者電子裝置102上的一液晶顯示器(LCD)、一電漿顯示器、及/或一有機發光二極體(OLED)顯示器。該輸入裝置138可包含一或多個能夠從一使用者接收輸入並且發送該輸入至該處理器130的裝置。例如，該輸入裝置138可包含一鍵盤、一滑鼠、一3D滑鼠(例如，一SpaceMouseÒ)、一麥克風、一利用手勢識別的控制器(例如，一Leap MotionÒ控制器)、及/或在該顯示器螢幕128上的觸控的感測器。該揚聲器141可被配置以輸出音訊。該顯示器螢幕128、該輸入裝置138、以及該揚聲器141可以通訊地耦接至該處理器130，且/或受到該處理器130的控制。
應該體認到的是，該指導者電子裝置122可以用各種方式的任一種來加以實施。例如，該指導者電子裝置122可被實施為一例如是行動智慧型手機或平板電腦的手持式裝置、可被實施為一並非手持式裝置的例如是膝上型電腦的可攜式裝置、或是一例如是桌上型電腦的靜態的裝置。該指導者電子裝置122可以透過一有線的連線(例如，經由一乙太網路電纜線)及/或一無線的連線(例如，透過一WiFi網路)來連接至該網路136。該指導者電子裝置122可以藉此透過該網路116來和該使用者電子裝置102及/或該些伺服器134通訊。
如同將會進一步在以下論述的，該使用者電子裝置102以及該指導者電子裝置122可以通訊視訊、音訊、以及其它形式的資料(例如，用於移動該超音波成像裝置114的指令)。此通訊可以利用一對等式網路連結而發生在該網路116上。針對於超音波裝置及系統的進一步討論，見於在2017年1月25日申請(並且被讓與給本申請案的受讓人)的美國專利申請案號15/415,434中，其名稱為“通用的超音波裝置以及相關的設備與方法”。
圖1應該被理解為非限制性的。例如，該超音波系統100可包含比所展示的更少或更多的構件，該使用者電子裝置102可包含比所展示的更少或更多的構件，並且該指導者電子裝置122可包含比所展示的更少或更多的構件。
圖2是展示可以結合在此所述的某些實施例來加以利用的超音波成像裝置114的一個例子。該超音波成像裝置114係包含一具有一第一端204及一第二端206的主體202、一基準標記立方體208、以及一電纜線210。一超音波感測器頭(在圖2中是不可見的)係被設置在該第一端204。該基準標記立方體208係耦接至該主體202的第二端206。該基準標記立方體208係包含複數個被設置在該基準標記立方體208的並不面對該主體202的第二端206的五個表面上的基準標記。在圖2中，基準標記211-213是可見的。在圖2中，該些基準標記是ArUco標記，但是其它標記亦可被使用(例如，全息標記、色散標記)。該基準標記立方體208背向該主體202的第二端206的面係包含一孔洞214。該電纜線210係從該主體202的第二端206延伸穿過該孔洞214。該電纜線210可以從該超音波成像裝置114發送電性信號至一外部的處理裝置，例如是該使用者電子裝置102。在某些實施例中，該超音波成像裝置114可以無線地發送電性信號(例如，發送至該使用者電子裝置102)，因而該電纜線210以及該孔洞214可以是不存在的。
圖3-4係展示該超音波成像裝置114的一實施例，其中該基準標記立方體208係具有兩個半部216及218。該基準標記立方體208的兩個半部216及218係在該主體202的第二端206以及該電纜線210周圍耦接在一起。該孔洞214的一半係被形成在該半部216中，並且該孔洞214的一半係被形成在該半部218中。圖3是展示該基準標記立方體208的兩個半部216及218在該主體202的第二端206周圍耦接在一起。圖4是展示該基準標記立方體208的兩個半部216及218與彼此分開，並且從該主體202的第二端206被移開。將該基準標記立方體208分開成為該兩個半部216及218可以構成一種簡單的方式以從該超音波成像裝置114移除該基準標記立方體208。
圖5係展示一範例的指導者介面500，其可以被產生以用於藉由該指導者電子裝置122來顯示。例如，該指導者電子裝置122可以產生該指導者介面500以用於顯示在該指導者電子裝置122的顯示器螢幕128上。該指導者介面500係包含一指導者擴增實境(AR)介面600、一超音波影像502、一病患連接指示器504、一意圖指示器542、以及該指導者可以選擇的一指令(選項)的功能表，其係包含但不必要被限制為：一選項506以指示該使用者移動該超音波成像裝置114到該對象上的一特定的解剖構造的區域之內、一選項508以指示該使用者來指示該對象深呼吸並且屏住氣、一選項510以指示該使用者來指示該對象側躺在他或她的側邊、一選項512以指示該使用者移動該超音波成像裝置114到該該攝影機106的視野之內、一選項514以指示該使用者塗覆更多凝膠至該對象、一選項516以指示該使用者更用力按壓該超音波成像裝置114到該對象之上、一選項518以指示該使用者用較小及/或較短的增量來移動該超音波成像裝置114、一選項520以指示該使用者停止移動該超音波成像裝置114、一心臟的預設值選項522、一肺部的預設值選項524、一腹部的預設值選項526、一增益滑塊528、一深度滑塊530、一彩色選項544、一定格選項532、一靜像拍攝選項536、一影片拍攝選項534、一結束掃描選項538、以及一影片盤指示器540。如同將會進一步論述的，該指導者AR介面600可包含真實三維的世界的影像/視訊，其中非真實的二維的圖形係重疊在此種真實三維的世界的影像/視訊上，並且因此被視為一AR介面。圖5應該被理解為非限制性的。例如，該指導者介面500可包含比所展示的更少或更多的構件，且/或該指導者介面500的構件可以與所展示的不同地加以配置、或是具有不同的形式。
圖6係更詳細地描繪如同在圖5中所示的指導者AR介面600。該指導者AR介面600係包含該超音波成像裝置114的一視訊610的一幀、以及被重疊在該視訊610的該幀上的箭頭601-608。在某些實施例中，該使用者電子裝置的攝影機106可以捕捉該視訊610的一幀，發送該視訊610的該幀至該指導者電子裝置122，並且該指導者電子裝置122可以產生該視訊610的該幀以用於顯示在該指導者介面500上。當該視訊610的一新的幀被收集到時，該使用者電子裝置102可以發送(例如，透過一無線的連線)該視訊610的該新的幀至該指導者電子裝置122，其可以利用該視訊610的該新的幀來更新在該指導者介面500上所展示的該視訊610的該幀。該超音波成像裝置114的使用者可以握持該超音波成像裝置114在正被成像的對象上，並且將該使用者電子裝置102(該使用者亦可能握持著)的攝影機106設置成使得該超音波成像裝置114係在該攝影機106的視野內。
該些箭頭601-608係被展示重疊在該超音波成像裝置114的視訊上，並且可以對應於可能的用於移動該超音波成像裝置114的指令，亦即用以平移、旋轉、及/或傾斜該超音波成像裝置114的指令。用於移動該超音波成像裝置114的指令可包含用以平移該超音波成像裝置114的指令、用以旋轉該超音波成像裝置114(亦即，繞著該超音波成像裝置114的縱軸旋轉)的指令、以及用以傾斜該超音波成像裝置114(例如，繞著該超音波成像裝置114的接觸該對象的端部分來傾斜該超音波成像裝置114)的指令的任意組合。用以移動該超音波成像裝置114的該些指令可以是被設計以將該超音波成像裝置114從一目前的位置移動到一對象上的一位置及方位的指令，使得一目標解剖構造的切面(例如，該心臟的一胸骨旁長軸切面)可加以獲得。如同將會在以下進一步論述的，該指導者可以選擇該些可能的用於移動該超音波成像裝置114的指令中之一，並且該指導者電子裝置122可以發送此指令至該使用者電子裝置102，並且藉此指示該使用者根據所選的指令來移動該超音波成像裝置114。
如同在該指導者AR介面600中所顯示的箭頭601係垂直於該基準標記211，並且面對該基準標記211所面對的方向。產生該箭頭601以用於顯示可以是有助益的，因為一用於平移該超音波成像裝置114的指令是在該基準標記211所面對的方向上。如同在該指導者AR介面600中所顯示的箭頭602係垂直於該基準標記211，並且背對該基準標記211所面對的方向。產生該箭頭602以用於顯示可以是有助益的，因為一用於平移該超音波成像裝置114的指令是與該基準標記211所面對的方向相反的。如同在該指導者AR介面600中所顯示的箭頭603係垂直於該基準標記212，並且面對該基準標記212所面對的方向。產生該箭頭603以用於顯示可以是有助益的，因為一用於平移該超音波成像裝置114的指令是在該基準標記212所面對的方向上。如同在該指導者AR介面600中所顯示的箭頭604係垂直於該基準標記212，並且背對該基準標記212所面對的方向。產生該箭頭604以用於顯示可以是有助益的，因為一用於平移該超音波成像裝置114的指令是與該基準標記212所面對的方向相反的。該基準標記213係位在一正交於該超音波成像裝置114的縱軸616的平面中。如同在該指導者AR介面600中所顯示的箭頭605係形成一平行於該基準標記212的平面的環形的路徑。產生該箭頭605以用於顯示可以是有助益的，因為一用於旋轉該超音波成像裝置114的指令是在藉由該箭頭605所指出的方向上。如同在該指導者AR介面600中所顯示的箭頭606係形成一平行於該基準標記212的平面的環形的路徑，其係在方向上與該箭頭605的路徑相反的。產生該箭頭606以用於顯示可以是有助益的，因為一用於旋轉該超音波成像裝置114的指令是在藉由該箭頭606所指出的方向上。如同在該指導者AR介面600中所顯示的箭頭607係形成一正交於該基準標記212的平面的環形的路徑。產生該箭頭607以用於顯示可以是有助益的，因為一用於傾斜該超音波成像裝置114的指令是在藉由該箭頭607所指出的方向上。如同在該指導者AR介面600中所顯示的箭頭608係形成一正交於該基準標記212的平面的環形的路徑，其係在方向上與該箭頭607的路徑相反的。產生該箭頭608以用於顯示可以是有助益的，因為一用於傾斜該超音波成像裝置114的指令是在藉由該箭頭608所指出的方向上。應注意到的是，兩個額外的箭頭(其係對應於另外兩個用於傾斜該超音波成像裝置114的方向，其並未被該箭頭607以及該箭頭608所指出)亦可以被顯示在該AR介面600之上。
該指導者電子裝置122可以從該使用者電子裝置102接收一根據該使用者電子裝置102的攝影機106的一姿勢而定的轉換。該轉換可以描述在該攝影機106的姿勢上，從(1)該攝影機106相對於在該超音波成像裝置114上的基準標記的一預設的姿勢至(2)當該攝影機捕捉該視訊610的幀時，該攝影機106相對於在該超音波成像裝置114上的基準標記的目前的姿勢的一改變。該轉換可包含該攝影機106從該預設的姿勢至該目前的姿勢的平移、旋轉、及/或傾斜的一量化，並且可以具有一矩陣的形式。該使用者電子裝置102可以使用姿勢估計技術來分析該視訊610的特定的幀，以決定在該視訊610的幀被捕捉時的特定時間的轉換。在其中該指導者電子裝置122連續地接收視訊的實施例中，該指導者電子裝置122可以在整個成像對話期間持續地接收根據該視訊610的目前的幀所更新的轉換。
在圖6的實施例中，該超音波成像裝置114係包含耦接至該超音波成像裝置114的基準標記。因此，描述在該攝影機106相對於該基準標記的姿勢上的改變的轉換可以等同地描述在該攝影機106相對於該超音波成像裝置114的姿勢上的改變。(如同在此所參照到的，若基準標記係耦接至一超音波成像裝置114，則對於該攝影機106相對於該超音波成像裝置114的姿勢的參照應該被理解為可以和對於該攝影機106相對於該些基準標記的姿勢的參照互換的。)若該攝影機106相對於該超音波成像裝置114移動的話，則該轉換可以捕捉到該移動。尤其，該轉換可以描述如何改變一箭頭(例如，該些箭頭601-608中之一)相對於該攝影機106的方向，使得如同可見於該指導者AR介面600中的該箭頭相對於該超音波成像裝置114的方向係維持固定的，即使該攝影機106相對於該超音波成像裝置114移動也是如此。
作為以上的討論的一圖示，圖7係展示該指導者AR介面600，但是該攝影機106相對於該超音波成像裝置114的姿勢已經從在圖6中的姿勢改變。在圖7中，該些箭頭601-608從該攝影機的觀點來看係指向與它們在圖6中所指向的不同的方向。例如，在圖6中的箭頭601從該攝影機106的觀點來看係指向實質右上的，而在圖7中的箭頭601從該攝影機106的觀點來看係指向實質右下的。然而，該些箭頭601-608仍然相對於該超音波成像裝置114指向與在圖6中的相同的方向上。例如，該箭頭601在圖6及7中都從該超音波成像裝置114的相同的面指向外的。該指導者電子裝置122用於產生該指導者AR介面600以用於顯示所用的轉換可以描述如何從該攝影機106的觀點產生該些箭頭601-608以用於顯示，使得它們從該超音波成像裝置114的觀點來看都指向相同的方向，儘管在該攝影機106相對於該超音波成像裝置114的姿勢上有改變。(應注意到的是，在圖7中，該基準標記212是不可見的，而一與該基準標記212相對的基準標記214現在是可見的。)
如上所論述的，該使用者電子裝置102可以是和該超音波成像裝置114通訊的。在某些實施例中，該超音波成像裝置114可以收集超音波資料，發送該超音波資料至該使用者電子裝置102，並且該使用者電子裝置102可以從該超音波資料產生該超音波影像502。在某些實施例中，該超音波成像裝置114可以收集超音波資料，從該超音波資料產生該超音波影像502，並且發送該超音波影像502至該使用者電子裝置102。該使用者電子裝置102可以發送該超音波影像502至該指導者電子裝置122，並且該指導者電子裝置122可以產生該超音波影像502以用於顯示在該指導者介面500上。當新的超音波資料被收集到，並且一新的超音波影像被產生時，該使用者電子裝置102可以發送該新的超音波影像502至該指導者電子裝置122，並且該指導者電子裝置122可以利用該新的超音波影像502來更新在該指導者介面500上所展示的超音波影像502。
圖8係描繪該指導者介面500從一指導者接收一箭頭的一選擇。該指導者介面500可以利用該指導者電子裝置的輸入裝置138來接收該箭頭的選擇。在圖8的例子中，該輸入裝置138係包含一滑鼠，並且一滑鼠游標800係盤旋在該使用者AR介面600中的一特定的箭頭601之上。一旦該滑鼠被該指導者點選後，該箭頭601係被選擇。在其它實施例中，該輸入裝置138可包含在該指導者電子裝置122的顯示器螢幕128上的觸控的感測器，並且該指導者可以觸碰在該顯示器螢幕128上的箭頭601來選擇該箭頭601。該指導者可以利用該超音波影像502及/或該超音波成像裝置114的視訊610的幀，以決定如何指示該使用者來移動該超音波成像裝置114。
圖9係描繪在從該指導者接收該箭頭的選擇之後的指導者介面500。在該指導者AR介面600上，只有所選的箭頭601係被展示，而先前在該指導者AR介面600上所展示的其它箭頭則未被展示。在接收該箭頭601的選擇(其係對應於一用於移動該超音波成像裝置114的指令)之後，該指導者電子裝置122可以發送該指令至該使用者電子裝置102。在某些實施例中，在該指導者AR介面600中所展示的箭頭601-608的每一個可以具有一識別符，並且該指導者電子裝置122可以發送所選的箭頭601的識別符至該使用者電子裝置102。例如，考量在圖8中所選的箭頭601。在該攝影機106相對於該超音波成像裝置114的一預設的姿勢中，該箭頭601可以指向右邊。如上所論述的，當該攝影機106相對於該超音波成像裝置114的姿勢改變時，該箭頭601從該攝影機106的觀點來看的方向可以改變，使得該箭頭601從該超音波成像裝置114的觀點來看的方向係維持實質固定的。然而，在任何給定的時間，該箭頭601都可以根據其在該預設的姿勢中，從該攝影機106的觀點來看的方向而被認定為“右邊”箭頭，儘管該箭頭601在該給定的時間從該攝影機106的觀點來看並不一定指向右邊。若被認定為“右邊”的箭頭601係在圖8中被選擇，則該指導者電子裝置122可以藉由發送該識別符“右邊”來發送對應於此箭頭601的指令。在某些實施例中，該些箭頭601-608的每一個可以具有其它類型的識別符，例如是不描述意義的字母與數字的識別符。
圖10係描繪一被產生以用於藉由該使用者電子裝置102來顯示的範例的使用者介面1000。例如，該使用者電子裝置102可以產生該使用者介面1000以用於顯示在該使用者電子裝置102的顯示器螢幕108上。該使用者介面1000係包含一使用者AR介面1100、該超音波影像502、一深度標尺1004、一預設值功能表選項1006、一靜像拍攝選項1008、一影片拍攝選項1010、一離開模式選項1012、一資訊面板1014、以及一影片盤指示器1015。圖10應該被理解為非限制性的。例如，該使用者介面1000可包含比所展示的更少或更多的構件，且/或該使用者介面1000的構件可被不同地配置、或是具有和所展示的不同的形式。
如上所論述的，該使用者電子裝置102可以是和該超音波成像裝置114通訊。在某些實施例中，該超音波成像裝置114可以收集超音波資料，發送該超音波資料至該使用者電子裝置102，並且該使用者電子裝置102可以從該超音波資料來產生該超音波影像502。在某些實施例中，該超音波成像裝置114可以收集超音波資料，從該超音波資料產生該超音波影像502，並且發送該超音波影像502至該使用者電子裝置102。如同在圖10中所示，該使用者電子裝置102可以產生該超音波影像502以用於顯示在該使用者介面1000上。該使用者電子裝置102亦可以發送該超音波影像502至該指導者電子裝置122，該指導者電子裝置122可以產生該超音波影像502以用於顯示在該指導者介面500上，例如是如同在圖5中所示者。當新的超音波資料被收集到，並且一新的超音波影像被產生時，該使用者電子裝置102可以利用該新的超音波影像502來更新在該使用者介面1000上所展示的超音波影像502。該使用者電子裝置102亦可以發送該新的超音波影像502至該指導者電子裝置122，該指導者電子裝置122可以利用該新的超音波影像502來更新在該指導者介面500上所展示的超音波影像502。於是，在任何給定的時間，該使用者介面1000以及該指導者介面500可以展示相同的超音波影像502，該超音波影像502可以是從最近藉由該超音波成像裝置114所收集的超音波資料所產生的。(然而，由於從該使用者電子裝置102發送該超音波影像502至該指導者電子裝置122所需的時間，因此在當該使用者電子裝置102產生該超音波影像502以用於顯示以及當該指導者電子裝置122產生該超音波影像502以用於顯示之間可能會有一延遲時間。)該指導者可以利用如同在該指導者介面500上所展示的超音波影像502，以決定如何指示該使用者來移動該超音波成像裝置114。
在某些實施例中，如同在圖10中所示，該使用者電子裝置的攝影機106可以捕捉該視訊610的一幀，並且在該使用者介面1000上產生該視訊610的該幀以用於顯示。該使用者電子裝置102亦可以發送該視訊610的該幀至該指導者電子裝置122，該指導者電子裝置122可以在該指導者介面500上產生該視訊610的該幀以用於顯示，例如是如同在圖5中所示者。當該視訊610的一新的幀被收集到時，該使用者電子裝置102可以利用該視訊610的該新的幀來更新在該使用者介面1000上所展示的該視訊610的幀。該使用者電子裝置102亦可以發送該視訊610的該新的幀至該指導者電子裝置122，該指導者電子裝置122可以利用該視訊610的該新的幀來更新在該指導者介面500上所展示的該視訊610的幀。於是，在任何給定的時間，該使用者介面1000以及該指導者介面500可以展示該視訊610的相同的幀。(然而，由於從該使用者電子裝置102發送該視訊610的該幀至該指導者電子裝置122所需的時間，因此在當該使用者電子裝置102產生該視訊610的該幀以用於顯示以及當該指導者電子裝置122產生該視訊610的該幀以用於顯示之間可能會有一延遲時間。)
圖11係更詳細地描繪該使用者AR介面1100。該使用者AR介面1100係包含該超音波成像裝置114的視訊610的一幀(藉由該使用者電子裝置102的攝影機106所捕捉，並且被發送至該指導者電子裝置122以用於顯示在該指示AR介面500上)。該使用者AR介面1100係進一步展示箭頭1001。如上所論述的，該指導者電子裝置122可以接收從該指導者介面500上的複數個箭頭中之一箭頭的一選擇。在圖8的例子中，該箭頭601已經被選擇。在接收該箭頭601(其係對應於一用於移動該超音波成像裝置114的指令)的選擇之後，該指導者電子裝置122可以發送該指令至該使用者電子裝置102，該使用者電子裝置102可以接收該指令，並且產生該箭頭1001以用於顯示在該使用者AR介面1100上。如上所論述的，在某些實施例中，該使用者電子裝置102所接收到的指令可包含在圖8中的指導者介面500上所選的箭頭601的一識別符。在此種實施例中，為了產生該箭頭以用於顯示在該使用者介面1000上，該使用者電子裝置102可以根據該識別符來決定在該攝影機106的預設的姿勢中，該箭頭601從該攝影機106的觀點來看的方向。例如，該使用者電子裝置102可以在一資料庫中查詢在該攝影機106的預設的姿勢中，對應於該接收到的識別符的箭頭從該攝影機106的觀點來看的方向。該使用者電子裝置102接著可以利用該轉換來決定如何改變(例如，旋轉及/或傾斜)該箭頭1001從該攝影機106的觀點來看的方向，使得該些箭頭1001係在該使用者AR介面1110中被展示為指向和它們在該預設的姿勢中，從該超音波成像裝置114的觀點來看將會指向的實質相同的方向。
該使用者AR介面1100係展示三個對應於從該指導者電子裝置122接收到的指令的箭頭1001。該些箭頭1001都指向相同的方向，並且該些箭頭1001中的某些個係具有不同的尺寸。產生多個對應於該接收到的指令的箭頭1001以用於顯示可以有助於視覺上用一種清楚的方式來展示該接收到的指令。在某些實施例中，該使用者AR介面1100可以只展示一個箭頭1001、或是任意超過一個的其它數量的箭頭1001，例如是兩個、四個、五個、等等。
圖12及13係描繪該使用者AR介面1100在兩個不同時間下的例子。在圖12中的AR介面1100係展示藉由該攝影機106在一第一時間所捕捉的視訊610的一幀。該視訊610的該幀係展示該超音波成像裝置114。一耦接至該超音波成像裝置114的基準標記220(如同其它未被論述的基準標記)在該視訊610的該幀中是可見的。該使用者電子裝置102可以判斷從一預設的姿勢至該攝影機106相對於該超音波成像裝置114的目前的姿勢的一轉換，並且利用該轉換以產生箭頭1016，該些箭頭1016係在該AR介面1100中顯現為垂直於該基準標記220，並且面對和該基準標記220相同的方向。該些箭頭1016可以是有助益的，因為一平移該超音波成像裝置114的指令是在該基準標記220所面對的方向上。
在圖13中的AR介面1100係展示藉由該攝影機106在一第二時間(例如，在圖12中所示的第一時間之後)所捕捉的視訊610的一幀。該攝影機106相對於該超音波成像裝置的姿勢已經從在圖12中的姿勢被改變。該使用者電子裝置102可以判斷從該預設的姿勢至該攝影機106相對於該超音波成像裝置114的目前的姿勢的一轉換。在該第二時間所判斷的轉換可以是不同於在該第一時間所判斷的轉換。該使用者電子裝置102可以利用該新的轉換以產生該些箭頭1016，以在該AR介面1100中顯現為垂直於該基準標記220，並且面對和該基準標記220相同的方向。因此，如同在圖13中所示的箭頭1016可以傳達和如同在圖12中所示的箭頭1016相同的指令，亦即在該基準標記220所面對的方向上平移該超音波成像裝置114，儘管在圖12及13中的該些箭頭1016從該攝影機106的觀點來看係指向不同的方向。該使用者電子裝置102因此可以利用該轉換以產生該些箭頭1016以用於顯示在該使用者AR介面1100上，使得該些箭頭1016自動地維持其相對於該超音波成像裝置114的方向，即使當該攝影機106係從圖12移動到圖13也是如此，並且因此可以確保被傳達至該使用者的指令並不隨著該攝影機106從圖12移動到圖13而改變。
圖14及15係描繪該使用者AR介面1100在兩個不同的時間的例子。在圖14中的AR介面1100係展示藉由該攝影機106在一第一時間所捕捉的視訊610的一幀。該視訊610的該幀係展示該超音波成像裝置114。耦接至該超音波成像裝置114的基準標記213(如同其它未被論述的基準標記)係在該視訊610的該幀中可見的。該使用者電子裝置102可以判斷從一預設的姿勢至該攝影機106相對於該超音波成像裝置114的目前的姿勢的一轉換，並且利用該轉換來產生箭頭1018以顯現在該使用者AR介面1100中，以形成一平行於該基準標記213的平面的環形的路徑。該些箭頭1018可以是有助益的，因為一旋轉該超音波成像裝置114的指令是在藉由該些箭頭1018所展示的方向上。
在圖15中的AR介面1100係展示藉由該攝影機106在一第二時間(例如，在圖14中所示的第一時間之後)所捕捉的視訊610的一幀。該攝影機106相對於該超音波成像裝置的姿勢係已經從在圖14中的姿勢被改變。該使用者電子裝置102可以判斷從該預設的姿勢至該攝影機106相對於該超音波成像裝置114的目前的姿勢的一轉換。在該第二時間所判斷的轉換可以是不同於在該第一時間所判斷的轉換。該使用者電子裝置102可以利用該新的轉換以產生該些箭頭1018以顯現在該使用者AR介面1100中，以形成一平行於該基準標記213的平面的環形的路徑。因此，如同在圖14中所示的箭頭1018可以傳達和如同在圖15中所示的箭頭1018相同的指令，亦即在藉由該些箭頭1018所展示的方向上旋轉該超音波成像裝置114，儘管該些箭頭1018在圖14及15中從該攝影機106的觀點來看係指向不同的方向。因此，該使用者電子裝置102可以利用該轉換以產生該些箭頭1018以用於顯示在該使用者AR介面1100上，使得該些箭頭1018自動地維持其相對於該超音波成像裝置114的方向，並且因此可以確保被傳達至該使用者的指令並不隨著該攝影機106從圖14移動到圖15而改變。
圖16及17係描繪該使用者AR介面1100在兩個不同的時間的例子。在圖16中的AR介面1100係展示藉由該攝影機106在一第一時間所捕捉的視訊610的一幀。該視訊610的該幀係展示該超音波成像裝置114。耦接至該超音波成像裝置114的基準標記213(如同其它未被論述的基準標記)在該視訊610的該幀中係可見的。該使用者電子裝置102可以判斷從一預設的姿勢至該攝影機106相對於該超音波成像裝置114的目前的姿勢的一轉換，並且利用該轉換以產生箭頭1020來顯現在該使用者AR介面1100中，以形成一正交於該基準標記213的一平面的環形的路徑。該些箭頭1020可以是有助益的，因為一傾斜該超音波成像裝置114的指令是在藉由該些箭頭1020所展示的方向上。
在圖17中的AR介面1100係展示藉由該攝影機106在一第二時間(例如，在圖16中所示的第一時間之後)所捕捉的視訊610的一幀。該攝影機106相對於該超音波成像裝置的姿勢係已經從在圖16中的姿勢被改變。該使用者電子裝置102可以判斷從該預設的姿勢至該攝影機106相對於該超音波成像裝置114的目前的姿勢的一轉換。在該第二時間所判斷的轉換可以是不同於在該第一時間所判斷的轉換。。該使用者電子裝置102可以利用該新的轉換以產生該些箭頭1020來顯現在該使用者AR介面1100中，以形成一正交於該基準標記213的平面的環形的路徑。因此，如同在圖17中所示的箭頭1020可以傳達和如同在圖15中所示的箭頭1020相同的指令，亦即將該超音波成像裝置114傾斜在藉由該箭頭1020所展示的方向上，儘管該些箭頭1020在圖16及17中從該攝影機106的觀點來看係指向不同的方向。因此，該使用者電子裝置102可以利用該轉換以產生該些箭頭1020以用於顯示在該使用者AR介面1100上，使得該些箭頭1020自動地維持其相對於該超音波成像裝置114的方向，並且因此可以確保被傳達至該使用者的指令並不隨著該攝影機106從圖16移動到圖17而改變。
本發明人已經體認到指示一使用者來移動一超音波成像裝置可能會牽涉到該使用者需要調和該超音波成像裝置的姿勢與該使用者本身的姿勢。例如，考量一顯示器係顯示一指令是一超音波成像裝置的一影像、以及一背對該超音波成像裝置的一特定的面指向的箭頭。尤其，考量該超音波成像裝置的該特定的面是如同在該影像中所示的在該超音波成像裝置的右側，因而該箭頭係因此指向右邊。根據該使用者相對於該超音波成像裝置的姿勢，在該影像中所展示的該超音波成像裝置的該特定的面可能是在該使用者的左邊，此係可能發生的。因此，該使用者可能會需要調和他或她本身相對於該超音波成像裝置的姿勢，並且判斷遵照該指令係表示將該超音波成像裝置移動到他或她的左邊，儘管在該指令中的箭頭係指向右邊。
本發明人已經體認到自動地調和該超音波成像裝置的姿勢與該使用者本身的姿勢可以是可行的。若該使用者正握持該使用者電子裝置102並且觀看藉由該使用者電子裝置102的攝影機106所捕捉的使用者AR介面1100，則該使用者的姿勢可以是相同或類似於該攝影機106的姿勢。如上所論述的，該使用者電子裝置102可以隨著該攝影機106移動，自動地根據該攝影機106相對於該超音波成像裝置114的姿勢來計算轉換。該使用者電子裝置102接著可以利用此轉換來產生一箭頭以用於顯示在該使用者AR介面1100上，此係自動地維持其相對於該超音波成像裝置114的方向，甚至當該攝影機106以及該使用者移動時也是如此。例如，考量該使用者AR介面1100顯示一背對該超音波成像裝置114的一特定的面來指向的箭頭，其中該箭頭係在該使用者AR介面1100中指向右邊(從該攝影機106的觀點來看)。因為該使用者AR介面1100係展示藉由該攝影機106所捕捉的視訊610的幀，並且因為該攝影機106的觀點是相同或類似於該使用者的觀點，於是該超音波成像裝置114的該特定的面可能是在該使用者的右邊，並且該使用者可以是能夠藉由將該超音波成像裝置114移動到他或她的右邊(其係與該箭頭在該使用者AR介面1100中所指向的相同的方向)來遵照此指令。若該使用者以及該攝影機106移動，使得該超音波成像裝置114的該特定的面現在係面對該使用者的左邊，則該使用者電子裝置102可以根據從該攝影機106新捕捉到的視訊610的幀來計算一轉換，並且利用該轉換來改變該箭頭以在該使用者AR介面1100上指向左邊(從該攝影機106的觀點來看)。該使用者可以是能夠藉由將該超音波成像裝置114移動到他或她的左邊來和之前一樣遵照相同的指令，該左邊是和該箭頭在該使用者AR介面1100中所指向的相同的方向。因為該使用者電子裝置102可以自動地調和該使用者的姿勢與該超音波成像裝置114的姿勢，因此在遵照一在該使用者AR介面1100上所展示的指令之前，該使用者可以不需要他或她本身來執行此調和。
圖18係描繪該指導者介面500從該指導者接收該選項520的一選擇，以指示該使用者停止移動該超音波成像裝置114。例如，該指導者可以利用該滑鼠游標800來選擇此選項。在某些實施例中，在該指導者電子裝置122已經接收到在該指導者AR介面600上的箭頭601的選擇，並且發送所選的箭頭601的一指示至該使用者電子裝置102之後，該使用者電子裝置102可以如同在圖11中所示地，無限期地產生對應於所選的箭頭601的箭頭1001以用於顯示。在此種實施例中，在接收到該選項520的選擇之際，如同在圖18中所示，該指導者電子裝置122可以發送一針對於該使用者的用以停止移動該超音波成像裝置114的指令至該使用者電子裝置102。在某些實施例中，在接收到此指令之際，該使用者電子裝置102可以停止產生用於顯示的用於移動該超音波成像裝置114的該指令(亦即，該箭頭1001)。在某些實施例中，在接收到此指令之際，該使用者電子裝置102可以產生指示該使用者停止移動該超音波成像裝置114的文字以用於顯示，例如是“停止移動”或是任何其它具有類似意義的文字。在某些實施例中，在接收到該選項520的選擇之際，該指導者電子裝置122可以恢復顯示對應於可能的用於移動該超音波成像裝置114的指令的所有的箭頭601-608，因而該指導者可以選擇一個新的指令。
在某些實施例中，在該指導者電子裝置122已經接收到藉由該指導者對於在該指導者AR介面600上的箭頭601的選擇，並且發送所選的箭頭601的一指示至該使用者電子裝置102之後，該使用者電子裝置102可以如同在圖10中所示地產生對應於所選的箭頭601的箭頭1001以用於顯示一段設定的時間期間。例如，該設定的時間期間可以是2秒、3秒、4秒、5秒、6秒、7秒、8秒、9秒、10秒、11秒、12秒、13秒、14秒、15秒、或是任何其它適當的時間期間。在此種實施例中，在該時間期間已經過去之後，該使用者AR介面1100可以停止產生用於顯示的用於移動該超音波成像裝置114的指令(亦即，該些箭頭1001)，並且該指導者AR介面600可以恢復顯示對應於可能的用於移動該超音波成像裝置114的指令的所有的箭頭601-608，因而該指導者可以選擇一個新的指令。
在某些實施例中，該指導者電子裝置122可以在一段時間期間接收該箭頭601的一連續的選擇。例如，該指導者可以在使得一滑鼠游標盤旋在該箭頭601之上時按下一滑鼠按鈕一段時間期間、或是藉由持續地接觸在該指導者電子裝置122的顯示器螢幕128上的觸控的感測器來維持接觸該箭頭601一段時間期間。在此種實施例中，在接收該連續的選擇之際，該指導者電子裝置122可以發送該箭頭601的一指示至該使用者電子裝置102，並且該使用者電子裝置102可以產生該些箭頭1001以用於顯示。在偵測到該連續的選擇的停止之際，該指導者電子裝置122可以發送一用以停止移動該超音波成像裝置114的指令至該使用者電子裝置102，並且在接收到該指令之際，該使用者電子裝置102可以停止產生用於顯示該些箭頭1001。於是，根據該使用者持續地選擇該箭頭601的時間量，該指導者可以指示該使用者在藉由該箭頭所指出的方向上移動該超音波成像裝置114該時間量，並且在該時間量已經過去之後停止移動該超音波成像裝置114。
參照回圖5，在某些實施例中，藉由該選項506所展示以指示該使用者將該超音波成像裝置114移動到該對象的一特定的解剖構造的區域之內的文字可以是依據該心臟的預設值選項522、該肺部的預設值選項524、或是該腹部的預設值選項526是否被選擇而定的。例如，在圖5中，該心臟的預設值選項522係被選擇，並且因此藉由該選項506所展示的文字是“移動到心臟的區域之內”。若該肺部的預設值選項524被選擇，則藉由該選項506所展示的文字可以是“移動到肺部區域之內”。若該腹部的預設值選項526被選擇，則藉由該選項506所展示的文字可以是“移動到腹部區域之內”。
在某些實施例中，在該指導者電子裝置122從該指導者接收該選項506的一選擇以將該超音波成像裝置114移動到一特定的解剖構造的區域之內後，該指導者電子裝置122可以發送一針對於該使用者以將該超音波成像裝置114移動到該特定的解剖構造的區域之內的指令至該使用者電子裝置102。在接收到針對於該使用者以將該超音波成像裝置114移動到該特定的解剖構造的區域之內的該指令之後，該使用者電子裝置102可以產生指示該使用者以將該超音波成像裝置114移動到該特定的解剖構造的區域之內的文字以用於顯示。例如，該文字可以是“將該探頭移動到X區域”、或是其它具有一類似意義的文字，其中根據該心臟的預設值選項522、該肺部的預設值選項524、或是該腹部的預設值選項526是否已經被選擇，“X”可以是“心臟的”、“肺部的”、或是“腹部的”。
在某些實施例中，該指導者可以在該指導者電子裝置122上，從預先定義的解剖構造的切面(例如，心臟的胸骨旁長軸切面)的一功能表來加以選擇。在該些預先定義的切面中之一的選擇之後，一身體的顯示一指出何處設置該超音波成像裝置114以收集該預先定義的切面的標記的一草圖可以被發送至該使用者電子裝置102，並且顯示在該使用者電子裝置102之上。該草圖可以結合以上論述的用以將該超音波成像裝置114移動到一特定的解剖構造的區域之內的文字來加以顯示。該草圖可以和用於定位該對象的文字(例如，“將病患定位在左側位”)一起加以顯示。在某些實施例中，該指導者可以在該指導者電子裝置122上產生一客製草圖。尤其，該指導者可以在一身體的一草圖上選擇一位置來設置一標記，其係指出何處設置該超音波成像裝置114以收集一特定的解剖構造的切面。該指導者亦可以選擇定位資訊。該客製草圖以及該定位資訊接著可以被發送至該使用者電子裝置102，並且顯示在該使用者電子裝置102之上。
在某些實施例中，在該指導者電子裝置122從該指導者接收該選項508的一選擇以指示該使用者指示該對象深呼吸並且屏住氣之後，該指導者電子裝置122可以發送一針對於該使用者以指示該對象深呼吸並且屏住氣的指令至該使用者電子裝置102。在接收到針對於該使用者以指示該對象深呼吸並且屏住氣的該指令之後，該使用者電子裝置102可以產生指示該使用者以指示該對象深呼吸並且屏住氣的文字以用於顯示。例如，該文字可以是“深呼吸”、“告訴病患深呼吸並且屏住氣”、或是其它具有一類似意義的文字。
在某些實施例中，在該指導者電子裝置122從該指導者接收該選項510的一選擇以指示該使用者指示該對象在他或她的側邊側躺之後，該指導者電子裝置122可以發送一針對於該使用者以指示該使用者指示該對象在他或她的側邊側躺的指令至該使用者電子裝置102。在接收到針對於該使用者以指示該使用者指示該對象在他或她的側邊側躺的該指令之後，該使用者電子裝置102可以產生指示該使用者的文字以用於顯示，以指示該使用者指示該對象在他或她的側邊側躺。例如，該文字可以是“側躺”、“使病患側躺”、“告訴病患側躺”、或是其它具有一類似意義的文字。
在某些實施例中，在該指導者電子裝置122上接收到該選項512的一選擇以指示該使用者將該超音波成像裝置114移動到該攝影機106的視野之內(亦即，該攝影機106捕捉該視訊610的幀)之後，該指導者電子裝置122可以發送一針對於該使用者將該超音波成像裝置114移動到該攝影機106的視野之內的指令至該使用者電子裝置102。在接收到針對於該使用者將該超音波成像裝置114移動到該攝影機106的視野之內的該指令之後，該使用者電子裝置102可以產生指示該使用者將該超音波成像裝置114移動到該攝影機106的視野之內的文字以用於顯示。例如，該文字可以是“攝影機無法看見探頭。請將探頭移動到視野之內”、“將該探頭移動到攝影機的視野之內”、或是其它具有一類似意義的文字。
在某些實施例中，該使用者電子裝置102可以自動地產生指示該使用者將該超音波成像裝置114移動到該攝影機106的視野之內的文字以用於顯示。例如，該使用者電子裝置102可以在描繪該超音波成像裝置114並且藉由該攝影機106所捕捉的視訊610的一幀中無法偵測到基準標記之際產生該文字。
在某些實施例中，在該指導者電子裝置122從該指導者接收該選項514的一選擇以指示該使用者塗覆更多凝膠至該對象之後，該指導者電子裝置122可以發送一針對於該使用者塗覆更多凝膠至該對象的指令至該使用者電子裝置102。在接收到針對於該使用者塗覆更多凝膠至該對象的該指令之後，該使用者電子裝置102可以產生指示該使用者塗覆更多凝膠至該對象的文字以用於顯示。例如，該文字可以是“塗覆凝膠”、或是其它具有一類似意義的文字。
在某些實施例中，在該指導者電子裝置122從該指導者接收該選項516的一選擇以指示該使用者更用力按壓該超音波成像裝置114到該對象之上之後，該指導者電子裝置122可以發送一針對於該使用者更用力按壓該超音波成像裝置114到該對象之上的指令至該使用者電子裝置102。在接收到針對於該使用者更用力按壓該超音波成像裝置114到該對象之上的該指令之後，該使用者電子裝置102可以產生指示該使用者更用力按壓該超音波成像裝置114到該對象之上的文字以用於顯示。例如，該文字可以是“更用力按壓”、或是其它具有一類似意義的文字。
在某些實施例中，在該指導者電子裝置122從該指導者接收該選項518的一選擇以指示該使用者以較短及/或較小的增量來移動該超音波成像裝置114之後，該指導者電子裝置122可以發送一針對於該使用者以較短及/或較小的增量來移動該超音波成像裝置114的指令至該使用者電子裝置102。在接收到針對於該使用者以較短及/或較小的增量來移動該超音波成像裝置114的該指令之後，該使用者電子裝置102可以產生指示該使用者以較短及/或較小的增量來移動該超音波成像裝置114的文字以用於顯示。例如，該文字可以是“慢下來”、“較慢地移動”、“以較小的增量移動”、“以較短的增量移動”、或是其它具有一類似意義的文字。
如上所論述的，在該指導者電子裝置的該些選項506、508、510、512、514、516、518、及/或520的選擇可能會導致該使用者電子裝置102產生文字以用於顯示。該文字可以被顯示在該使用者電子裝置102之上一段預設的持續期間、一段客製的持續期間、直到一重置選項係在該指導者電子裝置122之處被選擇為止、或是直到另一選項係在該指導者電子裝置122之處被選擇為止。
在某些實施例中，在該指導者電子裝置122從該指導者接收該心臟的預設值的選項522的一選擇之後，該指導者電子裝置122可以發送一用以改變該成像的預設值至一心臟的預設值的指令至該使用者電子裝置102。在接收到用以改變該成像的預設值至一心臟的預設值的該指令之後，該使用者電子裝置102可以改變該成像的預設值至一心臟的預設值，其例如是藉由發送一命令至該超音波成像裝置114以利用對應於一心臟的預設值的成像參數來組態設定該超音波成像裝置114。
在某些實施例中，在該指導者電子裝置122從該指導者接收該肺部的預設值的選項524的一選擇之後，該指導者電子裝置122可以發送一用以改變該成像的預設值至一肺部的預設值的指令至該使用者電子裝置102。在接收到用以改變該成像的預設值至一肺部的預設值的該指令之後，該使用者電子裝置102可以改變該成像的預設值至一肺部的預設值，其例如是藉由發送一命令至該超音波成像裝置114以利用對應於一肺部的預設值的成像參數來組態設定該超音波成像裝置114。
在某些實施例中，在該指導者電子裝置122從該指導者接收該腹部的預設值的選項526的一選擇之後，該指導者電子裝置122可以發送一用以改變該成像的預設值至一腹部的預設值的指令至該使用者電子裝置102。在接收到用以改變該成像的預設值至一腹部的預設值的該指令之後，該使用者電子裝置102可以改變該成像的預設值至一腹部的預設值，其例如是藉由發送一命令至該超音波成像裝置114以利用對應於一腹部的預設值的成像參數來組態設定該超音波成像裝置114。
在某些實施例中，在該指導者電子裝置122從該指導者接收來自該增益滑塊528的一特定的增益值的一選擇之後，該指導者電子裝置122可以發送一用以改變該成像的增益至該特定的增益值的指令至該使用者電子裝置102。在接收到用以改變該成像的增益至該特定的增益值的該指令之後，該使用者電子裝置102可以改變該成像的增益至該特定的增益值，其例如是藉由利用該特定的增益來組態設定本身以產生超音波影像，且/或藉由發送一命令至該超音波成像裝置114以利用該特定的增益值來產生超音波影像。
在某些實施例中，在該指導者電子裝置122從該指導者接收來自該深度滑塊530的一特定的深度值的一選擇之後，該指導者電子裝置122可以發送一用以改變該成像的深度至該特定的深度值的指令至該使用者電子裝置102。在接收用以改變該成像的深度至該特定的深度值的該指令之後，該使用者電子裝置102可以改變該成像的深度至該特定的深度值，其例如是藉由發送一命令至該超音波成像裝置114以向下至該特定的深度來收集超音波資料。
在某些實施例中，在該指導者電子裝置122從該指導者接收來自該增益滑塊528的一特定的增益值的一選擇之後，該指導者電子裝置122可以發送一用以利用該特定的增益值來產生超音波影像的指令至該使用者電子裝置102。在接收到用以利用該特定的增益值來產生超音波影像的該指令之後，該使用者電子裝置102可以組態設定本身以利用該特定的增益來產生超音波影像，且/或發送一命令至該超音波成像裝置114以利用該特定的增益值來產生超音波影像。
在某些實施例中，在該指導者電子裝置122從該指導者接收從該彩色選項544的一選擇以打開一彩色都卜勒模式之後，該指導者電子裝置122可以發送一用以打開一彩色都卜勒模式的指令至該使用者電子裝置102。在接收到用以打開一彩色都卜勒模式的該指令之後，該使用者電子裝置102可以利用一彩色都卜勒模式來產生超音波影像。在某些實施例中，在該指導者電子裝置122從該指導者接收從該彩色選項544的一選擇以關閉一彩色都卜勒模式的一選擇之後，該指導者電子裝置122可以發送一用以關閉彩色都卜勒模式的指令至該使用者電子裝置102。在接收到用以關閉一彩色都卜勒模式的該指令之後，該使用者電子裝置102可以關閉一彩色都卜勒模式。在某些實施例中，該指導者可以利用在該指導者介面500上的控制，以操縱在該超音波影像502上的一彩色框的頂點，以選擇該超音波影像502中的哪些其上應該被啟動彩色都卜勒模式的部分。
在某些實施例中，在該指導者電子裝置122從該指導者接收該定格選項532的一選擇之後，該指導者電子裝置122可以發送一用以定格在該使用者介面1000上的超音波影像的指令至該使用者電子裝置102。在接收到用以定格在該使用者介面1000上的超音波影像的該指令之後，該使用者電子裝置102可以不利用從新的超音波資料所產生的超音波影像來更新在該使用者介面1000上所展示的超音波影像502。類似地，該使用者電子裝置102可以不發送從新的超音波資料所產生的超音波影像至該指導者電子裝置122，因而該指導者介面將不會更新在該指導者介面500上所展示的超音波影像502。在該定格選項532的選擇之後，該指導者介面500可以展示一介面，而該指導者可以從該介面捲動瀏覽及觀看先前已經被儲存到記憶體的超音波影像/影片。該指導者可以使用在該指導者介面500上的控制來註釋這些超音波影像/影片。
在某些實施例中，在該指導者電子裝置122從該指導者接收該靜像拍攝選項536的一選擇之後，該指導者電子裝置122可以發送一用以儲存最近所產生的超音波影像至記憶體的指令到該使用者電子裝置102。在接收到用以儲存最近所產生的超音波影像至記憶體的該指令之後，該使用者電子裝置102可以儲存最近所產生的超音波影像至該使用者電子裝置102上的記憶體112，且/或發送該超音波影像至該一或多個伺服器134以用於儲存在該一或多個伺服器134的記憶體中。在某些實施例中，在該指導者電子裝置122從該指導者接收該靜像拍攝選項536的一選擇之後，該指導者電子裝置122可以儲存在該指導者電子裝置122最近從該使用者電子裝置102接收到的超音波影像，且/或發送該超音波影像至該一或多個伺服器134以用於儲存在該一或多個伺服器134的記憶體中。應注意到的是，若例如在一超音波影像的產生、發送、以及顯示之間有延遲時間，則最近所產生的超音波影像、在該指導者電子裝置122最近從該使用者電子裝置102接收到的超音波影像、以及目前展示在該使用者介面1000及該指導者介面500上的超音波影像502可能不一定是相同的。在某些實施例中，在該指導者電子裝置122從該指導者接收該靜像拍攝選項536的一選擇之後，該指導者電子裝置122以及該使用者電子裝置102兩者可以用一種同步化或重疊的方式來儲存超音波影像至記憶體(例如，該指導者電子裝置122以及該使用者電子裝置102可以儲存相同的超音波影像、或是儲存包含重疊的超音波影像的超音波影像組)。
在某些實施例中，該影片拍攝選項534可以具有兩個狀態，一致能的狀態以及一禁能的狀態。當該影片拍攝選項534是在該致能的狀態時，該影片拍攝選項534的選擇可以使得該影片拍攝選項534進入該禁能狀態。當該影片拍攝選項534是在該禁能的狀態時，該影片拍攝選項534的選擇可以使得該影片拍攝選項534進入該致能的狀態。當該影片拍攝選項534是在該致能的狀態時，該影片拍攝選項534可以在該指導者介面500上與當該影片拍攝選項534是在該禁能的狀態時不同地顯現。例如，當該影片拍攝選項534是在該致能的狀態時，該影片拍攝選項534可以顯現為一壓下的按鈕，而當該影片拍攝選項534是在該禁能的狀態時，該影片拍攝選項534可以顯現為一未壓下的按鈕。作為另一選項的是，該影片拍攝選項534可以根據該影片拍攝選項534是否在該致能的狀態或是該禁能的狀態而為不同的色彩。在某些實施例中，在該指導者電子裝置122從該指導者接收該影片拍攝選項534的一選擇，使得該影片拍攝選項534進入該致能的狀態之後，該指導者電子裝置122可以發送一用以儲存一影片(亦即，以一系列的一或多個超音波影像)的指令至該使用者電子裝置102。在接收到用以儲存超音波影像的一影片的該指令之後，該使用者電子裝置102可以儲存根據新的超音波資料所產生的超音波影像。換言之，當新的超音波資料係藉由該超音波成像裝置114而被收集，並且新的超音波影像係根據該新的超音波資料而被產生時，該使用者電子裝置102可以儲存該些新的超音波影像至在該使用者電子裝置102上的記憶體112，且/或發送該些新的超音波影像至該一或多個伺服器134以用於儲存在該一或多個伺服器134的記憶體中。在某些實施例中，在該影片拍攝選項534的選擇以使得該影片拍攝選項534進入該禁能的狀態之後，該指導者電子裝置122可以發送至該使用者電子裝置102一用以停止捕捉超音波影像的一影片的指令。在接收到用以停止捕捉超音波影像的一影片的該指令之後，該使用者電子裝置102可以停止儲存根據新的超音波資料而被產生的超音波影像。
在某些實施例中，在該指導者電子裝置122從該指導者接收該影片拍攝選項534的一選擇以使得該影片拍攝選項534進入該致能的狀態之後，該指導者電子裝置122可以儲存根據新的超音波資料而被產生並且從該使用者電子裝置102接收到的超音波影像。換言之，當新的超音波資料藉由該超音波成像裝置114而被收集，並且新的超音波影像係根據該新的超音波資料而被產生時，該使用者電子裝置102可以發送該些新的超音波影像至該指導者電子裝置122，並且該指導者電子裝置122可以儲存該些新的超音波影像在該指導者電子裝置上122的記憶體132中，且/或發送該新的超音波影像至該一或多個伺服器134以用於儲存在該一或多個伺服器134的記憶體中。在某些實施例中，在該影片拍攝選項534的選擇以使得該影片拍攝選項534進入該禁能的狀態之後，該指導者電子裝置122可以停止儲存根據新的超音波資料所產生的超音波影像。
在某些實施例中，在該指導者電子裝置122從該指導者接收該結束掃描選項538的一選擇之後，該指導者電子裝置122可以發送一用以結束該超音波掃描的指令至該使用者電子裝置102。在接收到結束該超音波掃描的該指令之後，該使用者電子裝置102可以發送一用以停止收集超音波資料的命令至該超音波成像裝置114。
該病患連接指示器504可以指出該使用者電子裝置102是否已經透過該網路116來與該指導者電子裝置122建立一通訊鏈路。該意圖指示器542可以指出目前的成像對話的目標。例如，在圖5中的意圖指示器542係指出目前的成像對話的意圖是篩檢腹主動脈瘤。該影片盤指示器540可以指出已經儲存的超音波影像/影片的數量。在該影片盤指示器540的選擇之後，該指導者介面500可以展示所儲存的超音波影像/影片。選擇一所儲存的超音波影像/影片可以展開該超音波影像/影片，同時為了更容易觀看，該指導者介面500的其餘部分係變暗。在某些實施例中，該指導者介面500可包含一介面，而該指導者可以從該介面產生一包含所儲存的超音波影像/影片的報告。
在某些實施例中，該指導者介面500可以具有額外的控制，以供該指導者在一顯示於該指導者介面500上的超音波影像502上執行量測。例如，該指導者可以利用該些控制來量測解剖構造的參數(例如，一血管的直徑)、或是一生理學的參數(例如，射血分數)。
在該指導者介面500上的選項的任一者的選擇可以在該指導者電子裝置122上，利用該輸入裝置128來加以執行，其可包含利用一滑鼠、一觸控螢幕、一鍵盤、語音輸入、一3D滑鼠(例如，一SpaceMouseÒ)、一麥克風、一利用姿勢識別的控制器(例如，一Leap MotionÒ控制器)、或是任何其它輸入的手段。
參照回圖10，在某些實施例中，在該使用者電子裝置102從使用者接收該靜像拍攝選項1008的一選擇之後，該使用者電子裝置102可以儲存目前在該使用者介面1000上所展示的超音波影像502至在該使用者電子裝置102上的記憶體112，且/或發送該超音波影像502至該一或多個伺服器134以用於儲存在該一或多個伺服器134的記憶體中。在某些實施例中，在該使用者電子裝置102從使用者接收該靜像拍攝選項1008的一選擇之後，該使用者電子裝置102可以儲存最近所產生的超音波影像至在該使用者電子裝置102上的記憶體112，且/或發送該超音波影像502至該一或多個伺服器134以用於儲存在該一或多個伺服器134的記憶體中。應注意到的是，若例如在一超音波影像的產生以及顯示該超音波影像之間有延遲時間，則最近所產生的超音波影像可以不一定是目前展示在該使用者介面1000上的超音波影像502。
在某些實施例中，該影片拍攝選項1010可以具有兩個狀態，亦即一致能的狀態以及一禁能的狀態。當該影片拍攝選項1010是在該致能的狀態時，該影片拍攝選項1010的選擇可以使得該影片拍攝選項1010進入該禁能狀態。當該影片拍攝選項1010是在該禁能的狀態時，該影片拍攝選項1010的選擇可以使得該影片拍攝選項1010進入該致能的狀態。當該影片拍攝選項1010是在該致能的狀態時，該影片拍攝選項1010可以在該使用者介面1000上，與當該影片拍攝選項1010是在該禁能的狀態時不同地顯現。例如，當該影片拍攝選項1010是在該致能的狀態時，該影片拍攝選項1010可以顯現為一壓下的按鈕，而當該影片拍攝選項1010是在該禁能的狀態時，該影片拍攝選項1010可以顯現為一未壓下的按鈕。作為另一選項的是，該影片拍攝選項1010可以根據該影片拍攝選項1010是否在該致能的狀態或是該禁能的狀態而為不同的色彩。在某些實施例中，在該影片拍攝選項1010的選擇以使得該影片拍攝選項1010進入該致能的狀態之後，該使用者電子裝置102可以儲存根據新的超音波資料而被產生的超音波影像。換言之，當新的超音波資料係藉由該超音波成像裝置114而被收集，並且新的超音波影像係根據該新的超音波資料而被產生時，該使用者電子裝置102可以儲存該些新的超音波影像至在該使用者電子裝置102上的記憶體112，且/或發送該新的超音波影像至該一或多個伺服器134以用於儲存在該一或多個伺服器134的記憶體中。在某些實施例中，在該影片拍攝選項1010的選擇以使得該影片拍攝選項534進入該禁能的狀態之後，該使用者電子裝置102可以停止儲存根據新的超音波資料所產生的超音波影像。
該深度標尺1004可以指出在該超音波影像502中所展示的解剖構造的特點係位在(超出該超音波成像裝置114)何種深度。該資訊面板1014可以展示各種的資訊，例如是目前的使用者的一虛擬化身、熱指數、機械指數、幀率、該超音波成像裝置114的電池狀態、該超音波成像裝置114的溫度狀態、以及目前的預設值。該影片盤指示器1015可以展示所儲存的超音波影像/影片的數目。在該影片盤指示器1015的選擇之後，該使用者介面1000可以展示所儲存的超音波影像/影片。選擇一所儲存的超音波影像/影片可以展開該超音波影像/影片，同時為了更容易觀看，該使用者介面1000的其餘部分係變暗。在某些實施例中，該使用者電子裝置102可以不容許使用者在該使用者介面1000上進行某些設定(例如，成像參數)。反而，只有該指導者才能夠遠端地控制這些設定。
在某些實施例中，該使用者以及該指導者可以語音通訊。例如，若該指導者電子裝置122的輸入裝置138係包含一麥克風，則該指導者可以對著該麥克風說話，該指導者電子裝置122可以從該麥克風發送該音訊信號至該使用者電子裝置102，並且該使用者電子裝置102可以從該揚聲器109輸出該音訊信號。若該使用者電子裝置102的輸入裝置118係包含一麥克風，則該使用者可以對著該麥克風說話，該使用者電子裝置102可以從該麥克風發送該音訊信號至該指導者電子裝置122，並且該指導者電子裝置102可以從該揚聲器141輸出該音訊信號。該使用者以及該指導者可以利用語音通訊以用於進一步協助導引該使用者來移動該超音波成像裝置114。
在某些實施例中，該指導者可以在該指導者AR介面600上選擇其中該使用者應該設置該超音波成像裝置114所在之處的一位置。例如，該指導者可以在該視訊610的幀上拖拉該超音波成像裝置114的一半透明的影像至所要的位置。該指導者電子裝置122可以發送所選的位置至該使用者電子裝置102，並且該使用者電子裝置102可以顯示該使用者AR介面1100的所選的位置，以用於指示該使用者何處來設置該超音波成像裝置114。
應該體認到的是，先前的圖(例如，圖5、8、9、10及18)中的某些圖可能未描繪真實情況。尤其，這些圖可能會展示一視訊610的一幀，其係描繪一超音波成像裝置114在掃描一無生命的物體、以及藉由該超音波成像裝置114所收集的一超音波影像502，其中該超音波影像502係展示來自一有生命的對象的解剖構造。應該體認到的是，在一真實情況中，該視訊610的幀可以描繪該超音波成像裝置114在掃描一有生命的對象，並且該超音波影像502可以展示該有生命的對象的解剖構造。
各種本發明的概念都可以被體現為一或多種方法，該些方法的例子係在以下被提出。被執行為每一種方法的部分的動作可以用任何適當的方式來排序。因此，實施例可被建構為其中動作係以一不同於所描繪的順序來加以執行，其可包含同時執行某些動作，即使該些動作在舉例說明的實施例中被展示為順序的動作也是如此。再者，該些方法中的一或多種可加以組合及/或省略，並且該些方法中的一或多種可包含額外的步驟。
圖19係展示根據一範例實施例的一種用於遠距醫療的範例的方法1900，其係可以藉由一指導者電子裝置(例如，指導者電子裝置122)執行的。該指導者的使用者電子裝置可以是和一位人的指導者相關的，其係提供指令給一超音波成像裝置(例如，超音波成像裝置114)的一使用者。該指導者電子裝置可以是和該超音波成像裝置的一使用者相關的一使用者電子裝置(例如，使用者電子裝置102)通訊(例如，透過一無線的連線)。該指導者電子裝置以及該使用者電子裝置可以是在彼此的遠端。
在動作1902中，該指導者電子裝置係從該使用者電子裝置接收顯示該超音波成像裝置的一視訊的一幀(例如，該視訊610的幀)。該視訊的幀可以是藉由一攝影機(例如，攝影機106)所捕捉的。例如，若該使用者電子裝置是一行動電話，則該攝影機可以是該行動電話的攝影機。該超音波成像裝置的使用者可以握持該超音波成像裝置在一正被成像的對象上，並且設置該使用者電子裝置(該使用者亦可以是握持著)的攝影機以使得該超音波成像裝置是在該攝影機的視野內。在某些實施例中，該使用者電子裝置可以在整個超音波成像對話期間持續地捕捉視訊，並且該指導者電子裝置可以在整個超音波成像對話期間持續地接收該視訊。該指導者電子裝置可以接收被編碼為任何適當形式的資料以用於發送的視訊。在某些實施例中，該指導者電子裝置可以透過一無線通訊鏈路(例如，透過一藍芽、WiFi、或是ZIGBEE無線通訊鏈路)來從該使用者電子裝置接收該視訊。該方法1900係從動作1902前進到動作1904。
在動作1904中，該指導者電子裝置係從該使用者電子裝置接收根據該攝影機的一姿勢的一轉換。在某些實施例中，該超音波成像裝置可包含耦接至該超音波成像裝置的基準標記(例如，ArUco標記)，並且該轉換可以描述在該攝影機的姿勢上，從(1)該攝影機相對於在該超音波成像裝置上的基準標記的一預設的姿勢至(2)當該攝影機捕捉該視訊的幀時，該攝影機相對於在該超音波成像裝置上的基準標記的目前的姿勢的一改變。該轉換可包含該攝影機從該預設的姿勢至該目前的姿勢的平移、旋轉、及/或傾斜的一量化，並且可以具有一矩陣的形式。該使用者電子裝置可以利用姿勢估計技術來分析來自一特定的時間的視訊的一特定的幀以判斷在該特定的時間的轉換。在其中該指導者電子裝置係持續地接收視訊的實施例中，該指導者電子裝置可以在整個成像對話期間持續地接收根據該視訊的目前的幀而被更新的轉換。該指導者電子裝置可以接收被編碼為任何適當形式的資料以用於發送的轉換。在某些實施例中，該指導者電子裝置可以透過一無線通訊鏈路(例如，透過一藍芽、WiFi、或是ZIGBEE無線通訊鏈路)來從該使用者電子裝置接收該轉換。該方法1900係從動作1904前進到動作1906。
在動作1906中，根據在動作1904中接收到的轉換，該指導者電子裝置係產生以用於在一指導者擴增實境(AR)介面(例如，指導者AR介面600)上顯示複數個箭頭(例如，箭頭601-608)在動作1902中接收到的該超音波成像裝置的視訊的幀上的一重疊。於是，該指導者AR介面可包含真實(該視訊)以及非真實(箭頭)的成分。在其中該指導者電子裝置係包含一顯示器螢幕的實施例中(例如，當該指導者電子裝置是一行動電話、平板電腦、或是膝上型電腦時)，該指導者電子裝置可以產生該指導者AR介面以用於顯示在其本身的顯示器螢幕上。該方法1900係從動作1906前進到動作1908。
該些箭頭可以對應於可能的用於移動該超音波成像裝置的指令，亦即用以平移、旋轉、及/或傾斜該超音波成像裝置的指令。用於移動該超音波成像裝置的指令可包含用以平移該超音波成像裝置的指令、用以旋轉該超音波成像裝置(亦即，繞著該超音波成像裝置的縱軸旋轉)的指令、以及用以傾斜該超音波成像裝置(例如，繞著該超音波成像裝置接觸該對象的端部分來傾斜該超音波成像裝置)的指令的任意組合。用以移動該超音波成像裝置的指令可以是被設計以從一目前的位置及方位移動該超音波成像裝置到一對象上的一位置及方位以使得一目標解剖構造的切面(例如，心臟的一胸骨旁長軸切面)可加以獲得的指令。
在其中該超音波成像裝置係包含耦接至該超音波成像裝置的基準標記的實施例中，描述在該攝影機相對於該基準標記的姿勢上的改變的轉換可以等同地描述在該攝影機相對於該超音波成像裝置的姿勢上的改變。若該攝影機或是該超音波成像裝置移動的話，則該轉換可以捕捉該移動。尤其，該轉換可以描述如何改變一箭頭相對於該攝影機的方向，使得如同該指導者AR介面中可見的該箭頭相對於該超音波成像裝置的方向係維持固定的，即使該攝影機相對於該超音波成像裝置移動也是如此。
在動作1908中，該指導者電子裝置係從該使用者電子裝置接收一超音波影像(例如，超音波影像502)。該使用者電子裝置可以是和該超音波成像裝置通訊，並且在某些實施例中，該超音波成像裝置可以收集原始超音波資料，發送該原始超音波資料至該使用者電子裝置，並且該使用者電子裝置可以從該原始超音波資料產生該超音波影像。在某些實施例中，該超音波成像裝置可以收集原始超音波資料，從該原始超音波資料產生該超音波影像，並且發送該超音波影像至該使用者電子裝置。該使用者電子裝置接著可以發送該超音波影像至該指導者電子裝置。在某些實施例中，該指導者電子裝置可以透過一無線通訊鏈路(例如，透過一藍芽、WiFi、或是ZIGBEE無線通訊鏈路)來從該使用者電子裝置接收該超音波影像。該方法1900係從動作1908前進到動作1910。
在動作1910中，該指導者電子裝置係產生該超音波影像(其係在動作1908中接收到的)以用於顯示。例如，該指導者電子裝置可以產生該超音波影像以用於顯示在該指導者電子裝置上。當新的超音波資料被收集到，並且一新的超音波影像被產生時，該使用者電子裝置可以發送該新的超音波影像至該指導者電子裝置，並且該指導者電子裝置可以產生該新的超音波影像以用於顯示。該方法1900係從動作1910前進到動作1912。
在動作1912中，該指導者電子裝置係接收在該指導者AR介面上的複數個箭頭中之一的一選擇。如上所論述的，被重疊在該超音波成像裝置的視訊上的箭頭係對應於可能的用於移動該超音波成像裝置的指令。於是，所選的箭頭係對應於一用於移動(例如，平移、旋轉、或是傾斜)該超音波成像裝置的特定的指令。藉由選擇該箭頭，該指導者可以決定該使用者應該在一藉由該箭頭所指出的方向上移動該超音波成像裝置，以便於將該超音波成像裝置移動成更靠近該目標解剖構造的區域。若該指導者AR介面係對應於該指導者AR介面600，則該指導者電子裝置可以接收該些箭頭601-608中之一的一選擇。在某些實施例中，接收該些箭頭中之一的選擇可包含接收在一顯示器螢幕上所展示的箭頭中之一上的一滑鼠點選。在某些實施例中，該指導者電子裝置可包含一顯示該指導者AR介面的觸敏的顯示器螢幕，並且接收該些箭頭中之一的選擇可包含偵測接觸在該觸敏的顯示器螢幕上所展示的一箭頭。該指導者可以利用該超音波影像及/或該超音波成像裝置的視訊的幀來決定如何指示該使用者移動該超音波成像裝置。該方法1900係從動作1912前進到動作1914。
在動作1914中，該指導者電子裝置係發送對應於在動作1912中所選的箭頭的指令至該使用者電子裝置。該指導者電子裝置可以發送被編碼為任何適當形式的資料以用於發送的該指令。在某些實施例中，在該指導者AR介面中所展示的箭頭的每一個可以具有一識別符，並且該指導者電子裝置可以發送所選的箭頭的識別符至該使用者電子裝置。例如，考量一箭頭在該攝影機相對於該超音波成像裝置的一預設的姿勢中係指向右邊。如上所論述的，當該攝影機相對於該超音波成像裝置的姿勢改變時，該箭頭可以指向如同在該視訊中可見的不同的方向，使得該箭頭相對於該超音波成像裝置的方向可以保持實質固定的。然而，在任何給定的時間，該箭頭可以根據其如同在該預設的姿勢中的視訊中可見的方向而被認定為該“右”箭頭，儘管該箭頭如同在該給定的時間的視訊中可見地並不一定指向右邊。若被認定為“右邊”的箭頭係在動作1912中被選擇，則可以發送對應於此箭頭的指令的指導者電子裝置可以發送該識別符“右邊”。在某些實施例中，該指導者電子裝置可以透過一無線通訊鏈路(例如，透過一藍芽、WiFi、或是ZIGBEE無線通訊鏈路)來發送該指令至該使用者電子裝置。如同將會進一步參考圖20論述的，從該指導者電子裝置發送的指令可以被產生作為一箭頭以用於顯示在該使用者電子裝置上，並且可被用來指示該超音波成像裝置的使用者以根據該指令來移動該超音波成像裝置。
應注意到的是，方法1900的動作可以不一定用在圖19中所示的順序來進行。例如，動作1904可以在動作1902之前或是同時發生，並且動作1908及1910可以在動作1902、1904及1906之前或是同時發生。
圖20係展示根據一範例實施例的一種用於遠距醫療的範例的方法2000，其係可藉由一使用者電子裝置(例如，使用者電子裝置102)執行的。該使用者電子裝置可以是和一超音波成像裝置(例如，超音波成像裝置114)的一使用者相關的。該使用者電子裝置可以是和該超音波成像裝置通訊(例如，透過一有線或無線的連線)，並且和一提供指令至該超音波成像裝置的該使用者的指導者相關的一指導者電子裝置(例如，指導者電子裝置122)通訊(例如，透過一無線的連線)。該使用者電子裝置以及該指導者電子裝置可以是在彼此的遠端。
在動作2002中，該使用者電子裝置係利用一攝影機(例如，攝影機106)來接收一顯示該超音波成像裝置的視訊的一幀(例如，該視訊610的幀)。例如，若該使用者電子裝置是一行動電話，則該攝影機可以是該行動電話的相機。該超音波成像裝置的使用者可以在一正被成像的對象上握持該超音波成像裝置，並且設置該使用者電子裝置(該使用者亦可以是握持著)的攝影機以使得該超音波成像裝置是在該攝影機的視野內。在某些實施例中，該使用者電子裝置可以在整個超音波成像對話期間持續地捕捉視訊。該方法2000係從動作2002前進到動作2004。
在動作2004中，該使用者電子裝置係發送在動作2002中所捕捉的視訊的幀至該指導者電子裝置。該使用者電子裝置可以編碼該視訊為任何適當形式的資料以用於發送。在某些實施例中，該使用者電子裝置可以透過一無線通訊鏈路(例如，透過一藍芽、WiFi、或是ZIGBEE無線通訊鏈路)來發送該視訊至該指導者電子裝置。在其中該使用者電子裝置係持續地捕捉視訊的實施例中，該使用者電子裝置可以在整個該成像對話期間持續地發送該視訊的幀至該指導者電子裝置。該方法2000係從動作2004前進到至動作2006。
在動作2006中，該使用者電子裝置係從在動作2002中所捕捉的視訊的幀判斷一轉換。該使用者電子裝置可以利用姿勢估計技術以判斷該轉換。該轉換可包含該攝影機從該預設的姿勢至目前的姿勢的平移、旋轉、及/或傾斜的一量化，並且可以具有一矩陣的形式。該使用者電子裝置可以利用姿勢估計技術來分析來自一特定時間的該視訊的一特定的幀，以判斷在該特定時間的轉換。在其中該指導者電子裝置係持續地接收該視訊的幀的實施例中，該指導者電子裝置可以在整個該成像對話期間持續地接收根據該視訊的目前的幀而被更新的轉換。該方法2000係從動作2006前進到2008。
在動作2008中，該使用者電子裝置係發送在動作2006中所判斷的轉換至該指導者電子裝置。該使用者電子裝置可以編碼該轉換為任何適當形式的資料以用於發送。在某些實施例中，該使用者電子裝置可以透過一無線通訊鏈路(例如，透過一藍芽、WiFi、或是ZIGBEE無線通訊鏈路)來發送該轉換至該指導者電子裝置。在其中該使用者電子裝置係持續地判斷轉換的實施例中，該使用者電子裝置可以在整個該成像對話期間持續地發送轉換至該指導者電子裝置。該方法2000係從動作2008前進到動作2010。
在動作2010中，該使用者電子裝置係從該超音波成像裝置接收超音波資料。在某些實施例中，該超音波成像裝置可以收集原始超音波資料，發送該原始超音波資料至該使用者電子裝置，並且該使用者電子裝置可以從該原始超音波資料產生一超音波影像(例如，超音波影像502)。在某些實施例中，該超音波成像裝置可以收集原始超音波資料，從該原始超音波資料產生該超音波影像，並且發送該超音波影像至該使用者電子裝置。該使用者電子裝置可以透過一有線的連接，例如是透過一lightning連接器或是一mini-USB連接器來從該超音波成像裝置接收該超音波資料。該方法2000係從動作2010前進到動作2012。
在動作2012中，該使用者電子裝置係發送該超音波影像至該指導者電子裝置。在某些實施例中，該使用者電子裝置可以透過一無線通訊鏈路(例如，透過一藍芽、WiFi、或是ZIGBEE無線通訊鏈路)來發送該超音波影像至該指導者電子裝置。當新的超音波資料被收集到，並且一新的超音波影像被產生時，該使用者電子裝置可以發送該新的超音波影像至該指導者電子裝置。該方法2000係從動作2012前進到動作2014。
在動作2014中，該使用者電子裝置係從該指導者電子裝置接收一用於移動該超音波成像裝置的指令。用於移動該超音波成像裝置的指令可包含用以平移該超音波成像裝置的指令、用以旋轉該超音波成像裝置(亦即，繞著該超音波成像裝置的縱軸的旋轉)的指令、以及用以傾斜該超音波成像裝置(例如，繞著該超音波成像裝置接觸該對象的端部分來傾斜該超音波成像裝置)的指令的任意組合。用以移動該超音波成像裝置的該指令可以是被設計以從一目前的位置移動該超音波成像裝置至在一對象上的一位置及方位以使得一目標解剖構造的切面(例如，心臟的一胸骨旁長軸切面)可加以獲得的指令。
如上參考圖19所論述的，在某些實施例中，該指導者電子裝置可以從在一指導者AR介面上所展示的複數個箭頭接收一箭頭的一選擇，其中該些箭頭的每一個係對應於一可能的用於移動該超音波成像裝置的指令。藉由選擇該箭頭，該指導者可以決定該使用者應該在一藉由該箭頭所指出的方向上移動該超音波成像裝置，以便於將該超音波成像裝置移動成更靠近該目標解剖構造的區域。如同以上參考圖19進一步論述的，在某些實施例中，在該指導者AR介面中所展示的箭頭的每一個可以具有一識別符，並且該指導者電子裝置可以發送所選的箭頭的識別符至該使用者電子裝置。例如，考量一箭頭在該攝影機相對於該超音波成像裝置的一預設的姿勢中係指向右邊。如上所論述的，當該攝影機相對於該超音波成像裝置的姿勢改變時，該指導者AR介面可以利用該轉換來在如同該視訊中可見的不同的方向上產生該箭頭以用於顯示，使得該箭頭相對於該超音波成像裝置的方向可以保持實質固定的。然而，在任何給定的時間，該箭頭可以根據其如同在該預設的姿勢中的視訊中可見的方向而被認定為該“右”箭頭，儘管該箭頭如同在該給定的時間的視訊中可見地並不一定指向右邊。若被認定為“右邊”的箭頭係在該指導者電子裝置被選擇，則該使用者電子裝置可以藉由從該指導者電子裝置接收該識別符“右邊”，來接收對應於此箭頭的指令。換言之，該識別符可包含該箭頭如同在該攝影機相對於該超音波成像裝置的預設的姿勢中可見的一說明。該方法2000係從動作2014前進到2016。
在動作2016中，該使用者電子裝置係根據該轉換來產生用於移動該超音波成像裝置的指令(在動作2014中所接收到的)，以用於顯示在該使用者電子裝置上所展示的一使用者擴增實境(AR)介面(例如，使用者AR介面1100)上。如同在該使用者AR介面中所示的指令係包含一重疊在該視訊的一幀上的箭頭。(該視訊的幀可以是和在動作2002中接收到的相同的視訊的幀、或是若該視訊的一新的幀已經在動作2002及2014之間被接收到，則為該視訊的一新的幀)。該箭頭可以指出該超音波成像裝置的平移、旋轉、及/或傾斜。如上所論述的，在某些實施例中，藉由該使用者電子裝置接收到的指令可包含在該指導者介面上所選的箭頭的一識別符。在此種實施例中，為了產生該箭頭以用於顯示在該使用者AR介面上，該使用者電子裝置可以根據該識別符來判斷在該攝影機的預設的姿勢中，該箭頭從該攝影機的觀點來看的方向。例如，該使用者電子裝置可以在一資料庫中查詢在該攝影機的預設的姿勢中，對應於該接收到的識別符的箭頭從該攝影機的觀點來看的方向。該使用者電子裝置接著可以利用該轉換來決定如何改變(例如，旋轉及/或傾斜)該箭頭從該攝影機的觀點來看的方向，使得該箭頭係在該使用者AR介面中被展示為指向和它們在該預設的姿勢中，從該超音波成像裝置的觀點來看將會指向的實質相同的方向。
應注意到的是，方法2000的動作可以不一定用在圖20中所示的順序來進行。例如，動作2004可以在動作2006之後發生，動作2008可以在動作2004之前或是同時發生，並且動作2010及2012可以在動作2002、2004、2006及2008之前或是同時發生。
在某些實施例中，在一用於移動該超音波成像裝置的指令係藉由該指導者來加以選擇的一時間點，藉由該超音波成像裝置收集並且被展示在該指導者介面上的超音波影像可以被儲存到(例如，在該伺服器134上的)記憶體，並且和所選的指令相關聯。以此種方式儲存的成對的超音波影像及指令可被用來訓練一模型(例如，一深度學習模型/統計模型)，以根據一輸入的超音波影像來自動地決定一用於移動一超音波成像裝置的指令。此種模型可被用來根據藉由一超音波成像裝置收集的超音波影像以自動地指示一使用者如何將該超音波成像裝置移動到其中一目標解剖構造的切面可加以收集到的一位置及方位。針對於深度學習/機器學習技術以及自動化的獲取協助的進一步討論，見於2017年6月19日申請(並且被讓與給本申請案的受讓人)的美國專利申請案號15/626,423中，其名稱為“用於協助使用者操作超音波裝置的自動的影像獲取”，該美國專利申請案係以其整體被納入在此作為參考。
本揭露內容的各種特點可以單獨地、組合地、或是用並未在先前敘述的實施例中明確論述的各種配置來加以利用，並且因此在其應用上並未受限於在先前的說明中所闡述、或是在圖式中所描繪的構件的細節及配置。例如，在一實施例中敘述的特點可以用任何方式來和在其它實施例中敘述的特點組合。
除非另有清楚相反的指出，否則如同在此的說明書中以及在申請專利範圍中所用的該些不定冠詞“一”以及“一個”都應該被理解為表示“至少一個”。
如同在此的說明書中以及在申請專利範圍中所用的措辭"及/或"應該被理解為表示該些因此聯合的元件的"任一或是兩者"，亦即元件在某些情形中是結合地存在，而在其它情形中則是分離地存在。利用“及/或”所表列的多個元件應該用相同的方式來加以解釋，亦即因此聯合的元件的“一或多個”。除了藉由該“及/或”子句明確所指出的元件之外的其它元件可以選配地存在，不論其是否相關或不相關那些明確所指出的元件。因此，作為一非限制性的例子，在一實施例中，一對於“A及/或B”的參照當結合例如是“包括”的開放式語言而被利用時可以是指只有A(選配地包含除了B以外的元件)；在另一實施例中可以是指只有B(選配地包含除了A以外的元件)；在又一實施例中可以是指A及B兩者(選配地包含其它元件)；依此類推。
如同在此的說明書中以及在申請專利範圍中所用的，關於一或多個元件的一表列的措辭"至少一個"應該被理解為表示至少一選自該表列的元件中的任一個或多個元件之元件，但是不一定包含明確地被表列在該表列的元件內的每一個元件的至少一個，而且並不排除在該表列的元件中之元件的任意組合。此定義亦容許除了在該措辭"至少一個"所參照到的表列的元件之內明確所指出的元件之外的元件可以選配地存在，不論其是否相關或不相關那些明確所指出的元件。因此，作為一非限制性的例子，在一實施例中，“A及B中的至少一個”(或等同的是“A或B中的至少一個”、或等同的是“A及/或B中的至少一個”)可以是指至少一個(選配地包含超過一個)A，而沒有B存在(以及選配地包含除了B以外的元件)；在另一實施例中可以是指至少一個(選配地包含超過一個)B，而沒有A存在(以及選配地包含除了A以外的元件)；在又一實施例中可以是指至少一個(選配地包含超過一個)A與至少一個(選配地包含超過一個)B(以及選配地包含其它元件)；依此類推。
例如是“第一”、“第二”、“第三”、等等的序數術語在申請專利範圍中修飾一申請專利範圍元件的使用本身並不意味一申請專利範圍元件相對另一申請專利範圍元件的任何優先、在先或順序、或是一種方法的動作被執行所用的時間的順序，而是只被使用作為標籤來區別一具有某一名稱的申請專利範圍元件與另一具有一相同的名稱(但是為了該序數術語而使用)的元件，以區別該些申請專利範圍元件而已。
該些術語“大約”及“大致”在某些實施例中可被用來表示在一目標值的±20%之內、在某些實施例中是在一目標值的±10%之內、在某些實施例中是在一目標值的±5%之內、以及另外在某些實施例中是在一目標值的±2%之內。該些術語“大約”及“大致”可包含該目標值。
再者，在此使用的措辭及術語係為了說明之目的，因而不應該被視為限制性的。“包含”、“包括”、或是“具有”、“內含”、“涉及”、以及其變化的在此的使用係意謂涵蓋被列出在後面的項目及其等同物、以及額外的項目。
以上已經敘述至少一實施例的數個特點，將體認到的是各種的改變、修改、以及改良將會輕易地被熟習此項技術者所思及。此種改變、修改、以及改良係欲為了此揭露內容之目的。於是，先前的說明及圖式只是舉例而已。
100‧‧‧超音波系統
102‧‧‧使用者電子裝置
106‧‧‧攝影機
108‧‧‧顯示器螢幕
109‧‧‧揚聲器
110‧‧‧處理器
112‧‧‧記憶體
114‧‧‧超音波成像裝置
116‧‧‧網路
118‧‧‧輸入裝置
122‧‧‧指導者電子裝置
128‧‧‧顯示器螢幕
130‧‧‧處理器
132‧‧‧記憶體
134‧‧‧伺服器
136‧‧‧網路
138‧‧‧輸入裝置
141‧‧‧揚聲器
202‧‧‧主體
204‧‧‧第一端
206‧‧‧第二端
208‧‧‧基準標記立方體
210‧‧‧電纜線
211‧‧‧基準標記
212‧‧‧基準標記
213‧‧‧基準標記
214‧‧‧孔洞
216‧‧‧半部
218‧‧‧半部
220‧‧‧基準標記
500‧‧‧指導者介面
502‧‧‧超音波影像
504‧‧‧病患連接指示器
506‧‧‧選項
508‧‧‧選項
510‧‧‧選項
512‧‧‧選項
514‧‧‧選項
516‧‧‧選項
518‧‧‧選項
520‧‧‧選項
522‧‧‧心臟的預設值選項
524‧‧‧肺部的預設值選項
526‧‧‧腹部的預設值選項
528‧‧‧增益滑塊
530‧‧‧深度滑塊
532‧‧‧定格選項
534‧‧‧影片拍攝選項
536‧‧‧靜像拍攝選項
538‧‧‧結束掃描選項
540‧‧‧影片盤指示器
542‧‧‧意圖指示器
544‧‧‧彩色選項
600‧‧‧指導者擴增實境(AR)介面
601‧‧‧箭頭
602‧‧‧箭頭
603‧‧‧箭頭
604‧‧‧箭頭
605‧‧‧箭頭
606‧‧‧箭頭
607‧‧‧箭頭
608‧‧‧箭頭
610‧‧‧視訊
616‧‧‧縱軸
800‧‧‧滑鼠游標
1000‧‧‧使用者介面
1001‧‧‧箭頭
1004‧‧‧深度標尺
1006‧‧‧預設值功能表選項
1008‧‧‧靜像拍攝選項
1010‧‧‧影片拍攝選項
1012‧‧‧離開模式選項
1014‧‧‧資訊面板
1015‧‧‧影片盤指示器
1016‧‧‧箭頭
1018‧‧‧箭頭
1020‧‧‧箭頭
1100‧‧‧使用者AR介面
1900‧‧‧方法
1902‧‧‧動作
1904‧‧‧動作
1906‧‧‧動作
1908‧‧‧動作
1910‧‧‧動作
1912‧‧‧動作
1914‧‧‧動作
2000‧‧‧方法
2002‧‧‧動作
2004‧‧‧動作
2006‧‧‧動作
2008‧‧‧動作
2010‧‧‧動作
2012‧‧‧動作
2014‧‧‧動作
2016‧‧‧動作
各種的特點及實施例將會參考以下的範例且非限制性的圖來加以描述。應該體認到的是，該些圖並不一定按照比例繪製。出現在多個圖中的項目係在它們出現的所有圖中都藉由相同或一類似的元件符號來加以指出。
圖1是描繪在此所述的技術的各種特點可被實施在其上之一種範例的超音波系統的概要的方塊圖；
圖2是展示可以結合在此所述的某些實施例而被利用的一超音波成像裝置的一個例子；
圖3-4係展示圖2的超音波成像裝置的一實施例，其中該超音波成像裝置係包含一具有兩個半部的基準標記立方體；
圖5係展示一範例的指導者介面，其可以被產生以用於顯示在一指導者電子裝置上，其中該指導者介面係包含一顯示多個箭頭的指導者AR介面；
圖6係詳細地描繪該指導者擴增實境(AR)介面，其中該指導者AR介面係展示藉由一攝影機所捕捉的一視訊影像；
圖7係展示圖6的指導者AR介面，其中該指導者AR介面係展示藉由在一相對於該超音波成像裝置的不同的姿勢的攝影機所捕捉的一視訊影像；
圖8係描繪圖5的指導者介面，其係從一指導者接收在該指導者AR介面上所展示的箭頭中之一的一選擇；
圖9係描繪在接收該箭頭的選擇之後的圖5的指導者介面；
圖10係描繪一範例的使用者介面，其可以被產生以用於顯示在一使用者電子裝置上，其中該使用者介面係包含一使用者AR介面；
圖11係詳細地描繪一使用者AR介面；
圖12及13係描繪在兩個不同的時間的使用者AR介面的例子；
圖14及15係描繪在兩個不同的時間的使用者AR介面的額外的例子；
圖16及17係描繪在兩個不同的時間的使用者AR介面的額外的例子；
圖18係描繪圖5的指導者介面，其係從一指導者接收用以指示該使用者停止移動該超音波成像裝置的一選項的一選擇；
圖19係展示根據一範例實施例的可藉由一指導者電子裝置執行的一種用於遠距醫療的範例的方法；以及
圖20係展示根據一範例實施例的可藉由一使用者電子裝置執行的一種用於遠距醫療的範例的方法。

Claims (33)

  1. 一種設備，其包括： 一使用者電子裝置，其被配置以： 接收一用於移動一超音波成像裝置的外部產生的指令；以及 在一內含於該使用者電子裝置上的使用者擴增實境介面上顯示用於移動該超音波成像裝置的該外部產生的指令。
  2. 如請求項1所述之設備，其中該使用者電子裝置進一步被配置以： 接收藉由一攝影機所捕捉的一視訊，該視訊係描繪該超音波成像裝置；並且其中： 該使用者擴增實境介面係包括描繪該超音波成像裝置的該視訊。
  3. 如請求項2所述之設備，其中該使用者電子裝置包括該攝影機。
  4. 如請求項2所述之設備，其中該使用者電子裝置被配置以在該使用者擴增實境介面上顯示該外部產生的指令時，顯示一被重疊在顯示該超音波成像裝置的該視訊上的箭頭。
  5. 如請求項4所述之設備，其中該超音波成像裝置係包括一或多個基準標記。
  6. 如請求項5所述之設備，其中該使用者電子裝置係進一步被配置以： 判斷在一第一時間從該攝影機相對於該一或多個基準標記的一預設的姿勢至該攝影機相對於該一或多個基準標記的一第一姿勢的一第一轉換；以及 根據該第一轉換來顯示該使用者擴增實境介面。
  7. 如請求項6所述之設備，其中該使用者電子裝置係進一步被配置以： 判斷在該第一時間之後的一第二時間從該攝影機相對於該一或多個基準標記的該預設的姿勢至該攝影機相對於該一或多個基準標記的一第二姿勢的一第二轉換，其中該第一轉換係不同於該第二轉換；以及 根據該第二轉換來顯示該使用者擴增實境介面。
  8. 如請求項5所述之設備，其中該使用者電子裝置係進一步被配置以產生在一方向上顯示該箭頭，該箭頭在該使用者擴增實境介面中看起來是垂直於該一或多個基準標記中之一。
  9. 如請求項5所述之設備，其中該使用者電子裝置係進一步被配置以顯示該箭頭，使得該箭頭在該使用者擴增實境介面中看起來是形成一平行於該一或多個基準標記中之一的一平面的環形的路徑。
  10. 如請求項5所述之設備，其中該使用者電子裝置係進一步被配置以顯示該箭頭，使得該箭頭在該使用者擴增實境介面中看起來是形成一與該一或多個基準標記中之一的一平面正交的環形的路徑。
  11. 如請求項1所述之設備，其中該外部產生的指令係從藉由一指導者所操作的一指導者電子裝置接收到的。
  12. 如請求項1所述之設備，其中該使用者電子裝置係進一步被配置以： 接收一用以停止移動該超音波成像裝置的外部產生的指令；以及 在該使用者電子裝置上顯示用以停止移動該超音波成像裝置的該外部產生的指令。
  13. 如請求項1所述之設備，其中該使用者電子裝置係進一步被配置以： 接收一用以停止移動該超音波成像裝置的外部產生的指令；以及 在內含於該使用者電子裝置上的該使用者擴增實境介面上停止顯示用於移動該超音波成像裝置的該外部產生的指令。
  14. 如請求項1所述之設備，其中該使用者電子裝置係進一步被配置以： 接收一用以改變一成像的預設值的外部產生的指令；以及 改變該成像的預設值。
  15. 如請求項1所述之設備，其中該使用者電子裝置係進一步被配置以： 接收一用以改變一成像的增益的外部產生的指令；以及 改變該成像的增益。
  16. 如請求項1所述之設備，其中該使用者電子裝置係進一步被配置以： 接收一用以改變該成像的深度的外部產生的指令；以及 改變該成像的深度。
  17. 如請求項1所述之設備，其中該使用者電子裝置係進一步被配置以： 接收一用以定格在該使用者電子裝置的一顯示器螢幕上的一超音波影像的外部產生的指令；以及 定格在該使用者電子裝置上的該顯示器螢幕上的該超音波影像。
  18. 如請求項1所述之設備，其中該使用者電子裝置係進一步被配置以： 接收一用以儲存一或多個超音波影像至記憶體的外部產生的指令；以及 儲存該一或多個超音波影像至記憶體。
  19. 如請求項1所述之設備，其中該使用者電子裝置係進一步被配置以： 接收一用以移動該超音波成像裝置到一特定的解剖構造的區域之內的外部產生的指令；以及 顯示用以移動該超音波成像裝置到該特定的解剖構造的區域之內的該外部產生的指令。
  20. 如請求項1所述之設備，其中該使用者電子裝置係進一步被配置以： 接收一用以指示一對象深呼吸並且屏住氣的外部產生的指令；以及 顯示用以指示該對象深呼吸並且屏住氣的該外部產生的指令。
  21. 如請求項3所述之設備，其中該使用者電子裝置係進一步被配置以： 接收一用以移動該超音波成像裝置到該攝影機的視野之內的指令；以及 顯示用以移動該超音波成像裝置到該攝影機的視野之內的該指令。
  22. 如請求項1所述之設備，其中該使用者電子裝置係進一步被配置以： 接收一用以更用力按壓該超音波成像裝置到一對象之上的外部產生的指令；以及 顯示用以更用力按壓該超音波成像裝置到該對象之上的該外部產生的指令。
  23. 如請求項1所述之設備，其中該使用者電子裝置係進一步被配置以： 接收一用以較短及/或較小的增量來移動該超音波成像裝置的外部產生的指令；以及 顯示用以較短及/或較小的增量來移動該超音波成像裝置的該外部產生的指令。
  24. 如請求項1所述之設備，其中該使用者電子裝置係進一步被配置以： 發送藉由該超音波成像裝置所收集的超音波資料及/或從該超音波資料所產生的一超音波影像至一指導者電子裝置。
  25. 一種設備，其係包括： 一指導者電子裝置，其係被配置以： 顯示一描繪一超音波成像裝置的指導者擴增實境介面； 在該指導者擴增實境介面接收一用於移動該超音波成像裝置的指令；以及 發送用於移動該超音波成像裝置的該指令至一使用者電子裝置。
  26. 如請求項25所述之設備，其中用於移動該超音波成像裝置的該指令係從一操作該指導者電子裝置的指導者接收到的。
  27. 如請求項26所述之設備，其中該指導者電子裝置係進一步被配置以： 接收藉由一攝影機所捕捉的一視訊，該視訊係描繪該超音波成像裝置；並且其中 該指導者擴增實境介面係展示該顯示該超音波成像裝置的視訊。
  28. 如請求項27所述之設備，其中該指導者電子裝置係進一步被配置以在該指導者擴增實境介面上顯示複數個箭頭在顯示該超音波成像裝置的該視訊上的一重疊，其中該複數個箭頭的每一個係對應於一可能的用於移動該超音波成像裝置的指令。
  29. 如請求項28所述之設備，其中該指導者電子裝置係進一步被配置以： 接收在該指導者擴增實境介面上的該複數個箭頭中之一的一選擇，其中該複數個箭頭中之所選的一箭頭係對應於用於移動該超音波成像裝置的該指令；以及 發送該指令至該使用者電子裝置。
  30. 如請求項29所述之設備，其中該指導者電子裝置係進一步被配置以： 接收一用以停止移動該超音波成像裝置的指令的一選擇；以及 發送用以停止移動該超音波成像裝置的該指令至該使用者電子裝置。
  31. 如請求項29所述之設備，其中： 該指導者電子裝置係被配置以在接收在該指導者擴增實境介面上的該複數個箭頭中之一的該選擇時，接收在該指導者擴增實境介面上的一連續的選擇；以及 該指導者電子裝置係進一步被配置以： 在該指導者電子裝置接收一用以停止移動該超音波成像裝置的指令，其中接收用以停止移動該超音波成像裝置的該指令係包括偵測在該指導者擴增實境介面上的該連續的選擇的停止；以及 從該指導者電子裝置發送用以停止移動該超音波成像裝置的該指令至該使用者電子裝置。
  32. 如請求項31所述之設備，其中該指導者電子裝置係被配置以在接收該連續的選擇時，接收一連續的滑鼠點選、或是利用在一顯示器螢幕上的觸控的感測器來接收一連續的接觸。
  33. 如請求項25所述之設備，其中該指導者電子裝置係進一步被配置以： 從該使用者電子裝置接收一超音波影像；以及 顯示該超音波影像。
TW108106535A 2018-02-27 2019-02-26 用於遠距醫療的方法和設備 TW201936114A (zh)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
US201862636127P 2018-02-27 2018-02-27
US62/636,127 2018-02-27
US201862646333P 2018-03-21 2018-03-21
US62/646,333 2018-03-21

Publications (1)

Publication Number Publication Date
TW201936114A true TW201936114A (zh) 2019-09-16

Family

ID=67684993

Family Applications (1)

Application Number Title Priority Date Filing Date
TW108106535A TW201936114A (zh) 2018-02-27 2019-02-26 用於遠距醫療的方法和設備

Country Status (9)

Country Link
US (1) US11690602B2 (zh)
EP (1) EP3759720A4 (zh)
JP (1) JP2021514695A (zh)
KR (1) KR20200125658A (zh)
CN (1) CN111758137A (zh)
AU (1) AU2019229174A1 (zh)
CA (1) CA3091269A1 (zh)
TW (1) TW201936114A (zh)
WO (1) WO2019168832A1 (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113393940A (zh) * 2020-03-11 2021-09-14 宏达国际电子股份有限公司 控制方法以及医疗系统
TWI779916B (zh) * 2021-11-02 2022-10-01 宏碁股份有限公司 遠端通訊的方法及系統
US11806192B2 (en) 2020-12-09 2023-11-07 Industrial Technology Research Institute Guiding system and guiding method for ultrasound scanning operation

Families Citing this family (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2018005091A (ja) * 2016-07-06 2018-01-11 富士通株式会社 表示制御プログラム、表示制御方法および表示制御装置
US11087538B2 (en) * 2018-06-26 2021-08-10 Lenovo (Singapore) Pte. Ltd. Presentation of augmented reality images at display locations that do not obstruct user's view
WO2020028738A1 (en) 2018-08-03 2020-02-06 Butterfly Network, Inc. Methods and apparatuses for guiding collection of ultrasound data using motion and/or orientation data
US11559279B2 (en) 2018-08-03 2023-01-24 Bfly Operations, Inc. Methods and apparatuses for guiding collection of ultrasound data using motion and/or orientation data
US11393170B2 (en) 2018-08-21 2022-07-19 Lenovo (Singapore) Pte. Ltd. Presentation of content based on attention center of user
US10991139B2 (en) 2018-08-30 2021-04-27 Lenovo (Singapore) Pte. Ltd. Presentation of graphical object(s) on display to avoid overlay on another item
CN113272821A (zh) * 2018-11-15 2021-08-17 奇跃公司 深度神经网络姿态估计系统
CN113260313A (zh) 2019-01-07 2021-08-13 蝴蝶网络有限公司 用于超声数据收集的方法和装置
CN114025670A (zh) 2019-04-03 2022-02-08 布弗莱运营公司 用于超声数据的收集和可视化的方法和装置
US11640665B2 (en) 2019-09-27 2023-05-02 Bfly Operations, Inc. Methods and apparatuses for detecting degraded ultrasound imaging frame rates
CN110680394B (zh) * 2019-11-01 2023-02-28 上海联影医疗科技股份有限公司 超声探头的操作方法及装置、超声设备及计算机设备
KR102144671B1 (ko) * 2020-01-16 2020-08-14 성균관대학교산학협력단 증강현실 안경을 활용한 인공지능형 초음파 자가 진단을 위한 초음파 스캐너 자세 교정 장치 및 이를 이용한 원격 의료 진단 방법
US20210244386A1 (en) * 2020-02-07 2021-08-12 Butterfly Network, Inc. Methods and apparatuses for detection of one or more taps by an ultrasound device
WO2022266197A1 (en) * 2021-06-16 2022-12-22 Bfly Operations, Inc. Methods and apparatuses for guiding a user to collect ultrasound images
GB2611556A (en) * 2021-10-07 2023-04-12 Sonovr Ltd Augmented reality ultrasound-control system for enabling remote direction of a user of ultrasound equipment by experienced practitioner
US20230326586A1 (en) * 2022-04-06 2023-10-12 Emed Labs, Llc Systems and methods for facilitating remote testing using computer vision, gig-economy quality assurance system for data labeling and discrete task completion and proctor management
WO2023201074A1 (en) * 2022-04-15 2023-10-19 Stryker Corporation Pointer tool for endoscopic surgical procedures

Family Cites Families (34)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5922018A (en) 1992-12-21 1999-07-13 Artann Corporation Method for using a transrectal probe to mechanically image the prostate gland
US8253779B2 (en) 2000-10-11 2012-08-28 University of Pittsbugh—Of The Commonwealth System of Higher Education System for remote guidance by expert for imaging device
JP4664479B2 (ja) * 2000-11-01 2011-04-06 株式会社東芝 超音波診断装置
JP4088104B2 (ja) 2002-06-12 2008-05-21 株式会社東芝 超音波診断装置
US7221386B2 (en) 2003-10-07 2007-05-22 Librestream Technologies Inc. Camera for communication of streaming media to a remote client
US20060074320A1 (en) * 2004-08-27 2006-04-06 Yoo Yang M Home ultrasound system
US8069420B2 (en) * 2004-12-29 2011-11-29 Karl Storz Endoscopy-America, Inc. System for controlling the communication of medical imaging data
WO2006119396A2 (en) * 2005-05-04 2006-11-09 Board Of Regents, The University Of Texas System System, method and program product for delivering medical services from a remote location
JP4820680B2 (ja) 2006-04-12 2011-11-24 株式会社東芝 医用画像表示装置
US20080194960A1 (en) 2007-02-08 2008-08-14 Randall Kevin S Probes for ultrasound imaging systems
US8488013B2 (en) * 2008-01-30 2013-07-16 Siemens Medical Solutions Usa, Inc. System for remote control of a medical imaging system
WO2009135255A1 (en) 2008-05-07 2009-11-12 Signostics Pty Ltd Docking system for medical diagnostic scanning using a handheld device
US8172753B2 (en) 2008-07-11 2012-05-08 General Electric Company Systems and methods for visualization of an ultrasound probe relative to an object
US20180110475A1 (en) * 2010-07-30 2018-04-26 Fawzi Shaya System, method and apparatus for performing real-time virtual medical examinations
US20140011173A1 (en) * 2011-03-17 2014-01-09 Mor Research Applications Ltd. Training, skill assessment and monitoring users in ultrasound guided procedures
US8749396B2 (en) * 2011-08-25 2014-06-10 Satorius Stedim Biotech Gmbh Assembling method, monitoring method, communication method, augmented reality system and computer program product
US9561019B2 (en) * 2012-03-07 2017-02-07 Ziteo, Inc. Methods and systems for tracking and guiding sensors and instruments
AU2014223521B2 (en) 2013-02-26 2018-04-19 Butterfly Network, Inc. Transmissive imaging and related apparatus and methods
WO2014144964A1 (en) * 2013-03-15 2014-09-18 Eagleyemed Multi-site video based computer aided diagnostic and analytical platform
US9092556B2 (en) * 2013-03-15 2015-07-28 eagleyemed, Inc. Multi-site data sharing platform
WO2015002409A1 (en) * 2013-07-01 2015-01-08 Samsung Electronics Co., Ltd. Method of sharing information in ultrasound imaging
CN107106124B (zh) * 2014-11-18 2021-01-08 C·R·巴德公司 具有自动图像呈现的超声成像系统
US10646199B2 (en) * 2015-10-19 2020-05-12 Clarius Mobile Health Corp. Systems and methods for remote graphical feedback of ultrasound scanning technique
KR20170093632A (ko) * 2016-02-05 2017-08-16 삼성전자주식회사 전자 장치 및 그의 동작 방법
EP3878391A1 (en) * 2016-03-14 2021-09-15 Mohamed R. Mahfouz A surgical navigation system
US20190117190A1 (en) * 2016-04-19 2019-04-25 Koninklijke Philips N.V. Ultrasound imaging probe positioning
TWI765895B (zh) 2016-06-20 2022-06-01 美商蝴蝶網路公司 用於協助使用者操作超音波裝置的自動化影像獲取之系統和方法
US10856840B2 (en) 2016-06-20 2020-12-08 Butterfly Network, Inc. Universal ultrasound device and related apparatus and methods
RU2756028C2 (ru) * 2016-11-17 2021-09-24 Конинклейке Филипс Н.В. Дистанционная ультразвуковая диагностика с управляемым качеством отображения изображений
US20200229798A1 (en) * 2017-02-22 2020-07-23 Koninklijke Philips N.V. Remotely controlled ultrasonic imaging system
US20180295275A1 (en) * 2017-04-05 2018-10-11 Analogic Canada Corporation Remote imaging system user interface
US20180344286A1 (en) * 2017-06-01 2018-12-06 General Electric Company System and methods for at-home ultrasound imaging
WO2019046521A1 (en) 2017-08-31 2019-03-07 Butterfly Network, Inc. METHODS AND DEVICE FOR COLLECTING ULTRASONIC DATA
US20190239850A1 (en) * 2018-02-06 2019-08-08 Steven Philip Dalvin Augmented/mixed reality system and method for the guidance of a medical exam

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113393940A (zh) * 2020-03-11 2021-09-14 宏达国际电子股份有限公司 控制方法以及医疗系统
TWI823067B (zh) * 2020-03-11 2023-11-21 宏達國際電子股份有限公司 控制方法以及醫療系統
CN113393940B (zh) * 2020-03-11 2024-05-24 宏达国际电子股份有限公司 控制方法以及医疗系统
US11806192B2 (en) 2020-12-09 2023-11-07 Industrial Technology Research Institute Guiding system and guiding method for ultrasound scanning operation
TWI779916B (zh) * 2021-11-02 2022-10-01 宏碁股份有限公司 遠端通訊的方法及系統

Also Published As

Publication number Publication date
WO2019168832A1 (en) 2019-09-06
JP2021514695A (ja) 2021-06-17
CA3091269A1 (en) 2019-09-06
EP3759720A1 (en) 2021-01-06
KR20200125658A (ko) 2020-11-04
EP3759720A4 (en) 2021-12-01
US11690602B2 (en) 2023-07-04
US20190261957A1 (en) 2019-08-29
AU2019229174A1 (en) 2020-09-03
CN111758137A (zh) 2020-10-09

Similar Documents

Publication Publication Date Title
TW201936114A (zh) 用於遠距醫療的方法和設備
US11311269B2 (en) Ultrasound imaging system and method for providing assistance in an ultrasound imaging system
US10893850B2 (en) Methods and apparatuses for guiding collection of ultrasound data using motion and/or orientation data
US11751848B2 (en) Methods and apparatuses for ultrasound data collection
KR20190021344A (ko) 초음파 디바이스를 작동하는 사용자를 보조하기 위한 자동화된 영상 취득
TW201923345A (zh) 用於以成像參數值配置超音波裝置的方法和設備
KR102255417B1 (ko) 초음파 진단 장치 및 그에 따른 초음파 영상의 디스플레이 방법
JP2015217306A (ja) 超音波診断装置及び超音波プローブ
US20200037986A1 (en) Methods and apparatuses for guiding collection of ultrasound data using motion and/or orientation data
US20200037987A1 (en) Methods and apparatuses for guiding collection of ultrasound data using motion and/or orientation data
US20200069291A1 (en) Methods and apparatuses for collection of ultrasound data
JP2021062231A (ja) 自動血液プール識別システム及びその動作の方法
WO2023000085A1 (en) System and apparatus for remote interaction with an object
JP2015089454A (ja) 超音波診断装置
TWM569887U (zh) Augmented reality system
EP4181789B1 (en) One-dimensional position indicator
US20230218270A1 (en) System and apparatus for remote interaction with an object