TWI765404B - 圖像定位的互動顯示方法、電子設備和電腦可讀儲存媒體 - Google Patents

圖像定位的互動顯示方法、電子設備和電腦可讀儲存媒體 Download PDF

Info

Publication number
TWI765404B
TWI765404B TW109138989A TW109138989A TWI765404B TW I765404 B TWI765404 B TW I765404B TW 109138989 A TW109138989 A TW 109138989A TW 109138989 A TW109138989 A TW 109138989A TW I765404 B TWI765404 B TW I765404B
Authority
TW
Taiwan
Prior art keywords
interactive
positioning
target object
display state
positioning point
Prior art date
Application number
TW109138989A
Other languages
English (en)
Other versions
TW202120005A (zh
Inventor
張黎瑋
Original Assignee
中國商北京市商湯科技開發有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 中國商北京市商湯科技開發有限公司 filed Critical 中國商北京市商湯科技開發有限公司
Publication of TW202120005A publication Critical patent/TW202120005A/zh
Application granted granted Critical
Publication of TWI765404B publication Critical patent/TWI765404B/zh

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04842—Selection of displayed objects or displayed text elements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04815—Interaction with a metaphor-based environment or interaction object displayed as three-dimensional, e.g. changing the user viewpoint with respect to the environment or object
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/20—Editing of 3D images, e.g. changing shapes or colours, aligning objects or positioning parts
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/40—Extraction of image or video features
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/94—Hardware or software architectures specially adapted for image or video understanding
    • G06V10/95—Hardware or software architectures specially adapted for image or video understanding structured as a network, e.g. client-server architectures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/60—Type of objects
    • G06V20/64—Three-dimensional objects
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2200/00—Indexing scheme for image data processing or generation, in general
    • G06T2200/24—Indexing scheme for image data processing or generation, in general involving graphical user interfaces [GUIs]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2219/00—Indexing scheme for manipulating 3D models or images for computer graphics
    • G06T2219/20—Indexing scheme for editing of 3D models
    • G06T2219/2016—Rotation, translation, scaling

Abstract

本揭露實施例涉及一種圖像定位的互動顯示方法、電子設備和電腦可讀儲存媒體，其中，該方法包括：響應於目標對象的選取操作，獲取定位點；根據多個操作區域針對所述定位點的對應關係，得到所述定位點在多個操作區域對應位置顯示的互動對象。

Description

圖像定位的互動顯示方法、電子設備和電腦可讀儲存媒體
本揭露基於申請號為201911203808.9、申請日為2019年11月29日的中國專利申請提出，並要求該中國專利申請的優先權，該中國專利申請的全部內容在此以全文引入的方式引入本揭露。本揭露實施例涉及空間定位的技術領域，尤其涉及一種圖像定位的互動顯示方法、電子設備和電腦可讀儲存媒體。
在2D（two dimensions，二維）平面顯示和3D（three dimensions，三維）立體模型建模的過程中，針對不同操作區域（2D顯示區域、或3D立體模型建模得到3D顯示區域）中的目標對象及定位點，需要將目標對象及定位點在多個操作區域的空間定位回饋給用戶進行查看。然而，相關技術中，對此空間定位的顯示方式並不直觀，導致用戶不能即時得到空間定位的顯示回饋。
本揭露實施例提出了一種圖像定位的互動顯示方法、電子設備和電腦可讀儲存媒體。
本揭露實施例的技術方案依如下方式實現： 本揭露實施例提供了一種圖像定位的互動顯示方法，所述方法包括：響應於目標對象的選取操作，獲取定位點；根據多個操作區域針對所述定位點的對應關係，得到所述定位點在多個操作區域對應位置顯示的互動對象。
採用本揭露實施例，透過這種空間定位的對應匹配及直觀的顯示方式，可以將目標對象及定位點在多個操作區域的空間定位即時回饋給用戶進行查看，不僅改善了顯示回饋效果，還可以使得使用者根據該顯示回饋效果即時作出下一步預期的處理，提高了互動回饋速度。
可能的實現方式中，所述根據多個操作區域針對所述定位點的對應關係，得到所述定位點分別在多個操作區域對應位置顯示的互動對象，包括：所述多個操作區域分別表徵2D圖像和3D圖像的情況下，根據所述2D圖像與3D圖像中定位點的對應關係，得到定位點分別在多個操作區域的對應位置；在所述多個操作區域的對應位置，顯示在所述多個操作區域間連動的互動對象。
採用本揭露實施例，可以根據定位點的對應關係，得到定位點分別在多個操作區域的對應位置，從而在所述多個操作區域的對應位置，顯示在所述多個操作區域間連動的互動對象。由於目標對象及定位點在多個操作區域的空間定位是連動的，則使用者根據該連動的互動對象進行查閱，不僅改善了顯示回饋效果，而且提高了查閱的處理速度。
可能的實現方式中，所述得到所述定位點在多個操作區域對應位置顯示的互動對象之後，所述方法還包括：回應於所述定位點的位置變化，得到所述定位點與所述目標對象的相對位置關係；根據所述相對位置關係，調整所述互動對象的顯示狀態。
採用本揭露實施例，隨著定位點的位置變化，可以調整所述互動對象的顯示狀態，使得目標對象及定位點在多個操作區域的空間定位是持續更新的連動顯示效果，改善了顯示回饋效果，便於使用者根據該更新的連動顯示效果進行查閱，提高了查閱的處理速度。
可能的實現方式中，所述根據所述相對位置關係，調整所述互動對象的顯示狀態，包括：回應於所述相對位置關係為第一位置關係，調整所述互動對象的顯示狀態為：與所述目標對象存在角度、方向、位移、視覺效果中至少一種關係的互動顯示狀態。
採用本揭露實施例，在相對位置關係更新為第一位置關係的情況下，可以調整互動對象顯示為與所述目標對象存在角度、方向、位移、視覺效果中至少一種關係的互動顯示狀態，從而，可以改善顯示回饋效果，便於使用者根據該位置變化帶來的互動對象顯示的調整來進行查閱，提高了查閱的處理速度。
可能的實現方式中，所述根據所述相對位置關係，調整所述互動對象的顯示狀態，包括：回應於所述相對位置關係為第二位置關係，調整所述互動對象的顯示狀態為：指示所述定位點在所述目標對象中位置的互動顯示狀態。
採用本揭露實施例，在相對位置關係更新為第二位置關係的情況下，可以調整互動對象顯示為指示所述定位點在所述目標對象中位置的互動顯示狀態，從而，可以改善顯示回饋效果，便於使用者根據該位置變化帶來的定位顯示調整來進行查閱，提高了查閱的處理速度。
可能的實現方式中，所述響應於目標對象的選取操作，獲取定位點之前，所述方法還包括：獲取所述目標對象的特徵向量；根據所述特徵向量和識別網路，識別出所述目標對象。
採用本揭露實施例，可以採用該特徵向量和識別網路進行識別處理的人工智慧方式，從而提高了針對目標對象的識別精度，便於用戶的查閱是針對更為精確的目標對象所進行的處理，以得到更為精確的查閱結果。
本揭露實施例提供了一種圖像定位的互動顯示裝置，所述裝置包括：響應單元，配置為響應於目標對象的選取操作，獲取定位點；互動顯示單元，配置為根據多個操作區域針對所述定位點的對應關係，得到所述定位點在多個操作區域對應位置顯示的互動對象。
可能的實現方式中，所述互動顯示單元，配置為：所述多個操作區域分別表徵2D圖像和3D圖像的情況下，根據所述2D圖像與3D圖像中定位點的對應關係，得到定位點分別在多個操作區域的對應位置；在所述多個操作區域的對應位置，顯示在所述多個操作區域間連動的互動對象。
可能的實現方式中，所述回應單元，配置為回應於所述定位點的位置變化，得到所述定位點與所述目標對象的相對位置關係；所述互動顯示單元，配置為根據所述相對位置關係，調整所述互動對象的顯示狀態。
可能的實現方式中，所述互動顯示單元，配置為：回應於所述相對位置關係為第一位置關係，調整所述互動對象的顯示狀態為：與所述目標對象存在角度、方向、位移、視覺效果中至少一種關係的互動顯示狀態。
可能的實現方式中，所述互動顯示單元，配置為：回應於所述相對位置關係為第二位置關係，調整所述互動對象的顯示狀態為：指示所述定位點在所述目標對象中位置的互動顯示狀態。
可能的實現方式中，所述裝置還包括識別單元，配置為：獲取所述目標對象的特徵向量；根據所述特徵向量和識別網路，識別出所述目標對象。
本揭露實施例提供了一種電子設備，包括：處理器；配置為儲存處理器可執行指令的記憶體；其中，所述處理器被配置為：執行上述圖像定位的互動顯示方法。
本揭露實施例提供了一種電腦可讀儲存媒體，其上儲存有電腦程式指令，所述電腦程式指令被處理器執行時實現上述圖像定位的互動顯示方法。
採用本揭露實施例，由於獲取定位點後，可以根據多個操作區域針對定位點的對應關係，得到定位點在多個操作區域對應位置顯示的互動對象，因此，可以根據多個操作區域針對該定位點的對應關係同步到定位點在多個操作區域對應位置，以便在對應位置顯示互動對象，透過這種空間定位的對應匹配及直觀的顯示方式，可以將目標對象及定位點在多個操作區域的空間定位即時回饋給用戶進行查看，不僅改善了顯示回饋效果，還可以使得使用者根據該顯示回饋效果即時作出下一步預期的處理，提高了互動回饋速度。
應當理解的是，以上的一般描述和後文的細節描述僅是示例性和解釋性的，而非限制本揭露。
根據下面參考附圖對示例性實施例的詳細說明，本揭露的其它特徵及方面將變得清楚。
以下將參考附圖詳細說明本揭露的各種示例性實施例、特徵和方面。附圖中相同的附圖標記表示功能相同或相似的元件。儘管在附圖中示出了實施例的各種方面，但是除非特別指出，不必按比例繪製附圖。
在這裡專用的詞「示例性」意為「用作例子、實施例或說明性」。這裡作為「示例性」所說明的任何實施例不必解釋為優於或好於其它實施例。
本文中術語「和/或」，僅僅是一種描述關聯對象的關聯關係，表示可以存在三種關係，例如，A和/或B，可以表示：單獨存在A，同時存在A和B，單獨存在B這三種情況。另外，本文中術語「至少一種」表示多種中的任意一種或多種中的至少兩種的任意組合，例如，包括A、B、C中的至少一種，可以表示包括從A、B和C構成的集合中選擇的任意一個或多個元素。
另外，為了更好的說明本揭露，在下文的實施方式中給出了眾多的細節。本領域技術人員應當理解，沒有某些細節，本揭露同樣可以實施。在一些實例中，對於本領域技術人員熟知的方法、手段、元件和電路未作詳細描述，以便於凸顯本揭露的主旨。
第1圖示出根據本揭露實施例的圖像定位的互動顯示方法的流程圖，該方法應用於圖像定位的互動顯示裝置，例如，該裝置部署於終端設備或伺服器或其它處理設備執行的情況下，可以執行空間定位、互動顯示處理等等。其中，終端設備可以為使用者設備（UE，User Equipment）、移動設備、蜂窩電話、無線電話、個人數位文書處理（PDA，Personal Digital Assistant）、手持設備、計算設備、車載設備、可穿戴設備等。在一些可能的實現方式中，該處理方法可以透過處理器調用記憶體中儲存的電腦可讀指令的方式來實現。如第1圖所示，該流程包括：
步驟S101、響應於目標對象的選取操作，獲取定位點。
一個示例中，目標對象可以是醫療場景中的各個人體部位（如眼、耳等感覺器官，或者心臟、肝、胃等內臟器官）、人體組織（如上皮組織、肌肉組織、神經組織等）、人體細胞、血管等。
第2圖示出根據本揭露實施例的目標對象上定位點的示意圖，目標對象為血管11的情況下，定位點可以是在血管上執行選取操作的情況下得到的操作位置點，由第一定位標識121和第二定位標識122對該位置點進行標識。
一個示例中，響應於目標對象的選取操作，獲取定位點之前，所述方法還包括：獲取所述目標對象的特徵向量，根據所述特徵向量和識別網路，識別出所述目標對象。
步驟S102、根據多個操作區域針對所述定位點的對應關係，得到所述定位點在多個操作區域對應位置顯示的互動對象。
其中，所述互動對象可以隨著所述定位點和所述目標對象的相對位置關係的變化呈現出不同的顯示狀態，例如「十字型」和「扁圓柱形」等；其中，所述相對位置關係可以包括：所述定位點位於所述目標對象內部和所述定位點位於所述目標對象外部。在其他實施例中，所述相對位置關係還可以再進行劃分，例如所述定位點位於所述目標對象外部的某一角度、某一方向以及某一距離處。
一示例中，所述多個操作區域分別表徵2D圖像和3D圖像的情況下，根據所述2D圖像與3D圖像中定位點的對應關係，得到定位點分別在多個操作區域的對應位置，在所述多個操作區域的對應位置，顯示在所述多個操作區域間連動的互動對象。
第3圖示出根據本揭露實施例的空間定位對應匹配的示意圖，操作區域201可以為原始2D圖像，操作區域202及操作區域203可以分別為3D重建圖像，其中，操作區域203可以用於顯示人體部位的全域示意圖，操作區域202可以用於顯示對應該人體部位的局部放大示意圖，比如血管、或其他非血管的人體組織及人體細胞等。以操作區域202用於顯示血管11為例，基於對血管11的選取操作，透過第一定位標識121和第二定位標識122，對選取操作的操作位置點進行標識。
操作區域201中包括用於定位的十字線，該十字線由第一標識線221和第二標識線222所構成。透過該十字線所定位的位置與操作區域202中定位點2D座標一致，且在3D空間上存在空間對應關係。比如，2D平面中圓形的中心位置，在對應3D空間中即為球的球心定位點。
由於在空間定位和重建過程中，原始2D圖像與多個3D重建圖像間針對任一個定位點存在對應關係，因此，可以根據該對應關係（如操作區域202中血管3D立體圖像與操作區域201中血管2D橫切面的對應關係）得到該定位點在多個操作區域對應位置，從而，採用本揭露實施例，可以在多個操作區域對應位置，分別顯示該操作區域對應的互動對象，且該互動對象在多個操作區域跟蹤定位點的位置變化是連動顯示的。
採用本揭露實施例還可以在不同操作區域的定位點位置用不同的互動對象指示所述定位點。第4圖-第5圖示出根據本揭露實施例的不同操作區域位置顯示的互動對象的示意圖，如第4圖所示，在操作區域203顯示人體部位（如心臟），定位點位於血管外部，如心臟上非血管的人體組織位置，則可以根據原始2D圖像與多個3D重建圖像間針對任一個定位點存在對應關係，如操作區域203中心臟3D立體圖像與操作區域201中心臟橫切面的對應關係）得到該定位點在多個操作區域對應位置，並且在操作區域203中定位點位置為該血管外部的人體組織位置31情況下，顯示互動對象32，該互動對象可以呈現為「十字形」。
如第5圖所示，在操作區域203顯示人體部位（如心臟），定位點位於血管內部，則可以根據原始2D圖像與多個3D重建圖像間針對任一個定位點存在對應關係，如操作區域203中心臟3D立體圖像與操作區域201中心臟橫切面的對應關係）得到該定位點在多個操作區域對應位置，並且在操作區域203中定位點位置為該血管11情況下，顯示互動對象13，該互動對象可以呈現為「扁圓柱形」。也就是說，可以根據操作區域203中心臟3D立體圖像與操作區域201中心臟橫切面的對應關係，展示操作區域對應的互動對象顯示方式，比如，如第4圖所示，定位點在血管外部，可以呈現「十字形」的互動對象；如第5圖所示，定位點在血管內部，可以呈現「扁圓柱形」的互動對象。
採用本揭露實施例，由於獲取定位點後，可以根據多個操作區域針對定位點的對應關係，得到定位點在多個操作區域對應位置顯示的互動對象，因此，可以根據多個操作區域針對該定位點的對應關係同步到定位點在多個操作區域對應位置，以便在對應位置顯示互動對象，透過這種空間定位的對應匹配及直觀的顯示方式，可以將目標對象及定位點在多個操作區域的空間定位即時回饋給用戶進行查看，使使用者可以利用多操作區域對同一定位點進行對照查看，並能直觀得到不同的互動顯示狀態，不僅改善了顯示回饋效果，還可以使得使用者根據該顯示回饋效果即時作出下一步預期的處理，提高了互動回饋速度。
如第3圖所示，在操作區域201中還包括可以透過滑鼠右鍵觸發的操作功能表21、位於第二標識線222上的用於移動操作的操作工具樣式「十字形」23、及用於旋轉操作的操作工具樣式「半圓形」24。透過操作功能表及各個操作工具樣式，可以直接點擊便可以執行對應的操作處理，而不需要在多個操作處理間先透過額外的切換處理再進入下一個操作處理，簡化了用戶操作且提高了互動回饋速度。
可能的實現方式中，得到所述定位點在多個操作區域對應位置顯示的互動對象之後，所述方法還包括：回應於所述定位點的位置變化，得到所述定位點與所述目標對象的相對位置關係；根據所述相對位置關係，調整所述互動對象的顯示狀態。
其中，所述定位點的位置變化可以是所述定位點由位於所述目標對象內部變化至位於所述目標對象外部，又可以是所述定位點由位於所述目標對象外部變化至位於所述目標對象內部，還可以是所述定位點一直位於所述目標對象的外部，但是所述定位點與所述目標對象之間的相對角度、相對距離或相對方向發生了變化。
比如，以目標對象為血管為例，相對位置包括：定位點在血管內，或者定位點脫出血管至血管外部（此時，定位點可以在非血管的其他人體組織上），由於不同的位置關係，得到的互動對象是不同的，因此，需要調整互動對象的顯示狀態。一個示例中，可以識別出目標對象後，定位出定位點的位置及其位置變化後，然後，可以根據定位點距離該目標對象（如血管）的位置，來即時展示不同的對應關係表現形式，以調整互動對象的顯示狀態。互動對象顯示狀態調整後的顯示效果如第4-5圖所示，比如，一個應用場景中，將定位點從血管內部移動至定位點脫出血管之外，則之前的第一顯示狀態（定位點在血管內部）為「扁圓柱形」，跟蹤定位點位置變化為定位點脫出血管之外，可以即時調整第一顯示狀態為第二顯示狀態（定位點在血管外部），此時第二顯示狀態為「十字形」。
可能的實現方式中，根據所述相對位置關係，調整所述互動對象的顯示狀態，包括：回應於所述相對位置關係為第一位置關係，調整所述互動對象的顯示狀態為：與所述目標對象存在角度、方向、位移、視覺效果中至少一種關係的互動顯示狀態。
其中，所述第一位置關係可以是所述定位點一直位於所述目標對象的外部，但是所述定位點與所述目標對象之間的相對角度、相對距離或相對方向發生了變化。
一個示例中，第6圖示出根據本揭露實施例的互動對象為扁圓柱形的局部放大示意圖，如第6圖所示，目標對象為血管，定位點在血管內部，互動對象13包括扁圓柱形上的圓環131及標識血管形狀的線段132，線段132穿透扁圓柱形上中間區域的圓環131。第7圖示出根據本揭露實施例的互動對象為扁圓柱形的變化形態示意圖，如第7圖所示，相對位置關係變化後，可以即時改變扁圓柱的角度、方向、位移、視覺效果等，比如，使得互動對象13中的扁圓柱形上的圓環131相對於標識血管形狀的線段132呈現不同角度、不同方向、不同位移、不同視覺效果等互動顯示狀態。
可能的實現方式中，根據所述相對位置關係，調整所述互動對象的顯示狀態，包括：回應於所述相對位置關係為第二位置關係，調整所述互動對象的顯示狀態為：指示所述定位點在所述目標對象中位置的互動顯示狀態。
其中，第二位置關係可以是所述定位點由位於所述目標對象內部變化至位於所述目標對象外部，又可以是所述定位點由位於所述目標對象外部變化至位於所述目標對象內部。
一個示例中，所述互動顯示狀態包括：所述目標對象為其他非血管的人體部位、其他非血管的人體組織或其他非血管的人體細胞的情況下，透過橫向和縱向定位標識得到的十字形，如第4圖所示。
應用示例： 如第3圖所示，選中一條血管11後，各個操作區域（即操作區域201-操作區域203）窗格中所有顯示的內容都同步切換到針對該血管的顯示視圖下。第3圖中，在操作區域202採用第一定位標識121和第二定位標識122所標識的定位點所對應位置，在操作區域203中對應顯示的是3D心臟血管上的位置。根據這兩個操作區域的對應關係顯示互動對象，比如，在操作區域203的3D圖像中對應定位點位置顯示立體的「扁圓柱形」，該互動對象「扁圓柱形」可以在該血管內滑鼠拖動，也可以拖到至脫出血管之外。在拖出血管之外的情況下，與操作區域201建立對應關係，此時，如第4圖-第5圖所示，之前定位點在血管內部，互動對象的顯示狀態為「扁圓柱形」，定位點拖到至脫出血管之外，互動對象的顯示狀態調整為「十字形」，以表示非血管的其他區域（如心臟中非血管的人體組織），從而，可以跟蹤滑鼠拖動至不同的區域，來改變對應互動對象的顯示狀態。如第7圖所示，定位點在心臟血管內部的情況下，在血管上移動滑鼠的過程中，根據該定位點相對於血管的位置關係，「扁圓柱形」會發生即時改變，即用滑鼠拖動「扁圓柱形」在血管上移動的過程中即時呈現該「扁圓柱形」相對血管的角度、方向、位移、視覺效果中至少一種關係的互動顯示狀態。
在醫學影像比如心臟血管、或者2D平面與3D立體模型的定位等對應關係的場景中，需要將2D平面上的點或內容匹配到3D立體模型的位置上，並且有一些部位內容需要固定形式的移動方式，比如可以限制在血管上移動，或者氣管上或者其他物體上，這樣看到一個同步的匹配位置關係。
相關技術中，實現了2D平面與3D立體模型中點與點的匹配關係，沒有針對不同部位給出針對性的操作方式和可操作的語言，不能很好的給用戶一個可用性的操作預期，也不夠直觀表達該對應位置所對應的具體內容。
下面舉實例來對本揭露上述一個或多個實施例中所述的圖像定位的互動顯示方法進行說明。
本揭露實施例可應用於查找血管病變的過程中，醫生需要透過一根根血管的查看，完成一個病人的診斷，本揭露實施例是在AI（Artificial Intelligence，人工智慧）演算法的基礎上，自動識別出所有血管，和血管下的病變以及斑塊屬性等資訊。在確認過程中，需要對原始2D圖像和重建的3D圖像進行對應查看，在3D圖像上選擇某根血管後，在平面圖像（即原始2D圖像）的血管上移動血管指標，會對應在3D圖像上顯示；也可以在3D圖像上查看，切換血管、在血管上移動控制點，即時能夠看到該控制點的圖像對應關係，並且也可以移動到其他組織中自己感興趣的區域。
假設醫生選中了一條血管，則如第3圖所示，窗格（即操作區域201-操作區域203）所有內容同步切換到該血管下，操作區域201可以為原始2D圖像，操作區域202及操作區域203可以分別為3D重建圖像，操作區域203可以用於顯示人體部位的全域示意圖，操作區域202可以用於顯示對應該人體部位的局部放大示意圖；最右側（操作區域202）在指正位置（採用第一定位標識121和第二定位標識122所標識的定位點）對應的是左邊下方（操作區域203）的3D心臟血管上的位置，如果這兩個窗格（操作區域202和操作區域203）的對應關係成立，則3D圖像上的對應位置的展示是一個立體的扁圓柱形，可在該血管內滑鼠拖動，也可以拖出血管，如果拖出血管，則與另一張圖像（操作區域201）建立起匹配關係，這時，如第4圖和第5圖，這時對應點位置變成十字點，表示非血管區域。滑鼠拖動根據不同的區域即時改變對應形式。如第7圖，在血管上的時候，根據該心臟的控制項位置關係，在血管上移動的過程中，扁圓柱形會改變它的相對空間位置關係，包括橫豎向的角度和視覺效果。
本揭露實施例可識別並體現3D空間位置關係，可即時調整對應部位的動作表現形式，能夠根據不同部位的位置即時展示不同的對應關係表現形式，即時回饋，指導用戶的其他預期操作；並且部位可操作的表現形式生動形象，很好的體現了相對空間關係和3D空間關係，便於用戶理解。
本揭露實施例可識別部位，並即時調整可操作形式，而相關技術中，為固定形式，並且不區分部位；本揭露實施例根據組織的空間位置關係即時改變扁圓柱角度，而相關技術中，為固定形式，比如一個點。
本揭露實施例能夠根據不同部位的位置即時展示不同的對應關係表現形式，即時回饋，指導用戶的其他預期操作；部位可操作性的表現形式生動形象，直觀的體現了相對空間關係和3D空間位置，加速醫生疾病尋找，便於用戶操作理解。
本揭露實施例可以應用於影像科閱片系統、CT（Computed Tomography，電子電腦斷層掃描）、MR（Magnetic Resonance，磁共振）、PET（positron emission tomography， 正電子發射斷層）等掃描工作站、AI輔助診斷、AI標注系統、遠端醫療診斷、雲端平臺輔助智慧診斷等等所有具有對應關係的邏輯操作中。
本領域技術人員可以理解，在實施方式的上述方法中，各步驟的撰寫順序並不意味著嚴格的執行順序而對實施過程構成任何限定，各步驟的執行順序應當以其功能和可能的內在邏輯確定。
本揭露提及的上述各個方法實施例，在不違背原理邏輯的情況下，均可以彼此相互結合形成結合後的實施例，限於篇幅，本揭露不再贅述。
此外，本揭露還提供了圖像定位的互動顯示裝置、電子設備、電腦可讀儲存媒體、程式，上述均可用來實現本揭露提供的任一種圖像定位的互動顯示方法，相應技術方案和描述和參見方法部分的相應記載，不再贅述。
第8圖示出根據本揭露實施例的圖像定位的互動顯示裝置的框圖，如第8圖所示，該裝置，包括：響應單元51，配置為響應於目標對象的選取操作，獲取定位點；互動顯示單元52，配置為根據多個操作區域針對所述定位點的對應關係，得到所述定位點在多個操作區域對應位置顯示的互動對象。
可能的實現方式中，所述互動顯示單元，配置為： 所述多個操作區域分別表徵2D圖像和3D圖像的情況下，根據所述2D圖像與3D圖像中定位點的對應關係，得到定位點分別在多個操作區域的對應位置； 在所述多個操作區域的對應位置，顯示在所述多個操作區域間連動的互動對象。
可能的實現方式中，所述回應單元，配置為回應於所述定位點的位置變化，得到所述定位點與所述目標對象的相對位置關係； 所述互動顯示單元，配置為根據所述相對位置關係，調整所述互動對象的顯示狀態。
可能的實現方式中，所述互動顯示單元，配置為： 回應於所述相對位置關係為第一位置關係，調整所述互動對象的顯示狀態為：與所述目標對象存在角度、方向、位移、視覺效果中至少一種關係的互動顯示狀態。
可能的實現方式中，所述互動顯示單元，配置為： 回應於所述相對位置關係為第二位置關係，調整所述互動對象的顯示狀態為：指示所述定位點在所述目標對象中位置的互動顯示狀態。
可能的實現方式中，所述裝置還包括識別單元，配置為： 獲取所述目標對象的特徵向量； 根據所述特徵向量和識別網路，識別出所述目標對象。
在一些實施例中，本揭露實施例提供的裝置具有的功能或包含的模組可以用於執行上文方法實施例描述的方法，其實現可以參照上文方法實施例的描述，為了簡潔，這裡不再贅述。
本揭露實施例還提出一種電腦可讀儲存媒體，其上儲存有電腦程式指令，所述電腦程式指令被處理器執行時實現上述圖像定位的互動顯示方法。電腦可讀儲存媒體可以是易失性電腦可讀儲存媒體或非易失性電腦可讀儲存媒體。
本揭露實施例還提供了一種電腦程式產品，包括電腦可讀代碼，在電腦可讀代碼在設備上運行的情況下，設備中的處理器執行用於實現如上任一實施例提供的圖像定位的互動顯示方法的指令。
本揭露實施例還提供了另一種電腦程式產品，配置為儲存電腦可讀指令，指令被執行時使得電腦執行上述任一實施例提供的圖像定位的互動顯示方法的操作。
該電腦程式產品可以透過硬體、軟體或其結合的方式實現。在一個可選實施例中，所述電腦程式產品體現為電腦儲存媒體，在另一個可選實施例中，電腦程式產品體現為軟體產品，例如軟體開發包(Software Development Kit，SDK)等等。
本揭露實施例還提出一種電子設備，包括：處理器；配置為儲存處理器可執行指令的記憶體；其中，所述處理器被配置為上述方法。
電子設備可以被提供為終端、伺服器或其它形態的設備。
第9圖是根據一示例性實施例示出的一種電子設備800的框圖。例如，電子設備800可以是行動電話，電腦，數位廣播終端，訊息收發設備，遊戲控制台，平板設備，醫療設備，健身設備，個人數位助理等終端。
參照第9圖，電子設備800可以包括以下一個或多個元件：處理元件802，記憶體804，電源元件806，多媒體元件808，音訊元件810，輸入/輸出（Input/Output，I/ O）的介面812，感測器元件814，以及通訊元件816。
處理元件802通常控制電子設備800的整體操作，諸如與顯示，電話呼叫，資料通訊，相機操作和記錄操作相關聯的操作。處理元件802可以包括一個或多個處理器820來執行指令，以完成上述的方法的全部或部分步驟。此外，處理元件802可以包括一個或多個模組，便於處理元件802和其他元件之間的互動。例如，處理元件802可以包括多媒體模組，以方便多媒體元件808和處理元件802之間的互動。
記憶體804被配置為儲存各種類型的資料以支援在電子設備800的操作。這些資料的示例包括配置為在電子設備800上操作的任何應用程式或方法的指令、連絡人資料、電話簿資料、訊息、圖片、影片等。記憶體804可以由任何類型的易失性或非易失性存放裝置或者它們的組合實現，如靜態隨機存取記憶體（Static Random-Access Memory，SRAM）、電氣可擦除可程式設計唯讀記憶體（Electrically Erasable Programmable read only memory，EEPROM）、可擦除可程式設計唯讀記憶體（Erasable Programmable Read-Only Memory，EPROM）、可程式設計唯讀記憶體（Programmable Read-Only Memory，PROM）、唯讀記憶體（Read-Only Memory，ROM）、磁記憶體、快閃記憶體、磁片或光碟。
電源元件806為電子設備800的各種元件提供電力。電源元件806可以包括電源管理系統，一個或多個電源，及其他與為電子設備800生成、管理和分配電力相關聯的組件。
多媒體元件808包括在所述電子設備800和使用者之間的提供一個輸出介面的螢幕。在一些實施例中，螢幕可以包括液晶顯示器（Liquid Crystal Display，LCD）和觸控面板（Touch panel，TP）。在螢幕包括觸控面板的情況下，螢幕可以被實現為觸控式螢幕，以接收來自使用者的輸入訊號。觸控面板包括一個或多個觸控感測器以感測觸摸、滑動和觸摸面板上的手勢。所述觸控感測器可以不僅感測觸摸或滑動動作的邊界，而且還檢測與所述觸摸或滑動操作相關的持續時間和壓力。在一些實施例中，多媒體元件808包括一個前置攝影機和/或後置攝影機。在電子設備800處於操作模式，如拍攝模式或視訊模式的情況下，前置攝影機和/或後置攝影機可以接收外部的多媒體資料。每個前置攝影機和後置攝影機可以是一個固定的光學透鏡系統或具有焦距和光學變焦能力。
音訊元件810被配置為輸出和/或輸入音訊訊號。例如，音訊元件810包括一個麥克風（microphone，MIC），在電子設備800處於操作模式，如呼叫模式、記錄模式和語音辨識模式的情況下，麥克風被配置為接收外部音訊訊號。所接收的音訊訊號可以被進一步儲存在記憶體804或經由通訊元件816發送。在一些實施例中，音訊元件810還包括一個揚聲器，配置為輸出音訊訊號。
I/ O介面812為處理元件802和週邊介面模組之間提供介面，上述週邊介面模組可以是鍵盤、點擊輪、按鈕等。這些按鈕可包括但不限於：主頁按鈕、音量按鈕、啟動按鈕和鎖定按鈕。
感測器元件814包括一個或多個感測器，配置為為電子設備800提供各個方面的狀態評估。例如，感測器元件814可以檢測到電子設備800的打開/關閉狀態，元件的相對定位，例如所述元件為電子設備800的顯示器和小鍵盤，感測器元件814還可以檢測電子設備800或電子設備800一個元件的位置改變，使用者與電子設備800接觸的存在或不存在，電子設備800方位或加速/減速和電子設備800的溫度變化。感測器元件814可以包括接近感測器，被配置用來在沒有任何的物理接觸時檢測附近物體的存在。感測器元件814還可以包括光感測器，如CMOS（Complementary Metal Oxide Semiconductor，互補金屬氧化物半導體）或CCD（Charge-coupled Device，電荷耦合元件）圖像感測器，配置為在成像應用中使用。在一些實施例中，該感測器元件814還可以包括加速度感測器、陀螺儀感測器、磁感測器、壓力感測器或溫度感測器。
通訊元件816被配置為便於電子設備800和其他設備之間有線或無線方式的通訊。電子設備800可以接入基於通訊標準的無線網路，如WiFi，2G（2-Generation wireless telephone technology，第二代移動通訊技術）或3G（3-Generation wireless telephone technology，第三代移動通訊技術），或它們的組合。在一個示例性實施例中，通訊元件816經由廣播通道接收來自外部廣播管理系統的廣播訊號或廣播相關資訊。在一個示例性實施例中，所述通訊元件816還包括近場通訊（Near Field Communication，NFC）模組，以促進短程通訊。例如，在NFC模組可基於射頻識別（Radio Frequency Identification，RFID）技術、紅外資料協會（Infrared Data Association，IrDA）技術、超寬頻（Ultra Wide Band，UWB）技術、藍牙（Bluetooth，BT）技術和其他技術來實現。
在示例性實施例中，電子設備800可以被一個或多個應用專用積體電路（Application Specific Integrated Circuit，ASIC）、數位訊號處理器（Digital Signal Processing，DSP）、數位訊號處理設備（Digital signal processing device，DSPD）、可程式設計邏輯器件（programmable logic device，PLD）、現場可程式設計閘陣列（Field Programmable Gate Array，FPGA）、控制器、微控制器、微處理器或其他電子元件實現，用於執行上述方法。
在示例性實施例中，還提供了一種非易失性電腦可讀儲存媒體，例如包括電腦程式指令的記憶體804，上述電腦程式指令可由電子設備800的處理器820執行以完成上述方法。
第10圖是根據一示例性實施例示出的一種電子設備900的框圖。例如，電子設備900可以被提供為一伺服器。參照第10圖，電子設備900包括處理元件922，其進一步包括一個或多個處理器，以及由記憶體932所代表的記憶體資源，配置為儲存可由處理元件922的執行的指令，例如應用程式。記憶體932中儲存的應用程式可以包括一個或一個以上的每一個對應於一組指令的模組。此外，處理元件922被配置為執行指令，以執行上述方法。
電子設備900還可以包括一個電源元件926被配置為執行電子設備900的電源管理，一個有線或無線網路介面950被配置為將電子設備900連接到網路，和一個輸入輸出（I/O）介面958。電子設備900可以操作基於儲存在記憶體932的作業系統，例如Windows ServerTM、Mac OS XTM、UnixTM, LinuxTM、FreeBSDTM或類似。
在示例性實施例中，還提供了一種非易失性電腦可讀儲存媒體，例如包括電腦程式指令的記憶體932，上述電腦程式指令可由電子設備900的處理元件922執行以完成上述方法。
本揭露可以是系統、方法和/或電腦程式產品。電腦程式產品可以包括電腦可讀儲存媒體，其上載有用於使處理器實現本揭露的各個方面的電腦可讀程式指令。
電腦可讀儲存媒體可以是可以保持和儲存由指令執行設備使用的指令的有形設備。電腦可讀儲存媒體例如可以是――但不限於――電存放裝置、磁存放裝置、光存放裝置、電磁存放裝置、半導體存放裝置或者上述的任意合適的組合。電腦可讀儲存媒體的例子（非窮舉的列表）包括：可攜式電腦磁碟、硬碟、隨機存取記憶體（Random Access Memory，RAM）、唯讀記憶體（ROM）、可擦式可程式設計唯讀記憶體（EPROM或快閃記憶體）、靜態隨機存取記憶體（SRAM）、可攜式壓縮磁碟唯讀記憶體（Compact Disc Read-Only Memory，CD-ROM）、數位影像光碟（Digital Video Disc，DVD）、記憶棒、軟碟、機械編碼設備、例如其上儲存有指令的打孔卡或凹槽內凸起結構、以及上述的任意合適的組合。這裡所使用的電腦可讀儲存媒體不被解釋為暫態訊號本身，諸如無線電波或者其他自由傳播的電磁波、透過波導或其他傳輸媒介傳播的電磁波（例如，透過光纖電纜的光脈衝）、或者透過電線傳輸的電訊號。
這裡所描述的電腦可讀程式指令可以從電腦可讀儲存媒體下載到各個計算/處理設備，或者透過網路、例如網際網路、區域網路、廣域網路和/或無線網路下載到外部電腦或外部存放裝置。網路可以包括銅傳輸電纜、光纖傳輸、無線傳輸、路由器、防火牆、交換機、閘道電腦和/或邊緣伺服器。每個計算/處理設備中的網路介面卡或者網路介面從網路接收電腦可讀程式指令，並轉發該電腦可讀程式指令，以供儲存在各個計算/處理設備中的電腦可讀儲存媒體中。
用於執行本揭露操作的電腦程式指令可以是彙編指令、指令集架構（Industry Standard Architecture，ISA）指令、機器指令、機器相關指令、微代碼、韌體指令、狀態設置資料、或者以一種或多種程式設計語言的任意組合編寫的原始程式碼或目標代碼，所述程式設計語言包括對象導向的程式設計語言—諸如Smalltalk、C++等，以及常規的過程式程式設計語言—諸如「C」語言或類似的程式設計語言。電腦可讀程式指令可以完全地在使用者電腦上執行、部分地在使用者電腦上執行、作為一個獨立的套裝軟體執行、部分在使用者電腦上部分在遠端電腦上執行、或者完全在遠端電腦或伺服器上執行。在涉及遠端電腦的情形中，遠端電腦可以透過任意種類的網路—包括區域網路(local area network，LAN)或廣域網路(Wide Area Network，WAN)—連接到使用者電腦，或者，可以連接到外部電腦（例如利用網際網路服務提供者來透過網際網路連接）。在一些實施例中，透過利用電腦可讀程式指令的狀態資訊來個性化定制電子電路，例如可程式設計邏輯電路、現場可程式設計閘陣列（FPGA）或可程式設計邏輯陣列（programmable logic array，PLA），該電子電路可以執行電腦可讀程式指令，從而實現本揭露的各個方面。
這裡參照根據本揭露實施例的方法、裝置（系統）和電腦程式產品的流程圖和/或框圖描述了本揭露的各個方面。應當理解，流程圖和/或框圖的每個方框以及流程圖和/或框圖中各方框的組合，都可以由電腦可讀程式指令實現。
這些電腦可讀程式指令可以提供給通用電腦、專用電腦或其它可程式設計資料處理裝置的處理器，從而生產出一種機器，使得這些指令在透過電腦或其它可程式設計資料處理裝置的處理器執行的情況下，產生了實現流程圖和/或框圖中的一個或多個方框中規定的功能/動作的裝置。也可以把這些電腦可讀程式指令儲存在電腦可讀儲存媒體中，這些指令使得電腦、可程式設計資料處理裝置和/或其他設備以特定方式工作，從而，儲存有指令的電腦可讀媒體則包括一個製造品，其包括實現流程圖和/或框圖中的一個或多個方框中規定的功能/動作的各個方面的指令。
也可以把電腦可讀程式指令載入到電腦、其它可程式設計資料處理裝置、或其它設備上，使得在電腦、其它可程式設計資料處理裝置或其它設備上執行一系列操作步驟，以產生電腦實現的過程，從而使得在電腦、其它可程式設計資料處理裝置、或其它設備上執行的指令實現流程圖和/或框圖中的一個或多個方框中規定的功能/動作。
附圖中的流程圖和框圖顯示了根據本揭露的多個實施例的系統、方法和電腦程式產品的可能實現的體系架構、功能和操作。在這點上，流程圖或框圖中的每個方框可以代表一個模組、程式段或指令的一部分，所述模組、程式段或指令的一部分包含一個或多個用於實現規定的邏輯功能的可執行指令。在有些作為替換的實現中，方框中所標注的功能也可以以不同於附圖中所標注的順序發生。例如，兩個連續的方框實際上可以基本並行地執行，它們有時也可以按相反的循序執行，這依所涉及的功能而定。也要注意的是，框圖和/或流程圖中的每個方框、以及框圖和/或流程圖中的方框的組合，可以用執行規定的功能或動作的專用的基於硬體的系統來實現，或者可以用專用硬體與電腦指令的組合來實現。
在不違背邏輯的情況下，本揭露不同實施例之間可以相互結合，不同實施例描述有所側重，為側重描述的部分可以參見其他實施例的記載。
以上已經描述了本揭露的各實施例，上述說明是示例性的，並非窮盡性的，並且也不限於所披露的各實施例。在不偏離所說明的各實施例的範圍和精神的情況下，對於本技術領域的普通技術人員來說許多修改和變更都是顯而易見的。本文中所用術語的選擇，旨在最好地解釋各實施例的原理、實際應用或對市場中技術的技術改進，或者使本技術領域的其它普通技術人員能理解本文披露的各實施例。 工業實用性
本實施例中，透過這種空間定位的對應匹配及直觀的顯示方式，可以將目標對象及定位點在多個操作區域的空間定位即時回饋給用戶進行查看，不僅改善了顯示回饋效果，還可以使得使用者根據該顯示回饋效果即時作出下一步預期的處理，提高了互動回饋速度。
S101,S102:步驟 11:血管 121:第一定位標識 122:第二定位標識 201,202,203:操作區域 21:操作功能表 221:第一標識線 222:第二標識線 23:十字形 24:半圓形 31:人體組織位置 32:顯示互動對象 13:互動對象 131:圓環 132:線段 51:響應單元 52:互動顯示單元 800:電子設備 802:處理元件 804:記憶體 806:電源元件 808:多媒體元件 810:音訊元件 812:輸入/輸出介面 814:感測器元件 816:通訊元件 820:處理器 900:電子設備 922:處理元件 932:記憶體 926:電源元件 950:網路介面 958:輸入輸出介面
此處的附圖被併入說明書中並構成本說明書的一部分，這些附圖示出了符合本揭露的實施例，並與說明書一起用於說明本揭露的技術方案。 第1圖示出根據本揭露實施例的圖像定位的互動顯示方法的流程圖； 第2圖示出根據本揭露實施例的目標對象上定位點的示意圖； 第3圖示出根據本揭露實施例的空間定位對應匹配的示意圖； 第4圖-第5圖示出根據本揭露實施例的不同操作區域位置顯示的互動對象的示意圖； 第6圖示出根據本揭露實施例的互動對象為扁圓柱形的局部放大示意圖； 第7圖示出根據本揭露實施例的互動對象為扁圓柱形的變化形態示意圖； 第8圖示出根據本揭露實施例的圖像定位的互動顯示裝置的框圖； 第9圖示出根據本揭露實施例的電子設備的框圖； 第10圖示出根據本揭露實施例的電子設備的框圖。
S101,S102:步驟

Claims (8)

  1. 一種圖像定位的互動顯示方法，所述方法包括：響應於目標對象的選取操作，獲取定位點；根據多個操作區域針對所述定位點的對應關係，得到所述定位點在多個操作區域對應位置顯示的互動對象；所述多個操作區域中包含所述目標對象；在得到互動對象後，在所述定位點在所述目標對象內部，且所述定位點的位置發生變化的情況下，調整所述互動對象的角度、方向、位移中的至少一種，使所述互動對象相對於所述目標對象呈現不同角度、不同方向、不同位移中的至少一種互動顯示狀態。
  2. 根據請求項1所述的方法，其中，所述根據多個操作區域針對所述定位點的對應關係，得到所述定位點分別在多個操作區域對應位置顯示的互動對象，包括：所述多個操作區域分別表徵2D圖像和3D圖像的情況下，根據所述2D圖像與3D圖像中定位點的對應關係，得到定位點分別在多個操作區域的對應位置；在所述多個操作區域的對應位置，顯示在所述多個操作區域間連動的互動對象。
  3. 根據請求項1或2所述的方法，其中，所述得到所述定位點在多個操作區域對應位置顯示的互動對象之後，所述方法還包括：回應於所述定位點的位置變化，得到所述定位點與所述目標對象的相對位置關係；根據所述相對位置關係，調整所述互動對象的顯示狀態。
  4. 根據請求項3所述的方法，其中，所述根據所述相對位置關係，調整所述互動對象的顯示狀態，包括：回應於所述相對位置關係為第一位置關係，調整所述互動對象的顯示狀態 為：與所述目標對象存在角度、方向、位移、視覺效果中至少一種關係的互動顯示狀態。
  5. 根據請求項3所述的方法，其中，所述根據所述相對位置關係，調整所述互動對象的顯示狀態，包括：回應於所述相對位置關係為第二位置關係，調整所述互動對象的顯示狀態為：指示所述定位點在所述目標對象中位置的互動顯示狀態。
  6. 根據請求項1或2所述的方法，其中，所述響應於目標對象的選取操作，獲取定位點之前，所述方法還包括：獲取所述目標對象的特徵向量；根據所述特徵向量和識別網路，識別出所述目標對象；所述多個操作區域中包含所述目標對象；在得到互動對象後，在所述定位點在所述目標對象內部，且所述定位點的位置發生變化的情況下，調整所述互動對象的角度、方向、位移中的至少一種，使所述互動對象相對於所述目標對象呈現不同角度、不同方向、不同位移中的至少一種互動顯示狀態。
  7. 一種電子設備，包括：處理器；配置為儲存處理器可執行指令的記憶體；其中，所述處理器被配置為：執行請求項1至請求項6中任意一項所述的方法。
  8. 一種電腦可讀儲存媒體，其上儲存有電腦程式指令，所述電腦程式指令被處理器執行時實現請求項1至請求項6中任意一項所述的方法。
TW109138989A 2019-11-29 2020-11-09 圖像定位的互動顯示方法、電子設備和電腦可讀儲存媒體 TWI765404B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
CN201911203808.9A CN110989901B (zh) 2019-11-29 2019-11-29 图像定位的交互显示方法及装置、电子设备和存储介质
CN201911203808.9 2019-11-29

Publications (2)

Publication Number Publication Date
TW202120005A TW202120005A (zh) 2021-06-01
TWI765404B true TWI765404B (zh) 2022-05-21

Family

ID=70088648

Family Applications (1)

Application Number Title Priority Date Filing Date
TW109138989A TWI765404B (zh) 2019-11-29 2020-11-09 圖像定位的互動顯示方法、電子設備和電腦可讀儲存媒體

Country Status (5)

Country Link
US (1) US20220101620A1 (zh)
JP (1) JP2022532330A (zh)
CN (1) CN110989901B (zh)
TW (1) TWI765404B (zh)
WO (1) WO2021103554A1 (zh)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110989901B (zh) * 2019-11-29 2022-01-18 北京市商汤科技开发有限公司 图像定位的交互显示方法及装置、电子设备和存储介质
CN110989884A (zh) * 2019-11-29 2020-04-10 北京市商汤科技开发有限公司 图像定位的操作显示方法及装置、电子设备和存储介质
CN112887537B (zh) * 2021-01-18 2022-08-23 维沃移动通信有限公司 图像处理方法和电子设备
CN113672149A (zh) * 2021-06-29 2021-11-19 珠海金山办公软件有限公司 一种视图显示方法、装置、电子设备及计算机存储介质
TWI799012B (zh) * 2021-12-17 2023-04-11 王一互動科技有限公司 呈現立體空間模型的電子裝置及方法

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101259026A (zh) * 2007-03-06 2008-09-10 通用电气公司 用于追踪超声图像中的点的方法和设备
WO2016054775A1 (zh) * 2014-10-08 2016-04-14 深圳迈瑞生物医疗电子股份有限公司 超声虚拟内窥成像系统和方法及其装置

Family Cites Families (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2991088B2 (ja) * 1995-06-30 1999-12-20 株式会社島津製作所 医用画像表示装置
DE10233668A1 (de) * 2002-07-24 2004-02-19 Siemens Ag Bearbeitungsverfahren für einen Volumendatensatz
DE10246355A1 (de) * 2002-10-04 2004-04-15 Rust, Georg-Friedemann, Dr. Interaktive virtuelle Endoskopie
US20050065424A1 (en) * 2003-06-06 2005-03-24 Ge Medical Systems Information Technologies, Inc. Method and system for volumemetric navigation supporting radiological reading in medical imaging systems
US7496222B2 (en) * 2005-06-23 2009-02-24 General Electric Company Method to define the 3D oblique cross-section of anatomy at a specific angle and be able to easily modify multiple angles of display simultaneously
DE102005035929A1 (de) * 2005-07-28 2007-02-01 Siemens Ag Verfahren zur Darstellung mehrerer Bilder sowie ein Bildsystem zur Durchführung des Verfahrens
DE602006014865D1 (de) * 2005-12-14 2010-07-22 Koninkl Philips Electronics Nv Verfahren und einrichtung zum miteinander in beziehung setzen von medizinischen 3d-datenbild-ansichtsebenen
US8745536B1 (en) * 2008-11-25 2014-06-03 Perceptive Pixel Inc. Volumetric data exploration using multi-point input controls
US9684972B2 (en) * 2012-02-03 2017-06-20 Koninklijke Philips N.V. Imaging apparatus for imaging an object
CN102982233B (zh) * 2012-11-01 2016-02-03 华中科技大学 具有立体视觉显示的医学影像工作站
WO2014142468A1 (en) * 2013-03-13 2014-09-18 Samsung Electronics Co., Ltd. Method of providing copy image and ultrasound apparatus therefor
US10025479B2 (en) * 2013-09-25 2018-07-17 Terarecon, Inc. Advanced medical image processing wizard
US10672122B2 (en) * 2015-11-19 2020-06-02 Koninklijke Philips N.V. Optimizing user interactions in segmentation
US9965863B2 (en) * 2016-08-26 2018-05-08 Elekta, Inc. System and methods for image segmentation using convolutional neural network
US20180192996A1 (en) * 2017-01-10 2018-07-12 Canon Medical Systems Corporation Ultrasonic diagnostic device, image processing device, and image processing method
JP6429958B2 (ja) * 2017-08-09 2018-11-28 キヤノン株式会社 画像処理装置、画像処理方法、及びプログラム
CN109830289B (zh) * 2019-01-18 2021-04-06 上海皓桦科技股份有限公司 肋骨图像显示装置
CN110989901B (zh) * 2019-11-29 2022-01-18 北京市商汤科技开发有限公司 图像定位的交互显示方法及装置、电子设备和存储介质

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101259026A (zh) * 2007-03-06 2008-09-10 通用电气公司 用于追踪超声图像中的点的方法和设备
WO2016054775A1 (zh) * 2014-10-08 2016-04-14 深圳迈瑞生物医疗电子股份有限公司 超声虚拟内窥成像系统和方法及其装置

Also Published As

Publication number Publication date
TW202120005A (zh) 2021-06-01
US20220101620A1 (en) 2022-03-31
CN110989901A (zh) 2020-04-10
CN110989901B (zh) 2022-01-18
WO2021103554A1 (zh) 2021-06-03
JP2022532330A (ja) 2022-07-14

Similar Documents

Publication Publication Date Title
TWI765404B (zh) 圖像定位的互動顯示方法、電子設備和電腦可讀儲存媒體
TWI750518B (zh) 影像處理方法及影像處理裝置、電子設備和電腦可讀儲存媒體
US20160055676A1 (en) Display control device, display control method, and program
US20160054793A1 (en) Image processing device, image processing method, and program
KR20170093632A (ko) 전자 장치 및 그의 동작 방법
CN110321048B (zh) 三维全景场景信息处理、交互方法及装置
TWI767596B (zh) 場景深度和相機運動預測方法、電子設備和電腦可讀儲存介質
US10888228B2 (en) Method and system for correlating anatomy using an electronic mobile device transparent display screen
WO2021103549A1 (zh) 图像定位的操作显示方法及装置、电子设备和存储介质
JP7316456B2 (ja) 点群マップ構築方法及びその装置、電子機器、記憶媒体並びにプログラム
TW202013316A (zh) 人臉圖像的處理方法及裝置、電子設備和儲存介質
WO2022242046A1 (zh) 医学图像的展示方法及装置、电子设备、存储介质和计算机程序
CN111724361B (zh) 实时显示病灶的方法及装置、电子设备和存储介质
CN115439171A (zh) 商品信息展示方法、装置及电子设备
TWI767614B (zh) 圖像處理方法及電子設備、電腦可讀儲存介質
KR20220125715A (ko) 데이터 생성 방법, 장치, 기기, 저장 매체 및 프로그램
US10931926B2 (en) Method and apparatus for information display, and display device
TWI759004B (zh) 一種目標對象顯示方法、電子設備和電腦可讀儲存介質
WO2023178863A1 (zh) 三维数据显示方法及装置、电子设备和存储介质
WO2022179014A1 (zh) 图像处理方法及装置、电子设备、存储介质和程序产品
CN111738998B (zh) 病灶位置动态检测方法及装置、电子设备和存储介质
CN106250711B (zh) 一种用于医疗显示的光标移动方法、装置和医疗设备
CN113192606A (zh) 医疗数据处理方法及装置、电子设备和存储介质
CN115793846A (zh) 设备交互方法、设备交互装置及存储介质
CN114399703A (zh) 对象识别方法及装置、电子设备和存储介质