TW202312729A - Video data conversion device - Google Patents
Video data conversion device Download PDFInfo
- Publication number
- TW202312729A TW202312729A TW111144518A TW111144518A TW202312729A TW 202312729 A TW202312729 A TW 202312729A TW 111144518 A TW111144518 A TW 111144518A TW 111144518 A TW111144518 A TW 111144518A TW 202312729 A TW202312729 A TW 202312729A
- Authority
- TW
- Taiwan
- Prior art keywords
- image data
- original
- quadrant
- image
- dimensional
- Prior art date
Links
Images
Landscapes
- Indicating And Signalling Devices For Elevators (AREA)
- Image Processing (AREA)
- Closed-Circuit Television Systems (AREA)
Abstract
Description
本發明是有關一種影像資料轉換裝置,尤其是一種適用於內視鏡系統,可以將內視鏡系統的原始影像資料中的原始二維影像資料轉換為三維影像資料,並且可以判斷原始影像資料中的原始三維影像資料的資料格式的影像資料轉換裝置。The present invention relates to an image data conversion device, especially one suitable for an endoscope system, which can convert the original two-dimensional image data in the original image data of the endoscope system into three-dimensional image data, and can judge the original image data in the original image data. An image data conversion device for the data format of the original three-dimensional image data.
在現行技術當中,要將內視鏡系統的影像顯示於三維顯示裝置時,通常需要先對相關設備進行設定。舉例來說,可能會需要事先查詢內視鏡系統所輸出的影像資料格式、傳輸格式等,使內視鏡的拍攝影像可以連接相關設備並顯示於三維顯示裝置中。In the current technology, when the image of the endoscope system is to be displayed on the 3D display device, it is usually necessary to configure related equipment first. For example, it may be necessary to inquire the image data format and transmission format output by the endoscope system in advance, so that the images captured by the endoscope can be connected to related equipment and displayed on the 3D display device.
然而,由於各家廠商所支援的影像格式、通訊協定等可能不相同,因此可能會因為相關規格的查詢而導致設定花費過多的時間、甚至有可能會因為規格不相容、或內視鏡系統並未提供三維影像而無法將相關設備連接使用。However, since the video formats and communication protocols supported by various manufacturers may be different, it may take too much time to set up due to the query of relevant specifications, and it may even be caused by incompatible specifications, or the internal mirror system 3D images are not provided and related devices cannot be connected and used.
有鑑於此,本發明提供一種影像資料轉換裝置。影像資料轉換裝置可以執行儲存於儲存單元的處理程序(也就是一種電腦可讀媒體),並根據二維內視鏡系統的原始二維影像資料生成三維影像資料,再將三維影像資料提供於三維顯示裝置、或其他外部裝置使用(例如用於提升解析度的影像提升裝置等),又或者是也可以對三維內視鏡系統的原始三維影像進行影像資料格式的判斷,進而根據原始三維影像資料生成並提供三維影像資料於三維顯示裝置、或將原始三維影像資料提供於其他外部裝置後再提供於三維顯示裝置中使用,藉由本案發明的功能架構可以省略內視鏡系統繁雜的規格設定。In view of this, the present invention provides an image data conversion device. The image data conversion device can execute the processing program stored in the storage unit (that is, a computer-readable medium), and generate 3D image data according to the original 2D image data of the 2D endoscope system, and then provide the 3D image data in the 3D Display device, or other external devices (such as image enhancement devices for improving resolution, etc.), or can also judge the image data format of the original 3D image of the 3D endoscope system, and then according to the original 3D image data Generate and provide 3D image data on the 3D display device, or provide the original 3D image data to other external devices and then provide it for use in the 3D display device. The functional architecture of the invention can omit the complicated specification setting of the endoscope system.
本發明所提供的影像資料轉換裝置適用於內視鏡系統,影像資料轉換裝置包括:第一通訊單元,用以從內視鏡系統接收原始影像資料;儲存單元,用以儲存處理程序;處理單元,連接第一通訊單元、以及儲存單元,用以執行處理程序並生成第一三維影像資料;以及第二通訊單元,連接處理單元,耦接三維顯示裝置,並用以輸出第一三維影像資料至三維顯示裝置;其中,處理程序包括以下步驟:根據原始影像資料中的影像顯示區域提供影像幀,並根據影像幀判斷原始影像資料是否為原始三維影像資料;若判斷結果為否,則判斷原始影像資料為原始二維影像資料,並在影像幀中根據座標平面中的多個三角形的重心座標生成對應於原始二維影像資料的影像遮罩,並根據影像遮罩生成第一三維影像資料;以及,若判斷結果為是,則在影像幀中根據座標平面中的多個三角形的重心座標的像素值判斷原始三維影像資料的資料格式,並根據資料格式生成第一三維影像資料。The image data conversion device provided by the present invention is suitable for an endoscope system, and the image data conversion device includes: a first communication unit for receiving original image data from the endoscope system; a storage unit for storing a processing program; a processing unit , connected to the first communication unit and the storage unit, used to execute the processing program and generate the first 3D image data; and the second communication unit, connected to the processing unit, coupled to the 3D display device, and used to output the first 3D image data to 3D Display device; wherein, the processing procedure includes the following steps: providing an image frame according to the image display area in the original image data, and judging whether the original image data is the original three-dimensional image data according to the image frame; if the judgment result is no, then judging the original image data is the original two-dimensional image data, and an image mask corresponding to the original two-dimensional image data is generated in the image frame according to the center of gravity coordinates of a plurality of triangles in the coordinate plane, and a first three-dimensional image data is generated according to the image mask; and, If the judgment result is yes, judge the data format of the original 3D image data according to the pixel values of the center of gravity coordinates of the triangles in the coordinate plane in the image frame, and generate the first 3D image data according to the data format.
在本發明的一實施例中,在上述之影像資料轉換裝置中,更有一外部裝置連接第二通訊單元、以及三維顯示裝置,外部裝置可以根據第一三維影像資料生成第二三維影像資料,並輸出第二三維影像資料至三維顯示裝置。In an embodiment of the present invention, in the above-mentioned image data conversion device, there is an external device connected to the second communication unit and the 3D display device, the external device can generate the second 3D image data according to the first 3D image data, and Outputting the second 3D image data to a 3D display device.
在本發明的一實施例中,在上述之影像資料轉換裝置中,處理程序更包括以下步驟:判斷影像顯示區域是否為矩形,若判斷為否,則根據影像顯示區域的形狀沿外切線形成矩形顯示區域,並以矩形形心為中心將座標平面分為第一象限、第二象限、第三象限、以及第四象限。In an embodiment of the present invention, in the above-mentioned image data conversion device, the processing program further includes the following steps: judging whether the image display area is a rectangle; Display the area, and divide the coordinate plane into the first quadrant, the second quadrant, the third quadrant, and the fourth quadrant with the centroid of the rectangle as the center.
在本發明的一實施例中,在上述之影像資料轉換裝置中,處理程序更包括以下步驟:在座標平面中根據多個三角形的重心座標、以及視差補正值生成影像遮罩。In an embodiment of the present invention, in the above-mentioned image data conversion device, the processing program further includes the following step: generating an image mask according to the center-of-gravity coordinates of a plurality of triangles and the parallax correction value in the coordinate plane.
在本發明的一實施例中,在上述之影像資料轉換裝置中,處理程序更包括以下步驟:在座標平面中取得多個座標的像素值,並對多個像素值進行像素值運算以判斷原始三維影像資料的資料格式。In an embodiment of the present invention, in the above-mentioned image data conversion device, the processing program further includes the following steps: obtaining pixel values of multiple coordinates in the coordinate plane, and performing pixel value calculation on the multiple pixel values to determine the original The data format of the 3D image data.
在本發明的一實施例中,在上述之影像資料轉換裝置中,處理程序更包括以下步驟:以三維顯示裝置的顯示區形心為中心,將座標平面分為第一象限、第二象限、第三象限、以及第四象限。In an embodiment of the present invention, in the above-mentioned image data conversion device, the processing program further includes the following steps: taking the centroid of the display area of the three-dimensional display device as the center, dividing the coordinate plane into a first quadrant, a second quadrant, the third quadrant, and the fourth quadrant.
在本發明的一實施例中,在上述之影像資料轉換裝置中,處理程序更包括以下步驟:將第一象限、第二象限、第三象限、以及第四象限分別均分為多個區域以形成多個三角形座標,多個區域用於取得對應於多個三角形的重心座標的像素值。In an embodiment of the present invention, in the above-mentioned image data conversion device, the processing program further includes the following steps: divide the first quadrant, the second quadrant, the third quadrant, and the fourth quadrant into a plurality of regions A plurality of triangle coordinates are formed, and the plurality of areas are used to obtain pixel values corresponding to the barycenter coordinates of the plurality of triangles.
綜上所述,本發明的影像資料轉換裝置可以藉由第一通訊單元從內視鏡系統接收原始影像資料,其中,原始影像資料包括:原始二維影像資料、或原始三維影像資料,再由處理單元執行儲存於儲存單元的處理程序,進而為原始二維影像資料建立影像遮罩、為原始三維影像資料進行影像資料的資料格式判定,並生成三維影像資料,然後再藉由第二通訊單元將處理單元生成的三維影像資料傳送至三維顯示裝置、或其他外部裝置,使本發明可以藉由上述架構在連接內視鏡系統時避免進行繁雜的規格設定,只要將內視鏡系統連接至本發明的影像資料轉換裝置即可為原始二維影像資料建立影像遮罩並生成三維影像資料、又或者是為原始三維影像資料進行影像資料的資料格式判斷,並根據資料格式生成三維影像資料,以快速便捷地將三維影像顯示於三維顯示裝置中。In summary, the image data conversion device of the present invention can receive original image data from the endoscope system through the first communication unit, wherein the original image data includes: original two-dimensional image data, or original three-dimensional image data, and then The processing unit executes the processing program stored in the storage unit, and then establishes an image mask for the original two-dimensional image data, determines the data format of the image data for the original three-dimensional image data, and generates three-dimensional image data, and then communicates with the second communication unit The three-dimensional image data generated by the processing unit is transmitted to the three-dimensional display device or other external devices, so that the present invention can avoid complicated specification setting when connecting the endoscope system through the above-mentioned structure, as long as the endoscope system is connected to this The inventive image data conversion device can establish an image mask for the original two-dimensional image data and generate three-dimensional image data, or judge the data format of the image data for the original three-dimensional image data, and generate three-dimensional image data according to the data format, so as to Quickly and conveniently display the 3D image on the 3D display device.
為讓本發明之上述和其他目的、特徵和優點能更明顯易懂,下文特舉實施例,並配合所附圖式,作詳細說明如下。In order to make the above and other objects, features and advantages of the present invention more comprehensible, the following specific embodiments are described in detail in conjunction with the accompanying drawings.
請參照圖1,圖1為本發明一實施例所提供的影像資料轉換系統1的方塊圖。Please refer to FIG. 1 , which is a block diagram of an image
在本實施例中,本發明之影像資料轉換系統1包括:影像資料轉換裝置2、內視鏡系統3、外部裝置4、以及三維顯示裝置5。其中,影像資料轉換裝置2包括:處理單元21、第一通訊單元22、儲存單元23、以及第二通訊單元24,處理單元21可以包括:轉換單元211、分析單元212、運算單元213。其中,第一通訊單元22連接內視鏡系統3、以及處理單元21,處理單元21連接儲存單元23、以及第二通訊單元24,第二通訊單元可以連接三維顯示裝置5、以及/或外部裝置4,外部裝置4可以連接三維顯示裝置5。In this embodiment, the image
在本實施例中,本發明的影像資料轉換裝置2可以藉由第一通訊單元22從內視鏡系統3接收原始影像資料,原始影像資料可以包括:原始二維影像資料、或原始三維影像資料,再由處理單元21執行儲存於儲存單元23的處理程序,進而為原始二維影像資料建立影像遮罩,並根據影像遮罩生成例如包括影像遮罩的第一三維影像資料、或為原始三維影像資料進行影像資料的資料格式判定,並根據資料格式生成例如包括資料格式的第一三維影像資料,然後再藉由第二通訊單元24輸出第一三維影像資料至三維顯示裝置5、或其他外部裝置4,而外部裝置4更可以根據第一三維影像資料生成第二三維影像資料,再將第二三維影像資料提供於三維顯示裝置5中使用。其中,處理程序包括以下步驟:根據原始影像資料中的顯示區域提供影像幀,並根據該影像幀判斷原始影像資料是否為原始三維影像資料;若判斷結果為否,則判斷原始影像資料為原始二維影像資料,並在影像幀中根據座標平面中的多個三角形的重心座標生成對應於原始二維影像資料的影像遮罩,並根據影像遮罩生成第一三維影像資料;以及,若判斷結果為是,則在影像幀中根據座標平面中的多個三角形的重心座標的像素值判斷原始三維影像資料的資料格式,並根據資料格式生成第一三維影像資料。本發明藉由上述功能結構使本發明在連接內視鏡系統3時可以避免進行繁雜的規格設定,只要將內視鏡系統3連接至本發明的影像資料轉換裝置2即可根據原始二維影像資料生成第一三維影像資料、又或者是為原始三維影像資料進行影像資料的資料格式判斷,並根據資料格式生成第一三維影像資料,以將三維影像快速便捷地顯示於三維顯示裝置5中。In this embodiment, the image
在本實施例中,本發明之影像資料轉換裝置2中包括第一通訊單元22,第一通訊單元22用以與內視鏡系統3通訊連結,並從內視鏡系統3接收原始二維影像資料、或原始三維影像資料。舉例來說,內視鏡系統3可以是包括二維內視鏡的內視鏡系統,也可以是包括三維內視鏡的內視鏡系統,內視鏡系統3可以透過二維內視鏡生成原始二維影像資料、或可以透過三維內視鏡生成原始三維影像資料,而第一通訊單元則用以從內視鏡系統接收原始二維影像資料、或原始三維影像資料再傳送至處理單元21,使處理單元21可以根據內視鏡系統3的原始二維影像資料生成影像遮罩再根據影像遮罩生成第一三維影像、或判斷原始三維影像的影像資料格式再根據資料格式生成第一三維影像。其中,第一通訊單元可以是一種通訊界面,通訊連結可以是有線通訊連結、也可以是無線通訊連結,只要是可以在內視鏡系統3與處理單元21之間建立通訊連結,並透過通訊連結將內視鏡系統3的原始二維影像資料、或原始三維影像資料傳送至處理單元21的裝置,皆可以作為本發明之第一通訊單元,本發明不在此設限。In this embodiment, the image
在本實施例中,本發明之影像資料轉換裝置2中包括儲存單元23,儲存單元23用以儲存處理程序,並由處理單元21執行處理程序。舉例來說,儲存單元23可以是非揮發性記憶體、記憶卡、暫存器等的電腦可讀媒體,又或者是其他具有相同功能的裝置,所列舉出來的儲存裝置種類僅為示例,本案發明不在此做限制,所有具有相同功能的儲存裝置皆可作為本發明之儲存單元23。其中,處理程序可以包括以下步驟:根據原始影像資料中的影像顯示區域提供影像幀,並根據影像幀判斷原始影像資料是否為原始三維影像資料;若判斷結果為否,則判斷原始影像資料為原始二維影像資料,並在影像幀中根據座標平面中的多個三角形的重心座標生成對應於原始二維影像資料的影像遮罩,並根據影像遮罩生成第一三維影像資料;若判斷結果為是,則在影像幀中根據座標平面中的多個三角形的重心座標的像素值判斷原始三維影像資料的資料格式,並根據資料格式生成第一三維影像資料;判斷影像顯示區域是否為矩形,若判斷為否,則根據影像顯示區域的形狀沿外切線形成矩形顯示區域,並以矩形形心為中心將座標平面分為第一象限、第二象限、第三象限、以及第四象限;在座標平面中根據多個三角形的重心座標、以及視差補正值生成該影像遮罩;在座標平面中取得多個座標的像素值,並對多個像素值進行像素值運算以判斷原始三維影像資料的資料格式;以三維顯示裝置的顯示區形心為中心,將座標平面分為第一象限、第二象限、第三象限、以及第四象限;將第一象限、第二象限、第三象限、以及第四象限分別均分為多個區域以形成多個三角形座標,多個區域用於取得對應於多個三角形的重心座標的像素值。In this embodiment, the image
在本實施例中,本發明之影像資料轉換裝置2中包括第二通訊單元24,第二通訊單元24耦接三維顯示裝置5,並用以將第一三維影像資料輸出至三維顯示裝置5、又或者是也可以例如先將第一三維影像資料通過用以提升三維影像資料解析度、或用以調整三維影像資料參數等的外部裝置4,再將經過影像處理後的第二三維影像資料輸出至三維顯示裝置5。其中,三維顯示裝置5指的是用於顯示三維影像的裝置(三維影像包括第一三維影像、第二三維影像),外部裝置4指的是用於接收第一三維影像資料,並將第一三維影像資料再次進行影像處理的裝置,影像處理可以例如是提升影像解析度的處理(例如將三維影像從FHD(Full High Definition)提升為UHD(Ultra High Definition)),外部裝置4可以連接三維顯示裝置5並將進行影像處理過後的第二三維影像資料傳送並顯示於三維顯示裝置5中,第二通訊單元24可以是一種影像資料傳輸介面,只要是耦接三維顯示裝置5,並可以將三維影像資料傳送至三維顯示裝置5的裝置皆可做為本發明之第二通訊單元24,本發明不在此設限。In this embodiment, the image
在本實施例中,本發明之影像資料轉換裝置2中包括處理單元21,處理單元21指的是作為裝置的處理核心連接第一通訊單元22、儲存單元23、第二通訊單元24,用以執行儲存於儲存單元23的處理程序並且具有運算能力的裝置。舉例來說,處理單元23可以是單晶片微電腦(MCU,microcontroller unit)、 中央處理單元(CPU,Central Processing Unit)等又或者是其他具有相同功能的裝置,所列舉出來的處理單元種類僅為示例,本發明不在此做限制。其中,處理單元21可以包括:轉換單元211,例如可以從第一通訊單元22接收原始影像資料,並用以對原始影像資料中的原始二維影像資料進行影像處理並生成影像遮罩,並根據影像遮罩生成第一三維影像資料,再通過第二通訊單元24將第一三維影像資料提供於三維顯示裝置5中使用,在本實施型態中,第一三維影像資料包括影像遮罩;分析單元212,例如可以從第一通訊單元22接收原始影像資料,並用以分析原始影像資料中對應於各個座標點的像素值,以判斷原始影像資料中的原始三維影像資料的影像資料格式,或用以判斷原始影像資料中影像顯示區域的形狀、範圍、大小等;以及運算單元213,例如可以用以對影像資料中的像素值進行例如加總、相減、或比較大小等的運算。其中,轉換單元211、分析單元212、以及運算單元213指的是配合儲存於儲存單元23的處理程序,用於執行處理程序的電路、軟體、韌體、硬體、或其中的一部份,本發明不對轉換單元211、分析單元212、以及運算單元213的具體實施形式做限制。In this embodiment, the image
接著,請參照圖2至圖4,以下將針對處理單元23執行處理程序的步驟流程進行說明。Next, please refer to FIG. 2 to FIG. 4 , the following will describe the steps of the
處理單元21在從內視鏡系統3接收到原始影像資料後(例如原始二維影像資料、或原始三維影像資料),可以根據原始二維影像資料、或原始三維影像資料中的影像顯示區域提供影像幀,並根據影像幀判斷原始影像資料是否為原始三維影像資料。舉例來說,圖2提供了多種內視鏡系統3的影像資料的有效顯示區域的示例,內視鏡系統3所提供的影像資料的有效顯示區域可能不是矩形,在這些影像資料中可以有多種不同形狀的有效顯示區域(例如:梯形、平行四邊形、五邊形、六邊形、圓形等形狀),處理單元21可以根據原始影像資料中的影像顯示區域的顯示範圍,判斷在原始二維影像資料、或原始三維影像資料中,影像資料的有效顯示區域是否為矩形,若判斷為否,則可以根據影像顯示區域的形狀沿外切線形成矩形顯示區域,並以矩形形心為中心將座標平面分為第一象限、第二象限、第三象限、以及第四象限。在其中一個實施例中,處理單元21可以根據三維顯示裝置5的解析度並以三維顯示裝置5的顯示區形心為中心,將座標平面分為第一象限、第二象限、第三象限、以及第四象限。舉例來說,處理單元21可以例如對應影像顯示區域的形狀將影像中心點C0定義為X-Y座標平面的原點(0,0),並取有效顯示範圍中分別對應X軸、Y軸最大、最小的點座標,當原始影像資料中的顯示區域不是矩形時,處理單元21可以將顯示區域的形狀補正為矩形,並將顯示區域的形狀為矩形的影像資料作為影像幀提供。舉例來說,當有效顯示區域為半徑50像素的圓形時,有效顯示區域對應X軸、Y軸最大、最小的點座標分別為(0,50)、(50,0)、(-50,0)、以及(0,-50),在這種狀況,處理單元21可以將顯示區域的形狀補正為矩形,而補正後的矩形的四個頂點分別為(50,50)、(-50,50)、(-50,-50)、以及(50,-50),藉此根據原始二維影像資料、或原始三維影像資料中的影像顯示區域提供影像幀。After the
在取得影像幀後,處理單元21可以針對單一的影像幀進行分析(也就是影像資料中的一幀(frame)),並根據影像幀判斷原始影像資料是否為原始三維影像資料,若判斷結果為否,則判斷原始影像資料為原始二維影像資料,並在影像幀中根據座標平面中的多個三角形的重心座標生成對應於原始二維影像資料的影像遮罩,並根據影像遮罩生成第一三維影像資料。請參照圖3,在圖3中,C0指的是影像中心點(例如矩形的形心),同時也是X-Y座標平面的原點;o1、p1、q1、a、b、以及c指的是三角形的頂點座標;G0、G1、G2、G3、以及G4指的是分別對應不同三角形的三角形重心座標;G0’指的是將G0加入視差補正值後取得的座標,在這裡為了能夠更清楚地表示其方向關係將G0、G0’的點座標以方框表示。舉例來說,在單一的影像幀中,可以先將影像幀的影像中心點C0 (也就是形心C0)定義為X-Y座標平面的原點(0,0),藉此將X-Y座標平面分為第一象限、第二象限、第三象限、以及第四象限,然後在影像幀的影像邊界中取任意一點a,並與對面頂點b、c連線以形成三角形abc,接著取三角形abc的三條中線並得到交點G0,也就是三角形abc的重心G0。接著,相似地,在第一象限、第二象限、第三象限、以及第四象限中,分別取得多個三角形的重心座標G1、G2、G3、以及G4。然後,以三角形abc的重心G0作為舉例,可以將視差補正值(ΔX, ΔY)加入重心G0以取得視差補正座標G0’,舉例來說,假設重心G0的座標為G0 (0,-100),視差補正值為(Δ5,Δ5),則視差補正座標G0’為(0±5,-100±5),也就是G0’(-5,-105)、G0’(5,-105)、G0’(-5,-95)、以及G0’(5,-95),並以相似的方法將視差補正值(ΔX, ΔY)分別加入重心G1、G2、G3、以及G4中,以取得視差補正座標G1’、G2’、G3’、以及G4’。在取得三角形重心座標(G1、G2、G3、G4)、以及視差補正座標(G1’、G2’、G3’、 G4’)後,可以分別取得對應於該些座標的像素值,如遇到特殊狀況 (pattern,例如:H band、或V band等)可視情況往X軸方向、或Y軸方向取值做多像素取值延伸,並執行一像素值總和判斷式。舉例來說,當判斷式ΣG1=ΣG2’、或ΣG1=ΣG4’ 、或ΣG0=ΣG0’,並且ΣG1≠ΣG2’≠ΣG4’≠ΣG0’不成立時,則根據影像幀判斷原始影像資料是否為原始三維影像資料的判斷結果為否,判斷內視鏡系統3所提供的原始影像資料為二維影像資料,並根據多個三角形的重心座標生成對應於原始二維影像資料的影像遮罩,並根據影像遮罩生成包括影像遮罩的第一三維影像資料;當上述判斷式成立時,則根據影像幀判斷原始影像資料是否為原始三維影像資料的判斷結果為是,判斷內視鏡系統3所提供的原始影像資料為三維影像資料,並進一步根據多個三角形的重心座標的像素值判斷原始三維影像資料的資料格式,並根據資料格式生成包括資料格式的第一三維影像資料。After obtaining the image frame, the
接著,請參照圖4。處理單元21可以在單一影像幀中根據座標平面中的多個三角形的重心座標的像素值判斷原始三維影像資料的資料格式。首先,相似地,可以先將影像幀的影像中心點C0定義為X-Y座標平面的原點,藉此將X-Y座標平面分為第一象限、第二象限、第三象限、以及第四象限,接著,將第一象限、第二象限、第三象限、以及第四象限分別均分為多個區域以形成多個三角形頂點座標,且該些區域用於取得對應於多個三角形的重心座標的像素值。舉例來說,可以將X-Y座標平面按照第一象限、第二象限、第三象限、以及第四象限均分為2M*2N個區域,並取得2M*2N個對應該些區域的三角形的重心座標(如J、J’、J’’)、以及重心偏移座標(如K,重心偏移座標K對應於重心座標J,重心偏移座標K的座標為重心座標J往下一個像素的座標(也就是Y軸負方向),並且每個三角形的重心座標J、J’、J’’都有對應的重心偏移座標K、K’、K’’,在圖中僅以重心座標J、以及重心偏移座標K作為示例),並取得每個重心座標、以及重心偏移座標的像素值。在取得重心座標、以及重心偏移座標的像素值後,可以對該些像素值進行一像素值運算以判斷原始三維影像資料的資料格式。舉例來說,假設在第一象限中對應於重心座標的像素值總和為J1、對應於重心偏移座標的像素值總和為K1,在第二象限中對應於重心座標的像素值總和為J2、對應於重心偏移座標的像素值總和為K2,在第三象限中對應於重心座標的像素值總和為J3、對應於重心偏移座標的像素值總和為K3,在第四象限中對應於重心座標的像素值總和為J4、對應於重心偏移座標的像素值總和為K4;當運算式:∣(J1+J2)-(J3+J4) ∣的運算結果等於0、或等於視差調整值T時,則可判斷三維影像資料的資料格式為Top & Bottom,其中,視差調整值T可以由使用者視情況設定;當運算式:|(J1+J4)-(J2+J3) |的運算結果絕對值等於0、或等於視差調整值T’時,則可判斷三維影像資料的資料格式為Side by Side,其中,視差調整值T’可以由使用者視情況設定;當運算式:|(J1+J2+J3+J4)-(K1+K2+K3+K4) |的運算結果絕對值等於0、或等於視差調整值T’’時,則可判斷三維影像資料的資料格式為Line by Line,其中,視差調整值T’’可以由使用者視情況設定。當原始三維影像資料的資料格式判斷完成後可以由使用者進行三維影像的視差確認,若資料格式不正確則可再取另一影像幀並重複上述流程。在本實施形態中,第一三維影像資料包括資料格式,藉由生成包括資料格式的第一三維影像資料,可以免去繁雜的規格設定,使第一三維影像資料可以快速便捷地被三維顯示裝置5、以及外部裝置4所利用。Next, please refer to FIG. 4 . The
綜上所述,本發明的影像資料轉換裝置可以藉由第一通訊單元從內視鏡系統接收原始影像資料,再由處理單元執行儲存於儲存單元的處理程序,進而為原始影像資料中的原始二維影像資料建立影像遮罩,並根據影像遮罩生成第一三維影像資料、為原始影像資料中的原始三維影像資料進行影像資料的資料格式判定,並根據資料格式生成第一三維影像資料,然後再藉由第二通訊單元將第一三維影像資料傳送至三維顯示裝置、或其他外部裝置,使本發明可以藉由上述架構在連接內視鏡系統時避免進行繁雜的規格設定,只要將內視鏡系統連接至本發明的影像資料轉換裝置即可將原始二維影像資料轉換為三維影像資料、又或者是為原始三維影像資料進行影像資料的資料格式判斷,以快速便捷地將三維影像顯示於三維顯示裝置中。In summary, the image data conversion device of the present invention can receive the original image data from the endoscope system through the first communication unit, and then the processing unit executes the processing program stored in the storage unit, and then converts the original image data into the original image data. Establishing an image mask from the two-dimensional image data, and generating the first three-dimensional image data according to the image mask, determining the data format of the image data for the original three-dimensional image data in the original image data, and generating the first three-dimensional image data according to the data format, Then, the first three-dimensional image data is transmitted to the three-dimensional display device or other external devices through the second communication unit, so that the present invention can avoid complicated specification setting when connecting the endoscope system through the above-mentioned structure, as long as the internal The mirror system is connected to the image data conversion device of the present invention to convert the original two-dimensional image data into three-dimensional image data, or to judge the data format of the original three-dimensional image data, so as to quickly and conveniently display the three-dimensional image in a three-dimensional display device.
雖然本發明已以實施例揭露如上,然其並非用以限定本發明,本發明所屬技術領域中具有通常知識者,在不脫離本發明之精神和範圍內,當可作些許之更動與潤飾,因此本發明之保護範圍當視後附之申請專利範圍所界定者為準。Although the present invention has been disclosed above with the embodiments, it is not intended to limit the present invention. Those with ordinary knowledge in the technical field of the present invention can make some changes and modifications without departing from the spirit and scope of the present invention. Therefore, the scope of protection of the present invention should be defined by the scope of the appended patent application.
1:影像資料轉換系統 2:影像資料轉換裝置 21:處理單元 211:轉換單元 212:分析單元 213:運算單元 22:第一通訊單元 23:儲存單元 24:第二通訊單元 3:內視鏡系統 4:外部裝置 5:三維顯示裝置 C0 :影像中心點 G0、G1、G2、G3、G4:三角形重心座標 G0’:視差補正座標 a、b、c 三角形頂點座標 p1、q1、o1:三角形頂點座標 M:鉛錘方向區塊分割數量 N:水平方向區塊分割數量 J、J’、J’’:三角形重心座標 K:三角形重心偏移座標 1: Image data conversion system 2: Image data conversion device 21: Processing unit 211: conversion unit 212: Analysis unit 213: Operation unit 22: The first communication unit 23: storage unit 24: The second communication unit 3: Endoscope system 4: External device 5: Three-dimensional display device C0 : Image center point G0, G1, G2, G3, G4: coordinates of the center of gravity of the triangle G0': Parallax correction coordinates a, b, c Triangle vertex coordinates p1, q1, o1: triangle vertex coordinates M: The number of block divisions in the plumb direction N: Number of horizontal block divisions J, J', J'': the coordinates of the center of gravity of the triangle K: Offset coordinates of the center of gravity of the triangle
圖1為本發明一實施例所提供的影像資料轉換系統的方塊圖; 圖2為本發明一實施例所提供的影像資料的顯示區域的示意圖; 圖3為本發明一實施例所提供的三角形重心座標的示意圖;以及 圖4為本發明另一實施例所提供的三角形重心座標的示意圖。 FIG. 1 is a block diagram of an image data conversion system provided by an embodiment of the present invention; FIG. 2 is a schematic diagram of a display area of image data provided by an embodiment of the present invention; Figure 3 is a schematic diagram of the coordinates of the center of gravity of a triangle provided by an embodiment of the present invention; and Fig. 4 is a schematic diagram of the coordinates of the center of gravity of a triangle provided by another embodiment of the present invention.
1:影像資料轉換系統 1: Image data conversion system
2:影像資料轉換裝置 2: Image data conversion device
21:處理單元 21: Processing unit
211:轉換單元 211: conversion unit
212:分析單元 212: Analysis unit
213:運算單元 213: Operation unit
22:第一通訊單元 22: The first communication unit
23:儲存單元 23: storage unit
24:第二通訊單元 24: The second communication unit
3:內視鏡系統 3: Endoscope system
4:外部裝置 4: External device
5:三維顯示裝置 5: Three-dimensional display device
Claims (7)
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
TW111144518A TWI811162B (en) | 2022-11-22 | 2022-11-22 | Video data conversion device |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
TW111144518A TWI811162B (en) | 2022-11-22 | 2022-11-22 | Video data conversion device |
Publications (2)
Publication Number | Publication Date |
---|---|
TW202312729A true TW202312729A (en) | 2023-03-16 |
TWI811162B TWI811162B (en) | 2023-08-01 |
Family
ID=86690655
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
TW111144518A TWI811162B (en) | 2022-11-22 | 2022-11-22 | Video data conversion device |
Country Status (1)
Country | Link |
---|---|
TW (1) | TWI811162B (en) |
Family Cites Families (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
TWI323425B (en) * | 2006-07-28 | 2010-04-11 | Univ Nat Cheng Kung | Method and system for reconstructing 3-d endoscopic images |
TWI432168B (en) * | 2009-12-31 | 2014-04-01 | Univ Nat Yunlin Sci & Tech | Endoscope navigation method and endoscopy navigation system |
-
2022
- 2022-11-22 TW TW111144518A patent/TWI811162B/en active
Also Published As
Publication number | Publication date |
---|---|
TWI811162B (en) | 2023-08-01 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
TWI719493B (en) | Image projection system, image projection apparatus and calibrating method for display image thereof | |
JP6573419B1 (en) | Positioning method, robot and computer storage medium | |
WO2021031781A1 (en) | Method and device for calibrating projection image and projection device | |
TWI703870B (en) | Projector apparatus, projector system and an image calibration method | |
JP2021016153A5 (en) | ||
TW201905573A (en) | Projector system and display image calibration method thereof | |
JPWO2018235163A1 (en) | Calibration apparatus, calibration chart, chart pattern generation apparatus, and calibration method | |
US8079716B2 (en) | Image processing system, projector, method and computer program product | |
JP2012527787A (en) | A method for high-speed 3D construction from images | |
TWI714018B (en) | Layout identification method for display wall, and electronic device using the same | |
JPWO2013018173A1 (en) | Image processing apparatus, image processing method, and image processing program | |
TW201520508A (en) | System and method for interpolating points using contact probe | |
WO2020232971A1 (en) | Fisheye camera calibration system, method and apparatus, and electronic device and storage medium | |
WO2023273108A1 (en) | Monocular distance measurement method and apparatus, and intelligent apparatus | |
WO2019128495A1 (en) | Method and apparatus for detecting image resolution, storage medium, and electronic device | |
JP6318576B2 (en) | Image projection system, image processing apparatus, image projection method, and program | |
WO2017203796A1 (en) | Information processing device, information processing method, and program | |
TWI811162B (en) | Video data conversion device | |
WO2023124777A1 (en) | Projection calibration method and apparatus, electronic device and storage medium | |
CN115294277B (en) | Three-dimensional reconstruction method and device of object, electronic equipment and storage medium | |
JP2015138357A (en) | Image generation device and operation support system | |
CN107274449B (en) | Space positioning system and method for object by optical photo | |
JP2015201707A (en) | Display pattern generation apparatus, and program for the same | |
JP2022140119A (en) | Point cloud noise rejection device and program | |
JP2006338167A (en) | Image data creation method |