TW202306373A - 影像校正系統及其方法 - Google Patents

影像校正系統及其方法 Download PDF

Info

Publication number
TW202306373A
TW202306373A TW110127931A TW110127931A TW202306373A TW 202306373 A TW202306373 A TW 202306373A TW 110127931 A TW110127931 A TW 110127931A TW 110127931 A TW110127931 A TW 110127931A TW 202306373 A TW202306373 A TW 202306373A
Authority
TW
Taiwan
Prior art keywords
image
original
pixels
total number
pixel
Prior art date
Application number
TW110127931A
Other languages
English (en)
Other versions
TWI783600B (zh
Inventor
時善樂
Original Assignee
時善樂
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 時善樂 filed Critical 時善樂
Priority to TW110127931A priority Critical patent/TWI783600B/zh
Application granted granted Critical
Publication of TWI783600B publication Critical patent/TWI783600B/zh
Publication of TW202306373A publication Critical patent/TW202306373A/zh

Links

Images

Abstract

一種影像校正系統及其方法,係設置於一電子設備上,該電子設備有能夠輸出影像至一顯示螢幕上,而該電子設備內係儲存有至少一個影像回歸應用單元,該影像回歸應用單元係至少包含有一傾角校正元件及一長寬校正元件,其中該影像回歸應用單元用以於一或多個影像資訊檔取出一原始拍攝影像及一產生之傾斜角度資訊,並再依據重力角度感測器之傾斜角度資訊輸出新的像素位置,並再進行校正影像長寬比例,用以取得攝像裝置傾斜時最小完整影像水平傾角回歸並保持長寬比例的結果,使能夠回歸為水平、未截角、且與原影像長寬比一致的影像紀錄。

Description

影像校正系統及其方法
本發明是有關一種影像校正系統及其方法,是一種能夠回歸為水平、未截角、且與原影像長寬比一致的影像紀錄之影像校正系統及其方法。
現今以手機顯示APP選單時,只能依手機的橫向(影像寬面在水平,窄面在垂直方向)或縱向(影像窄面在水平,寬面在垂直方向) ,依重力感測元件自動調整可視影像,以每90度「固定級距」方式顯示在屏幕,無法顯示任意角度;也無法調整出鏡頭與顯示屏幕角度在小角度(小於90度)的傾角差別,以第1A圖解釋,在拍攝時,被拍攝人1之實像與拍攝端設備11屏幕上的影像在拍攝時人像的身體角度與屏幕上的人像身體角度都是朝上,不會有角度上的偏差或小於90度旋轉,即使使用三軸平衡雲台亦是如此。
而透過有些技術,能夠控制旋轉圖像的角度,然後原影像旋轉回歸任一角度,若不改變影像大小則至少會有二個影像框角跑到影像框外而造成截角缺點,使影像不完整,以第1B圖所示,當將拍攝完的影像傳給另一個接收端顯示設備12後,接收端顯示設備12即使有功能旋轉回水平後影像,如第1B圖所示,其中原拍攝虛框線121部分為示意拍攝獲得的影像邊界,若以中心為旋轉,則四個角皆有截角失真之現象發生。
另外,更有一種問題,如第2A圖所示,就是當被拍攝者2使用拍攝端設備21拍攝之原影像之攝影鏡頭不在水平位置時,而當接收端或事後觀看錄像時,如第2B圖所示,其接收端顯示設備22上顯示之畫面,會讓觀看者混淆被拍實景與攝影鏡頭傾角之關係,無法弄清楚到底是左邊較高或右邊較高;
以習知專利來看,不論是ZL.201710967824.X的左右鏡射技術、JP U3111261的影像反轉技術、JP 2003-219224的手動翻轉鏡頭模塊的電子手持鏡專利,皆沒有考慮到拍攝端鏡頭對水平傾斜時的調整,而ZL.201710967824.X的左右鏡射專利也只處理了相機中內參數(Intrinsic)的座標轉換,但當使用者持攝影鏡頭在自然座標系統中使用時,多多少少會因手持鏡頭的方便持握性好或不好,在攝影鏡頭的拍攝軸方向會產生旋轉(相機外參數 Extrinsic 改變),接收的一方有影像水平歪斜的不適應(如前所述);
然現今具有攝影鏡頭的手機多具備重力感測器(或稱「重力線角度測量元件」),部分已具有防手震(Anti-Shake)動態修正技術,但仍無法達到影像任意傾角回歸水平並保持長寬比例技術之目的,甚為可惜。
如前所述,目前市面上有使用三軸穩定器(三軸平衡雲台),如第3圖所示,這一類的三軸穩定器3確實能夠及時調整使拍攝之影像都能夠保持水平的狀態,因此不論使用者如何晃動或移動,都能夠保持影像的穩定度,然而這一類的設備,若是要足夠精準與速度要快,其設備必然很重且組件很多,故對於一般使用者來講攜帶外出是尤其負擔且不方便的。
因此,為了能夠依持續變動的影像任意傾角持續校正回歸水平影像,且能夠回歸為未截角、且與原影像長寬比一致的影像紀錄,本案提出一種影像回歸應用單元,該影像回歸應用單元係至少包含有一傾角校正元件及一長寬校正元件,其中該影像回歸應用單元用以於一或多個影像資訊檔取出一原始拍攝影像及一傾斜角度資訊,並再依據該傾斜角度資訊輸出新的像素位置,並再進行校正影像長寬比例,用以取得攝像裝置傾斜時最小完整影像水平傾角回歸並保持長寬比例的結果,以能夠回歸為水平、未截角、且與原影像長寬比一致的影像紀錄,因此本發明應為一最佳解決方案。
本發明影像校正系統,係設置於電子設備上,該電子設備有至少一個處理器及至少一個電腦可讀取記錄之媒體,而該電子設備能夠輸出影像至一顯示螢幕上,且該電腦可讀取記錄之媒體儲存有一或多個影像資訊檔,其中該影像校正系統及其方法係包含有:至少一個影像回歸應用單元,係儲存於該電腦可讀取記錄之媒體內,而該影像回歸應用單元係包含有:一傾角校正元件,係能夠於一或多個影像資訊檔取出一原始拍攝影像及一傾斜角度資訊,並於掃描該原始拍攝影像之每幀影像訊號,以取得一原始水平方向像素總數(w)、一原始垂直方向像素總數(h)、一任一原始像素水平座標(x)及一任一原始像素垂直座標(y),之後依據該原始水平方向像素總數(w)及該原始垂直方向像素總數(h)圍繞該原始拍攝影像輸出一第一水平方向像素總數(w’)及一第一垂直方向像素總數(h’)並產生出一圍繞框,該圍繞框係與該原始拍攝影像之影像邊界的四頂點相接觸,並依據該傾斜角度資訊輸出一未傾斜狀態下之第一像素水平座標(x’)及第一像素垂直座標(y’),以使該原始拍攝影像能夠依據多個第一像素水平座標(x’)及多個第一像素垂直座標(y’)產生出新的像素位置,以依據新的像素位置將該原始拍攝影像校正回不具傾角的水平狀態;以及一長寬校正元件,係與該傾角校正元件相連接,能夠依據該原始影像等長寬比(h/w)取得一第二水平方向像素總數(w’’)及一第二垂直方向像素總數(h’’),並依據該第二水平方向像素總數(w’’)、該第一水平方向像素總數(w’)及該第一像素水平座標(x’)輸出一第二像素水平座標(x’’),並依據該第一像素垂直座標(y’)輸出一第二像素垂直座標(y’’),用以校正輸出至該顯示螢幕上的影像能夠與該原始拍攝影像之影像長寬比例一致。
更具體的說,所述圍繞框係為一外接矩形框,其中該外接矩形框係沿著該原始拍攝影像之影像邊界的四頂點所形成。
更具體的說,所述圍繞框係為一圓框,其中該圓框係以該原始拍攝影像的中心為圓心所形成,而該原始拍攝影像之影像邊界的四頂點係接觸於該圓框上。
更具體的說,所述電子設備能夠設置或連接有一與該處理器電性連接之攝影鏡頭及一與該處理器電性連接之重力角度感測器,並能夠透過該攝影鏡頭拍攝產生該原始拍攝影像以及透過該重力角度感測器偵測到該傾斜角度資訊。
更具體的說,所述影像資訊檔係為一每幀影像含有該傾斜角度資訊(重力線角度資訊θ)的原始拍攝影像。
更具體的說,所述每幀影像含有該傾斜角度資訊(重力線角度資訊θ)的原始拍攝影像係為一可交換影像檔案格式 (例如:日本標準為Exchangeable image file format,Exif) 。
更具體的說,所述影像回歸應用單元係具有一控制開關元件,用以控制於該顯示螢幕上顯示之影像係為校正後之原始拍攝影像或是未校正之原始拍攝影像。
更具體的說,所述顯示螢幕能夠設置於該電子設備上或是透過一連接件或是無線連接方式與該電子設備連接。
一種影像校正方法,其步驟為: (1)    一影像回歸應用單元於一或多個影像資訊檔取出一原始拍攝影像及一傾斜角度資訊,並於掃描該原始拍攝影像之每幀影像訊號,以取得一原始水平方向像素總數(w)、一原始垂直方向像素總數(h)、一任一原始像素水平座標(x)及一任一原始像素垂直座標(y); (2)    該影像回歸應用單元依據該原始水平方向像素總數(w)及該原始垂直方向像素總數(h)圍繞該原始拍攝影像輸出一第一水平方向像素總數(w’)及一第一垂直方向像素總數(h’)並產生出一圍繞框,該圍繞框係與該原始拍攝影像之影像邊界的四頂點相接觸; (3)    該影像回歸應用單元依據該傾斜角度資訊輸出一未傾斜狀態下之第一像素水平座標(x’)及第一像素垂直座標(y’),以使該原始拍攝影像能夠依據多個第一像素水平座標(x’)及多個第一像素垂直座標(y’)產生出新的像素位置,以依據新的像素位置將該原始拍攝影像校正回不具傾角的水平狀態;以及 (4)    該影像回歸應用單元依據一用以輸出影像之原始影像等長寬比(h/w)取得一第二水平方向像素總數(w’’)及一第二垂直方向像素總數(h’’),並依據該第二水平方向像素總數(w’’)、該第一水平方向像素總數(w’)及該第一像素水平座標(x’)輸出一第二像素水平座標(x’’),並再依據該第一像素垂直座標(y’)輸出一第二像素垂直座標(y’’),用以校正輸出至該顯示螢幕上的影像能夠與該原始拍攝影像之影像長寬比例一致。
有關於本發明其他技術內容、特點與功效,在以下配合參考圖式之較佳實施例的詳細說明中,將可清楚的呈現。
請參閱第4A及4B圖,為本發明影像校正系統及其方法之整體架構示意圖及影像回歸應用單元之架構示意圖,由圖中可知,該影像校正系統係設置於一電子設備4(電子設備4能夠為手持智慧型裝置、平板電腦、攝像機、錄像機或是筆記型電腦等有鏡頭的設備)上,該電子設備4有至少一個處理器41及至少一個電腦可讀取記錄之媒體42,而該電子設備4能夠輸出影像至一顯示螢幕43上,而該顯示螢幕43能夠設置於該電子設備4上(或是如第5圖所示,該顯示螢幕6透過一連接件或是無線連接方式與該電子設備5連接用以進行顯示);
而該電腦可讀取記錄之媒體42儲存有一或多個影像資訊檔(動態影像或是靜態影像)及至少一個影像回歸應用單元421,而該影像回歸應用單元421之架構與資訊處理,如第4B圖所示,係包含有: (1)    一傾角校正元件4212,係能夠透過一影像輸入元件4211於該電腦可讀取記錄之媒體42內取出影像資訊檔(或是透過影像輸入元件4211由外部設備中取得影像資訊檔),並於一或多個影像資訊檔取出一原始拍攝影像及一傾斜角度資訊(是指攝影鏡頭的傾斜角度,一般是透過重力角度感測器進行感測所取得,故也能稱為重力線角度資訊θ),並於掃描該原始拍攝影像之每幀影像訊號,以取得一原始水平方向像素總數(w)、一原始垂直方向像素總數(h)、一任一原始像素水平座標(x)及一任一原始像素垂直座標(y),之後依據該原始水平方向像素總數(w)及該原始垂直方向像素總數(h)圍繞該原始拍攝影像輸出一第一水平方向像素總數(w’)及一第一垂直方向像素總數(h’)並產生出一圍繞框,該圍繞框係與該原始拍攝影像之影像邊界的四頂點相接觸,並依據該傾斜角度資訊輸出一未傾斜狀態下之第一像素水平座標(x’)及第一像素垂直座標(y’),以使該原始拍攝影像能夠依據多個第一像素水平座標(x’)及多個第一像素垂直座標(y’)產生出新的所有像素位置,以依據新的像素位置將該原始拍攝影像校正回不具傾角的水平狀態; (2)    一長寬校正元件4213,係與該傾角校正元件4212相連接,能夠依據原始影像等長寬比(h/w)取得一第二水平方向像素總數(w’’)及一第二垂直方向像素總數(h’’),並依據該第二水平方向像素總數(w’’)、該第一水平方向像素總數(w’)及該第一像素水平座標(x’)輸出一第二像素水平座標(x’’),並依據該第一像素垂直座標(y’)輸出一第二像素垂直座標(y’’),用以校正輸出至該顯示螢幕43上的影像能夠與該原始拍攝影像之影像長寬比例一致(即:w”/h” = w/h,下同); (3)    一控制開關元件4214,係與該長寬校正元件4213相連接,用以控制於該顯示螢幕43上顯示之影像係為校正後之原始拍攝影像或是未校正之原始拍攝影像,而該長寬校正元件4213能夠將該原始水平方向像素總數(w)、原始垂直方向像素總數(h)、任一原始像素水平座標(x)、任一原始像素垂直座標(y) 、第二水平方向像素總數(w’’) 、第二垂直方向像素總數(h’’) 、任一第二像素水平座標(x’’) 、任一第二像素垂直座標(y’’)傳送給該控制開關元件4214,如第6圖所示,若是關閉該控制開關元件4214,則將原始水平方向像素總數(w)、原始垂直方向像素總數(h)、任一原始像素水平座標(x)、任一原始像素垂直座標(y) 透過該影像輸出元件4215輸出未校正之原始拍攝影像於該顯示螢幕43上;反之,若是開啟該控制開關元件4214,則將第二水平方向像素總數(w’’) 、第二垂直方向像素總數(h’’) 、任一第二像素水平座標(x’’) 、任一第二像素垂直座標(y’’) 透過該影像輸出元件4215輸出校正後之原始拍攝影像於該顯示螢幕43上。
另外,本案之傾角校正元件4212、長寬校正元件4213及控制開關元件4214除了能夠以軟體方式搭配軟體介面進行控制之外,亦能夠透過電子設備4設置或外接有一實體操控面板,能夠透過實體操控面板上的不同實體按鍵或相關元件,來啟動或關閉該傾角校正元件4212、長寬校正元件4213及控制開關元件4214之運作。
如第4A圖所示,該電子設備4更能夠設置或連接有一與該處理器41電性連接之攝影鏡頭44及一與該處理器41電性連接之重力角度感測器45,並能夠透過該攝影鏡頭44拍攝產生該原始拍攝影像以及透過該重力角度感測器45偵測到該傾斜角度資訊;另外亦能夠如第5圖所示,該電子設備5本身能夠不需設置攝影鏡頭及重力角度感測器,能夠透過一連接件或是無線連接方式,來連接取得外部設備7所提供的影像資訊檔。
而影像資訊檔能夠包含有原始拍攝影像及傾斜角度資訊,其中影像資訊檔來源為: (1)    若分析裝置本身具有攝影鏡頭及重力角度感測器,則能夠由攝影鏡頭拍攝產生該原始拍攝影像,並由重力角度感測器偵測到該傾斜角度資訊; (2)    若分析裝置本身具有攝影鏡頭及重力角度感測器,能夠由一外部設備傳送一每幀影像含有該傾斜角度資訊(重力線角度資訊θ)的原始拍攝影像,這一類的原始拍攝影像係為一可交換影像檔案格式 (例如日本標準:Exchangeable image file format,Exif); (3)    若分析裝置本身不具有攝影鏡頭或/及重力角度感測器,能夠由一外部設備傳送一每幀影像含有該傾斜角度資訊(重力線角度資訊θ)的原始拍攝影像,這一類的原始拍攝影像係為一可交換影像檔案格式 (例如日本標準:Exchangeable image file format,Exif)。
而本案前述之圍繞框係為一外接矩形框,也就是外接新座標軸(取得最適影像),其中該外接矩形框係沿著該原始拍攝影像之影像邊界的四頂點所形成,以第7A及7B圖進一步說明,若原影像寬度為w像素,高度為h像素,則「外接新座標軸影像」仍以左上角為影像處理原點時,將不會有截角產生,但是會因為傾角為正(順時針轉)、為負(逆時針轉)會產生2組新座標,而傾角校正元件4212之運算說明如下(本專利以目前影像處理大多採用之左上角為原點,揭示公式推導,一般此領域技術人員可以依以下之步驟,另行轉換以左下角、右上角、右下角為原點之公式): (1)    如第7A圖所示,當原攝影鏡頭為順時針傾斜正角,也就是傾斜角度資訊(重力線角度資訊θ)大於等於0且小於90度時,先由原始拍攝影像取得原始水平方向像素總數(w)、原始垂直方向像素總數(h)、任一原始像素水平座標(x)及任一原始像素垂直座標(y),而運算方式如下: (a)     第一水平方向像素總數(w’)運算方式如下:
Figure 02_image001
(b)    第一垂直方向像素總數(h’)運算方式如下:
Figure 02_image003
(c)     第一像素水平座標(x’)運算方式如下:
Figure 02_image005
Figure 02_image007
Figure 02_image009
Figure 02_image011
(d)    第一像素垂直座標(y’)運算方式如下:
Figure 02_image013
Figure 02_image015
Figure 02_image017
(2)    如第7B圖所示,當原攝影鏡頭為逆時針傾斜負角,也就是傾斜角度資訊(重力線角度資訊θ)小於0並大於負90度時,先由原始拍攝影像取得原始水平方向像素總數(w)、原始垂直方向像素總數(h)、任一原始像素水平座標(x)及任一原始像素垂直座標(y),而運算方式如下: (a)     第一水平方向像素總數(w’)運算方式如下:
Figure 02_image001
(b)    第一垂直方向像素總數(h’)運算方式如下:
Figure 02_image003
(c)     第一像素水平座標(x’)運算方式如下:
Figure 02_image019
Figure 02_image021
Figure 02_image023
Figure 02_image025
Figure 02_image027
(d)    第一像素垂直座標(y’)運算方式如下:
Figure 02_image029
Figure 02_image031
Figure 02_image033
Figure 02_image035
Figure 02_image037
而以不同角度呈現以下不同實施樣態: (1)    如第8A圖,是代表原攝影鏡頭為順時針傾斜正角(正15度),其中影像邊界42121的框線是代表原始拍攝影像之影像邊界,而框線42122的框線是代表外接矩形框; (2)    如第8B圖,是代表原攝影鏡頭為逆時針傾斜負角(負45度),其中影像邊界42121的框線是代表原始拍攝影像之影像邊界,而框線42122的框線是代表外接矩形框。
而本案前述之圍繞框係為一圓框,也就是以原影像中心為圓心,影像四頂點外接圓(中心旋轉影像),而該原始拍攝影像之影像邊界的四頂點係接觸於該圓框上,以第9圖進一步說明,當以原影像中心為圓心,影像四頂點外接圓 (中心旋轉影像),以第9圖為例,若原影像寬度仍為w像素,高度仍為h像素,則以影像四頂點外接圓的水平向右上切線、垂直向下左切線為新座標軸,「外接圓所切新座標軸影像」原為影像左上角為影像處理原點,改為新座標時,因為都在正象限,不會有截角產生,只會產生1組新座標,而傾角校正元件4212之運算說明如下: (1)    第一水平方向像素總數(w’)運算方式如下:
Figure 02_image039
(2)    第一垂直方向像素總數(h’)運算方式如下: h
Figure 02_image041
(3)    第一像素水平座標(x’)運算方式如下:
Figure 02_image043
(公式1)
Figure 02_image045
Figure 02_image047
Figure 02_image049
(公式2)
Figure 02_image051
Figure 02_image053
Figure 02_image055
Figure 02_image057
Figure 02_image059
Figure 02_image061
Figure 02_image063
Figure 02_image065
Figure 02_image067
Figure 02_image069
Figure 02_image071
Figure 02_image069
與(公式2)代入(公式1)
Figure 02_image073
Figure 02_image075
(4)    第一像素垂直座標(y’)運算方式如下:
Figure 02_image077
(公式3)
Figure 02_image079
Figure 02_image081
Figure 02_image083
Figure 02_image085
(公式4)
Figure 02_image087
Figure 02_image089
(公式5)
Figure 02_image091
Figure 02_image093
Figure 02_image095
Figure 02_image097
Figure 02_image099
Figure 02_image101
Figure 02_image103
Figure 02_image105
Figure 02_image107
與(公式5、4)代入(公式3)
Figure 02_image109
Figure 02_image111
而以不同角度呈現以下不同實施樣態: (1)    如第10A圖,是代表原攝影鏡頭為順時針傾斜正角(正15度),其中影像邊界42121的框線是代表原始拍攝影像之影像邊界,而框線42123是代表圓框; (2)    如第10B圖,是代表原攝影鏡頭為逆時針傾斜負角(負45度),其中影像邊界42121的框線是代表原始拍攝影像之影像邊界,而框線42123是代表圓框。
而以前述第8A圖為例,原寬、長比(w , h)為2:1的虛線影像,若完成傾角校正後,(w’ , h’)仍以寬、長比例2:1轉出會變成如第11圖的樣態,由圖中可知,影像(框線42125示意為校正後失真影像範圍)已扭曲失真,必須加以處理。
如第12圖所示,w’、h’標示範例之圍繞框為原影像之影像邊界42121之外接矩形框42122,並以框線42124示意為長寬比校正後影像範圍,並使原影像之影像邊界42121居中,並以w大於等於h為說明(w小於h依下式一般技術人員皆可推導,故不額外贅述),而長寬比校正說明如下: (1)    若要保持為影像長寬比例,則公式6如下:
Figure 02_image113
(2)    而寬、長比不變下的最小影像為:
Figure 02_image115
(3)    之後代入公式6得到:
Figure 02_image117
(4)    進一步得到: X
Figure 02_image119
=X
Figure 02_image121
+
Figure 02_image123
(w
Figure 02_image119
-w
Figure 02_image125
)
Figure 02_image001
X
Figure 02_image127
=X
Figure 02_image129
[
Figure 02_image131
] =X
Figure 02_image133
(
Figure 02_image135
(5)    而
Figure 02_image137
如第13圖所示,圍繞框為圓框42123,並以框線42124示意為校正後影像範圍,並使原影像之影像邊界42121居中,另以圓框為示意原影像之影像邊界42121之外接圓,找出X’方向偏置量,而長寬比校正說明如下: (1)    若要保持為影像長寬比例,則公式7如下:
Figure 02_image113
(2)    而寬、長比不變下的最小影像為:
Figure 02_image139
(3)    之後代入公式7得到:
Figure 02_image141
Figure 02_image143
(
Figure 02_image145
-
Figure 02_image147
) =
Figure 02_image149
(
Figure 02_image151
1) (4)    進一步得到: X”=X’
Figure 02_image153
(
Figure 02_image155
)(5)    而
Figure 02_image137
(6)    另外,無論圍繞框為外接矩形框或為圓框, 其中Y"=Y' 皆可得保持長寬比例的影像,至於擴延的影像外的區域可以空白底或加背景,一般影像技術人員皆可處理,不在此贅述。
另外,由於一般顯示器都自帶Auto Fit能力,所以手機投影給手機或手機投影給電視,都能自動擴延至顯示器最大可顯示狀態,故本案使用原始影像等長寬比(h/w)進行校正,故本案之長寬比校正不須理會任何顯示螢幕之規格(例如:長、寬各多少像素)。
另外,針對第1A圖進行校正後,若是透過外接新座標軸(以圍繞框為外接矩形框)的方法進行校正,其效果如第14A圖所示;若是以中心旋轉影像的外接圓新座標軸的方法進行校正,其效果如第14B圖所示,其中影像邊界42121為示意影像邊界、框線42122為示意影像外接矩形、框線42123為示意影像外接圓,其效果明顯能改善其問題。
另外,針對第2B圖進行校正後,若是透過外接新座標(以圍繞框為外接矩形框)的方法進行校正,其效果如第15A圖所示;若是以中心旋轉影像的外接圓方法進行校正,其效果如第15B圖所示,其中影像邊界42121為示意影像邊界、框線42122為示意影像外接矩形、框線42123為示意影像外接圓,其效果明顯能改善其問題。
如第16圖所示,本案影像校正方法之步驟為: (1)    一影像回歸應用單元於一或多個影像資訊檔取出一原始拍攝影像及一傾斜角度資訊,並於掃描該原始拍攝影像之每幀影像訊號,以取得一原始水平方向像素總數、一原始垂直方向像素總數、一任一原始像素水平座標及一任一原始像素垂直座標1601; (2)    該影像回歸應用單元依據該原始水平方向像素總數(w)及該原始垂直方向像素總數(h)圍繞該原始拍攝影像輸出一第一水平方向像素總數(w’)及一第一垂直方向像素總數(h’)並產生出一圍繞框,該圍繞框係與該原始拍攝影像之影像邊界的四頂點相接觸1602; (3)    該影像回歸應用單元依據該傾斜角度資訊輸出一未傾斜狀態下之第一像素水平座標(x’)及第一像素垂直座標(y’),以使該原始拍攝影像能夠依據多個第一像素水平座標(x’)及多個第一像素垂直座標(y’)產生出新的像素位置,以依據新的像素位置將該原始拍攝影像校正回不具傾角的水平狀態1603;以及 (4)    該影像回歸應用單元依據一用以輸出影像之原始影像等長寬比(h/w)取得一第二水平方向像素總數(w’’)及一第二垂直方向像素總數(h’’),並依據該第二水平方向像素總數(w’’)、該第一水平方向像素總數(w’)及該第一像素水平座標(x’)輸出一第二像素水平座標(x’’),並再依據該第一像素垂直座標(y’)輸出一第二像素垂直座標(y’’),用以校正輸出至該顯示螢幕上的影像能夠與該原始拍攝影像之影像長寬比例一致1604。
本發明所提供之影像校正系統及其方法,與其他習用技術相互比較時,其優點如下: 1.       本發明能夠依持續變動的影像任意傾角持續校正回歸水平影像,且能夠回歸為未截角、且與原影像長寬比一致的影像紀錄。 2.       本發明提出一種影像回歸應用單元,該影像回歸應用單元係至少包含有一傾角校正元件及一長寬校正元件,其中該影像回歸應用單元用以於一或多個影像資訊檔取出一原始拍攝影像及一傾斜角度資訊,並再依據該傾斜角度資訊輸出新的像素位置,並再進行校正影像長寬比例,用以取得攝像裝置傾斜時最小完整影像水平傾角回歸並保持長寬比例的結果,以能夠回歸為水平、未截角、且與原影像長寬比一致的影像紀錄。 3.       本發明能夠以軟體方式進行持續校正回歸水平影像,因此不須使用三軸穩定器,除了能夠節省費用之外,更能夠於拍攝時不需攜帶很重且組件很多與不變使用的三軸穩定器。
本發明已透過上述之實施例揭露如上,然其並非用以限定本發明,任何熟悉此一技術領域具有通常知識者,在瞭解本發明前述的技術特徵及實施例,並在本發明之精神和範圍內,不可作些許之更動與潤飾,因此本發明之專利保護範圍須視本說明書所附之請求項所界定者為準。
1:被拍攝人 11:拍攝端設備 12:接收端顯示設備 121:虛框線 2:被拍攝者 21:拍攝端設備 22:接收端顯示設備 3:三軸穩定器 4:電子設備 41:處理器 42:電腦可讀取記錄之媒體 421:影像回歸應用單元 4211:影像輸入元件 4212:傾角校正元件 42121:影像邊界 42122:框線 42123:框線 42124:框線 42125:框線 4213:長寬校正元件 4214:控制開關元件 4215:影像輸出元件 43:顯示螢幕 44:攝影鏡頭 45:重力角度感測器 5:電子設備 6:顯示螢幕
[第1A圖]係習用影像拍攝示意圖。 [第1B圖]係習用影像拍攝後校正示意圖。 [第2A圖]係另一習用影像拍攝示意圖。 [第2B圖]係另一習用影像拍攝後校正接收端示意圖。 [第3圖]係習用三軸穩定器示意圖。 [第4A圖]係本發明影像校正系統及其方法之系統架構示意圖。 [第4B圖]係本發明影像校正系統及其方法之影像回歸應用單元之架構示意圖。 [第5圖]係本發明影像校正系統及其方法之另一系統架構示意圖。 [第6圖]係本發明影像校正系統及其方法之資訊處理示意圖。 [第7A圖]係本發明影像校正系統及其方法之外接新座標軸之傾斜正角運算分析示意圖。 [第7B圖]係本發明影像校正系統及其方法之外接新座標軸之傾斜負角運算分析示意圖。 [第8A圖]係本發明影像校正系統及其方法之外接新座標軸之不同角度實施樣態示意圖。 [第8B圖]係本發明影像校正系統及其方法之外接新座標軸之不同角度實施樣態示意圖。 [第9圖]係本發明影像校正系統及其方法之中心旋轉影像之運算分析示意圖。 [第10A圖]係本發明影像校正系統及其方法之中心旋轉影像之不同角度實施樣態示意圖。 [第10B圖]係本發明影像校正系統及其方法之中心旋轉影像之不同角度實施樣態示意圖。 [第11圖]係本發明影像校正系統及其方法之傾角校正後影像扭曲失真示意圖。 [第12圖]係本發明影像校正系統及其方法之外接新座標軸之長寬比校正示意圖。 [第13圖]係本發明影像校正系統及其方法之中心旋轉影像之長寬比校正示意圖。 [第14A圖]係本發明影像校正系統及其方法之透過外接新座標軸之截角失真以本案傾角與長寬比校正結果示意圖。 [第14B圖]係本發明影像校正系統及其方法之透過中心旋轉影像之截角失真以本案傾角與長寬比校正結果示意圖。 [第15A圖]係本發明影像校正系統及其方法之透過外接新座標軸之觀看者混淆以本案傾角與長寬比校正結果示意圖。 [第15B圖]係本發明影像校正系統及其方法之透過中心旋轉影像之觀看者混淆以本案傾角與長寬比校正結果示意圖。 [第16圖]係本發明影像校正系統及其方法之影像校正流程示意圖。
4:電子設備
41:處理器
42:電腦可讀取記錄之媒體
421:影像回歸應用單元
43:顯示螢幕
44:攝影鏡頭
45:重力角度感測器

Claims (9)

  1. 一種影像校正系統,係設置於電子設備上,該電子設備有至少一個處理器及至少一個電腦可讀取記錄之媒體,而該電子設備能夠輸出影像至一顯示螢幕上,且該電腦可讀取記錄之媒體儲存有一或多個影像資訊檔,其中該影像校正系統及其方法係包含有: 至少一個影像回歸應用單元,係儲存於該電腦可讀取記錄之媒體內,而該影像回歸應用單元係至少包含有: 一傾角校正元件,係能夠於一或多個影像資訊檔取出一原始拍攝影像及一傾斜角度資訊,並於掃描該原始拍攝影像之每幀影像訊號,以取得一原始水平方向像素總數(w)、一原始垂直方向像素總數(h)、一任一原始像素水平座標(x)及一任一原始像素垂直座標(y),之後依據該原始水平方向像素總數(w)及該原始垂直方向像素總數(h)圍繞該原始拍攝影像輸出一第一水平方向像素總數(w’)及一第一垂直方向像素總數(h’)並產生出一圍繞框,該圍繞框係與該原始拍攝影像之影像邊界的四頂點相接觸,並依據該傾斜角度資訊輸出一未傾斜狀態下之第一像素水平座標(x’)及第一像素垂直座標(y’),以使該原始拍攝影像能夠依據多個第一像素水平座標(x’)及多個第一像素垂直座標(y’)產生出新的像素位置,以依據新的像素位置將該原始拍攝影像校正回不具傾角的水平狀態;以及 一長寬校正元件,係與該傾角校正元件相連接,能夠依據一原始影像等長寬比(h/w)取得一第二水平方向像素總數(w’’)及一第二垂直方向像素總數(h’’),並依據該第二水平方向像素總數(w’’)、該第一水平方向像素總數(w’)及該第一像素水平座標(x’)輸出一第二像素水平座標(x’’),並依據該第一像素垂直座標(y’)輸出一第二像素垂直座標(y’’),用以校正輸出至該顯示螢幕上的影像能夠與該原始拍攝影像之影像長寬比例一致。
  2. 如請求項1所述之影像校正系統,其中該圍繞框係為一外接矩形框,其中該外接矩形框係沿著該原始拍攝影像之影像邊界的四頂點所形成。
  3. 如請求項1所述之影像校正系統,其中該圍繞框係為一圓框,其中該圓框係以該原始拍攝影像的中心為圓心所形成,而該原始拍攝影像之影像邊界的四頂點係接觸於該圓框上。
  4. 如請求項1所述之影像校正系統,其中該電子設備能夠設置或連接有一與該處理器電性連接之攝影鏡頭及一與該處理器電性連接之重力角度感測器,並能夠透過該攝影鏡頭拍攝產生該原始拍攝影像以及透過該重力角度感測器偵測到該傾斜角度資訊。
  5. 如請求項1所述之影像校正系統,其中該影像資訊檔係為一每幀影像含有該傾斜角度資訊(θ)的原始拍攝影像。
  6. 如請求項5所述之影像校正系統,其中該每幀影像含有該傾斜角度資訊(θ)的原始拍攝影像係為一可交換影像檔案格式 (Exchangeable image file format) 。
  7. 如請求項1所述之影像校正系統,其中該影像回歸應用單元係具有一控制開關元件,用以控制於該顯示螢幕上顯示之影像係為校正後之原始拍攝影像或是未校正之原始拍攝影像。
  8. 如請求項1所述之影像校正系統,其中該顯示螢幕能夠設置於該電子設備上或是透過一連接件或是無線連接方式與該電子設備連接。
  9. 一種影像校正方法,其步驟為: 一影像回歸應用單元於一或多個影像資訊檔取出一原始拍攝影像及一傾斜角度資訊(θ),並於掃描該原始拍攝影像之每幀影像訊號,以取得一原始水平方向像素總數(w)、一原始垂直方向像素總數(h)、一任一原始像素水平座標(x)及一任一原始像素垂直座標(y); 該影像回歸應用單元依據該原始水平方向像素總數(w)及該原始垂直方向像素總數(h)圍繞該原始拍攝影像輸出一第一水平方向像素總數(w’)及一第一垂直方向像素總數(h’)並產生出一圍繞框,該圍繞框係與該原始拍攝影像之影像邊界的四頂點相接觸; 該影像回歸應用單元依據該傾斜角度資訊輸出一未傾斜狀態下之第一像素水平座標(x’)及第一像素垂直座標(y’),以使該原始拍攝影像能夠依據多個第一像素水平座標(x’)及多個第一像素垂直座標(y’)產生出新的像素位置,以依據新的像素位置將該原始拍攝影像校正回不具傾角的水平狀態;以及 該影像回歸應用單元依據一原始影像等長寬比(h/w)取得一第二水平方向像素總數(w’’)及一第二垂直方向像素總數(h’’),並依據該第二水平方向像素總數(w’’)、該第一水平方向像素總數(w’)及該第一像素水平座標(x’)輸出一第二像素水平座標(x’’),並再依據該第一像素垂直座標(y’)輸出一第二像素垂直座標(y’’),用以校正輸出至該顯示螢幕上的影像能夠與該原始拍攝影像之影像長寬比例一致。
TW110127931A 2021-07-29 2021-07-29 影像校正系統及其方法 TWI783600B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
TW110127931A TWI783600B (zh) 2021-07-29 2021-07-29 影像校正系統及其方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
TW110127931A TWI783600B (zh) 2021-07-29 2021-07-29 影像校正系統及其方法

Publications (2)

Publication Number Publication Date
TWI783600B TWI783600B (zh) 2022-11-11
TW202306373A true TW202306373A (zh) 2023-02-01

Family

ID=85794416

Family Applications (1)

Application Number Title Priority Date Filing Date
TW110127931A TWI783600B (zh) 2021-07-29 2021-07-29 影像校正系統及其方法

Country Status (1)

Country Link
TW (1) TWI783600B (zh)

Also Published As

Publication number Publication date
TWI783600B (zh) 2022-11-11

Similar Documents

Publication Publication Date Title
US8009929B2 (en) Image-capturing apparatus, method, and program which correct distortion of a captured image based on an angle formed between a direction of an image-capturing apparatus and a gravitational direction
EP2820515B1 (en) Device camera angle
US20130229570A1 (en) Shifted lens camera for mobile computing devices
US20050104848A1 (en) Image processing device and method
TW200419186A (en) Image processing system, projector, portable device and image processing method
US20050093891A1 (en) Image orientation apparatus and method
JP2013009304A (ja) 画像入力装置、会議装置、画像処理制御プログラム、記録媒体
US20120026350A1 (en) Image display apparatus and photographing apparatus
US20100085469A1 (en) User input apparatus, digital camera, input control method, and computer product
EP2009907A1 (en) Camera apparatus, and image processing apparatus and image processing method
WO2010137513A1 (ja) 電子機器
WO2022040951A1 (zh) 图像矫正方法和装置、图像采集设备和存储介质
JP2012019295A (ja) 表示システム、投影装置及び撮像装置
JP2004343476A (ja) 撮像装置、撮像結果の処理装置及び撮像結果の処理方法
WO2018042582A1 (ja) 投射型映像表示装置および投射映像の調整方法
US20210176409A1 (en) Electronic device and method of controlling electronic device
US11381734B2 (en) Electronic device and method for capturing an image and displaying the image in a different shape
TWI783600B (zh) 影像校正系統及其方法
WO2023010546A1 (zh) 影像校正系统及其方法
TW201536050A (zh) 可修正偏移視角的影像擷取方法、電腦程式產品暨其影像擷取裝置
US10911593B2 (en) Electronic device having a rotatable camera module
CN111381750B (zh) 电子装置及其控制方法和计算机可读存储介质
JP2010278511A (ja) 電子機器
TWI745992B (zh) 用於虛擬觸控之投影裝置及其方法
JP5324980B2 (ja) 携帯端末及び画像方向補正方法