TW569617B - Image synthesizing method of multi-lens array CCD camera - Google Patents

Description

569617 五、發明說明（1) 【發明範圍】 本發明係有關一種多鏡頭陣列CCD攝影機之影像合成 方法，特別係利用CCD攝影機之移動或架設多鏡頭之CCD攝 影機之影像融合裝置以提高影像之解析度者，並可縮短焦 距，使成一高解析度解乳極薄之相機。 【發明背景】 當我們利用CCD掘取影像時，所得到的影像並不能完 整的呈現出來，受限於CCD的解析度，影像會有不同程度 的遺失比率。為要瞭解CCD影像遺失的情況，我們將畫素 (p i xe 1)以〇X的目標物圖形來舉例說明，如第1 A圖和第 1 B圖所示，相對於目標物1 2與CCD^頭1 4之間的遠距離（5 公尺以上），〇X的間隔非常小。請參照第1 A圖，由於CCD 的解析度有一定之限度，則在CCD單位方塊晶格中，所擷 取道的影像1 6可能就只有〇的部分，而CCD間隔不測光部 分之〇X部分的影像就不見了。故由於CCD解析度之限制， 常會有影像遺失之情形產生。若要解決該項問題，現今的 作法只有往高解析度（高畫素）的方向發展，即CCD之密 度增加，使X之部分亦有CCD之元素（或稱畫素）存在。但再 高的晝素皆有其製造上之瓶頸，不但費時費事且不經濟。 故本發明係一種全新的觀念及實際可行的方法解決增高解 析度的問題。 【發明之概述】 本發明之主要目的在於提供一種多鏡頭陣列CCD攝影 機之影像合成方法，其能改善CCD影像遺失所造成之影像

第4頁 569617 五、發明說明（2) 失真問題，進而提供一高解析度之影像者。 本發明之再一目的在於楛供_ 少飧人λ、+ 1 ^ 权仏種多鏡頭陣列CCD攝影 機之影像合成方法，其在提供蒿缸& ώ ^ ^ 八你夾仏问解析度影像之前提下，更 能精，，積，而具有製成名片式極薄相機之功效者。 ^ 本發明為改良這種CCD影像失真問題所採之技 術手段，如第1Β圖所示，該□為CCD之表示，則目標物12 中之〇之部伤成像在CCD之匚1内，若我們將CCD鏡頭丄4相對 於原C C D鏡頭1 4位置在平行圖形的方向移動一距離，如此 影像1 6也就跟著反方向移動，則在CCD單位方塊晶格中，

所操取到移動後的影像就可能只擷取到X的部分。假設CCD 的解析度示5 p i xe 1 s/mm，若將兩鏡頭分別得到如第丨八圖 之◦部份和第1 B圖所擷取的影像X部份疊合在一起，如第2 f所示，則目標物之〇X部份將全部合成在一張像上，即 將影像的解析度提升至1 〇 p i xe丨s/_，因為兩張圖有互 〆的作用，進而可以得到更完整的影像。 則必須將所要擷 才能擷取到解析 相對於原鏡頭來 為要能擷取到CCD影像失真的部分 的影像移動半個CCD單位晶格的距離 ^的部分。而增加位移△ L之CCD鏡頭.， —… 1 則代表著所拍攝的像移動了 ，為方便 貴審查委員了 本發明利用此觀念來畫出光路圖。請參照第3圖，物 5& jku ’ P，像距為q，從幾何光學中可知，當第二鏡頭2 0相對 原一 '、兄碩1 8光軸向下移動了 △ L，由第4圖可知： 厶 AOO’oo AA，A丨丨 A L /△ h = p/ (p + q)

第5頁 569617 五、發明說明（3)

··· △ h，= A L (P+ q)/ P =Δ L ( 1+ Μ ) M= q/ P為放大率 則像移動為△ L (1+ Μ)之距離，若控制△ L，便可讓 影像移動半個可解析的單位晶格CCD間距的距離，進而抬員 敢到影像失真的部分。 此項問題，本發明人在另一專利「CCD感測器解析度 增強裝置」（專利號碼第：4 6 2 5 6 7號）已提出利用微機電帶 動裝置帶動CCD感測鏡頭或CCD之方法，但鏡頭只是微移， 本發明提供更進一步鏡頭大移動之方法。 △ h’為半個CCD間距，但鏡片要移動如此小之距離不 易’故乃多移一個或多個週期，即將鏡頭移至另個書面而 落在同規格之另一個CCD上，但其光軸與CCD中心錯開半個 pixel距離，如第5圖所示，此時CCDm CCD2各由鏡頭消 鏡頭2成像，但鏡頭1因對CCD1之中心而言未移光轴，故得 〇〇〇之影像，而鏡頭2因對CCD2之中心而言移了半圭于 素間距，故得XXX之影像，而由電腦重組〇χ交錯一 得兩倍解析度之影像。同理若將CCD晝素間距分成=， ί趨及nrct次偏移1/n間格得*影像再將°« 像乂錯口成張，可侍n倍解析度之像。又同理，w 平方向增加n組，則可得到11平方倍解析度之 右在水 繼請參閱第4、5圖，設若距離〇 χ 當於CCD 1之半間距長，例如〇 χ之铷 η為物’其像相 為距離0’ ηΧ，η= △ h，丨，經鏡頭2至c CCD1之像 △ h，2，則 认D2之像為距離〇"nX"尸

569617

五、發明說明（4) Δ ABC〇〇 Δ Αχ, ηΧπ η △ L/ χ’ ηΧπ η(距離）=ρ/ Ρ+ q X’ ηΧπ η(距離）=△ L ( 1+ Μ)= △ L (1+ γ ρ) △ h，〆△ h = △ h，Ζ A Μ= q/ ρ △ h △ h y此式即表示鏡項！、鏡頭2放大率门 故在CCD1之上之像之大小與在CCD2上之像之大小相门（此 時設與C C D大小相比物距足夠遠）；此時若將c C D 2之之办 位置及上述之X之位置置於此，則其鄰近之〇” ! γ„ 了間 接受物之X像，故 < 利用CCD2接受X部份，而CCD1 接受〇部份，即CCD2之中心略為對鏡片C中心軸離軸半個 p i X e 1間距。 若 q < < p，則距離 X，nX" rT △ L 若x，為CCD1之端點，X"為CCD2之端點， 距離X，nXn f △ Lg CCD之直徑長，否則二CCD會相疊。 若物距小，Z BAC大，則視差會出現，此時C鏡片成像更往 CCD2之邊緣移動，與CCD1相較移動率明顯，故需用内建程 式修正，使C C D1之中心0 ’ 〇與〇π 〇相校正，其關係為： ㈣=1+Μ l ρ ° 因相機測距可知Ρ，故可求出 〇丨〇-〇"〇之距離，若測距 略為不準，使 〇丨〇-〇丨_〇有小出入，則需用取得二CCD中心影 像互疊做Auto Corre 1 at i on取其最相近之相疊位置為中心 ，再將二相片相加，可得更高解析度之影像。 再者此二CCD所取之像必有些微不同’容或測距自動

569617 五、發明說明（5)

對焦部份不準或鏡頭裝配精準声 # 長短，必能增加其解析度而達$較：解：：之合成則互補 乂 ％巧竿又同解析度之效果。 由刖述說明可知，本發明可利用一 ⑽完成一光學系統而將解析度 = 及車列 之可靠度與解析度成反比，故製成高解析度如千萬主矛 CCD十分昂貴，若用現成便宜已量產之CCD組合，則;達 高解析度且具經濟效益之產品。再者，本發明更可將原」 需長鏡頭之長f值以含蓋其晝面，而可由分成陣列式nxn個 小短f值之鏡頭取代，因此可製作成後交極短之扁平式 名片式）之照相機。 為使對本發明之目的、技術特徵及其他功效有更進 步的認識與瞭解，兹配合實施例及圖式詳細說明如下· 【實施說明】 請參照第6圖’本發明係以一部CCD攝影機先固定在某 一點上來擷取物體3 0之第一次影像3 2，然後再將該部CCD 移動一距離s，使C C D擷取同一物體3 〇之第二次影像3 4，再 將CCD兩次擷取之影像資訊輸送至電腦，藉由兩張影像的 疊合，以取得更高一維解析度的合成影像36。若要取得二 維高解析度之影像，可將該CCD往上或往下一距離，擷取 同一物體之再另一影像，然後將該影像與前述之二影像資 訊輸送至電腦，藉由三張影像之疊合，可得更高二維解析 度之影像。CCD攝影機之移動基本上可利用步進馬達行之 ，以取得南精確度之移動距離。 本發明之實施例是將二CCD分開一距離s固定設置’如

第8頁 569617 五、發明說明（6) 第7A圖所示，或將一 CCD攝影機内固定設置有距離s之二鏡 頭2 2、2 4，如第7 B圖所示，同時擷取物體2 6影像，再將二 影像資訊輸送至電腦進行電腦合成影像2 8。 本發明之再另一實施例即是再一 CCD内設置一組上下 和左右各等距離固定設置之四鏡頭，如第8圖所示，使擷 取之影像能夠上下和左右移動CCD半個晝素的距離。事實 上，可先計算出所需移動鏡頭的距離，再設計多組鏡頭的 CCD時，依所計算好的距離將鏡頭偏離CCD中心軸半個晝素 間隔而固定架設於CCD上，則各個鏡頭自然會擷取到移動 半個晝素的影像，故可不須藉由移動鏡頭來達到此目的。 本發明之實施例可推演至n2個鏡頭陣列及對應CCD陣 列，可以半導體製程鏡片及CCD—次製成（lens on chip) ，而各CCD中心與鏡片中心依次差1/ η的CCD pixel間距， 以達到在某維方向增加η倍解析度目的。 綜合上述，本發明確已符合發明專利之要件，爰依法 提出專利申請。惟，以上所述僅為本發明之較佳實施例， 舉凡熟悉本案技藝之人士援依本發明之發明精神所作之等 效修飾或變化，皆應涵蓋在本申請專利範圍内。 【圖式符號說明】 1、2鏡頭 12 目標物 14 C C D鏡頭 16 影像 1 8、2 0鏡頭

第9頁 569617 五、發明說明（7) 30 物體 32 第一次影像 34 第二次影像 36 合成影像3 6 22^ 24 鏡頭 26 物體 28 電腦合成影像 #

第10頁 569617 圖式簡單說明 第1 A、B圖係CCD擷取影像示意圖。 第2圖係CCD合成影像示意圖。 第3圖係CCD光路示意圖。 第4圖係物距示意圖。 第5圖係本發明CCD光路示意圖。 第6圖係本發明實施例示意圖。 第7 A、B圖係本發明第二實施例示意圖。 第8圖係本發明第三實施例示意圖。

Claims (1)

1. 569617 六、申請專利範圍 1 · 一種多鏡頭陣列CCD攝影機之影像合成方法， (a )首先於攝取圖形時，將一 CCD鏡頭對準光軸，擷 取一影像； (b )將該CCD鏡頭偏離該光軸向左或右一距離，擷取 另一影像； (c)將該CCD鏡頭偏離該光轴向上或下一距離，擷取 又另一影像； (d )將步驟（a )、（ b )和（c )所擷取之影像資訊輸送至 電腦，藉由三張影像之疊合以取得二維高解析度 之影像。 2 ·如申請專利範圍第1項所述之多鏡頭陣列CCD攝影機 之影像合成方法，依序重複步驟（b )、（ c )移動1 / η上 述之距離各移動η次，並與（a )之影像合計2 η+ 1影像 疊合而成為高解析度之影像。 3 ·如申請專利範圍第1項所述之多鏡頭陣列CCD攝影機 之影像合成方法，其中該步驟（b)中可以一步進馬達 偏移該CCD鏡頭。 4 ·如申請專利範圍第1項所述之多鏡頭陣列CCD攝影機 之影像合成方法，其中該步驟（c)中可以另一步進馬 達偏移該CCD鏡頭。 5 ·如申請專利範圍第1項所述之多鏡頭陣列CCD攝影機 之影像合成方法，其中該步驟（a )和（b )可由分開一距 離之兩部CCD，且該步驟（c)中之該CCD可為該兩部CCD 之其中之一所完成。

   第12頁 569617 六、申請專利範圍 6 ·如申請專利範圍第1項所述之多鏡頭陣列CCD攝影機 之影像合成方法，其中該步驟（a)和（b)可由一 CCD中 分開一距離之兩鏡頭，且該步驟（c )中之該鏡頭可為 該兩鏡頭之其中之一所完成。 7 ·如申請專利範圍第1項所述之多鏡頭陣列CCD攝影機 之影像合成方法，其中該步驟（a )和（c )可由分開一距 離之兩部CCD，且該步驟（b)中之該CCD可為該兩部CCD 之其中之一所完成。 8 ·如申請專利範圍第1項所述之多鏡頭陣列CCD攝影機 之影像合成方法，其中該步驟（a)和（c)可由一 CCDS 分開一距離之兩鏡頭，且步驟（b)中之該鏡頭可為該 兩鏡頭之其中之一所完成。 9 ·如申請專利範圍第1項所述之多鏡頭陣列CCD攝影機 之影像合成方法，其中該步驟（a )、（ b )和（c )可由一 CCD中上下左右各分開一距離之四固定鏡頭所完成。 1 0 ·如申請專利範圍第1項所述之多鏡頭陣列CCD攝影機 之影像合成方法，其中該步驟（a )、（ b )和（c )可由一 CCD中上下左右各分開一距離之ηχ η個固定鏡頭所完 成。 1 1 · 一種多鏡頭陣列CCD攝影機之影像合成方法， (a)首先於攝取圖形時，將一 CCD鏡頭對準光軸，擷 取一影像； (b )將該CCD鏡頭偏離該光軸一距離，擷取另一影像； (c )將步驟（a )和（b )所擷取之影像資訊輸送至電腦，

   第13頁 569617 六、申請專利範圍 藉由兩張影像之疊合以取得高解析度之影像。 1 2 ·如申請專利範圍第1 1項所述之多鏡頭陣列CCD攝影機 之影像合成方法，其中該步驟（b )中可以一步進馬達 偏移該CCD鏡頭。 1 3 :如申請專利钎圍第1 1項所述之多鏡頭陣列CCD攝影機 之影像合成方法，其中該步驟（a )和（b )可由分開一距 離之兩部CCD所完成。 1 4 ·如申請專利範圍第1 1項所述之多鏡頭陣列CCD攝影機 之影像合成方法，其中步驟（a)和（b)可由一 CCD中分 開一距離之兩鏡頭所完成。

   第14頁