TWI637352B - 影像處理裝置和方法 - Google Patents

影像處理裝置和方法 Download PDF

Info

Publication number
TWI637352B
TWI637352B TW106128567A TW106128567A TWI637352B TW I637352 B TWI637352 B TW I637352B TW 106128567 A TW106128567 A TW 106128567A TW 106128567 A TW106128567 A TW 106128567A TW I637352 B TWI637352 B TW I637352B
Authority
TW
Taiwan
Prior art keywords
image
main
camera
thermal
thermal image
Prior art date
Application number
TW106128567A
Other languages
English (en)
Other versions
TW201913560A (zh
Inventor
賴長信
Original Assignee
緯創資通股份有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 緯創資通股份有限公司 filed Critical 緯創資通股份有限公司
Priority to TW106128567A priority Critical patent/TWI637352B/zh
Priority to CN201710765126.1A priority patent/CN109429018B/zh
Priority to US15/823,468 priority patent/US10288486B2/en
Application granted granted Critical
Publication of TWI637352B publication Critical patent/TWI637352B/zh
Publication of TW201913560A publication Critical patent/TW201913560A/zh

Links

Classifications

    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01J—MEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
    • G01J5/00—Radiation pyrometry, e.g. infrared or optical thermometry
    • G01J5/02—Constructional details
    • G01J5/08—Optical arrangements
    • G01J5/0806—Focusing or collimating elements, e.g. lenses or concave mirrors
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/30—Transforming light or analogous information into electric information
    • H04N5/33—Transforming infrared radiation
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01J—MEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
    • G01J5/00—Radiation pyrometry, e.g. infrared or optical thermometry
    • G01J5/02—Constructional details
    • G01J5/0275—Control or determination of height or distance or angle information for sensors or receivers
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01J—MEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
    • G01J5/00—Radiation pyrometry, e.g. infrared or optical thermometry
    • G01J5/02—Constructional details
    • G01J5/07—Arrangements for adjusting the solid angle of collected radiation, e.g. adjusting or orienting field of view, tracking position or encoding angular position
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01J—MEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
    • G01J5/00—Radiation pyrometry, e.g. infrared or optical thermometry
    • G01J5/02—Constructional details
    • G01J5/08—Optical arrangements
    • G01J5/0859—Sighting arrangements, e.g. cameras
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B13/00—Optical objectives specially designed for the purposes specified below
    • G02B13/001—Miniaturised objectives for electronic devices, e.g. portable telephones, webcams, PDAs, small digital cameras
    • G02B13/008—Miniaturised objectives for electronic devices, e.g. portable telephones, webcams, PDAs, small digital cameras designed for infrared light
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00—Image enhancement or restoration
    • G06T5/50—Image enhancement or restoration by the use of more than one image, e.g. averaging, subtraction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80—Camera processing pipelines; Components thereof
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01J—MEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
    • G01J5/00—Radiation pyrometry, e.g. infrared or optical thermometry
    • G01J2005/0077—Imaging
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01J—MEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
    • G01J5/00—Radiation pyrometry, e.g. infrared or optical thermometry
    • G01J5/48—Thermography; Techniques using wholly visual means
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B13/00—Optical objectives specially designed for the purposes specified below
    • G02B13/14—Optical objectives specially designed for the purposes specified below for use with infrared or ultraviolet radiation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10048—Infrared image
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/20—Special algorithmic details
    • G06T2207/20212—Image combination
    • G06T2207/20221—Image fusion; Image merging

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Spectroscopy & Molecular Physics (AREA)
  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Optics & Photonics (AREA)
  • Theoretical Computer Science (AREA)
  • Studio Devices (AREA)

Abstract

本發明之提供了一種影像處理裝置。此影像處理裝置包括一主相機、一熱影像相機、一重力感測器以及一處理器。主相機針對一拍攝物，產生一主影像，其中主影像具有一主影像尺寸。熱影像相機針對拍攝物，產生一熱影像，其中熱影像具有一熱影像尺寸，且熱影像尺寸小於主影像尺寸。重力感測器產生主相機和熱影像相機之一相對位置資訊。處理器計算主影像和熱影像之一偏移量，且根據相對位置資訊、偏移量以及熱影像尺寸，從主影像擷取出一擷取影像，以及根據擷取影像和熱影像產生一疊合影像。

Description

影像處理裝置和方法
本發明說明書主要係有關於一影像處理技術，特別係有關於補償主影像和熱影像疊合時之偏差之影像處理技術。
隨著科技之進步，電子裝置上除了主相機外，亦會配置一熱影像相機(例如：一紅外線熱顯像儀相機)。熱影像相機除使用於拍攝一般溫度的動/靜態分佈外，同時也可以藉由將主相機所取得之彩色影像，經過處理後取得場景的景物輪廓後，重疊顯示於熱影像上，豐富了熱影像的細節與可讀性。
在此種配置雙鏡頭之電子裝置，設計時為減少兩個鏡頭的像(視)差，通常會將主相機鏡頭與紅外線熱顯像儀鏡頭兩者擺設盡量的靠近。然而，不管多麼靠近，兩個鏡頭的實體位置還是無法完全重疊，因此兩個鏡頭於相距某距離下所拍攝到的景物，就一定會有像(視)差的存在。
因此，在目前將主相機取得之影像和熱影像疊合之影像疊合技術中，經過疊合之合成影像會產生明顯的誤差，且跟隨使用者不同的手持拍攝方向，熱影像與實景輪廓會產生不同方向的偏移。
有鑑於上述先前技術之問題，本發明提供了補償主影像和熱影像疊合時之偏差之影像處理裝置和方法。
根據本發明之一實施例提供了一種影像處理裝置。此影像處理裝置包括一主相機、一熱影像相機、一重力感測器以及一處理器。主相機針對一拍攝物，產生一主影像，其中主影像具有一主影像尺寸。熱影像相機針對拍攝物，產生一熱影像，其中熱影像具有一熱影像尺寸，且熱影像尺寸小於主影像尺寸。重力感測器產生主相機和熱影像相機之一相對位置資訊。處理器計算主影像和熱影像之一偏移量，且根據相對位置資訊、偏移量以及熱影像尺寸，從主影像擷取出一擷取影像，以及根據擷取影像和熱影像產生一疊合影像。
在一些實施例中，處理器根據主相機和熱影像相機之間的距離，以及主影像之一像素實景尺寸，計算出偏移量。
在一些實施例中，處理器根據偏移量以及相對位置資訊，在主影像中取得擷取影像所對應之一中心點。處理器根據中心點以及熱影像尺寸，擷取出擷取影像。
在一些實施例中，在產生重疊影像前，處理器對擷取影像進行一影像處理。處理器將熱影像和進行影像處理後之擷取影像，進行影像疊合，以產生疊合影像。
根據本發明之一實施例提供了一種影像處理方法。此影像處理方法之步驟包括藉由一主相機針對一拍攝物，產生一主影像，其中上述主影像具有一主影像尺寸；藉由一熱影像相機針對上述拍攝物，產生一熱影像，其中上述熱影像具有一 熱影像尺寸，且上述熱影像尺寸小於上述主影像尺寸；取得上述主相機和上述熱影像相機之一相對位置資訊；計算上述主影像和上述熱影像之一偏移量；根據上述相對位置資訊、上述偏移量以及上述熱影像之一熱影像尺寸，從上述主影像擷取一擷取影像；以及根據上述擷取影像和上述熱影像產生一疊合影像。
關於本發明其他附加的特徵與優點，此領域之熟習技術人士，在不脫離本發明之精神和範圍內，當可根據本案實施方法中所揭露之裝置和方法，做些許的更動與潤飾而得到。
100‧‧‧影像處理裝置
110‧‧‧主相機
120‧‧‧熱影像相機
130‧‧‧重力感測器
140‧‧‧處理器
d‧‧‧熱影像相機120之鏡頭和主相機110之鏡頭之距離
D‧‧‧被拍攝之景物與影像處理裝置100之距離
I1‧‧‧主影像
I2‧‧‧熱影像
I3‧‧‧擷取影像
I4‧‧‧疊合影像
H1‧‧‧主影像I1之高度
H2‧‧‧熱影像I2之高度
θ M ‧‧‧主相機110之視野角度
θ T ‧‧‧熱影像相機110之視野角度
O1‧‧‧主影像I1之中心點
O2‧‧‧擷取影像I3之中心點
S1‧‧‧配置資訊
S2‧‧‧距離d之資訊
S3‧‧‧手持方向之相關資訊S3
S4‧‧‧相對位置資訊
第1圖係顯示根據本發明之一實施例所述之影像處理裝置100之方塊圖。
第2圖係顯示根據本發明之一實施例所述之主相機110和熱影像相機120之配置之示意圖。
第3圖係顯示根據本發明之一實施例所述之手持方向之相關資訊S3之示意圖。
第4圖係顯示根據本發明之一實施例所述之主影像之高度和熱影像之高度之示意圖。
第5圖係顯示根據本發明之一實施例所述之一擷取影像之中心點之示意圖。
第6圖係根據本發明一實施例所述之影像處理方法之流程圖600。
本章節所敘述的是實施本發明之最佳方式，目的在於說明本發明之精神而非用以限定本發明之保護範圍，本發明之保護範圍當視後附之申請專利範圍所界定者為準。
第1圖係顯示根據本發明之一實施例所述之影像處理裝置100之方塊圖。據本發明之一實施例，影像處理裝置100可係一智慧型手機或一平版電腦，但本發明不以此為限。如第1圖所示，影像處理裝置100可包含一主相機110、一熱影像相機120、一重力感測器(G-sensor)130以及一處理器140。注意地是，在第1圖中之方塊圖，僅係為了方便說明本發明之實施例，但本發明並不以此為限。影像處理裝置100亦可包括其他元件。
根據本發明之一實施例，主相機110可係一具有一般拍照功能之相機。
根據本發明之一實施例，熱影像相機120可係一紅外線熱像儀相機。紅外線熱像儀相機可將紅外線之輻射能量轉換為電訊號，並以各種不同的顏色來顯示出不同溫度的分佈，以產生熱影像。
第2圖係顯示根據本發明之一實施例所述之主相機110和熱影像相機120之配置之示意圖。如第2圖所示，根據本發明之一實施例，在影像處理裝置100外殼，熱影像相機120之鏡頭配置於主相機110之鏡頭的上方，且熱影像相機120之鏡頭和主相機110之鏡頭會具有一距離d。根據本發明之一實施例，處理器140會從主相機110和熱影像相機120取得主相機110和 熱影像相機120之配置資訊S1(例如：熱影像相機120之鏡頭配置於主相機110之鏡頭的上方)，以及距離d之資訊S2。根據本發明之一實施例，處理器140會從影像處理裝置100之一記憶裝置(圖未顯示)取得主相機110和熱影像相機120之配置資訊S1(例如：熱影像相機120之鏡頭配置於主相機110之鏡頭的上方)，以及距離d之資訊S2。注意地是，在第2圖中之示意圖，僅係為了方便說明本發明之實施例，但本發明並不以此為限。
根據本發明之一實施例，重力感測器130可提供目前影像處理裝置100之手持方向之相關資訊S3，並將影像處理裝置100之手持方向之相關資訊S3提供給處理器140。第3圖係顯示根據本發明之一實施例所述之手持方向之相關資訊S3之示意圖。如第3圖所示，當影像處理裝置100之手持方向為垂直方向時，處理器140可從手持方向之資訊S3得知目前影像處理裝置100之手持方向係+Y或是-Y。當影像處理裝置100之手持方向為水平方向時，處理器140可從手持方向之資訊S3得知目前影像處理裝置100之手持方向係+X或是-X。
根據本發明之一實施例，處理器140可根據處理裝置100之手持方向之資訊S3，以及主相機110和熱影像相機120之配置資訊S1，推得主相機110和熱影像相機120之相對位置資訊S4。以第2和3圖為例，若處理器140從配置資訊S1得知熱影像相機120之鏡頭配置於主相機110之鏡頭的上方，且從手持方向之資訊S3得知目前影像處理裝置100之手持方向係+X，處理器140即可根據配置資訊S1和手持方向之資訊S3推得目前主相機110和熱影像相機120之相對位置資訊S4(即熱影像相機120 在主相機110右邊)。因此，當處理器140要對因為熱影像相機120之鏡頭和主相機110之鏡頭之距離d所產生之偏移量進行補償時，處理器140即可根據相對位置資訊S4，推得影像所要進行補償之方向。
根據本發明之一實施例，當要藉由影像處理裝置100產生一般影像和一熱影像之一疊合影像(或合成影像)時，會藉由主相機110拍攝一景物，產生一主影像I1，以及藉由熱影像相機120拍攝同樣的景物，產生一熱影像I2。根據本發明之一實施例，主影像I1具有一主影像尺寸，熱影像I2具有一熱影像尺寸，且熱影像尺寸小於主影像尺寸。
根據本發明之一實施例，處理器140可根據主相機110之視野角度(field of view，FOV)θ M ，以及被拍攝之景物與影像處理裝置100之距離D計算出主影像尺寸，且根據熱影像相機120之視野角度θ T ，以及被拍攝之景物與影像處理裝置100之距離D計算出熱影像尺寸；當中主相機110之視野角度θ M 範圍完全涵蓋熱影像相機120之視野角度θ T 範圍。底下將會以第4圖來做說明。
根據本發明之一實施例，主相機110之視野角度θ M 之資訊可藉由主相機110提供給處理器140，且熱影像相機120之視野角度θ T 之資訊可藉由熱影像相機120提供給處理器140。根據本發明之一實施例，處理器140可根據一臉部辨識演算法(當被拍攝之景物係一人臉)或一自動對焦演算法計算出被拍攝之景物與影像處理裝置100之距離D，但本發明並不以此為限。根據本發明之一實施例，處理器140更會從主相機110和熱影像 相機120取得主相機110和熱影像相機120之畫素資訊以及影像之寬高比資訊。
第4圖係顯示根據本發明之一實施例所述之主影像之高度和熱影像之高度之示意圖。如第4圖所示，若主相機110之視野角度θ M 係61.3度，且被拍攝之景物與影像處理裝置100之距離D係80公分，處理器140可計算出主影像I1之高度H1為71.1公分(H1=2*D*tan(θ M /2)。接著，若主相機110所產生之影像之寬高比是4：3，即可計算出主影像I1之寬度W1為94.8公分(71.1/3*4)。類似地，若熱影像相機120之視野角度θ T 係44.5度，且被拍攝之景物與影像處理裝置100之距離D係80公分，處理器140可計算出熱影像I2之高度H2為49.1公分(H2=2*D*tan(θ T /2)。接著，若熱影像相機120所產生之影像之寬高比試4：3，處理器140即可計算出熱影像I2之寬度W2為65.5公分(49.1/3*4)。
根據本發明之一實施例，處理器140會根據主相機110之畫素和主影像尺寸，計算出一主影像I1之每一像素所呈現之一像素實景尺寸(pixel FOV)PFOV。以第4圖為例，若主相機110之畫素為4160*3120，處理器140可計算出主影像I1之每一像素所呈現之一像素實景尺寸PFOV為0.023公分(94.8/4160=0.023)。
根據本發明之一實施例，在取得像素實景尺寸PFOV後，處理器140會根據熱影像相機120之鏡頭和主相機110之鏡頭之距離d，以及像素實景尺寸PFOV，計算出偏移量Pshift。偏移量Pshift之計算方式如下： Pshift=d1/PFOV舉例來說，若熱影像相機120之鏡頭和主相機110之鏡頭之距離d係1.2公分，且主影像I1之每一像素所呈現之一像素實景尺寸PFOV為0.023公分，處理器140即可計算出偏移量Pshift為52像素(pixel)。計算出偏移量Pshift後，處理器140可藉由此偏移量Pshift來補償由於熱影像相機120之鏡頭和主相機110之鏡頭之間之距離d，所造成在進行影像疊合時所產生之偏移。底下之實施例將會做更詳細之說明。
根據本發明之一實施例，處理器120會根據偏移量S以及相對位置資訊S4，在主影像I1中取得擷取影像I3所對應之一中心點。擷取影像I3可視為熱影像I2和主影像I1相互重疊之部分。在傳統之技術，會以主影像I1之中心點作為擷取影像I3之中心點，因此在進行影像疊合時，會受到因為熱影像相機120之鏡頭和主相機110之鏡頭之間之距離d1所造成之偏移之影響。因此，根據本發明之實施例，處理器120根據偏移量S以及相對位置資訊S4，來找出擷取影像I3所對應之中心點，將可補償此偏移之影響。以第5圖為例，經過補償後，擷取影像I3之中心點會從主影像I1之中心點O1移動到O2。
根據本發明之一實施例，當處理器120找出擷取影像I3所對應之中心點後，處理器120會根據熱影像尺寸以及主影像I1之每一像素所呈現之一像素實景尺寸PFOV，計算出熱影像尺寸實際在主影像I1上所對應之像素大小。舉例來說，若熱影像尺寸之高度為49.1公分，寬度為65.5公分，且主影像I1之每一像素所呈現之一像素實景尺寸PFOV為0.023公分，處理 器120即可計算出熱影像尺寸實際在主影像I1上所對應之寬度係2847像素(65.5/0.023)，高度係1821像素(49.1/0.023)。取得熱影像尺寸實際在主影像I1上所對應之像素大小後，處理器120會根據擷取影像I3所對應之中心點以及熱影像尺寸實際在主影像I1上所對應之像素大小，在主影像I1上擷取出擷取影像I3。根據本發明之一實施例，處理器120會包含一影像擷取單元(圖未顯示)，且處理器120會藉由影像擷取單元來進行擷取出擷取影像I3之操作。
根據本發明之一實施例，當處理器120在主影像I1上擷取出擷取影像I3後，處理器120會對擷取影像進行一影像處理。舉例來說，處理器120會對擷取影像I3進行灰階和除噪之操作，且會利用Canny演算法把擷取影像I3之輪廓線描繪出來，但本發明並不以此為限。根據本發明之一實施例，處理器120會包含一影像處理單元(圖未顯示)，且處理器120會藉由影像處理單元來進行影像處理之操作。
根據本發明之一實施例，處理器120會將熱影像I2和進行影像處理後之擷取影像I3，進行影像疊合，以產生疊合影像I4。根據本發明之一實施例，處理器120會包含一影像混和單元(圖未顯示)，且處理器120會藉由影像混和來進行影像處理之操作。
第6圖係根據本發明一實施例所述之影像處理方法之流程圖600。此影像處理方法適用影像處理裝置100。在步驟S610，藉由影像處理裝置100之一主相機針對一拍攝物，產生一主影像，其中上述主影像具有一主影像尺寸。在步驟S620， 藉由影像處理裝置100之一熱影像相機針對上述拍攝物，產生一熱影像，其中上述熱影像具有一熱影像尺寸，且上述熱影像尺寸小於上述主影像尺寸。在步驟S630，影像處理裝置100取得主相機和熱影像相機之一相對位置資訊。在步驟S640，影像處理裝置100計算上述主影像和熱影像之一偏移量。在步驟S650，影像處理裝置100根據相對位置資訊、偏移量以及熱影像之一熱影像尺寸，從主影像擷取一擷取影像。在步驟S660，影像處理裝置100根據擷取影像和上述熱影像產生一疊合影像。
根據本發明一些實施例，步驟S640更包括，影像處理裝置100根據主相機和熱影像相機之間的距離，以及主影像之每一像素所呈現之一像素實景尺寸，計算出偏移量。
根據本發明一些實施例，步驟S650更包括，影像處理裝置100根據偏移量以及相對位置資訊，在主影像中取得擷取影像所對應之一中心點，以及根據擷取影像之中心點以及熱影像尺寸，擷取出擷取影像。在此實施例中，影像處理裝置100會先根據熱影像尺寸以及主影像之每一像素所呈現之像素實景尺寸，計算出熱影像尺寸實際在主影像上所對應之像素大小。接著，影像處理裝置100再根據擷取影像所對應之中心點以及熱影像尺寸實際在主影像上所對應之像素大小，在主影像上擷取出擷取影像。
根據本發明一些實施例，在產生重疊影像前，影像處理裝置100會對擷取影像進行一影像處理。接著，影像處理裝置100會將熱影像和進行影像處理後之擷取影像，進行影 像疊合，以產生疊合影像。
經過本發明之影像處理方法，將在產生熱影像和主影像之疊合影像時，將可補償因為熱影像相機120之鏡頭和主相機110之鏡頭之間的距離d，所造成在進行影像疊合時所產生之偏移。
本發明之說明書所揭露之方法和演算法之步驟，可直接透過執行一處理器直接應用在硬體、軟體模組或兩者之結合上。一軟體模組(包括執行指令和相關數據)和其它數據可儲存在數據記憶體中，像是隨機存取記憶體(RAM)、快閃記憶體(flash memory)、唯讀記憶體(ROM)、可抹除可規化唯讀記憶體(EPROM)、電子可抹除可規劃唯讀記憶體(EEPROM)、暫存器、硬碟、可攜式應碟、光碟唯讀記憶體(CD-ROM)、DVD或在此領域習之技術中任何其它電腦可讀取之儲存媒體格式。一儲存媒體可耦接至一機器裝置，舉例來說，像是電腦/處理器(為了說明之方便，在本說明書以處理器來表示)，上述處理器可透過來讀取資訊(像是程式碼)，以及寫入資訊至儲存媒體。一儲存媒體可整合一處理器。一特殊應用積體電路(ASIC)包括處理器和儲存媒體。一用戶設備則包括一特殊應用積體電路。換句話說，處理器和儲存媒體以不直接連接用戶設備的方式，包含於用戶設備中。此外，在一些實施例中，任何適合電腦程序之產品包括可讀取之儲存媒體，其中可讀取之儲存媒體包括和一或多個所揭露實施例相關之程式碼。在一些實施例中，電腦程序之產品可包括封裝材料。
本說明書中所提到的「一實施例」或「實施例」， 表示與實施例有關之所述特定的特徵、結構、或特性是包含根據本發明的至少一實施例中，但並不表示它們存在於每一個實施例中。因此，在本說明書中不同地方出現的「在一實施例中」或「在實施例中」詞組並不必然表示本發明的相同實施例。
以上段落使用多種層面描述。顯然的，本文的教示可以多種方式實現，而在範例中揭露之任何特定架構或功能僅為一代表性之狀況。根據本文之教示，任何熟知此技藝之人士應理解在本文揭露之各層面可獨立實作或兩種以上之層面可以合併實作。
雖然本發明已以較佳實施例揭露如上，然其並非用以限定本發明，任何熟習此技藝者，在不脫離本發明之精神和範圍內，當可作些許之更動與潤飾，因此本發明之保護範圍當視後附之申請專利範圍所界定者為準。

Claims (6)

  1. 一種影像處理裝置：包括：一主相機，針對一拍攝物，產生一主影像，其中上述主影像具有一主影像尺寸；一熱影像相機，針對上述拍攝物，產生一熱影像，其中上述熱影像具有一熱影像尺寸，且上述熱影像尺寸小於上述主影像尺寸；一重力感測器，產生上述主相機和上述熱影像相機之一相對位置資訊；以及一處理器，計算上述主影像和上述熱影像之一偏移量，且根據上述相對位置資訊、上述偏移量以及上述熱影像尺寸，從上述主影像擷取一擷取影像，以及根據上述擷取影像和上述熱影像產生一疊合影像，其中上述處理器根據上述主相機和上述熱影像相機之間的一距離，以及上述主影像之一像素實景尺寸，計算出上述偏移量，其中上述處理器根據偏移量以及上述相對位置資訊，在上述主影像中取得上述擷取影像所對應之一中心點，以及其中上述處理器根據上述中心點以及上述熱影像尺寸，擷取上述擷取影像。
  2. 如申請專利範圍第1項所述之影像處理裝置，其中在產生上述重疊影像前，上述處理器對上述擷取影像進行一影像處理。
  3. 如申請專利範圍第2項所述之影像處理裝置，其中上述處理 器將上述熱影像和進行上述影像處理後之上述擷取影像，進行影像疊合，以產生上述疊合影像。
  4. 一種影像處理方法：包括：藉由一主相機針對一拍攝物，產生一主影像，其中上述主影像具有一主影像尺寸；藉由一熱影像相機針對上述拍攝物，產生一熱影像，其中上述熱影像具有一熱影像尺寸，且上述熱影像尺寸小於上述主影像尺寸；取得上述主相機和上述熱影像相機之一相對位置資訊；根據上述主相機和上述熱影像相機之間的一距離，以及上述主影像之一像素實景尺寸，計算上述主影像和上述熱影像之一偏移量；根據偏移量以及上述相對位置資訊，在上述主影像中取得上述擷取影像所對應之一中心點；根據上述中心點以及上述熱影像之一熱影像尺寸，從上述主影像擷取一擷取影像；以及根據上述擷取影像和上述熱影像產生一疊合影像。
  5. 如申請專利範圍第4項所述之影像處理方法，更包括：在產生上述重疊影像前，對上述擷取影像進行一影像處理。
  6. 如申請專利範圍第5項所述之影像處理方法，更包括：將上述熱影像和進行上述影像處理後之上述擷取影像，進行影像疊合，以產生上述疊合影像。
TW106128567A 2017-08-23 2017-08-23 影像處理裝置和方法 TWI637352B (zh)

Priority Applications (3)

Application Number Priority Date Filing Date Title
TW106128567A TWI637352B (zh) 2017-08-23 2017-08-23 影像處理裝置和方法
CN201710765126.1A CN109429018B (zh) 2017-08-23 2017-08-30 影像处理装置和方法
US15/823,468 US10288486B2 (en) 2017-08-23 2017-11-27 Image processing device and method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
TW106128567A TWI637352B (zh) 2017-08-23 2017-08-23 影像處理裝置和方法

Publications (2)

Publication Number Publication Date
TWI637352B true TWI637352B (zh) 2018-10-01
TW201913560A TW201913560A (zh) 2019-04-01

Family

ID=64802726

Family Applications (1)

Application Number Title Priority Date Filing Date
TW106128567A TWI637352B (zh) 2017-08-23 2017-08-23 影像處理裝置和方法

Country Status (3)

Country Link
US (1) US10288486B2 (zh)
CN (1) CN109429018B (zh)
TW (1) TWI637352B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111429463A (zh) * 2020-03-04 2020-07-17 北京三快在线科技有限公司 实例分割方法、装置、电子设备和存储介质

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20120235903A1 (en) * 2011-03-14 2012-09-20 Soungmin Im Apparatus and a method for gesture recognition
TW201327266A (zh) * 2011-12-17 2013-07-01 Hon Hai Prec Ind Co Ltd 電子設備及其根據手勢控制拍照的方法
CN103278246A (zh) * 2013-05-03 2013-09-04 广州飒特红外股份有限公司 一种基于安卓系统的红外热像仪
CN104684465A (zh) * 2012-07-12 2015-06-03 菲力尔系统公司 使用热成像的婴儿监测系统及方法
US20150187058A1 (en) * 2013-12-26 2015-07-02 Hamamatsu Photonics K.K. Image processing method, image processing system, and storage medium storing image processing program
TW201620291A (zh) * 2014-11-28 2016-06-01 鴻海精密工業股份有限公司 體感可視通訊系統及方法
TW201711444A (zh) * 2015-09-10 2017-03-16 宏碁股份有限公司 電子裝置
CN107087109A (zh) * 2017-05-23 2017-08-22 努比亚技术有限公司 一种拍照调节终端及方法

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7599521B2 (en) * 2004-11-30 2009-10-06 Honda Motor Co., Ltd. Vehicle vicinity monitoring apparatus
US7535002B2 (en) * 2004-12-03 2009-05-19 Fluke Corporation Camera with visible light and infrared image blending
DE602007000971D1 (de) * 2006-01-20 2009-06-10 Fluke Corp Kamera mit Bildmischung aus sichtbarem Licht und Infrarotlicht
US7924312B2 (en) * 2008-08-22 2011-04-12 Fluke Corporation Infrared and visible-light image registration
CN201927079U (zh) * 2011-03-07 2011-08-10 山东电力研究院 一种对于可见光图像和红外图像的快速实时融合处理系统
US20130083199A1 (en) * 2011-10-04 2013-04-04 Fluke Corporation Thermal imaging camera with infrared lens focus adjustment
TWI543610B (zh) * 2013-02-01 2016-07-21 宏達國際電子股份有限公司 電子裝置及其影像選擇方法
US20140267757A1 (en) * 2013-03-15 2014-09-18 Fluke Corporation Parallax correction in thermal imaging cameras
KR20150021353A (ko) * 2013-08-20 2015-03-02 삼성테크윈 주식회사 영상 융합 시스템 및 그 방법
CN105554483B (zh) 2015-07-16 2018-05-15 宇龙计算机通信科技(深圳)有限公司 一种图像处理方法及终端
CN105544483B (zh) 2015-12-15 2017-11-17 盐城市锦瑞石油机械有限公司 一种具有高回弹性能的吸油装置
CN106570852B (zh) * 2016-11-07 2019-12-03 中国航空无线电电子研究所 一种实时3d图像态势感知方法

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20120235903A1 (en) * 2011-03-14 2012-09-20 Soungmin Im Apparatus and a method for gesture recognition
TW201327266A (zh) * 2011-12-17 2013-07-01 Hon Hai Prec Ind Co Ltd 電子設備及其根據手勢控制拍照的方法
CN104684465A (zh) * 2012-07-12 2015-06-03 菲力尔系统公司 使用热成像的婴儿监测系统及方法
CN103278246A (zh) * 2013-05-03 2013-09-04 广州飒特红外股份有限公司 一种基于安卓系统的红外热像仪
US20150187058A1 (en) * 2013-12-26 2015-07-02 Hamamatsu Photonics K.K. Image processing method, image processing system, and storage medium storing image processing program
TW201620291A (zh) * 2014-11-28 2016-06-01 鴻海精密工業股份有限公司 體感可視通訊系統及方法
TW201711444A (zh) * 2015-09-10 2017-03-16 宏碁股份有限公司 電子裝置
CN107087109A (zh) * 2017-05-23 2017-08-22 努比亚技术有限公司 一种拍照调节终端及方法

Also Published As

Publication number Publication date
CN109429018A (zh) 2019-03-05
CN109429018B (zh) 2021-08-20
TW201913560A (zh) 2019-04-01
US20190063998A1 (en) 2019-02-28
US10288486B2 (en) 2019-05-14

Similar Documents

Publication Publication Date Title
JP6721065B2 (ja) 撮像装置、画像処理装置および方法
Ho et al. Dual-fisheye lens stitching for 360-degree imaging
CN107079100B (zh) 用于相机阵列的透镜移位校正的方法和系统
US9325899B1 (en) Image capturing device and digital zooming method thereof
Forssén et al. Rectifying rolling shutter video from hand-held devices
JP4760973B2 (ja) 撮像装置及び画像処理方法
JP5179398B2 (ja) 画像処理装置、画像処理方法、画像処理プログラム
WO2012114639A1 (ja) オブジェクト表示装置、オブジェクト表示方法及びオブジェクト表示プログラム
US8310553B2 (en) Image capturing device, image capturing method, and storage medium having stored therein image capturing program
JP2017208619A (ja) 画像処理装置、画像処理方法、プログラム及び撮像システム
JP5210198B2 (ja) 画像処理装置、画像処理方法、画像処理プログラム
JP6656035B2 (ja) 画像処理装置、撮像装置および画像処理装置の制御方法
US20170155889A1 (en) Image capturing device, depth information generation method and auto-calibration method thereof
JP2015036841A (ja) 画像処理装置、距離計測装置、撮像装置、画像処理方法
TWI637352B (zh) 影像處理裝置和方法
TW201824178A (zh) 全景即時影像處理方法
TWI617195B (zh) 影像擷取裝置及其影像拼接方法
TW201342303A (zh) 三維空間圖像的獲取系統及方法
JP5796611B2 (ja) 画像処理装置、画像処理方法、プログラムおよび撮像システム
CN110995982A (zh) 图像处理装置及其控制方法、摄像装置、以及记录介质
JP5239991B2 (ja) 画像処理装置、及び画像処理システム
CN109214983B (zh) 图像获取装置及其图像拼接方法
JP2016006674A (ja) 画像処理装置、プログラム、画像処理方法および撮像システム
JP2020036249A (ja) あおり補正を行う画像処理装置
JP6525693B2 (ja) 画像処理装置及び画像処理方法