TWI768614B - 投影系統以及用於影像拼接的取像數量選擇方法 - Google Patents

投影系統以及用於影像拼接的取像數量選擇方法 Download PDF

Info

Publication number
TWI768614B
TWI768614B TW109145901A TW109145901A TWI768614B TW I768614 B TWI768614 B TW I768614B TW 109145901 A TW109145901 A TW 109145901A TW 109145901 A TW109145901 A TW 109145901A TW I768614 B TWI768614 B TW I768614B
Authority
TW
Taiwan
Prior art keywords
devices
image
projection
image capturing
capture
Prior art date
Application number
TW109145901A
Other languages
English (en)
Other versions
TW202223840A (zh
Inventor
彭健鈞
涂勛城
林奇葳
Original Assignee
中強光電股份有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 中強光電股份有限公司 filed Critical 中強光電股份有限公司
Publication of TW202223840A publication Critical patent/TW202223840A/zh
Application granted granted Critical
Publication of TWI768614B publication Critical patent/TWI768614B/zh

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/64—Computer-aided capture of images, e.g. transfer from script file into camera, check of taken image quality, advice or proposal for image composition or decision on when to take image
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00—Image enhancement or restoration
    • G06T5/50—Image enhancement or restoration using two or more images, e.g. averaging or subtraction
    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B37/00—Panoramic or wide-screen photography; Photographing extended surfaces, e.g. for surveying; Photographing internal surfaces, e.g. of pipe
    • G03B37/04—Panoramic or wide-screen photography; Photographing extended surfaces, e.g. for surveying; Photographing internal surfaces, e.g. of pipe with cameras or projectors providing touching or overlapping fields of view
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00—Pattern recognition
    • G06F18/20—Analysing
    • G06F18/25—Fusion techniques
    • G06F18/251—Fusion techniques of input or preprocessed data
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/70—Determining position or orientation of objects or cameras
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/10—Image acquisition
    • G06V10/12—Details of acquisition arrangements; Constructional details thereof
    • G06V10/14—Optical characteristics of the device performing the acquisition or on the illumination arrangements
    • G06V10/145—Illumination specially adapted for pattern recognition, e.g. using gratings
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/667—Camera operation mode switching, e.g. between still and video, sport and normal or high- and low-resolution modes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80—Camera processing pipelines; Components thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/90—Arrangement of cameras or camera modules, e.g. multiple cameras in TV studios or sports stadiums
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/12—Picture reproducers
    • H04N9/31—Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
    • H04N9/3141—Constructional details thereof
    • H04N9/3147—Multi-projection systems
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/12—Picture reproducers
    • H04N9/31—Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
    • H04N9/3179—Video signal processing therefor
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/12—Picture reproducers
    • H04N9/31—Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
    • H04N9/3191—Testing thereof
    • H04N9/3194—Testing thereof including sensor feedback
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/20—Special algorithmic details
    • G06T2207/20212—Image combination
    • G06T2207/20221—Image fusion; Image merging
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30168—Image quality inspection

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Artificial Intelligence (AREA)
  • Data Mining & Analysis (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Evolutionary Computation (AREA)
  • Evolutionary Biology (AREA)
  • General Engineering & Computer Science (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Projection Apparatus (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
  • Video Image Reproduction Devices For Color Tv Systems (AREA)
  • Apparatus For Radiation Diagnosis (AREA)

Abstract

投影系統以及用於影像拼接的取像數量選擇方法。逐一驅使多個投影裝置投射圖案，並且驅使多個影像擷取裝置來拍攝各投影裝置所投射的圖案，藉此獲得對應這些影像擷取裝置的多個取像結果。最後，基於這些取像結果自所述影像擷取裝置中選擇至少一者作為影像拼接的取像來源。本發明透過投射圖案來辨識取像範圍，計算有效範圍後擇優使用，可用於自動拼接融合所需的計算上，並可避免在執行自動拼接融合所需的影像辨識與計算時，環境影響或影像擷取裝置故障導致無法維護拼接融合的問題。

Description

投影系統以及用於影像拼接的取像數量選擇方法
本發明是有關於一種投影系統及方法，且特別是有關於一種投影系統以及用於影像拼接（image blending）的取像數量選擇方法。
投影拼接工程為整合多台投影機，使投影畫面融合於延伸壁面、環狀、弧狀、不規則壁面等展示區。投影機的選擇最為重要，由於沒有邊緣融合器，在兩台投影機的投影範圍相交的地方，就會出現畫面重疊的問題，導致重疊的區域亮度增強，信號模糊。邊緣融合技術就是將一組投影機投射出的畫面進行邊緣重疊，並通過融合技術顯示出一個沒有縫隙，且更加明亮、解析度更高的整幅畫面，使得畫面的效果就好像是一台投影機投射的畫質。為了實現自動拼接，借助相機來拍攝投影影像，以利用投影影像來執行自動拼接融合所需的影像辨識與計算。
“先前技術”段落只是用來幫助了解本案內容，因此在“先前技術”段落所揭露的內容可能包含一些沒有構成所屬技術領域中具有通常知識者所知道的習知技術。在“先前技術”段落所揭露的內容，不代表該內容或者本案一個或多個實施例所要解決的問題，在本案申請前已被所屬技術領域中具有通常知識者所知曉或認知。
本發明提供一種投影系統以及用於影像拼接的取像數選擇方法，可避免在執行自動拼接融合所需的影像辨識與計算時，環境影響或影像擷取裝置故障導致無法維護拼接融合的問題。
本發明的投影系統，包括：多個投影裝置、多個影像擷取裝置以及處理器。處理器耦接至投影裝置以及影像擷取裝置。處理器經配置以逐一驅使所述投影裝置投射圖案，驅使所述影像擷取裝置來拍攝各投影裝置所投射的圖案，藉此獲得對應所述影像擷取裝置的多個取像結果，以及基於所述取像結果自所述影像擷取裝置中選擇至少一者作為影像拼接的取像來源。
在本發明的一實施例中，所述處理器經配置以在其中一個投影裝置投射圖案之後，驅使影像擷取裝置分別拍攝或同時拍攝所投射的圖案。
在本發明的一實施例中，所述圖案包括至少一格點。所述處理器經配置以識別各取像結果中所包括的格點的格點數量以及格點所在的一格點位置，以及基於格點數量與格點位置，自影像擷取裝置中選擇至少一者來作為影像拼接的取像來源，其中所選擇至少一個影像擷取裝置的拍攝範圍涵蓋最多的至少一格點。
在本發明的一實施例中，所述處理器經配置以基於每個取像結果中所包括的格點數量、至少一格點所在的格點位置以及取像品質，自選擇至少一個影像擷取裝置來作為影像拼接的取像來源。
在本發明的一實施例中，所述處理器經配置以在判定作為取像來源中的至少一個影像擷取裝置的取像異常時，停用被判定為取像異常的至少一個影像擷取裝置，而自其他未被選擇的影像擷取裝置中選擇至少一者，來更新取像來源。
在本發明的一實施例中，所述處理器經配置以在判定更新後的取像來源的拍攝範圍無法涵蓋所述投影裝置的投影範圍時，發出警示通知。
在本發明的一實施例中，所述投影裝置的數量為至少兩個，所述影像擷取裝置的數量為至少兩個，所述投影機裝置的數量與所述影像擷取裝置的數量可以相同或不同。
在本發明的一實施例中，所述影像擷取裝置的其中一者設置在所述投影裝置的其中一者上
本發明的用於影像拼接的取像數量選擇方法，包括：逐一驅使多個投影裝置投射一圖案；驅使多個影像擷取裝置來拍攝各投影裝置所投射的圖案，藉此獲得對應這些影像擷取裝置的多個取像結果；以及基於這些取像結果自所述影像擷取裝置中選擇至少一者作為影像拼接的取像來源。
基於上述，本發明可以使得投射出的圖像經由影像擷取裝置取像的數量降低，進而提升取像流程速度，並且可避免在執行自動拼接融合所需的影像辨識與計算時，環境影響或影像擷取裝置故障導致無法維護拼接融合的問題。
圖1是依照本發明一實施例的投影系統的方塊圖。請參照圖1，本實施例的投影系統包括M個投影裝置110-1～110-M、N個影像擷取裝置120-1～120-N以及處理器130。在此，並不限制投影裝置(projection device)與影像擷取裝置(image capturing device)兩者的數量，只要存在至少兩個投影裝置以及至少兩個影像擷取裝置即可，而投影裝置的數量M與影像擷取裝置的數量N可以相同或不同。
在設置上，可將影像擷取裝置120-1～120-N分別安裝至每一個投影裝置110-1～110-M上。例如，一個投影裝置上設置一個影像擷取裝置。而處理器130例如安裝在一獨立的電子裝置中，透過有線或無線的方式耦接至投影裝置110-1～110-M以及影像擷取裝置120-1～120-N，藉此來驅動投影裝置110-1～110-M及影像擷取裝置120-1～120-N進行作動，並在進行影像辨識分析之後，調整投影裝置110-1～110-M的參數。
處理器130例如為具有中央處理單元（Central Processing Unit，CPU）、圖像處理單元（Graphic Processing Unit，GPU）、物理處理單元（Physics Processing Unit，PPU）、可程式化之微處理器（Microprocessor）、嵌入式控制晶片、數位訊號處理器（Digital Signal Processor，DSP）、特殊應用積體電路（Application Specific Integrated Circuits，ASIC）的裝置或其他類似裝置。在一實施例中，處理器130可為影像拼接處理裝置。而所述電子裝置中還包括儲存裝置，其可由任意型式的固定式或可移動式隨機存取記憶體、唯讀記憶體、快閃記憶體、安全數位卡、硬碟或其他類似裝置或這些裝置的組合來實現。在儲存裝置中儲存一或多個程式碼片段，而由處理器130來執行所述程式碼片段來完成下述用於影像拼接的取像數量選擇方法。
圖2是依照本發明一實施例的用於影像拼接的取像數量選擇方法的流程圖。請同時參照圖1及圖2，在步驟S205中，透過處理器130來逐一驅使多個投影裝置110-1～110-M投射一圖案（pattern）。所述圖案例如是在左右側具有多個格點。
並且，在步驟S210中，透過處理器130驅使多個影像擷取裝置120-1～120-N來拍攝各個投影裝置110-1～110-M所投射的圖案，藉此獲得對應各個影像擷取裝置120-1～120-N的取像結果。在此，可在其中一個投影裝置投射圖案之後，處理器130驅使影像擷取裝置120-1～120-N分別拍攝或同時拍攝所投射的圖案。
在步驟S215中，處理器130基於這些取像結果自影像擷取裝置120-1～120-N中選擇至少一者作為影像拼接的取像來源。處理器130可識別各取像結果中所包括的格點的格點數量以及各格點所在的格點位置，以及基於格點數量與格點位置，自影像擷取裝置120-1～120-N中選擇至少一者來作為影像拼接的取像來源。在此，所選擇的影像擷取裝置的拍攝範圍涵蓋最多的格點。
由於全部的投影裝置110-1～110-N皆投射圖案的情況下，會造成圖案重疊的問題，故，處理器130一次驅使一個投影裝置來投射圖案，並且在每一次投射圖案時由至少一個影像擷取裝置來進行取像。底下再舉一例來說明取像順序。值得一提的是，各個投影裝置投射圖案的順序可由處理器130決定或使用者設定，並不一定是由多個投影裝置設置順序依序投射。
圖3是依照本發明一實施例的取像結果的獲得方法的流程圖。請參照圖3，在步驟S305中，驅使第i個投影裝置投射圖案。在此，i的初始值為1。接著，在步驟S310中，驅使第j個影像擷取裝置拍攝所投射的圖案。在此，j的初始值為1。並且，在步驟S315中，i=i+1，以在後續驅使下一個投影裝置來投射圖案。接著在步驟S320中，判斷是否全部的投影裝置皆投射完畢。例如，在設有M個投影裝置的情況下，判斷i是否大於M。若尚有投影裝置未投射完畢（i未大於M），則返回步驟S305；若全部的投影裝置皆投射完畢（i大於M），在步驟S325中，j=j+1，以在後續驅使下一個影像擷取裝置來拍攝所投射的圖案。
接著，在步驟S330中，判斷是否全部的影像擷取裝置皆取像完畢。例如，在設有N個影像擷取裝置的情況下，判斷j是否大於N。若尚有影像擷取裝置未取像完畢（j未大於M），返回步驟S305。若全部的影像擷取裝置皆取像完畢（j大於M），在步驟S335中，獲得取像結果。
例如，首先處理器130驅使投影裝置110-1投射圖案，並且驅使影像擷取裝置120-1來進行取像。接著，驅使投影裝置110-2投射圖案，並且驅使影像擷取裝置120-1來進行取像。以此類推，驅使投影裝置110-M投射圖案，並且驅使影像擷取裝置120-1來進行取像。即，影像擷取裝置120-1分別對投影裝置110-1～110-M所投射的圖案進行取像。之後，重新驅使投影裝置110-1～110-M投射圖案，而由影像擷取裝置120-2分別對投影裝置110-1～110-M所投射的圖案進行取像。以此類推，直到影像擷取裝置120-N分別對投影裝置110-1～110-M所投射的圖案進行取像。
在其他實施例中，也可以在每一次由一個投影裝置投射圖案之後，同時驅使全部的影像擷取裝置120-1～120-N進行取像。在另一實施例中，投影裝置投射圖案與影像擷取裝置進行取像之間的順序可根據實際狀況而做不同設計。例如，可驅使一部份的投影裝置投射圖案後，再驅使一部份的影像擷取裝置進行取像，接著，驅使另一部份的投影裝置投射圖案後再驅使另一部份的影像擷取裝置進行取像。
圖4A～圖4I是依照本發明一實施例的取像結果的示意圖。在本實施例中，以3個投影裝置110-1～110-3以及3個影像擷取裝置120-1～120-3為例來進行說明，並以在四個角落設置4個格點來作為投射的圖案，投射的圖案並不以此為限。在此，基於投影裝置110-1～110-3設置的位置，其所投射出來的投影影像（411～413、421～423、431～433、441～443、451～453、461～463、471～473、481～483、491～493）會有重疊部分（如圖4A～圖4I中陰影區塊所示）。據此，在全部投影裝置投射圖案的情況下，會造成圖案重疊的問題。
故，在本實施例中設置為：處理器130一次驅使一個投影裝置來投射所述圖案，其投射順序例如依序為投影裝置110-1、投影裝置110-2、投影裝置110-3，並且在每一次進行投影時由一個影像擷取裝置來進行取像。而每一個影像擷取裝置120-1～120-3會皆會分別對投影裝置110-1～110-3進行取像來獲得取像結果A1～A9。故，以3個投影裝置以及3個影像擷取裝置而言，最終會獲得9（3×3）個取像結果。
首先，參照圖4A～圖4C，處理器130驅使影像擷取裝置120-1分別對投影裝置110-1～110-3所投射的圖案進行取像。接著，參照圖4D～圖4F，驅使影像擷取裝置120-2分別對投影裝置110-1～110-3所投射的圖案進行取像。之後，參照圖4G～圖4I，驅使影像擷取裝置120-3分別對投影裝置110-1～110-3所投射的圖案進行取像。
在圖4A中，處理器130驅使投影裝置110-1來投射圖案，藉此獲得投影影像411。此時，由於投影裝置110-2、110-3並未投射圖案，故，兩者對應的投影影像412、413為空白。並且，處理器130驅使影像擷取裝置120-1進行取像以獲得取像結果A1。在圖4B中，處理器130驅使投影裝置110-2來投射圖案，藉此獲得投影影像422。此時，由於投影裝置110-1、110-3並未投射圖案，故，兩者對應的投影影像421、423為空白。並且，處理器130驅使影像擷取裝置120-1進行取像以獲得取像結果A2。在圖4C中，處理器130驅使投影裝置110-3來投射圖案，藉此獲得投影影像433。此時，由於投影裝置110-1、110-2並未投射圖案，故，兩者對應的投影影像431、432為空白。並且，處理器130驅使影像擷取裝置120-1進行取像以獲得取像結果A3。
在圖4D中，處理器130驅使投影裝置110-1來投射圖案，藉此獲得投影影像441。此時，由於投影裝置110-2、110-3並未投射圖案，故，兩者對應的投影影像442、443為空白。並且，處理器130驅使影像擷取裝置120-2進行取像以獲得取像結果A4。在圖4E中，處理器130驅使投影裝置110-2來投射圖案，藉此獲得投影影像452。此時，由於投影裝置110-1、110-3並未投射圖案，故，兩者對應的投影影像451、453為空白。並且，處理器130驅使影像擷取裝置120-2進行取像以獲得取像結果A5。在圖4F中，處理器130驅使投影裝置110-3來投射圖案，藉此獲得投影影像463。此時，由於投影裝置110-1、110-2並未投射圖案，故，兩者對應的投影影像461、462為空白。並且，處理器130驅使影像擷取裝置120-2進行取像以獲得取像結果A6。
在圖4G中，處理器130驅使投影裝置110-1來投射圖案，藉此獲得投影影像471。此時，由於投影裝置110-2、110-3並未投射圖案，故，兩者對應的投影影像472、473為空白。並且，處理器130驅使影像擷取裝置120-3進行取像以獲得取像結果A7。在圖4H中，處理器130驅使投影裝置110-2來投射圖案，藉此獲得投影影像482。此時，由於投影裝置110-1、110-3並未投射圖案，故，兩者對應的投影影像481、483為空白。並且，處理器130驅使影像擷取裝置120-3進行取像以獲得取像結果A8。在圖4I中，處理器130驅使投影裝置110-3來投射圖案，藉此獲得投影影像493。此時，由於投影裝置110-1、110-2並未投射圖案，故，兩者對應的投影影像491、492為空白。並且，處理器130驅使影像擷取裝置120-3進行取像以獲得取像結果A9。
在獲得取像結果A1～A9之後，處理器130基於取像結果A1～A9，識別取像結果A1～A9中所包括的格點的格點數量以及格點所在的格點位置。進而，處理器130基於取像結果A1～A9中的格點位置來判斷各影像擷取裝置120-1～120-3的拍攝範圍涵蓋了哪些投影裝置的投影範圍。藉此，針對各影像擷取裝置120-1～120-3的拍攝範圍將所涵蓋的格點數量與投影範圍整理如表1。
表1
影像擷取裝置 取像結果 格點數量 所涵蓋的投影範圍 所涵蓋的格點數量
120-1 A1 4 投影裝置110-1 全部 6
A2 2 投影裝置110-2 部分
A3 0 投影裝置110-3 無
120-2 A4 4 投影裝置110-1 全部 10
A5 4 投影裝置110-2 全部
A6 2 投影裝置110-3 部分
120-3 A7 2 投影裝置110-1 部分 10
A8 4 投影裝置110-2 全部
A9 4 投影裝置110-3 全部
參照表1，可分別基於取像結果A1～A3、取像結果A4～A6、取像結果A7～A9，來識別影像擷取裝置120-1、120-2、120-3的拍攝範圍所涵蓋的格點數量以及投影範圍。
基此，處理器130基於各影像擷取裝置120-1～120-3的拍攝範圍所涵蓋的格點數量以及格點位置，自影像擷取裝置120-1～120-3中來選擇作為影像拼接的取像來源。並且，將其他未被選取的影像擷取裝置作為備用的取像來源。
舉例來說，以圖4A～圖4I所投射的圖案（包括4個格點）而言，倘若其中一個影像擷取裝置所涵蓋的格點數量等於12，其表示對應於3個投影裝置110-1～110-3的每一個取像結果皆具有4個格點，故，便可只用所述一個影像擷取裝置來作為取像來源。
倘若並不存在所涵蓋的格點數量等於12的影像擷取裝置，則選擇所涵蓋的格點數量最大的影像擷取裝置來作為取像來源，並且確認取像來源的拍攝範圍可涵蓋所有投影裝置的投影範圍。倘若取像來源的拍攝範圍未涵蓋所有投影裝置的投影範圍，則再進一步選擇具有格點數量第二多的影像擷取裝置來作為取像來源。以圖4A～圖4I所示的實施例而言（參照表1），選擇影像擷取裝置120-2、120-3（其所涵蓋的格點數量最多）來作為取像來源，且影像擷取裝置120-2、120-3的拍攝範圍可涵蓋所有投影裝置110-1～110-3的投影範圍。
另外，處理器130還可基於每個取像結果中所包括的格點數量、格點位置以及取像品質，來決定影像拼接的取像來源。例如，假設基於取像結果來找出格點數量最大的影像擷取裝置包括A、B、C三者，且影像擷取裝置A、B的拍攝範圍涵蓋所有投影裝置的投影範圍，影像擷取裝置A、C的拍攝範圍亦涵蓋所有投影裝置的投影範圍，則可進一步根據影像擷取裝置B、C的取像品質來決定取像來源為影像擷取裝置A、B或影像擷取裝置A、C。
另外，當處理器130判定作為取像來源中的至少一個影像擷取裝置取像異常時，停用被判定為取像異常的影像擷取裝置，而自其他未被選擇的影像擷取裝置中選擇至少一者，來更新取像來源。優先選擇能夠涵蓋所有投影裝置的投影範圍的影像擷取裝置，以使更新後的取像來源的拍攝範圍涵蓋所有投影裝置的投影範圍。
圖5A及圖5B是依照本發明一實施例的啟用備用裝置的示意圖。在本實施例中，以3個投影裝置110-1～110-3以及3個影像擷取裝置120-1～120-3為例來進行說明。投影裝置110-1～110-3分別投射圖案而獲得投影影像501～503。假設以影像擷取裝置120-2、120-3作為主要的取樣來源，則不啟用影像擷取裝置120-1。影像擷取裝置120-2、120-3分別獲得取像結果B1、B2。在判定影像擷取裝置120-2取像異常時，啟用影像擷取裝置120-1，以透過影像擷取裝置120-1來獲得取像結果B3。
另外，在判定更新後的取像來源的拍攝範圍無法涵蓋全部投影裝置的投影範圍時，處理器130會進一步發出警示通知。例如，警示通知為聲音訊號、文字訊號、圖像訊號或閃燈訊號等等。據此，通知使用者送修投影系統。
綜上所述，本發明透過全自動化軟體與演算法來自動設定影像擷取裝置進行取像的有效範圍，用以界定是否有取像重疊的現象。在上述實施例中，透過投射圖案來辨識取像範圍，並且計算有效範圍後擇優使用，並用於自動拼接融合所需的計算上。據此，可以使得投射出的圖像經由影像擷取裝置取像的數量降低，進而提升取像流程速度，並且可避免在執行自動拼接融合所需的影像辨識與計算時，環境影響或影像擷取裝置故障導致無法維護拼接融合的問題。
惟以上所述者，僅為本發明的較佳實施例而已，當不能以此限定本發明實施的範圍，即大凡依本發明申請專利範圍及說明內容所作簡單的等效變化與修飾，皆仍屬本發明涵蓋的範圍內。另外本發明的任一實施例或申請專利範圍不須達成本發明所揭露的全部目的或優點或特點。此外，摘要部分和標題僅是用來輔助專利文件搜尋之用，並非用來限制本發明的權利範圍。此外，本說明書或申請專利範圍中提及的“第一”、“第二”等用語僅用於命名元件(element)的名稱或區別不同實施例或範圍，而並非用來限制元件數量上的上限或下限。
110-1～110-M:投影裝置 120-1～120-N:影像擷取裝置 130:處理器 S205～S251、S305～S335:步驟 411～413、421～423、431～433、441～443、451～453、461～463、471～473、481～483、491～493、501～503:投影影像 A1～A9、B1～B3:取像結果
圖1是依照本發明一實施例的投影系統的方塊圖。 圖2是依照本發明一實施例的用於影像拼接的取像數量選擇方法的流程圖。 圖3是依照本發明一實施例的取像結果的獲得方法的流程圖。 圖4A～圖4I是依照本發明一實施例的取像結果的示意圖。 圖5A及圖5B是依照本發明一實施例的啟用備用裝置的示意圖。
S205～S251:步驟

Claims (16)

  1. 一種投影系統，包括：多個投影裝置，分別具有一投影範圍；多個影像擷取裝置，分別具有一拍攝範圍；以及一處理器，耦接至該些投影裝置以及該些影像擷取裝置，該處理器經配置以逐一驅使該些投影裝置分別朝對應的該投影範圍投射一圖案，驅使該些影像擷取裝置於其所對應的該拍攝範圍來拍攝每一該些投影裝置所投射的該圖案，藉此獲得對應該些影像擷取裝置的多個取像結果，以及該處理器基於該些取像結果自該些影像擷取裝置中選擇至少一者作為影像拼接的取像來源，其中所選擇的該些影像擷取裝置的該至少一者所對應的該取像結果為該拍攝範圍涵蓋所有該些投影裝置的該些投影範圍。
  2. 如請求項1所述的投影系統，其中該處理器經配置以在其中一個該些投影裝置投射該圖案之後，驅使該些影像擷取裝置分別拍攝或同時拍攝所投射的該圖案。
  3. 如請求項1所述的投影系統，其中該圖案包括多個格點，該處理器經配置以識別每一該些取像結果中所包括的該些格點的一格點數量以及每個該些格點所在的一格點位置，以及該處理器基於每一該些取像結果的該格點數量與該格點位置，自該些影像擷取裝置中選擇至少一者來作為影像拼接的取像來源，其中所選擇的該些影像擷取裝置中的該至少一者所對應的該取像結果為該拍攝範圍涵蓋最多的該格點數量。
  4. 如請求項3所述的投影系統，其中該處理器經配置以基於每個該些取像結果中所包括的該格點數量、每個該些格點所在的該格點位置以及一取像品質，自該些影像擷取裝置中選擇至少一者來作為影像拼接的取像來源，其中當該些取像結果中具有相同的該些拍攝範圍以及相同的該格點數量，所選擇的該些影像擷取裝置的該至少一者所對應的該取像結果為具有最好的該取像品質。
  5. 如請求項1所述的投影系統，其中該處理器經配置以在判定作為該取像來源中的該些影像擷取裝置的至少一者的取像異常時，停用被判定為取像異常的該些影像擷取裝置的該至少一者，而自其他未被選擇的該些影像擷取裝置中選擇至少一者，來更新該取像來源。
  6. 如請求項5所述的投影系統，其中該處理器經配置以在判定更新後的該取像來源的拍攝範圍無法涵蓋該些投影裝置的投影範圍時，發出一警示通知。
  7. 如請求項1所述的投影系統，其中該些投影裝置的數量為至少兩個，該些影像擷取裝置的數量為至少兩個，該些投影裝置的數量與該些影像擷取裝置的數量可以相同或不同。
  8. 如請求項1所述的投影系統，其中該些影像擷取裝置的其中一者設置在該些投影裝置的其中一者上。
  9. 一種用於影像拼接的取像數量選擇方法，包括： 逐一驅使多個投影裝置分別朝其對應的一投影範圍投射一圖案；驅使多個影像擷取裝置於其所對應的一拍攝範圍來拍攝每一該些投影裝置所投射的該圖案，藉此獲得對應該些影像擷取裝置的多個取像結果；以及基於該些取像結果自該些影像擷取裝置中選擇至少一者作為影像拼接的取像來源，其中所選擇的該些影像擷取裝置的該至少一者所對應的該取像結果為該拍攝範圍涵蓋所有該些投影裝置的該些投影範圍。
  10. 如請求項9所述的用於影像拼接的取像數量選擇方法，其中驅使該些影像擷取裝置來拍攝每一該些投影裝置所投射的該圖案的步驟包括：在其中一個該些投影裝置投射該圖案之後，驅使該些影像擷取裝置分別拍攝或同時拍攝所投射的該圖案。
  11. 如請求項9所述的用於影像拼接的取像數量選擇方法，其中該圖案包括多個格點，而基於該些取像結果自該些影像擷取裝置中選擇至少一者作為影像拼接的取像來源的步驟包括：識別每一該些取像結果中所包括的該些格點的一格點數量以及每個該些格點所在的一格點位置；以及基於每一該些取像結果的該格點數量與該格點位置，自該些影像擷取裝置中選擇至少一者來作為影像拼接的取像來源，其中 所選擇的該些影像擷取裝置中的該至少一者所對應的該取像結果為該拍攝範圍涵蓋最多的該格點數量。
  12. 如請求項11所述的用於影像拼接的取像數量選擇方法，其中基於該些取像結果自該些影像擷取裝置中選擇至少一者作為影像拼接的取像來源的步驟更包括：基於每個該些取像結果中所包括的該格點數量、每個該些格點所在的該格點位置以及一取像品質，自該些影像擷取裝置中至少一者來作為影像拼接的取像來源，其中當該些取像結果中具有相同的該些拍攝範圍以及相同的該格點數量，所選擇的該些影像擷取裝置的該至少一者所對應的該取像結果為具有最好的該取像品質。
  13. 如請求項9所述的用於影像拼接的取像數量選擇方法，更包括：在判定作為該取像來源中的該些影像擷取裝置的至少一者的取像異常時，停用被判定為取像異常的該些影像擷取裝置的該至少一者，而自其他未被選擇的該些影像擷取裝置中選擇至少一者，來更新該取像來源。
  14. 如請求項13所述的用於影像拼接的取像數量選擇方法，其中在更新該取像來源之後，更包括：在判定更新後的該取像來源的拍攝範圍無法涵蓋該些投影裝置的投影範圍時，發出一警示通知。
  15. 如請求項9所述的用於影像拼接的取像數量選擇方法，其中該些投影裝置的數量為至少兩個，該些影像擷取裝置的數量為至少兩個，該些投影裝置的數量與該些影像擷取裝置的數量可以相同或不同。
  16. 如請求項9所述的用於影像拼接的取像數量選擇方法，其中該些影像擷取裝置的其中一者設置在該些投影裝置的其中一者上。
TW109145901A 2020-12-11 2020-12-24 投影系統以及用於影像拼接的取像數量選擇方法 TWI768614B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
CN202011457078.8 2020-12-11
CN202011457078.8A CN114630086B (zh) 2020-12-11 2020-12-11 投影系统以及用于影像拼接的取像数量选择方法

Publications (2)

Publication Number Publication Date
TW202223840A TW202223840A (zh) 2022-06-16
TWI768614B true TWI768614B (zh) 2022-06-21

Family

ID=81896358

Family Applications (1)

Application Number Title Priority Date Filing Date
TW109145901A TWI768614B (zh) 2020-12-11 2020-12-24 投影系統以及用於影像拼接的取像數量選擇方法

Country Status (3)

Country Link
US (1) US20220191391A1 (zh)
CN (1) CN114630086B (zh)
TW (1) TWI768614B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2024195209A1 (ja) * 2023-03-17 2024-09-26 富士フイルム株式会社 画像処理装置、画像処理方法、及び画像処理プログラム

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TW201617719A (zh) * 2014-11-12 2016-05-16 原相科技股份有限公司 投影方法以及投影系統
US20190289223A1 (en) * 2017-01-13 2019-09-19 Gopro, Inc. Apparatus and methods for the storage of overlapping regions of imaging data for the generation of optimized stitched images
TW202027494A (zh) * 2018-12-28 2020-07-16 中強光電股份有限公司 投影系統以及投影方法
TW202034684A (zh) * 2019-02-28 2020-09-16 中強光電股份有限公司 投影系統以及投影方法

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7450137B2 (en) * 2005-02-18 2008-11-11 Hewlett-Packard Development Company, L.P. System and method for blending images
US8237873B2 (en) * 2010-03-24 2012-08-07 Seiko Epson Corporation Method for creating blending ramps for complex projector image overlaps
US8698874B2 (en) * 2011-06-10 2014-04-15 Microsoft Corporation Techniques for multiple video source stitching in a conference room
JP6164820B2 (ja) * 2012-10-11 2017-07-19 キヤノン株式会社 プロジェクタ、その制御方法、及び画像投影システム
JP6083185B2 (ja) * 2012-10-12 2017-02-22 セイコーエプソン株式会社 プロジェクター、プロジェクターの黒レベル領域設定方法
TWI524050B (zh) * 2014-04-15 2016-03-01 聚晶半導體股份有限公司 取像裝置、影像深度產生裝置及其方法
CN105376540A (zh) * 2014-08-27 2016-03-02 中强光电股份有限公司 投影显示系统以及投影区域的校正方法
TWI554976B (zh) * 2014-11-17 2016-10-21 財團法人工業技術研究院 監控系統及其影像處理方法
CN104469223A (zh) * 2014-12-02 2015-03-25 苏州佳世达光电有限公司 一种投影装置以及投影画面的拼接方法
CN107360346A (zh) * 2016-05-09 2017-11-17 育圣光电(深圳)有限公司 具有全景摄影功能的指令输入设备
CN106131454B (zh) * 2016-07-27 2019-10-25 苏州佳世达电通有限公司 一种影像撷取系统及影像撷取方法
US10298893B2 (en) * 2016-11-11 2019-05-21 Christie Digital Systems Usa, Inc. System and method for digital black level blending
CN109587457A (zh) * 2017-09-29 2019-04-05 中强光电股份有限公司 投影系统及其自动设定方法
JP2020061688A (ja) * 2018-10-11 2020-04-16 キヤノン株式会社 投影装置及びその制御方法、プログラム、並びに記憶媒体

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TW201617719A (zh) * 2014-11-12 2016-05-16 原相科技股份有限公司 投影方法以及投影系統
US20190289223A1 (en) * 2017-01-13 2019-09-19 Gopro, Inc. Apparatus and methods for the storage of overlapping regions of imaging data for the generation of optimized stitched images
TW202027494A (zh) * 2018-12-28 2020-07-16 中強光電股份有限公司 投影系統以及投影方法
TW202034684A (zh) * 2019-02-28 2020-09-16 中強光電股份有限公司 投影系統以及投影方法

Also Published As

Publication number Publication date
CN114630086B (zh) 2024-07-02
CN114630086A (zh) 2022-06-14
US20220191391A1 (en) 2022-06-16
TW202223840A (zh) 2022-06-16

Similar Documents

Publication Publication Date Title
US8003927B2 (en) Image projection apparatus which projects an image corrected according to a projection surface
US10349023B2 (en) Image processing apparatus and method
JP2019012426A5 (zh)
EP2665277A1 (en) Image projection apparatus, control method, control program, and carrier medium
CN112272292B (zh) 投影校正方法、装置和存储介质
US9930306B2 (en) Image processing apparatus, image processing method, and computer-readable storage medium
JP2019168546A (ja) 投影制御装置、投影装置、投影制御方法及びプログラム
JP2005191687A5 (zh)
JP2013197918A5 (zh)
CN111258527B (zh) 显示调整方法、装置、设备和存储介质
US9256793B2 (en) Apparatus and method for extracting object image
US20180220114A1 (en) System for controlling projector, information processing apparatus, information processing method, and storage medium
CN112055186A (zh) 一种多投影图像拼接的几何校正方法、系统、设备及存储介质
TWI768614B (zh) 投影系統以及用於影像拼接的取像數量選擇方法
CN114222099A (zh) 投影图像的校正方法及激光投影设备
JP2016181068A (ja) 学習サンプル撮影装置
US20190162529A1 (en) 3d scanning device and method
KR101893831B1 (ko) 기판 검사장치 및 이를 이용한 기판 검사방법
JP2016178608A5 (zh)
US10349022B2 (en) Image processing apparatus, projector, image processing method, and storage medium storing image processing program
US10748397B2 (en) Monitoring system
CN111754575A (zh) 对象定位方法、投影方法、装置和投影仪
EP3660452B1 (en) Positioning system and positioning method
TWI733397B (zh) 投影系統以及用於投影系統的定位方法
CN112954283B (zh) 用于多投影仪的融合拼接播放方法及其播放系统