TW200529098A - Method and apparatus for providing a combined image - Google Patents

Method and apparatus for providing a combined image Download PDF

Info

Publication number
TW200529098A
TW200529098A TW094104782A TW94104782A TW200529098A TW 200529098 A TW200529098 A TW 200529098A TW 094104782 A TW094104782 A TW 094104782A TW 94104782 A TW94104782 A TW 94104782A TW 200529098 A TW200529098 A TW 200529098A
Authority
TW
Taiwan
Prior art keywords
images
image
cameras
camera
combined
Prior art date
Application number
TW094104782A
Other languages
English (en)
Inventor
Toh Onn Hii
Original Assignee
Creative Tech Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Creative Tech Ltd filed Critical Creative Tech Ltd
Publication of TW200529098A publication Critical patent/TW200529098A/zh

Links

Classifications

    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03BAPPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B37/00Panoramic or wide-screen photography; Photographing extended surfaces, e.g. for surveying; Photographing internal surfaces, e.g. of pipe
    • G03B37/04Panoramic or wide-screen photography; Photographing extended surfaces, e.g. for surveying; Photographing internal surfaces, e.g. of pipe with cameras or projectors providing touching or overlapping fields of view
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00Geometric image transformations in the plane of the image
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20Image signal generators
    • H04N13/204Image signal generators using stereoscopic image cameras
    • H04N13/239Image signal generators using stereoscopic image cameras using two two-dimensional [2D] image sensors having a relative position equal to or related to the interocular distance
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20Image signal generators
    • H04N13/204Image signal generators using stereoscopic image cameras
    • H04N13/243Image signal generators using stereoscopic image cameras using three or more two-dimensional [2D] image sensors
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/698Control of cameras or camera modules for achieving an enlarged field of view, e.g. panoramic image capture
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/90Arrangement of cameras or camera modules, e.g. multiple cameras in TV studios or sports stadiums
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment
    • H04N5/262Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment
    • H04N5/262Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/2628Alteration of picture size, shape, position or orientation, e.g. zooming, rotation, rolling, perspective, translation

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Studio Devices (AREA)
  • Image Processing (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
  • Stereoscopic And Panoramic Photography (AREA)

Description

200529098 九、發明說明: 【發明所屬之技術領域】 本發明有關用於提供組合的影像之方法及裝置,而更 特別且非唯一地指稱用於從複數個影像提供組合的影像之 此種方法及裝置。 定義
於整份說明書中,"組合”之使用係包含參照全景之影 像的產生,乃至於立體影像、雙凸透鏡狀的立體影像/視 訊、以及合併兩個或者更多視訊影像流成為單一視訊流之 視訊後製產品。 [先前技術】 全景影像乃為廣角的影像。在通常的照相術中,一般 是藉由使得之後所遠妹或去接R + . 攸/T逆…次耆接圖在一起的連續影像的序列 形成組合的料,來取得全景影像。t使用複數個攝影機 目拜間取得影料,則通常個料顯示其影像。對視訊攝影 機保全、視訊會議、以及其他類似之應用而言,此意謂著 必須使用複數個攝影機以及複數個顯示器,以供連續的全 景成像之用。 …風者附加的是,其中-個或多個攝影機可以是 —種旋轉式攝影機。此需要旋轉式攝影機來致使操作者移 動攝影機之視線範圍 式去 關,或者致使-㈣服馬達來移動此攝 次者自動地刼縱該伺服馬達。然而’當使 用如此的系統時,在任何一 吏 ^ ^ . , ii ^ 守間點上,此攝影機僅能涵 I其取大視野乾圍之—部份而已。紝 、、’口禾疋 在任何一個時 5 200529098 間點上’其並不能涵莒θ b叫盍取大視野範圍之1 法滿足需求。 ,、匕口Μ刀。此亚無 雖然可以使用廣自 -角的透鏡來減低涵蓋範 響,然而卻會引進失直& 槪靶μ漏失之影 1運失真,特別是在較高的離軸 同樣亦無法滿足需求。声 又 文 、 ^廣角的透鏡同樣也需要#古結批危 之影像感測裔來維持相同之解析度。 a 【發明内容】 根據本發明之一觀點,苴 像中提供組合的影像之方出一種用於從複數個影 機其中-者所產生=攝像乃是由複數個攝影 各個攝影機則具有用來 像中某一影像之影像系統,該方法係包含: " (a)在複數個攝影機各個中產生複數個影像; ⑻使用個裝作虛擬攝影機的接圖器來進行該 個影像之接圖,藉以形成該組合之影像。 根據本發明之另—翻赴,甘及h 嬈點,其係提出一種用於經由複數 個影像提供組合的影像之太、、木 像之方法各個影像乃是由複數個攝 影機其中一者所產生,久伽语旦彡协 各個攝〜故則具有用來取得複數個 影像中某一影像之影像系統,該方法係包含·· U)在複數個攝影機之各個中產生複數個影像; ⑻在形成該組合的影像之複數個影像上,使用虛擬攝 影機來執行接圖操作。 根據本發明之另—觀點,其係提出-種用於經由複數 個影像提供組合的影像之方法,各個影像乃是由複數個攝 ’v機其中者所產生’各個攝影機則具有用來取得複數個 6 200529098 影像中某—影像之影像系統,該方法係包含·· (㈧在複數個攝影機之各個中產生複數個影像,· (㈧使複數個影像各個皆扭曲(warp)成為一種中 座標;以及 0 (C)使用二维搜尋將複數個影像接圖成為該組合的影 ,此接圖則是藉由一個裝作虛擬攝影機的接圖器
之0 T :據本發明之另一觀點,其係提出一種用於經由複數 口衫像提供組合的影像之方法, 影嬙甘士 ^〜诼乃疋由歿數個攝 如祛其中一者所產生, 畢 由甘 辦心钺則具有用來取得複數個 〜像中某一影像之影像系統,該方法係包含·· (a)在複數個攝影機之各個中產生複數個影像; 域;⑻執行重疊之計算,藉以判斷出複數個影像之重疊區 以及 ㈦將複數個影像進行接圖,藉以形成該組合的影像; ⑷將步驟⑻的結果用於其後來數 有複數個影像。 僻办裇的所 根據本發明之另一觀點, 個影像提供組合的影像之方、㈣於經由複數 影機其中-者所“ ί 像乃是由複數個攝 影像中某―# / 攝影機則具有㈣取得複數個 ^ 像之衫像系統,該方法係包含: U)在複數個攝影機之各個中產生複數個影像; (b)選擇一種呈現式樣以為該組合的影像之用;以及 200529098 (c )以此呈現式樣對複數個影-組合的影像,而此接圖則是萨由 卩w,藉以形成該 圖器來從事之。 …-個裝作虛擬攝影機的接 根據本發明另一個額外觀點,其係提出-種經由複數 *複數個視訊攝影機其中一=:,各個視訊影像乃是 具有用來取得複數個影像中竿—旦各個視訊攝影機則 係包含: -像之影像系統,該方法 座標U)使複數個視訊影像之各個皆扭曲成為一種中間之 ⑻判斷已扭曲的複數個視訊影像之重疊區域. 的視:=b扭曲之複數個影像進行接圖,藉以形成該組合 的視讯衫像,此接圖則是藉由一 器來從事之;以及 衣作虛擬攝影機的接圖 ⑷處…合的視訊影像以為顯示器 中之一或多個之用。 /、 =倒數第二個觀點為提供一種用於經由 ==ΓΓ法,各個影像乃是由複數個攝影機 二旦具有用來取得複數個影像 中某一衫像之影像系統,該方法係包含·· (a)在複數個攝影機之各個中產生複數個影像; 域; 重疊之計算,藉以判斷出複數個影像之重疊區 ⑷使用此重疊計算來執行複數個影像中的色彩校 8 200529098 正;以及 ⑷其後針對後來自複數個攝影機 像,執行相同之色彩校正。 …灵數個影 q本:之最後一的觀點為提供用於提供組合的影像之 裝置,该裝置係包含: ’V诼之 ⑷複數個攝影機,各個皆具有一個影像系統; ⑻個接圖器,其係藉由在複數個 作,用來產生該組合之影像,其中複數個2丁接圖知 數個攝影機之其中一者所產生;以及〜纟個皆由複 (C)此接圖器係裝作_種虛擬攝影機。 各個攝影機皆具有一 ^個緩衝态,而且可以位於一個丘 同的主體中,或者可以是分離的。 /、 為了全然地了解本發者 僅為非限制的範例之較” 現之,此時將藉由 貫細例來說明之,其說明係參照 所附的闡述用之圖式。 【實施方式】 如圖1與2所示,一插田十a , 二/ 種用來產生即時組合的視訊流之 方式係使用多重之攝影冑10。雖然顯示有三個,但僅是為 了方便而已。所使用的數目可以是二以上的任何適當之數 目。如果使用了足夠多的攝影機,則視野範圍便能為-個 平面上的36〇。。其視野範圍能料球面的。 在多重攝影機中的影像感測器〗2能夠是如圖】所示的 π _ & ’或者如圖2所示的組合成為單一個攝影機主體 14。不論那一種辦法,多重攝影機各個影像感測器12皆是 200529098 提供目標景象之_卹 視範圍皆與鄰接的二:;較佳的是’各個攝影機1。之 使用-種接圖器將來自範圍有所重並且 進而成Α抑έ人 °攝衫機的視訊流接圖在一起, ,,x nfL如果攝影機1 〇為如同圖〗辦一 的为離個體,則其可能分 H所不 或去JL 了 a V 彳一相對罪近,猶如密集成群者、 A者其可以疋分離而彼茈 ^ ^ 離的。如果遠離的話,則仍鲈 侄地使其視野範圍能夠重疊。 仍車乂 &相較於具有機械旋轉式馬達之單一個攝影機 影機之配置所具有的優 重攝 .# 俊2為沒有會使其機械失效之移動1 件。其具有額外的益處為_吉姑切# # 抄動4 如一個廣角透鏡之攝影機_ y 猶 直盥 铖瓜,但沒有相關的影像資料失 ”與彳貝失,特別是沒有在寬廣 資料4亩w 足廣的離軸角度上之相關的影像 ―扣失。不像具有單-影像感測器的單一廣角透 鏡攝影機,多重攝影機的配’、角透 置j針對較為廣闊的視野進行 k減調整,並且由於多重寻彡 。 i〜像感測态之使用,因而可提 較高的解析度。 权仏 、多重攝影機系統可在標準電腦上使用現有的攝影機與 視訊應用,諸如視訊會議以及網路傳播應用。以此種方式 能夠使用現有的視訊應用。其中一種使之與現有視訊應用 協问運作之辦法乃是將接圖器裝作一個虛擬攝影機(圖 3),其能夠處理來自攝影機1〇的個別影像藉以形成該組合 的影像’並且將該組合的影像呈現至一般的視訊應用。以 此種方式’則可以避免使用特殊的硬體及/或軟體。 大多數的電腦操作系統(〇S)都提供一種針對其應用程 10 200529098 式存取所附的攝影機之標準方法。典型的是,每一個攝參 機都具有-個訂製的”裝置驅動程式,,,其提供〇§能夠鱼之 連通的共通介面。於是,os㈣其應用程式提供一種傳送 _命令至攝影機之共通介面。此種分層的結構係針對 式提供—種用以利用攝影機之標準辦法。就應用程 式而言,使用共通的驅動程式介面是重要的,如此不論攝 影機的販售商為何者都可運作。只要攝影機遵循此共通的 驅動程式介面,其同樣使得這些應用程式 攝影機協同運作。 只…未來之 虛擬攝影機32實際上並不存在。虛擬攝影機32乃是 直接從其裝置㈣程式33或者藉由共通㈣程式介面而婉 由其他實際的攝影機30、31來得到視訊流34,而不是從虛 擬攝影機32所沒有的影像感測器提供視訊流。虛擬攝影: 32之後則組合並且重新封包這些視訊流成為單一之視訊 流,此則是透過其本身的共通驅動程式介面33所提供的。 組合的攝影機32為-個虛擬攝影機,其將輸入視訊流^ 接圖成為組合之視訊流。就其本身而論,虛擬攝影機Μ為 -種能夠處理-個或者多個輪入視訊流並且輪出單一視訊 流之視訊處理器。 就視訊應用35的觀點而論,虛擬攝影機32看似-種 具有寬廣視角之普通攝影機。以此種方式,藉由此虛擬攝 影機32便能夠處理來自超過—個的攝影機Μ』之μ 資料,致使電腦的視訊應用35將之視為單—㈣影機1 包含的攝影機之數目並不受限於兩個、三個、四個、五個、 200529098 六個等等。由其組合的視野範圍所捕捉的全景並無限制, 而可以延展至360。,甚至是球狀的。 如圖4中所示,組合的虛擬攝影機32實質上是一個接 圖器。其即時地取得來自各個攝影機之重疊影像,並且將 之組合成為-個組合之影像。該些影像則是來自攝影機 :。二等等的緩衝器41、42、43...等等。將各個影像 扭曲(44)成為-種中間座標,諸如圓柱或者球面之座桿, 致使接圖能夠減化至簡單的二維搜尋。其之後則判斷這也 =重疊區域⑹。使用此重疊區域’便能夠執刪 权正⑽,藉以確保跨於影像之間的色彩—致性。針對立 後所有的影像,都使用相同的色彩校正或者大致上相同的 色彩校正。之後則將最後㈣像^(4 成最後的全景。 &精以形 叶二達?即:的效能,組合的虛擬攝影機僅執行重疊 :::…且假設於整個運作期間中攝影機的位置 之視應用具有格式上之限制。例如,_為基礎 …義應用僅接受CIF以及QCIF之解析度。 組合的影像之尺寸與圖像縱橫比很可能、 格式。同樣也可以執行用以將影像變=的:訊 階段,此典型地涵蓋縮放與平移。 “格式之額外 圖5係舉出—些不同的呈現式樣。 合的影像。圖5⑻與5⑷的ietterb〇q咖為原來的組 似由數位多用途碟片(講)格 〜 ’只仃之方式,用 12 200529098 :將16: 9之影像顯示於標準之4: 3顯示器上。在影像細 節的某些損失之犧牲下,當捕捉整個視野時,目5(d)的水 平壓縮式樣對記錄組合的視訊可能會是有用的。 可以提供使用者個別的使用者介面’藉以使得不同的 呈現式樣之選擇成為可能的。對搖卿& scan(48)而言, 使用者能夠互動地平移全景,用以選擇所關注的區域。可 替代的是,在預設的時間區間中,能夠利用自動的平移盘 式樣之間的切換。多個式樣也可同時被產生。例如,_ 壓縮式樣可以用夾0 % ^ , 一 用爪5己錄視讯,同日守Pan & scan則可以用來 顯示。 猎由擁有多重之觀視點,理想的接圖乃是有可能的。 然而,在重疊區域上,可能會導致雙重或者遺失的影像。 近的物體相較於遠的物體而言,此問題可能更為嚴重 大都是具有較遠的物體之監視應用而言,此種問題列可1 減少。對諸如視訊會議之特寫應用而言,可能會 = “成致使中間的攝影機具有人頭部及肩膀的 像。各個攝影機應該較佳地每秒傳送三十個#。 Θ 對於即^的立體觀視而言,虛擬攝影機可藉 數與偶數列以及針對由上至下的立體觀視而堆疊影像可 可以執行立體影像的形成。對視訊的後置處理^ $便 攝影機可以用來組合或者合併來自不同攝影機之^訊^擬 /、可以用來產生雙凸透鏡狀的立體影像/視訊。 ☆虛擬攝影機Μ能夠藉由交錯、重新製定大小以及" 私而將多重視訊流轉換成為立體格式的單一視訊流。: 13 200529098 佳地以適當的過濾來執行重新掣宕 里聊裟疋大小,例如用於放大尺 寸之”CUblC”與,,“咖”插補,以及用於縮小尺寸 或 ”Area Fi1 ter丨丨。 列交錯立體觀視格式會將具有代表左眼的奇數列之立 體對與代表右眼的偶數列交#力 . 幻又錯在一起。使用解多工器設備 便能夠觀視之,諸如”stereQgraphic^ Si_e㈣,而且 其y相容於標準之視訊信號。虛擬的攝影们2係執行牵涉 到複製像素之交錯,並且可能對各線重新製定大小: 線1[ 左眼線】---------------] 線2[ 右眼線2--------- Ί
J 線3[ 左目艮、線3---------------] 線4[ 右眼線4---------------- 上下之立體觀視格式需要炎、、盾_§/ 7备 而要來源影像之垂直重新製定大 = 方者用於左眼,而下方者則是用於右眼。以 :法’同樣也能夠使用並排的袼式。在這些範例中, -擬攝影機32係執行縮放與平 ^ ^ 夕猎以將兩個視訊流組合 成為早一立體之視訊流。在接收 处 將所選擇的袼式解碼之带f 、夠使用-種可以 視此立體對。 、,W利用立體效果的眼鏡來觀 攝影機10可以是數位靜態之 攝影機。 ,聶衫枝、或疋數位動畫之 k官已經在之前的本發 例,妒品4 ▲ 月况明書中說明了較佳實施 例然而熟知此項技術者所要了解&β , 種設計、加姐、 开〗解的疋,在其中之一或多 木構以及操作細節上可 Μ Γ从 < 事各種不同的變化或 14 200529098 修改,其均不脫離本發明。 【圖式簡單說明】 圖1為組合的攝影機之較佳型式之立體圖; 圖2為組合的攝影機之第二種型式之立體圖; 圖3為圖1與2的裝置之方塊圖; 圖4為圖2的虛擬攝影機之流程圖;以及 圖5為各種呈現式樣之表示。 【主要元件符號說明】 10 多重之攝影機 12 影像感測器 14 單一個攝影機主體 30 實際攝影機 31 實際攝影機 32 組合的攝影機(虛擬攝影機) 33 共通的驅動程式介面 34 輸入視訊流 35 視訊應用 15

Claims (1)

  1. 200529098 十、申請專利範圍: ^一種用於經由複數個影像提供-個組合的影像之方 法,其中的各個影像是ά〜 〜傢之方 由禝數個攝影機之其中一者所逄 生,而各個攝影機則呈古 屋 禮夕旦/庶〃 ' 用來取得該複數個影像中之一影 像之衫像糸統,該方法係包含: (a)在該複數個攝影 各個中產生該複數個影像; 11) j使用充當一個声 |旋攝影機的接圖器來進行嗜福翁 個影像之接圖,以采+ 丁 Μ稷數 精以形成該組合之影像。 2.如申請專範圍第i項之方法, 曲該複數個影像之各個 Q疋錯由扭 成為一種中間座標並且使 哥將該複數個影像接圖成為該組合的影像。准搜 ,匕申,請專範圍第1項之方法,其更包含執行重” π,猎以判斷該複數個影 > 且口十 、象之重®區域’該重疊朴管 於其後來自該複數個摄旦里且彳异係用 攝衫機之所有複數個影像。 4·如申請專範圍帛1項之方法,JL更包含選接 於該組合的影像之呈現式樣。 、〜擇-種用 5·如申請專範圍第 〜β 4人 ύ項之方法’其更包含選擇一鍤田 亥、,且5的影像之呈現式樣。 用 6.如申請專範圍第3項之方法,其中的接 曲複數個影像之各個成為—種中間座標並且❹二㈣Γ 將此複數個影像接圖成為該組合的影像。 、’、技哥 7 ·如申請專蔬衛μ ^ , 4項之方法,其中的接圖是ώ ^ 曲複數個影像之各個 口疋错由扭 # tl_ 成為一種中間座標並且使用二维# s 將此稷數個影像接圖成為該組合的影像。 轉哥 16 200529098 8. -種用於經由複數個影像提供一個 法’各個影像是由複數個攝影機之其中:像之方 攝影機則具有用來取^曰— 斤產生,各個 有用末取侍该複數個影像中之一 統,該方法係包含: 〜像之衫像系 ==個物之各個中產生該複數個影像; S f作 硬欠個衫像上使用一個虛擬攝影 圖操作,以形成該組合的影像。 *執仃接 9·如申請專範圍第8項 曲該複數個影像之各_ 、 白、接圖是藉由扭 pm之各個成為一種中間座標並且 尋將該複數個影像接圖成 吏用一、准技 女口风馮该組合的影像。 _ 如中請專範圍第8項之方法,其更包含執行重 异’糟以判斷該複數個影像之二用 於其後來自該複數個摄&她 ^重1什异係用 複數個攝衫機之所有複數個影像。 ^如申請專範圍第Η項之方法,其更包含: 正 =使用此重疊計算來執行該複數個影像中的色彩校 像 I二對其後來自該複數個攝影機之所有複數個影 持、,,貝進行此色彩校正。 I2·如申請專範圍第10 # s ^ ^ 用於該組合的影像之呈現式^之方法,其更包含選擇—種 =·如巾請專範圍第u項之方法,其更包含選擇 用方;遠組合的影像之呈現式樣。 禋 扭曲今複數申:專耗圍弟i 1項之方法,其中的接圖是藉由 數個影像之各個成為-種中間座標並且使用二維 17 200529098 搜尋將該複數個影像接圖成為該組合的影像。 15. 如申請專範圍第12 扭曲該複數個影像之各個成為二其:的接圖是藉由 搜尋將該複數個影像接圖Λ S刻线且使用二維 成為6亥組合的影像。 16. -種用於經由複數個影像提供—個 方法,各個影像是由禎备彳m a 、口的心像之 豕疋由複數個攝影機之其中一者所產生 個攝影機則具有用來取得該複數個影像中之 系統,該方法係包含: 知诼之〜像 (a) 在該複數個攝影機 r, ^ 產生该钹數個影像; (b) 使该钹數個影像各 標;以及 “丑曲成為-種中間之座 (c) 使用_維搜尋將該複數個影像接 影像,此接圖則是Μ由一袖姑^Θ %、、且〇的 9 個政作虛擬攝影機的接圖器來從 争之。 17·如申請專範圍第16項之方法,其更包含執行重蟲 计异’措以判斷該複數個影像之重疊區域,該重疊計算係 用於其後來自該複數個攝影機之所有複數個影像。… K如巾請專範㈣16項之方法,其更包含選擇一種 用方;a亥組合的影像之呈現式樣。 、 用方、I由複數個影像提供一個組合的影像之 方法’各個影像是由複數個攝影機之其中一者所產生 個攝影機則具有用來取得該複數個影像中之一影像之影 糸統,該方法係包含: ⑷在該複數個攝影機之各個t產生該複數個影像; 18 200529098 (b) 執行重疊之計算, 區域; 猎以判断出該複數個影像之重疊 (c) 將該複數個影像 此接圖則是藉由-個穿作:圖’措以形成該組合的影像 以及 '"乍虛擬攝影機的接圖器來從事之; 所古⑷將步驟㈦的結果用於其後來自該複數個攝,機的 所有複數個影像。 反要又W攝〜钱的 扭曲該複:二各::之:法,其中的接圖是藉* 搜尋將該複數個影像接圖成為該並且使用二維 用二1.Λ申請專範圍第19項之方法,其更包含選擇-種 用於该組合的影像之呈現式樣。 22·:種用於經由複數個影像提供一個 方法,各個影像是由複數個攝影機之其卜者所產生: 個攝影機則具有用來取得該複數個影像中之-影像之= 系統,該方法係包含: 〜像之如像 ((ba))tr數個攝影機之各財產生該錢個影像丨 二擇:種呈現式樣以為該組合的影像之用;以及 Y C ^壬現式樣對該複錢㈣it行制 该組合的影像,而此接圖則是藉由 曰= 接圖器來從事之。 衣作虛擬攝影機的 扭曲圍第22項之方法,其中的接圖是藉由 搜尋m 各個成為一種中間座標並且使用二維 +將遠驳數個影像接圖成為該組合的影像。 19 200529098 2 4.如申請專範圍第2 2項之方、、木甘雨a ^ / /、更匕含執行重疊 计异,猎以判斷該複數個影像之重疊區域,該重 用於其後來自該複數個攝影機之所有複數個影像。…、 二了?/复數個視訊影像來產生,合的視訊 :1 象之方法,各個視訊影像是由複數個視訊攝影機之其中 德所產生’各個視訊攝影機則具有用來取得該複數” 像之一影像之影像系統,該方法係包含·· … ⑷使該複數個視訊影像之各個 之座標; 坎马種t間 (b)判斷該已扭曲的複數個視訊影像之重疊區域· (。)對該已扭曲的複數個影像進行接圖, 合的視訊影像’此接圖則是藉由—個裝作卢擬摄: 圖器來從事之;以& 個衣作虛擬攝影機的接 ⑷處理該組合的視訊影像以為顯 中之一或多個之用。 ,、岵存裝置其 26.如申請專範圍第25項 計算’藉以判斷該複數個影像之重疊區域,行重疊 用=自該複數個攝影機之所有二 27·如申請專範圍第25項之方法 用於該組合的影像之呈現式樣。 〜擇—裡 “28· 一種用於經由複數個影像提供-個組八的 方法,各個影像是由複數個攝影機之其中—者像之 個攝影機則具有用來取得該複數 2各 系統,該方法係包含: 衫像之影像 20 200529098 (a) 在该複數個攝影機 各個中產生該複數個影像; (b) 執仃重疊之計算, 區域· 3判斷出該複數個影像之重疊 (c) 使用該重疊計算央 — 以及 末執仃该複數個影像中的色彩校 (d) 其後針對後來自該複數 執行相同之色彩校正。 有複數個影 29.如申請專範圍第28項之方法 扭曲該複數個影像之各個;中的接圖-猎由 技哥將該複數個影像接圖 更用一維 冬设口成為该組合的影像。 30·如申請專範圍第 用私4 4人 員之方法’其更包含選擇一插 用於该組合的影像之呈現式樣。 释種 31·如申請專範圍第28 _ ^ ^ 、之方法其中的接圖是藉由 政作虛擬攝影機的接圖器來從事之。 32·如申請專範圍第2 用於节相人員之方法,其更包含選擇一種 …亥組合的影像之呈現式樣。 禋 34·如申請專範圍第3〇項之方法, 用於該組合的影像之呈現式樣。/ 35·如申請專範圍第29項之方法, 個裝作虛擬攝影機的接圖器來從事之 3 6 · —種用於產生一個 含: 個組合的影像之裝置,該裝置係包 复數個攝影機,各個皆具有—個影像系統; 個接圖為,其係错由在複數個影像上執行接圖操 正 像 其更包含選擇 種 其中的接圖是藉由 21 200529098 作,用來產生該組合之旦 ^ 該複數個攝影機之苴中’其中該複數個影像各個皆由 ,、甲一者所產生;以芬 (C)該接圖器係裝作一 我作個虛擬攝影機。 37·如申請專範圍第%項之 皆具有一個緩衝器 /、中的各個攝影機 38·如申請專範圍第36項 位於 μ u 衣置,其中複數個攝影機 1 一個共同的主體中。 39.如申請專範圍第36項之萝 ^ ^ ^ ^ ^ 旗私 展置’其中的複數個攝影 戍1糸分別位於分離的主體中。
    、圖式 如次頁
    22
TW094104782A 2004-02-19 2005-02-18 Method and apparatus for providing a combined image TW200529098A (en)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
US10/783,279 US20050185047A1 (en) 2004-02-19 2004-02-19 Method and apparatus for providing a combined image

Publications (1)

Publication Number Publication Date
TW200529098A true TW200529098A (en) 2005-09-01

Family

ID=34861191

Family Applications (1)

Application Number Title Priority Date Filing Date
TW094104782A TW200529098A (en) 2004-02-19 2005-02-18 Method and apparatus for providing a combined image

Country Status (6)

Country Link
US (1) US20050185047A1 (zh)
CN (1) CN1922544A (zh)
AU (1) AU2005215585A1 (zh)
GB (1) GB2430104A (zh)
TW (1) TW200529098A (zh)
WO (1) WO2005081057A1 (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8810634B2 (en) 2010-10-14 2014-08-19 Altek Corporation Method and apparatus for generating image with shallow depth of field
TWI595307B (zh) * 2014-03-19 2017-08-11 宏達國際電子股份有限公司 手持電子裝置、全景影像形成方法及其電腦程式產品

Families Citing this family (47)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7868847B2 (en) * 2005-05-24 2011-01-11 Mark W Miles Immersive environments with multiple points of view
US8509563B2 (en) * 2006-02-02 2013-08-13 Microsoft Corporation Generation of documents from images
US20090257680A1 (en) * 2006-06-30 2009-10-15 Nxp B.V. Method and Device for Video Stitching
EP2259163A3 (en) * 2006-08-02 2011-03-16 Research In Motion Limited System and method for adjusting presentation of moving images on an electronic device according to an orientation of the device
US8493323B2 (en) 2006-08-02 2013-07-23 Research In Motion Limited System and method for adjusting presentation of moving images on an electronic device according to an orientation of the device
US8139026B2 (en) 2006-08-02 2012-03-20 Research In Motion Limited System and method for adjusting presentation of text and images on an electronic device according to an orientation of the device
US7843487B2 (en) * 2006-08-28 2010-11-30 Panasonic Corporation System of linkable cameras, each receiving, contributing to the encoding of, and transmitting an image
US8607281B2 (en) * 2006-09-07 2013-12-10 Porto Vinci Ltd. Limited Liability Company Control of data presentation in multiple zones using a wireless home entertainment hub
US9319741B2 (en) 2006-09-07 2016-04-19 Rateze Remote Mgmt Llc Finding devices in an entertainment system
JP2008219428A (ja) * 2007-03-02 2008-09-18 Fujifilm Corp 撮像装置
FR2913779B1 (fr) * 2007-03-13 2009-11-13 Gint Dispositif pour l'acquisition d'image de telesurveillance.
US8009200B2 (en) 2007-06-15 2011-08-30 Microsoft Corporation Multiple sensor input data synthesis
US8300083B2 (en) * 2007-07-20 2012-10-30 Hewlett-Packard Development Company, L.P. Position relationships associated with image capturing devices
TW200907557A (en) * 2007-08-08 2009-02-16 Behavior Tech Computer Corp Camera array apparatus and the method for capturing wide-angle video over a network
EP2174486A2 (en) * 2007-08-09 2010-04-14 Koninklijke Philips Electronics N.V. Method and device for creating a modified video from an input video
KR101204888B1 (ko) * 2007-08-31 2012-11-26 삼성테크윈 주식회사 디지털 촬영장치, 그 제어방법 및 이를 실행시키기 위한프로그램을 저장한 기록매체
SG150414A1 (en) * 2007-09-05 2009-03-30 Creative Tech Ltd Methods for processing a composite video image with feature indication
US8773495B2 (en) * 2007-10-12 2014-07-08 Polycom, Inc. Integrated system for telepresence videoconferencing
US20100033570A1 (en) * 2008-08-05 2010-02-11 Morgan Plaster Driver observation and security system and method therefor
WO2010075726A1 (zh) 2008-12-30 2010-07-08 华为终端有限公司 立体全景视频流生成方法、设备及视频会议方法和设备
CN101771830B (zh) * 2008-12-30 2012-09-19 华为终端有限公司 立体全景视频流生成方法、设备及视频会议方法和设备
US8767081B2 (en) * 2009-02-23 2014-07-01 Microsoft Corporation Sharing video data associated with the same event
CN101527828B (zh) * 2009-04-14 2011-08-10 华为终端有限公司 图像采集设备
CN101556758B (zh) * 2009-04-23 2010-12-01 杭州镭星科技有限公司 一种实现用多台投影机来显示高动态亮度范围图像的方法
JP5235798B2 (ja) * 2009-06-22 2013-07-10 富士フイルム株式会社 撮影装置及びその制御方法
US9055189B2 (en) 2010-12-16 2015-06-09 Microsoft Technology Licensing, Llc Virtual circular conferencing experience using unified communication technology
US8908054B1 (en) * 2011-04-28 2014-12-09 Rockwell Collins, Inc. Optics apparatus for hands-free focus
US8698874B2 (en) * 2011-06-10 2014-04-15 Microsoft Corporation Techniques for multiple video source stitching in a conference room
US8953079B2 (en) * 2012-12-31 2015-02-10 Texas Instruments Incorporated System and method for generating 360 degree video recording using MVC
CA2856896A1 (en) * 2013-07-18 2015-01-18 Spo Systems Inc. Limited Virtual video patrol system and components therefor
CN104516482A (zh) * 2013-09-26 2015-04-15 北京天盛世纪科技发展有限公司 一种无影投影系统及方法
US20150124120A1 (en) * 2013-11-05 2015-05-07 Microscan Systems, Inc. Machine vision system with device-independent camera interface
EP2887647B1 (en) * 2013-12-23 2017-10-18 Coherent Synchro, S.L. System for generating a composite video image and method for obtaining a composite video image
CN104243920B (zh) * 2014-09-04 2017-09-26 浙江宇视科技有限公司 一种基于基本流视频数据封装的图像拼接方法及装置
CN104360488B (zh) * 2014-11-14 2017-05-24 山东理工大学 紧凑型立体显示系统的显示方法
TWI548281B (zh) * 2014-11-21 2016-09-01 財團法人工業技術研究院 寬景監視系統及其方法
CN104615917A (zh) * 2015-01-20 2015-05-13 中兴通讯股份有限公司 一种伪装图片的方法、查看图片的方法、系统和终端
CN104680078B (zh) * 2015-01-20 2021-09-03 中兴通讯股份有限公司 一种拍摄照片的方法、查看图片的方法、系统和终端
CN104680077B (zh) 2015-01-20 2021-10-12 中兴通讯股份有限公司 一种加密图片的方法、查看图片的方法、系统和终端
US9769419B2 (en) 2015-09-30 2017-09-19 Cisco Technology, Inc. Camera system for video conference endpoints
CN105530473A (zh) * 2015-12-09 2016-04-27 北京永泰安达科技有限公司 全景眼刑侦快速取证系统
CN105657290A (zh) * 2016-01-29 2016-06-08 宇龙计算机通信科技(深圳)有限公司 一种基于双摄像头的扫描方法及装置
US11019257B2 (en) 2016-05-19 2021-05-25 Avago Technologies International Sales Pte. Limited 360 degree video capture and playback
DE102017009145B4 (de) * 2016-10-14 2026-04-30 Avago Technologies International Sales Pte. Ltd. Erfassung und Wiedergabe von 360-Grad-Videos
US10297059B2 (en) 2016-12-21 2019-05-21 Motorola Solutions, Inc. Method and image processor for sending a combined image to human versus machine consumers
CN109300145B (zh) * 2018-08-20 2020-06-16 彭楷文 自适应智能伪装系统
KR20220025600A (ko) * 2020-08-24 2022-03-03 삼성전자주식회사 영상 생성 방법 및 장치

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5023725A (en) * 1989-10-23 1991-06-11 Mccutchen David Method and apparatus for dodecahedral imaging system
KR940017747A (ko) * 1992-12-29 1994-07-27 에프. 제이. 스미트 영상 처리 디바이스
US5495576A (en) * 1993-01-11 1996-02-27 Ritchey; Kurtis J. Panoramic image based virtual reality/telepresence audio-visual system and method
DE69411849T2 (de) * 1993-10-20 1999-03-04 Philips Electronics N.V., Eindhoven Verfahren zur Verarbeitung von Luminanzpegel in einem zusammengesetzten Bild und Bildverarbeitungssystem zur Anwendung dieses Verfahrens
US5850352A (en) * 1995-03-31 1998-12-15 The Regents Of The University Of California Immersive video, including video hypermosaicing to generate from multiple video views of a scene a three-dimensional video mosaic from which diverse virtual video scene images are synthesized, including panoramic, scene interactive and stereoscopic images
US5657073A (en) * 1995-06-01 1997-08-12 Panoramic Viewing Systems, Inc. Seamless multi-camera panoramic imaging with distortion correction and selectable field of view
DE69733233T2 (de) * 1996-09-11 2006-01-19 Canon K.K. Bildverarbeitung zur dreidimensionalen Wiedergabe von Bilddaten auf der Anzeige eines Bildaufnahmegeräts
WO1998047291A2 (en) * 1997-04-16 1998-10-22 Isight Ltd. Video teleconferencing
JPH10336705A (ja) * 1997-06-02 1998-12-18 Canon Inc 複眼カメラ
US6078701A (en) * 1997-08-01 2000-06-20 Sarnoff Corporation Method and apparatus for performing local to global multiframe alignment to construct mosaic images
US6545702B1 (en) * 1998-09-08 2003-04-08 Sri International Method and apparatus for panoramic imaging
US6778207B1 (en) * 2000-08-07 2004-08-17 Koninklijke Philips Electronics N.V. Fast digital pan tilt zoom video

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8810634B2 (en) 2010-10-14 2014-08-19 Altek Corporation Method and apparatus for generating image with shallow depth of field
TWI595307B (zh) * 2014-03-19 2017-08-11 宏達國際電子股份有限公司 手持電子裝置、全景影像形成方法及其電腦程式產品

Also Published As

Publication number Publication date
WO2005081057A1 (en) 2005-09-01
CN1922544A (zh) 2007-02-28
AU2005215585A1 (en) 2005-09-01
GB0616491D0 (en) 2006-09-27
GB2430104A (en) 2007-03-14
US20050185047A1 (en) 2005-08-25

Similar Documents

Publication Publication Date Title
TW200529098A (en) Method and apparatus for providing a combined image
KR101003277B1 (ko) 이음매 없는 합성 이미지를 생성하는 컴퓨터 구현 방법 및 멀티-이미저 시스템
JP5172863B2 (ja) バナナ・コーデック
Foote et al. FlyCam: practical panoramic video
TWI356186B (en) Panoramic video system with real-time distortion-f
JP4153146B2 (ja) カメラアレイの画像制御方法、及びカメラアレイ
KR100893463B1 (ko) 무결절성 합성 영상 생성 방법
WO2021012856A1 (zh) 一种全景图像的拍摄方法
CN104685860A (zh) 利用虚拟视点从光场生成图像
JP2007141228A (ja) 自由視点におけるバーチャルビューの特定および合成
JP7378243B2 (ja) 画像生成装置、画像表示装置および画像処理方法
CN113891060B (zh) 自由视点视频重建方法及播放处理方法、设备及存储介质
CN113963094B (zh) 深度图及视频处理、重建方法、装置、设备及存储介质
JP7196421B2 (ja) 情報処理装置、情報処理システム、情報処理方法及びプログラム
CN107317998A (zh) 全景视频图像融合方法及装置
CN213126145U (zh) 一种ar-虚拟互动系统
CN106067941B (zh) 利用相机瓷砖化实现实时多尺度成像系统及方法
CN100490501C (zh) 实时无失真成像的全景视频系统
Hua et al. A high-resolution panoramic camera
US8019180B2 (en) Constructing arbitrary-plane and multi-arbitrary-plane mosaic composite images from a multi-imager
JP7653724B2 (ja) 没入型ストリーミング画像のキャプチャ及び結像の装置と方法
CN102802003A (zh) 基于gpu与网络摄像机的实时拍摄与实时自由立体显示系统
Qi et al. Overcoming parallax and sampling density issues in image mosaicing of non-planar scenes
Carr et al. Portable multi-megapixel camera with real-time recording and playback
TWI303012B (zh)