TWI538519B - 視訊影像之擷取裝置 - Google Patents

視訊影像之擷取裝置 Download PDF

Info

Publication number
TWI538519B
TWI538519B TW103139704A TW103139704A TWI538519B TW I538519 B TWI538519 B TW I538519B TW 103139704 A TW103139704 A TW 103139704A TW 103139704 A TW103139704 A TW 103139704A TW I538519 B TWI538519 B TW I538519B
Authority
TW
Taiwan
Prior art keywords
image data
image
video
output
frame image
Prior art date
Application number
TW103139704A
Other languages
English (en)
Other versions
TW201620295A (zh
Inventor
趙維民
陳信宇
陳嘉祥
Original Assignee
廣達電腦股份有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 廣達電腦股份有限公司 filed Critical 廣達電腦股份有限公司
Priority to TW103139704A priority Critical patent/TWI538519B/zh
Priority to CN201410763727.5A priority patent/CN105744207A/zh
Priority to US14/692,188 priority patent/US20160142633A1/en
Publication of TW201620295A publication Critical patent/TW201620295A/zh
Application granted granted Critical
Publication of TWI538519B publication Critical patent/TWI538519B/zh

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/2624—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects for obtaining an image which is composed of whole input images, e.g. splitscreen
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/45—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from two or more image sensors being of different type or operating in different modes, e.g. with a CMOS sensor for moving images in combination with a charge-coupled device [CCD] for still images
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/667—Camera operation mode switching, e.g. between still and video, sport and normal or high- and low-resolution modes

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Studio Devices (AREA)
  • Image Processing (AREA)

Description

視訊影像之擷取裝置
本發明係有關於一種影像擷取裝置及其影像處理方法，特別是有關於一種可用以同時擷取多個視訊影像之視訊影像之擷取裝置及其影像處理方法。
近年來，由於網路應用的普及，使用視訊會議進行通訊成為一種趨勢。視訊會議允許兩人或多人使用網路即時的傳遞文字訊息、檔案、語音與視訊交流。透過視訊會議，多個用戶端可透過網路攝影機(webcam)以及麥克風裝置傳輸視訊及/或音訊給彼此進行會談。
隨著視訊通話的應用成熟，使用者的需求由一對一的視訊通話，發展至多對多的群組視訊通話。為了要讓遠距的使用者群可以清楚了解近端說話者想要表達的意思，常常需要能夠及時地分享電子文件資訊、或是某程式之使用方法、或是示範某儀器設備之操作步驟、或是當下說明者所看到的臨場情況，或是以上情形的組合給當下通話的所有使用者群組。因此，要同時即時傳輸每位通話者的多重視訊與顯示畫面是迫切需要的。
然而，在一個會議室內做多人視訊會議的場合當 中，當每個使用者都使用個別的電腦裝置做視訊會議時，將大量消耗網路頻寬，且每個使用者的電腦裝置上的攝影機僅能顯示單一角度的視訊，遠端的使用者無法得到全面的場景狀況。
有鑑於此，本發明提供一種可用以擷取複數視訊影像之視訊影像之擷取裝置及其影像處理方法。
本發明一實施例提供一種視訊影像之擷取裝置，其至少包括複數影像感測器以及一影像合成器。影像感測器用以連續擷取複數組視訊影像資料，其中每一上述組視訊影像資料包括一奇數幀影像資料以及一偶數幀影像資料且上述影像感測器包括第一組影像感測器與第二組影像感測器。影像合成器係耦接至上述影像感測器，用以分別過濾出上述第一組影像感測器之上述組視訊影像資料之上述奇數幀視訊影像資料與上述第二組影像感測器之上述組視訊影像資料之上述偶數幀影像資料，依據上述組視訊影像資料之一輸入解析度以及一輸出解析度，將上述奇數幀影像資料與上述偶數幀影像資料相應一模式選擇訊號合成為具有上述輸出解析度之一輸出影像，其中，上述模式選擇訊號係用以指定上述輸出影像之輸出模式。
本發明實施例另提供一種視訊影像之處理方法。上述方法包括下列步驟。首先，透過複數影像感測器連續擷取複數組視訊影像資料，其中每一上述組視訊影像資料包括一奇數幀影像資料以及一偶數幀影像資料且上述影像感測器包括第一組影像感測器與第二組影像感測器。其次，透過一影像合成器，過濾出上述第一組影像感測器之上述視訊影像資料中之 上述奇數幀影像資料與上述第二組影像感測器之上述視訊影像資料中之上述偶數幀影像資料。接著，透過上述影像合成器，依據上述視訊影像資料之一輸入解析度以及一輸出解析度，將上述奇數幀影像資料與上述偶數幀影像資料相應一模式選擇訊號合成為具有上述輸出解析度之一輸出影像。其中，上述模式選擇訊號係用以指定上述輸出影像之輸出模式。
本發明之上述方法可經由本發明之裝置或系統來實作，其為可執行特定功能之硬體或韌體，亦可以透過程式碼方式收錄於一紀錄媒體中，並結合特定硬體來實作。當程式碼被電子裝置、處理器、電腦或機器載入且執行時，電子裝置、處理器、電腦或機器變成用以實行本發明之裝置或系統。
100‧‧‧視訊影像之擷取裝置
110‧‧‧影像感測器
112‧‧‧視訊影像資料
1121‧‧‧奇數幀影像資料
1122‧‧‧偶數幀影像資料
114‧‧‧同步介面
120‧‧‧影像合成器
121‧‧‧第一過濾器
122‧‧‧第二過濾器
123‧‧‧降低取樣器
124‧‧‧線緩衝器
125‧‧‧像素選擇器
130‧‧‧視訊壓縮器
132‧‧‧通用序列匯流排介面
134‧‧‧影像壓縮引擎
S502、S504、S506‧‧‧步驟
F1(t1)、F1(t2)、F2(t1)、F2(t2)、F3(t1)、F3(t2)、F4(t1)、 F4(t2)‧‧‧影像資料
F1’(t1)、F2’(t1)、F3’(t2)、F4’(t2)‧‧‧降低取樣後的影像資料
第1圖係顯示本發明一實施例之視訊影像之擷取裝置之示意圖；第2圖係顯示本發明一實施例之影像感測器配置方式之示意圖；第3圖係顯示本發明一實施例之視訊影像資料之示意圖；第4圖係顯示依據本發明一實施例之視訊影像之擷取裝置之詳細電路圖；第5圖係顯示依據本發明一實施例之視訊影像之影像處理方法之流程圖；第6A圖至第6C圖係顯示依據本發明實施例之不同輸出模式之影像處理流程之示意圖；以及 第7A圖至第7C圖係分別顯示對應於第6A圖至第6C圖之輸出模式之輸出影像之示意圖。
為讓本發明之上述和其他目的、特徵、和優點能更明顯易懂，下文特舉出較佳實施例，並配合所附圖式，作詳細說明如下。本章節所敘述的是實施本發明之最佳方式，目的在於說明本發明之精神而非用以限定本發明之保護範圍，應理解下列實施例可經由軟體、硬體、韌體、或上述任意組合來實現。
本發明實施例提供一種視訊影像之擷取裝置及其相關影像處理方法，使用多個影像感測器，分別指向不同的方向，將各影像感測器所擷取到的多個影像利用獨特的資料選擇電路與一條線儲存單元，不需要額外的儲存記憶體儲存影像資料就可以結合成一個大張的輸出影像，經過視訊壓縮，再經過連接介面例如通用序列匯流排(universal serial bus,USB)介面連接到一主機上，達成線上合成的能力，可有效減少成本與維持高畫質。
第1圖顯示依據本發明實施例之視訊影像之擷取裝置之示意圖。依據本發明實施例之視訊影像之擷取裝置100可作為網路攝影機(web cam)或電視攝影機(TV cam)等，但不限於此。如第1圖所示，視訊影像之擷取裝置100至少包括多個影像感測器110、影像合成器(image composer)120以及視訊壓縮器130。可理解的是，影像感測器110、影像合成器120以及視 訊壓縮器130可包括必要的硬體電路，用以實現對應的功能。
於一些實施例，影像感測器110係分別設置於不同方向，用以擷取對應方向的視訊影像資料。舉例來說，假設視訊影像之擷取裝置100共有四個影像感測器110時，可分別在四個不同方向設置影像感測器110以擷取四個方向的會議者的視訊影像，如第2圖所示。依據本發明實施例之視訊影像之擷取裝置100可視為主機裝置的影像擷取裝置，例如可作為主機裝置的網路攝影機(web cam)或電視攝影機(TV cam)等。其中，主機裝置可為一電子裝置，例如是電腦系統、電視機、數位個人助理(PDA)、智慧型手機(smartphone)、手機、行動上網裝置(Mobile Internet Device,MID)、筆記型電腦、車用電腦、數位相機、數位媒體播放器、遊戲裝置或任何類型的行動計算裝置等。
每個影像感測器110可用以連續擷取多組視訊影像資料，其中每一組視訊影像資料包括一奇數幀影像資料以及一偶數幀影像資料。參見第3圖，係顯示本發明一實施例之視訊影像資料之示意圖。如圖所示，影像感測器110可連續擷取多組的視訊影像資料112，其中，各組視訊影像資料112可依據接收時間先後分為奇數幀影像資料1121以及偶數幀影像資料1122。具體來說，影像感測器110連續擷取時間t1-t4的視訊影像資料，其中時間t1的視訊影像資料與時間t3的視訊影像資料可視為奇數幀影像資料，而時間t2的視訊影像資料與時間t4的視訊影像資料可視為偶數幀影像資料。於本案實施例中，為了方便說明，將一個奇數幀影像資料與一個偶數幀影像資料視為 一組視訊影像資料112，也就是說，將時間t1的視訊影像資料與時間t2的視訊影像資料視為一組視訊影像資料112，將時間t3的視訊影像資料與時間t4的視訊影像資料視為另一組視訊影像資料112，因此，一組視訊影像資料112可包括一個奇數幀影像資料1121與一個偶數幀影像資料1122。
影像合成器120係耦接至所有影像感測器110，可用以執行本案之影像處理方法來處理各影像感測器110所擷取到的視訊影像資料，其細節將於下面章節進行說明。明確來說，影像合成器120可用以分別過濾出其中部分的影像感測器110的視訊影像資料中的奇數幀視訊影像資料與另一部份的影像感測器110的視訊影像資料中的偶數幀影像資料，再依據視訊影像資料的輸入解析度以及一輸出解析度，將奇數幀影像資料與偶數幀影像資料相應一模式選擇訊號合成為具有輸出解析度的一輸出影像。其中，模式選擇訊號係用以指定輸出影像的輸出模式。於一些實施例中，主機裝置端的使用者可透過一使用者介面或一輸入單元輸入選擇的輸出模式來產生此模式選擇訊號。於本實施例中，輸出影像的輸出模式可至少包括第一模式、第二模式以及第三模式，其中，不同的輸出模式所產生的輸出影像亦不相同。其中，當第一模式係被選取時，輸出影像係合成所有影像感測器的奇數幀影像資料及/或偶數幀影像資料。當第二模式係被選取時，輸出影像係合成一組選取的影像感測器的奇數幀影像資料及/或偶數幀影像資料。當第三模式係被選取時，輸出影像係直接選取其中一影像感測器的奇數幀影像資料或偶數幀影像資料。舉例來說，假設視訊影像之 擷取裝置100共有四個影像感測器時，當模式選擇訊號指定輸出模式為第一模式時，輸出影像會合成四個影像感測器的奇數幀影像資料及/或偶數幀影像資料；當模式選擇訊號指定輸出模式為第二模式時，輸出影像可合成四個影像感測器中其中任兩個的奇數幀影像資料及/或偶數幀影像資料；而當模式選擇訊號指定輸出模式為第三模式時，則輸出影像會直接選擇四個影像感測器中的一影像感測器的奇數幀影像資料或偶數幀影像資料來產生。之後，影像合成器120再將產生的輸出影像送至視訊壓縮器130。
視訊壓縮器130係耦接至影像合成器120，可依據一視訊壓縮標準(例如：H.264，MPEG2等)，壓縮上述輸出影像為一壓縮視訊訊號，以傳送至一主機進行顯示。其中，視訊壓縮器130可更包括一通用序列匯流排(USB)介面132，用以透過通用序列匯流排介面132傳送壓縮視訊訊號至主機進行顯示。
影像合成器120可更包括一第一過濾器121與一第二過濾器122，用以分別過濾出第一組影像感測器的視訊影像資料中的奇數幀影像資料與第二組影像感測器的視訊影像資料中的偶數幀影像資料。影像合成器120可更包括一降低取樣器123，其係耦接至第一過濾器121與第二過濾器122，用以依據視訊影像的輸入解析度、輸出影像的輸出解析度與模式選擇訊號中所指定的輸出模式，選擇性地降低取樣奇數幀影像資料及/或偶數幀影像資料，並以降低取樣後的奇數幀影像資料及/或偶數幀影像資料產生輸出影像。
其中，降低取樣器123係於輸入解析度等於輸出解析度時，相應模式選擇訊號，降低取樣奇數幀影像資料及/或偶數幀影像資料。舉例來說，當輸入解析度等於輸出解析度且模式選擇訊號為上述第一模式或第二模式時，表示輸出影像係由多個影像感測器110所擷取到的視訊影像所組成，因此其擷取到的視訊影像必須降低取樣後才能合成輸出影像。
影像合成器120更包括一線緩衝器(line buffer)124，用以暫存用於合成輸出影像所需的奇數幀影像資料及/或偶數幀影像資料，其中線緩衝器124可用以儲存一條畫面寬的長度的影像資料。
影像合成器120更包括一像素選擇器(pixel selector)125，用以依據模式選擇訊號所表示之模式，選擇多個輸出模式中其中一模式來將過濾出的奇數幀影像資料及/或偶數幀影像資料合成為具有輸出解析度的輸出影像。
第4圖顯示依據本發明一實施例之視訊影像之擷取裝置之詳細電路圖。注意的是，為說明方便，本實施例係使用四個影像感測器110，然而，本領域熟習技藝者應可理解本發明並不限於此，本案亦可適用於其他數量的影像感測器。如第4圖所示，每一影像感測器110分別具有一同步介面114，其中影像感測器110的同步介面114皆連接在一起，用以使所有影像感測器110之間同步。藉由影像感測器110的同步介面來同步所有影像感測器110所擷取到的影像的時序，可正確過濾出奇數幀影像資料與偶數幀影像資料。各影像感測器110係用以將光子轉換成為電子訊號，其中各影像感測器110具有每秒60張 以上的輸出能力與影像輸出同步的能力，可更包括四個影像處理序列，用以將原始電子處理轉換成為YUV色彩的像素資料。影像合成器120中包含前述的第一過濾器121(或稱奇數幀過濾器(Odd frame filter))，可過濾出奇數幀的影像資料、第二過濾器122(或稱偶數幀過濾器(even frame filter))，可過濾出偶數幀的影像資料、降低取樣器123、線緩衝器124，具有一條畫面寬的長度、以及像素選擇器125，其中，第一過濾器121與第二過濾器122分別連接一降低取樣器123，線緩衝器124連接於其一降低取樣器123之後，像素選擇器125則連接於線緩衝器124與另一降低取樣器123之後。偏旁路徑214則用以選取四個影像感測器中的其中一個畫面且可不縮減畫素取樣。簡言之，降低取樣器123可用以將畫面縮減像素取樣，其中降低取樣之方式係為每兩個水平相鄰像點取樣為一點且每兩個垂直相鄰像點取樣為一點，像素選擇器125可用以選取左畫面或右畫面的像點，或是輸出黑像素(遮罩像素)，藉此產生所需的輸出影像。視訊壓縮器130連接於影像合成器120之後，其包括通用序列匯流排介面132以及影像壓縮引擎134，其中影像壓縮引擎134具備有JPEG、H.264與VP8格式的視訊壓縮能力，而通用序列匯流排介面132則可輸出兩個視訊流：一個JPEG或YUV格式，另一個為H.264或VP8格式。視訊壓縮器130壓縮後的視訊壓縮訊號將透過通用序列匯流排介面132傳送至具備有USB視訊接收能力的電腦裝置或嵌入式系統200。此外，序列控制訊號線107可依序對四個影像感測器做設定與讀取其狀態。同步訊號線108則可進行影像感測器彼此間的同步。其中各單元的細部動 作係如前所述，不在此贅述。
第5圖顯示依據本發明一實施例之視訊影像之影像處理方法之流程圖。依據本發明實施例之影像處理方法可適用於一影像擷取裝置，例如第1圖中所示的視訊影像的擷取裝置100。
首先，如步驟S502，透過各影像感測器110連續擷取多組視訊影像資料。其中，每一組視訊影像資料中包括一奇數幀影像資料以及一偶數幀影像資料且影像感測器110可包括第一組影像感測器與第二組影像感測器。其次，如步驟S504，透過影像合成器120，過濾出第一組影像感測器的視訊影像資料中的奇數幀影像資料與第二組影像感測器的視訊影像資料中的偶數幀影像資料。接著，如步驟S506，透過影像合成器120，依據視訊影像資料的輸入解析度以及輸出影像的輸出解析度，將奇數幀影像資料與偶數幀影像資料相應模式選擇訊號合成為具有輸出解析度的輸出影像。其中，模式選擇訊號係用以指定輸出影像的輸出模式。
以下列舉一些實施例，用以輔助說明依據本發明之影像處理方法細節，但本發明並不限於此。於以下實施例中，假設視訊影像之擷取裝置100有四個影像感測器，分別指向四個不同的方向，以供四個不同方向的使用者同時與遠端的電腦裝置進行視訊會議，再經過連接介面例如通用序列匯流排(universal serial bus,USB)介面連接到電腦裝置上，對於電腦裝置視為一個影像擷取裝置。
第6A圖至第6C圖顯示依據本發明實施例之不同輸 出模式之影像處理流程之示意圖。其中，F1(t1)、F1(t2)分別表示第一感測器於時間t1時所擷取到的奇數幀影像資料與時間t2時所擷取到的偶數幀影像資料，F2(t1)、F2(t2)分別表示第二感測器於時間t1時所擷取到的奇數幀影像資料與時間t2時所擷取到的偶數幀影像資料，F3(t1)、F3(t2)分別表示第三感測器於時間t1時所擷取到的奇數幀影像資料與時間t2時所擷取到的偶數幀影像資料，F4(t1)、F4(t2)分別表示第四感測器於時間t1時所擷取到的奇數幀影像資料與時間t2時所擷取到的偶數幀影像資料，依此類推。第7A圖至第7C圖分別顯示對應於第6A圖至第6C圖之輸出模式之輸出影像之示意圖。如第7A圖所示，因第6A圖顯示輸出模式為第一模式，因此對應於第6A圖的輸出模式的輸出影像包括四個影像感測器第一、第二、第三與第四影像感測器的影像的合成影像，其中，第一影像感測器與第二影像感測器的代表影像為奇數幀影像資料，而第三影像感測器與第四影像感測器的代表影像為偶數幀影像資料。於一實施例中，當各個影像感測器的視訊影像資料的輸入解析度為360P與每秒60張(60fps)且輸出影像的輸出解析度為720P與每秒30張(30fps)時，則各個影像感測器所過濾出的奇數幀影像資料或偶數幀影像資料不需要經過降低取樣器降低取樣便可直接將四個影像合成為一個輸出影像。於另一實施例中，當各個影像感測器的視訊影像資料的輸入解析度為720P與每秒60張(60fps)且輸出影像的輸出解析度為720P與每秒30張(30fps)時，則各個影像感測器所過濾出的奇數幀影像資料或偶數幀影像資料需要先經過降低取樣器降低取樣，最後再將降低取樣後的四 個影像合成為一個輸出影像。
第6A圖顯示輸出模式為第一模式時的影像處理流程。如第6A圖所示，分別透過第一、第二、第三與第四影像感測器連續擷取多組視訊影像資料(F1(t1),F1(t2))、(F2(t1),F2(t2))、(F3(t1),F3(t2))與(F4(t1),F4(t2))。接著，第一組影像感測器(第一與第二影像感測器)經由第一過濾器過濾出奇數幀影像資料F1(t1)與F2(t1)，而第二組影像感測器(第三與第四影像感測器)經由第二過濾器過濾出偶數幀影像資料F3(t2)與F4(t2)。於本實施例中，過濾出的奇數幀影像資料F1(t1)與F2(t1)與偶數幀影像資料F3(t2)與F4(t2)接著經由降低取樣器進行降取樣處理產生降取樣後的奇數幀影像資料F1’(t1)與F2’(t1)與偶數幀影像資料F3’(t2)與F4’(t2)。之後，降取樣後的F1’(t1)與F2’(t1)與偶數幀影像資料F3’(t2)與F4’(t2)中先輸出的F1’(t1)與F2’(t1)經由線緩衝器暫存後再與後輸出的F3’(t2)與F4’(t2)經由像素選擇器依據所選取的第一模式，將四個影像F1’(t1)、F2’(t1)、F3’(t2)與F4’(t2)合成為輸出影像，如第7A圖所示。
第6B圖顯示輸出模式為第二模式時的影像處理流程。第6B圖的影像處理流程係類似於第6A圖，其差別在於：經由像素選擇器進行影像合成時，由於所選取的第二模式只需要四個影像感測器中的其中兩個影像，因此像素選擇器只會利用所選取的兩個影像例如F1’(t1)、F2’(t1)合成為輸出影像。注意的是，於第二模式下，合成的輸出影像的畫面可能會輸出黑影像來填補空白之處以使畫面更為美觀，如第7B圖所示。
第6C圖顯示輸出模式為第三模式時的影像處理流 程。第6C圖的影像處理流程與第6A圖與第6B圖的影像處理流程的差別在於：第一組影像感測器(第一與第二影像感測器)經由第一過濾器過濾出奇數幀影像資料F1(t1)與F2(t1)，而第二組影像感測器(第三與第四影像感測器)經由第二過濾器過濾出偶數幀影像資料F3(t2)與F4(t2)之後，不需經由降取樣處理，因此像素選擇器可依據所選取的第三模式，將四個影像F1(t1)、F2(t1)、F3(t2)與F4(t2)中指定的一者視為輸出影像，如第7C圖所示。
因此，依據本發明之視訊影像之擷取裝置及其影像處理方法，利用影像合成器輸出與影像感測器彼此同步的能力，設計獨特的資料選擇電路與一條線儲存單元，不需要額外的儲存空間儲存影像資料即可以達成線上合成的能力，可有效減少成本與維持傳輸影像的高畫質。
本發明之方法，或特定型態或其部份，可以以程式碼的型態存在。程式碼可以包含於實體媒體，如軟碟、光碟片、硬碟、或是任何其他機器可讀取(如電腦可讀取)儲存媒體，亦或不限於外在形式之電腦程式產品，其中，當程式碼被機器，如電腦載入且執行時，此機器變成用以參與本發明之裝置。程式碼也可透過一些傳送媒體，如電線或電纜、光纖、或是任何傳輸型態進行傳送，其中，當程式碼被機器，如電腦接收、載入且執行時，此機器變成用以參與本發明之裝置。當在一般用途處理單元實作時，程式碼結合處理單元提供一操作類似於應用特定邏輯電路之獨特裝置。
雖然本發明已以較佳實施例發明如上，然其並非 用以限定本發明，任何所屬技術領域中包括通常知識者，在不脫離本發明之精神和範圍內，當可作些許之更動與潤飾。舉例來說，本發明實施例所述之系統以及方法可以硬體、軟體或硬體以及軟體的組合的實體實施例加以實現。因此本發明之保護範圍當視後附之申請專利範圍所界定者為準。
100‧‧‧視訊影像之擷取裝置
110‧‧‧影像感測器
114‧‧‧同步介面
120‧‧‧影像合成器
121‧‧‧第一過濾器
122‧‧‧第二過濾器
123‧‧‧降低取樣器
124‧‧‧線緩衝器
125‧‧‧像素選擇器
130‧‧‧視訊壓縮器
132‧‧‧通用序列匯流排介面

Claims (9)

  1. 一種視訊影像之擷取裝置，包括：複數影像感測器，用以連續擷取複數組視訊影像資料，其中每一上述組視訊影像資料包括一奇數幀影像資料以及一偶數幀影像資料且上述影像感測器包括第一組影像感測器與第二組影像感測器；以及一影像合成器，耦接至上述影像感測器，用以分別過濾出上述第一組影像感測器之上述組視訊影像資料之上述奇數幀視訊影像資料與上述第二組影像感測器之上述組視訊影像資料之上述偶數幀影像資料，依據上述組視訊影像資料之一輸入解析度以及一輸出解析度，將上述奇數幀影像資料與上述偶數幀影像資料相應一模式選擇訊號合成為具有上述輸出解析度之一輸出影像，其中，上述模式選擇訊號係用以指定上述輸出影像之輸出模式，其中上述影像合成器更包括：一第一過濾器與一第二過濾器，用以分別過濾出上述第一組影像感測器之上述組視訊影像資料之上述奇數幀影像資料與上述第二組影像感測器之上述組視訊影像資料之上述偶數幀影像資料；以及一降低取樣器，耦接至上述第一過濾器與上述第二過濾器，用以依據上述輸入解析度、上述輸出解析度與上述模式選擇訊號，選擇性地降低取樣上述奇數幀影像資料及/或上述偶數幀影像資料，並以上述降低取樣後之上述 奇數幀影像資料及/或上述偶數幀影像資料產生上述輸出影像。
  2. 如申請專利範圍第1項所述之視訊影像之擷取裝置，更包括一視訊壓縮器，用以依據一視訊壓縮標準，壓縮上述輸出影像為一壓縮視訊訊號，以傳送至一主機進行顯示。
  3. 如申請專利範圍第2項所述之視訊影像之擷取裝置，其中上述視訊壓縮器更包括一通用序列匯流排(USB)介面，用以透過上述通用序列匯流排介面傳送上述壓縮視訊訊號至上述主機進行顯示。
  4. 如申請專利範圍第1項所述之視訊影像之擷取裝置，其中上述降低取樣器係於上述輸入解析度等於上述輸出解析度時，相應上述模式選擇訊號，降低取樣上述奇數幀影像資料及/或上述偶數幀影像資料。
  5. 如申請專利範圍第1項所述之視訊影像之擷取裝置，其中上述影像合成器更包括一線緩衝器(line buffer)，用以暫存用於合成上述輸出影像所需之上述奇數幀影像資料及/或上述偶數幀影像資料，其中上述線緩衝器係用以儲存一條畫面寬的長度的影像資料。
  6. 如申請專利範圍第1項所述之視訊影像之擷取裝置，其中每一上述影像感測器分別具有一同步介面，上述影像感測器之上述同步介面皆連接在一起用以使上述影像感測器之間同步。
  7. 如申請專利範圍第1項所述之視訊影像之擷取裝置，其中上述影像合成器更包括一像素選擇器(pixel selector)，用 以依據上述模式選擇訊號，選擇複數輸出模式之一者以將上述奇數幀影像資料及/或上述偶數幀影像資料合成為具有上述輸出解析度之上述輸出影像。
  8. 如申請專利範圍第7項所述之視訊影像之擷取裝置，其中上述輸出模式至少包括一第一模式、一第二模式與一第三模式且上述像素選擇器更選擇上述模式選擇訊號所表示之模式，將上述奇數幀影像資料及/或上述偶數幀影像資料合成為具有上述輸出解析度之上述輸出影像；其中，當上述模式選擇訊號表示上述第一模式係被選取時，上述像素選擇器合成所有上述影像感測器的上述奇數幀影像資料及/或上述偶數幀影像資料產生上述輸出影像；當上述模式選擇訊號表示上述第二模式係被選取時，上述像素選擇器合成一組選取之上述影像感測器的上述奇數幀影像資料及/或上述偶數幀影像資料產生上述輸出影像；以及當上述模式選擇訊號表示上述第三模式係被選取時，上述像素選擇器直接依據一選取之上述影像感測器的上述奇數幀影像資料或上述偶數幀影像資料產生上述輸出影像。
  9. 如申請專利範圍第1項所述之視訊影像之擷取裝置，其中上述影像感測器分別設置於不同方向，用以擷取對應方向的上述組視訊影像資料。
TW103139704A 2014-11-17 2014-11-17 視訊影像之擷取裝置 TWI538519B (zh)

Priority Applications (3)

Application Number Priority Date Filing Date Title
TW103139704A TWI538519B (zh) 2014-11-17 2014-11-17 視訊影像之擷取裝置
CN201410763727.5A CN105744207A (zh) 2014-11-17 2014-12-11 视频图像的撷取装置
US14/692,188 US20160142633A1 (en) 2014-11-17 2015-04-21 Capture apparatuses of video images

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
TW103139704A TWI538519B (zh) 2014-11-17 2014-11-17 視訊影像之擷取裝置

Publications (2)

Publication Number Publication Date
TW201620295A TW201620295A (zh) 2016-06-01
TWI538519B true TWI538519B (zh) 2016-06-11

Family

ID=55962869

Family Applications (1)

Application Number Title Priority Date Filing Date
TW103139704A TWI538519B (zh) 2014-11-17 2014-11-17 視訊影像之擷取裝置

Country Status (3)

Country Link
US (1) US20160142633A1 (zh)
CN (1) CN105744207A (zh)
TW (1) TWI538519B (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10944911B2 (en) * 2014-10-24 2021-03-09 Texas Instruments Incorporated Image data processing for digital overlap wide dynamic range sensors
CN109968351A (zh) * 2017-12-28 2019-07-05 深圳市优必选科技有限公司 机器人及其控制方法、具有存储功能的装置
CN111614869A (zh) * 2020-04-17 2020-09-01 北京中庆现代技术股份有限公司 一种4k高清摄像机双路画面采集系统

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20020046218A1 (en) * 1999-06-23 2002-04-18 Scott Gilbert System for digitally capturing and recording panoramic movies
WO2006067545A1 (en) * 2004-12-23 2006-06-29 Nokia Corporation Multi-camera solution for electronic devices
CN101043618B (zh) * 2006-03-24 2010-04-07 腾讯科技（深圳）有限公司 一种在多路视频通讯中控制帧率的装置和方法
US8009200B2 (en) * 2007-06-15 2011-08-30 Microsoft Corporation Multiple sensor input data synthesis
CN100589570C (zh) * 2008-01-08 2010-02-10 北京中星微电子有限公司 一种帧率控制方法及装置
US20140078343A1 (en) * 2012-09-20 2014-03-20 Htc Corporation Methods for generating video and multiple still images simultaneously and apparatuses using the same
US9105112B2 (en) * 2013-02-21 2015-08-11 Apple Inc. Power management for image scaling circuitry

Also Published As

Publication number Publication date
US20160142633A1 (en) 2016-05-19
TW201620295A (zh) 2016-06-01
CN105744207A (zh) 2016-07-06

Similar Documents

Publication Publication Date Title
US9602769B2 (en) Timestamp-based audio and video processing method and system thereof
JP5088161B2 (ja) 画像処理装置、カメラ装置、通信システム、画像処理方法、およびプログラム
US8379075B2 (en) Method, device, and computer-readable medium for processing images during video conferencing
US9197852B2 (en) System and method for point to point integration of personal computers with videoconferencing systems
US20200186887A1 (en) Real-time broadcast editing system and method
JPWO2013132828A1 (ja) 通信システムおよび中継装置
US9445085B2 (en) Imaging apparatus, method for controlling imaging apparatus, and system therefor
TWI538519B (zh) 視訊影像之擷取裝置
JP4475225B2 (ja) 映像信号伝送システム、撮像装置、信号処理装置および映像信号伝送方法
KR20110052933A (ko) 촬영장치 및 촬영영상 제공방법
EP4050889A1 (en) Conference device with multi-videostream capability
CN102202206B (zh) 通信设备
JP7334470B2 (ja) 映像処理装置、ビデオ会議システム、映像処理方法、およびプログラム
KR102029604B1 (ko) 실시간 방송 편집 시스템 및 편집 방법
US20190306462A1 (en) Image processing apparatus, videoconference system, image processing method, and recording medium
JP4983423B2 (ja) 画像信号処理装置および画像信号処理方法
TW201026052A (en) Method for transmitting a man-machine operation picture, a mobile video device thereof, and a video system using the same
JP2008228014A (ja) 映像会議システム、会議映像処理方法、プログラム及び記録媒体
JP4623609B2 (ja) ビデオ会議用撮像／表示装置
JP3178871B2 (ja) 画像通信装置
EP4050890A1 (en) Conference device with multi-videostream control
KR20060121506A (ko) 이동 단말에서 영상 표시 장치 및 방법
US11368743B2 (en) Telestration capture for a digital video production system
JP4775351B2 (ja) 撮像装置
JP3202555U (ja) 放送用信号生成装置

Legal Events

Date Code Title Description
MM4A Annulment or lapse of patent due to non-payment of fees