TWI843532B - 用於以不同縮放位準定向一相機之輔助 - Google Patents

用於以不同縮放位準定向一相機之輔助 Download PDF

Info

Publication number
TWI843532B
TWI843532B TW112114453A TW112114453A TWI843532B TW I843532 B TWI843532 B TW I843532B TW 112114453 A TW112114453 A TW 112114453A TW 112114453 A TW112114453 A TW 112114453A TW I843532 B TWI843532 B TW I843532B
Authority
TW
Taiwan
Prior art keywords
image stream
camera
scene
fov
preview
Prior art date
Application number
TW112114453A
Other languages
English (en)
Other versions
TW202333486A (zh
Inventor
卡勒姆 包德溫
帕西 帕爾基拉
Original Assignee
美商高通公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 美商高通公司 filed Critical 美商高通公司
Publication of TW202333486A publication Critical patent/TW202333486A/zh
Application granted granted Critical
Publication of TWI843532B publication Critical patent/TWI843532B/zh

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/45—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from two or more image sensors being of different type or operating in different modes, e.g. with a CMOS sensor for moving images in combination with a charge-coupled device [CCD] for still images
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/62—Control of parameters via user interfaces
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/63—Control of cameras or camera modules by using electronic viewfinders
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/63—Control of cameras or camera modules by using electronic viewfinders
    • H04N23/631—Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters
    • H04N23/632—Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters for displaying or modifying preview images prior to image capturing, e.g. variety of image resolutions or capturing parameters
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/63—Control of cameras or camera modules by using electronic viewfinders
    • H04N23/633—Control of cameras or camera modules by using electronic viewfinders for displaying additional information relating to control or operation of the camera
    • H04N23/635—Region indicators; Field of view indicators
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/64—Computer-aided capture of images, e.g. transfer from script file into camera, check of taken image quality, advice or proposal for image composition or decision on when to take image
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/69—Control of means for changing angle of the field of view, e.g. optical zoom objectives or electronic zooming
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/765—Interface circuits between an apparatus for recording and another apparatus
    • H04N5/77—Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera
    • H04N5/772—Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera the recording apparatus and the television camera being placed in the same enclosure
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H04N21/4316—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations for displaying supplemental content in a region of the screen, e.g. an advertisement in a separate window
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Studio Devices (AREA)
  • Exposure Control For Cameras (AREA)
  • Liquid Crystal (AREA)
  • Pens And Brushes (AREA)

Abstract

本發明之態樣係關於用於輔助以不同縮放位準定位一相機之系統及方法。一種實例器件可包括經組態以儲存影像資料之一記憶體。該實例器件可進一步包括與該記憶體通信之一處理器，該處理器經組態以：處理與一場景相關聯的一第一影像串流；獨立處理與該場景之一空間部分相關聯的一第二影像串流，其中該第二影像串流不同於該第一影像串流；輸出該經處理第一影像串流；及在該經處理第一影像串流之輸出期間輸出指示與該第二影像串流相關聯之該空間部分的一視覺指示。

Description

用於以不同縮放位準定向一相機之輔助
本發明大體上係關於用於影像擷取器件之系統，且特定言之係關於定位用於記錄影像或視訊之相機。
許多器件及系統(諸如智慧型電話、平板電腦、數位相機、安全系統、電腦等)包括用於各種應用之相機。對於許多相機 系統，當拍攝影像或記錄視訊時，用於相機之顯示器(諸如智慧型電話或平板電腦顯示器)預覽正由相機擷取的影像或視訊。舉例而言，若相機在拍攝圖像或記錄視訊時放大，則顯示器展示經放大視圖(其為正使用相機記錄之物)。
提供此發明內容以按簡化形式引入下文在實施方式中進一步描述的概念選擇。本概述並不意欲識別該所主張標的物之基本關鍵特徵，亦不意欲用於限制該所主張標的物之範疇。
本發明之態樣係關於輔助以不同縮放位準定位相機。在一些實施方案中，實例器件可包括經組態以儲存影像資料之記憶體。該實例器件可進一步包括與記憶體通信之一處理器，該處理器經組態以：處理與一場景相關聯的一第一影像串流；獨立處理與該場景之一空間部分相關聯的一第二影像串流，其中該第二影像串流不同於該第一影像串流；輸出該經處理第一影像串流；及在該經處理第一影像串流之輸出期間輸出指示與該第二影像串流相關聯之該空間部分的一視覺指示。
在另一實例中，揭示一種方法。該實例方法包括：藉由一處理器處理與一場景相關聯的一第一影像串流；藉由該處理器獨立處理與該場景之一空間部分相關聯的一第二影像串流，其中該第二影像串流不同於該第一影像串流；輸出該經處理第一影像串流；及在該經處理第一影像串流之輸出期間輸出指示與該第二影像串流相關聯之該空間部分的一視覺指示。
在另一實例中，揭示一種非暫時性電腦可讀媒體。該非暫時性電腦可讀媒體可儲存當由一處理器執行時使得一器件執行包括以下各者之操作的指令：藉由一處理器處理與一場景相關聯的一第一影像串流；藉由該處理器獨立處理與該場景之一空間部分相關聯的一第二影像串流，其中該第二影像串流不同於該第一影像串流；輸出該經處理第一影像串流；及在該經處理第一影像串流之輸出期間輸出指示與該第二影像串流相關聯之該空間部分的一視覺指示。
在另一實例中，揭示一種器件。該器件方法包括：用於處理與一場景相關聯的一第一影像串流的構件；用於獨立處理與該場景之一空間部分相關聯的一第二影像串流的構件，其中該第二影像串流不同於該第一影像串流；用於輸出該經處理第一影像串流的構件；及用於在該經處理第一影像串流之該輸出期間輸出指示與該第二影像串流相關聯之該空間部分的一視覺指示的構件。
本專利申請案主張2017年9月11日 申請之名為「ASSIST FOR ORIENTING A CAMERA AT DIFFERENT ZOOM LEVELS」且讓與給本受讓人 並 特此明確地以引用的方式 併入 本文中的非臨時申請案第15/701,293號之優先權。
本發明之態樣可輔助使用者定位用於記錄影像或視訊之相機且可適用於具有多種相機組態之器件。
每一相機包括用於擷取場景之視場。許多人使用縮放 (「放大」)以擷取視場中之場景的僅僅一部分。縮放可為光學的，且相機鏡頭經移動以改變相機之焦距(允許場景中之物件在不損失解析度之情況下被放大)。縮放替代地可為數位的，且所 擷取場景之部分被裁剪。若所 擷取場景之部分被裁剪，則剩 餘部分可在顯示器上拉伸(造成解析度之某一損失)。
在放大視圖中，相機移動(諸如平移或傾斜相機，或在記錄期間使用者移動智慧型電話或平板電腦)被放大(此係由於視圖中之物件可被放大或拉伸)，從而導致經預覽影像或視訊(及因此所記錄影像或視訊)不包括意欲由使用者記錄的物件或場景或以意 欲由使用者記錄的物件或場景為中心。舉例而言，若器件正記錄來自英式足球比賽之影像或視訊，且使用者命令相機對特定球員或球進行放大，則球員或球可在放大的同時 並不保持在相機視場中之中心(或甚至呈現在相機視場中)。使用者可例如藉由試圖在相機顯示器之放大預覽中發現球員或球努力定位相機。需要輔助使用者定位相機以例如減小使用者在縮放視圖期間定位相機時的困難。
在一些實施方案中，器件之至少一部分(諸如一或多個處理器)可處理與場景相關聯的第一影像串流(來自 第一相機)，獨立處理與場景之空間部分相關聯的不同於第一影像串流之第二影像串流 (來自 第二相機)，輸出經處理第一影像串流(以便 經由顯示器預覽)， 並 在經處理第一影像串流之輸出期間輸出與第二影像串流相關聯的場景之空間部分的視覺指示(諸如在經處理第一影像串流之預覽上)。以此方式，本發明之態樣可防止使用者在 擷取及/ 或記錄影像或視訊的同時努力以不同縮放 位準定位相機，且亦可允許器件更有效地 擷取及/ 或記錄場景之預期部分。舉例而言，如上文所提及，記錄英式足球比賽之使用者可使用預覽中之視覺指示以識別場景之什麼部分正被記錄及因此按需要定位相機而不在預覽之經放大視圖中搜尋。
術語「擷取」及「記錄」用來區別在被處理或未完全被處理之前來自相機感測器之影像(諸如 用於預覽)與被完全處理的影像(諸如用於置放於儲存器中 以供稍後檢視或用於串流傳輸至其他人)。當相機感測器在作用中時，相機可連續地(諸如以每秒預定數目個圖框)「擷取」影像。此等影像中之許多被丟棄且 並不被使用或完全地被處理(諸如 藉由影像信號處理器 應用 去雜 、邊緣增強、色彩平衡，及其他濾波器)。「經記錄」影像或視訊為使用者意圖或請求由影像信號處理器完全處理 (諸如藉由按壓用於影像之相機按鈕 、 按壓用於視訊之記錄按鈕 ，等等)的 擷取影像。相機預覽展示在未被完全處理情況下的擷取影像。若相機預覽展示亦正被記錄的擷取影像，則預覽展示在影像信號處理器完全處理擷取影像時的經部分處理之擷取影像。若相機預覽展示在影像或視訊將被記錄之前的擷取影像，則預覽展示在預覽之後丟棄的經部分處理擷取影像。在擷取影像被完全處理以用於記錄後，所得影像或視訊可例如經儲存於記憶體中以供稍後檢視、串流傳輸至其他人以用於實況檢視，等等。
在以下描述中，闡述大量特定細節 (諸如，特定組件、電路及程序之實例)，以提供對本 發 明之充分理解。如本文中所使用之術語「耦接」意謂直接連接至或經由一或多個介入組件或電路連接。 又，在以下描述中且出於解釋的目的，闡述特定命名法以提供對本 發 明之透徹理解。然而，可能不需要此等特定細節以實踐本文所揭示之教示內容對熟習此項技術者將為顯而易見的。在其他情況下，熟知電路及器件 係以方塊圖形式展示以便避免混淆本發明之教示內容。在對電腦記憶體內之資料位元的操作之程序、邏輯區塊、處理及其他符號表示方面呈現以下詳細描述之一些部分。此等描述及表示為藉由熟習資料處理之技術者用以將其工作之主旨最有效地傳達至其他熟習此項技術者的方式。 在本發明中，將程序、邏輯區塊、程序或其類似者構想為引起所要結果之步驟或指令的自相容序列。該等步驟為需要實體量之實體操縱的步驟。通常(儘管未必)，此等量係呈能夠被儲存、轉移、組合、比較及以其他方式操縱於電腦 系統中之電子或磁性信號的形式。
然而，應牢記，所有此等及類似術語 欲與適當實體量相關聯，且僅僅為應用於此等量的方便標註。除非如自以下論述顯而易見的以其他方式予以特定地陳述，應 瞭解，在本申請案中，利用諸如「存取」、「接收」、「 發 送」、「使用」、「選擇」、「判定」、「正規化」、「乘以」、「平均」、「監視」、「比較」、「施加」、「更新」、「量測」、「導出」或其類似者之術語的論述係指電腦系統或相似電子計算器件之動作及程序，電腦系統或相似電子計算器件操縱表示為電腦系統之暫存器及記憶體內的實體 (電子)量之資料及將該資料變換成以相似方式 表示為電腦系統記憶體或暫存器或其他此類資訊儲存、傳輸或顯示器件內之實體量的其他資料。
在諸圖中，可將單一區塊描述為執行功能；然而，在實際實踐中，可在單一組件中或遍 及多個組件執行由彼區塊執行之功能，且 /或可使用硬體、軟體或硬體及軟體之組合來執行該(等)功能。為了清楚地繪示硬體與軟體之此互換性，在下文大體上在其功能性方面描述了各種繪示性組件、區塊、模組、電路及步驟。 將此功能性實施為硬體或軟體視特定應用及強加於整個系統上之設計約束而定。熟習此項技術者可針對每一特定應用以不同方式實施所描述的功能性，但此等實施決策不應被 解譯為致使偏離本發明之範疇。又，實例器件可包括除所展示之彼等組件以外的組件，包括諸如處理器、記憶體及類似者的熟知組件。
本發明之態樣適用於任何合適的處理器(諸如影像信號處理器)或包括一或多個相機之器件(諸如 智慧型電話、平板電腦、膝上型電腦、數位相機、網絡相機等)，且可經實施用於多種相機組態。雖然以下描述及實例之部分使用兩個相機用於一器件以便描述本 發明之態樣，但本發明適用於具有至少一個相機之任何器件。對於具有多個相機之器件，該等相機可具有相似或不同能力(諸如解析度、彩色或黑白、廣角鏡頭對攝遠鏡頭、縮放能力等)。
圖1A描繪包括雙相機之實例器件 100 ，其中第一相機102及第二相機104配置於第一組態中。圖1B描繪包括雙相機之另一實例器件110 ，其中第一相機112及 第二相機114配置於第二組態中。在一些態樣中，該等相機中之一者(諸如第一相機102及112)可為主相機，且另一相機(諸如 第二相機104及114)可為輔助相機。另外或替代地，第二相機104及114可具有與第一相機102及112不同的焦距、擷取率、解析度、調色板(諸如 彩色對黑白)，及 / 或視場或擷取視野。在一些態樣中，第一相機102及112各自可包括寬視場且第二相機104及114各自可包括較窄視場(諸如攝遠相機)。在其他態樣中，第一相機102及112可具有與第二相機104及114相同之能力又不具有待擷取或記錄的場景之相同優勢。
雖然描繪可為包括雙相機之智慧型電話或平板電腦的實例器件，但本發明實施例可實施於具有影像信號處理器之任何器件中。另一實例器件為可連接至智慧型電話或平板電腦的穿戴式器件 (諸如智慧型手錶)。另一實例器件為耦接至(例如 與相機通信或實體地連接至)相機之擴增或虛擬實境耳機。另一實例器件為耦接至相機或包括相機之無人機或汽車。另一實例器件為耦接至安全相機之視訊安全系統。實例僅僅出於說明之目的，且本發明不應限制於任何特定實例或器件。
術語「器件」不限於一個或特定數目個實體物件 (諸如一個智慧型電話)。如本文所使用，器件可為具有可實施本 發明之至少一些部分的多個部件之任何電子件。雖然以下描述及實例使用術語「器件」來描述本發明之各種態樣，但術語「器件」不限於物件之特定組態、類型或數目。
圖2A為包括多個相機之實例器件200的方塊圖。實例器件200  (其可為圖1A及圖1B之器件100及110之 一個實施方案)可為能夠 擷取影像或視訊的任何合適之器件，包括例如有線及無線通信器件 (諸如攝影機電話、智慧型電話、平板電腦、安全 系統、行車記錄儀、膝上型電腦、桌上型電腦、可穿戴相機、無人機等)、數位相機(包括靜態相機、視訊攝影機等)， 或任何其他合適之器件。實例器件200在 圖2A中展示為包括第一相機202、第二相機204、處理器206、儲存指令210之記憶體208、相機控制器212、顯示器216及數個輸入/輸出(I/O)組件218。器件200可包括未展示之額外特徵或組件。舉例而言，無線介 面( 其可包括數個收發器及一基頻處理器)可經包括用於無線通信器件。器件 200可包括除第一相機202及第二相機204以外的額外相機。本 發 明不應限 制 於任何特定實例或說明，包括實例器件200。
第一相機202及第二相機204可能能夠 擷取 個別影像圖框(諸如靜態影像)及/或擷取視訊(諸如一連串所擷取影像圖框)。來自相機之一連串靜態影像或視訊可稱為影像串流。第一相機202及第二相機204可包括一或多個影像感測器(為簡單起見而未展示)及快門以用於擷取影像串流並提供所擷取影像串流至相機控制器212。
記憶體 208 可為儲存用以執行本 發 明中描述之一或多個操作之全部或一部分的電腦可執行指令 210的非瞬態或非暫時性電腦可讀媒體。器件200亦可包括電力供應器220，其可耦接至器件200或整合至器件200中。
處理器206可為一或多個合適之能夠執行儲存於記憶體 208內的一或多個軟體程式之指令碼或指令(諸如 指令210)的處理器 。 在一些態樣中，處理器206可為執行指令210以使得器件200執行任何數目個不同功能或操作 的 一或多個一般用途處理器。在額外或替代態樣中，處理器206可包括積體電路或其他硬體以在不使用軟體之情況下執行功能或操作。雖然在圖2之實例中展示為經由處理器206彼此耦接，但處理器206、記憶體208、相機控制器212、顯示器216及I/O組件218可在各種配置中彼此耦接。舉例而言，處理器206、 記憶體 208 、相機控 制 器 212 、顯示器 216及/或I/O組件218可經由一或多個局域匯流排(為簡單起見而未展示)彼此耦接。
顯示器216可為允許使用者互動及/或呈現項目(諸如所擷取影像及視訊)以供 使用者檢視的任何合適之顯示器或螢幕。在一些態樣中，顯示器216可為觸敏式顯示器。I/O組件218可為或包括任何合適之機構、介 面 或器件以接收來自使用者之輸入(諸如命令)並 提供輸出至使用者。舉例而言，I/O組件218可包括(但不限於)圖形使用者介面、鍵盤、滑鼠、麥克風及揚聲器等。
相機控 制 器 212 可包括用以處理藉由第一相機202及 / 或第二相機204提供之所 擷取 影像圖框或視訊的影像信號處理器214，其可為一或多個影像信號處理器。在一些實例實施方案中，相機控 制器212 (諸如 藉由使用影像信號處理器214)可控 制 第一相機202及第二相機204之 操作。在一些態樣中，影像信號處理器214可執行來自記憶體之指令(諸如來自記憶體208之指令210或儲存在耦接至影像信號處理器214之獨立記憶體中的指令)以控制相機202及204之操作及/或處理及提供一或多個影像串流以用於記錄或 預覽。在其他態樣中，影像信號處理器 214可包括特定硬體以控制相機202及204之操作及/ 或處理及提供一或多個影像串流以用於記錄或預覽。影像信號處理器214可替代地或另外包括特定硬體與執行軟體指令之能力的組合。
雖然圖2A繪示器件200 之實例實施方案，但 並不需要器件200 包括圖2A中展示之全部組件。圖2B繪示 器件 200 之另一實例實施方案，展示器件 200 不必包括圖2A中所 繪示 之全部組件。舉例而言，器件200可包括影像信號處理器214 (其可為相機控制器之部分)及包括指令210之記憶體208，且可耦接至電力供應器220或包括電力供應器220。第一相機202及第二相機204可與器件200分離並耦接至器件200 (諸如用於安全系統、桌上型電腦，或其他器件，其中相機遠離器件 )。在一些實例實施方案中，器件200自相機接收擷取串流以用於處理且提供命令至相機以用於定位相機。
替代地或另外，顯示器216可與器件200分離並耦接至器件200 。在一個實例中，顯示器216可為耦接至執行影像處理之器件的無線顯示器。舉例而言，一無人機可提供擷取影像至使用者之平板電腦或智慧型電話以用於預覽，且無人機可包括一影像信號處理器以完全處理意欲用於記錄之任何擷取影像。I/O組件218亦可與器件200分離。舉例而言，若輸入為 一 圖形使用者介 面 ，則I/O組件之一些或全部可為顯示器216之部件。
如所示，各種器件組態及類型可用於實施本發明之態樣。因此，本發明不應限制於特定器件組態或類型。
圖3為實例影像信號處理器300之方塊圖。影像信號處理器300可為圖2中所 繪示 之相機控 制 器 212 的影像信號處理器214之 一個實施方案。影像信號處理器300可為具有處理第一影像串流之一序列濾波器302A至302N的 單一線緒(或單核心)處理器。在一個實例實施方案中，濾波器1  (302A)可為雜訊 縮 減濾波器，濾波器2  (302B)可為邊緣增強濾波器，且濾波器N (302N)可為完成處理影像串流之最終濾波器。替代地，影像信號處理器300可為具有處理其他影像串流之一或多個額外序列濾波器304A至304N的一多線緒(或多核心)處理器。
當使用者利用習知器件記錄或擷取場景(諸如使用智慧型電話之父親記錄他的孩子之英式足球比賽或鋼琴演奏會)時，場景通常在器件之顯示器上預覽。當使用者縮放至場景的一部分中(諸如父親放大他的孩子)時，器件通常預覽場景之放大部分。若縮放為數位縮放，則器件可預覽由器件之相機擷取的場景之僅僅一部分。以此方式，習知相機控 制器可輸出正被擷取的影像串流之僅僅一部分以用於預覽。若使用者丟失待記錄於放大視圖中之物件的蹤 跡 且預覽不展示物件，則使用者可 遭遇 定位(諸如移動(例如向左、 向右、向上、向 下及對角地)或定向(例如平移、傾斜及旋轉)相機以發現預覽中之物件)的困難。舉例而言，若前述父親未在放大之預覽中看到他的孩子，則父親可具有判定改變相機位置以定位他孩子所藉以的方向及距離的困難。
圖4A繪示 由相機擷取 之實例場景402。出於本文中論述之目的，實例場景402係由圖2之器件200的第一相機202或第二相機204 (或第一相機202及第二相機204兩者)擷取 或記錄。實例場景402具有在練習期間射門的球員。使用者可希望在記錄場景 402時放大球，且正被記錄的放大場景之預覽可不同於使用者意欲記錄之物。圖4B描繪圖4A之實例場景402，描繪正被或待記錄的放大場景之實際部分404，且描繪待記錄的場景之預期部分406。若器件預覽正被或待記錄的場景之部分404，則使用者可具有判定待記錄的場景之預期部分406之位置在此實例中 係在正被或待記錄的場景之部分404之位置右下方的困難。結果，使用者可 並不知曉移動或定向相機所藉以的方向。舉例而言，使用者可耗費時間移動器件以試圖在放大視圖中發現球，或可花費器件資源縮小及再次放大以在預覽中重定位球。結果，使用者可太晚記錄想要的影像或視訊或以其他方式失去在預期時間記錄預期物件(諸如當射門時記錄他的孩子)的機會。
根據本發明之各個態樣，顯示器(諸如實例顯示器216，其可耦接至器件或包括於器件中)可經組態以輔助使用者定位一或多個相機。在一些實施方案中，顯示器可預覽由相機 擷取的場景(其包括正被或待記錄之場景的部分)。 在場景之預覽中，顯示器(與影像處理器件通信)可顯示正被或待記錄之場景的部分之視覺指示。以此方式，使用者能夠容易判定正被或待記錄之場景的部分相對於正被擷取之場景的位置。
圖5A繪示預覽正被擷取的圖4A之場景402及正被或待記錄的場景之部分的視覺指示504的實例顯示器502。為簡單及簡潔起見，如由本發明之視覺指示所指示與正被或待記錄的場景之一部分相關的論述可被稱作正被記錄的場景之一部分。顯示器502可為圖2A及圖2B之器件200的顯示器216，其中器件200記錄藉由視覺指示504指示的場景之部分，但可使用任何合適之器件組態。雖然視覺指示 504經繪示為指示正被記錄的場景之部分的虛線矩形，但視覺指示 504可採取任何形式來指示正被記錄的場景之部分。在一些其他實例中，視覺指示 504可指示場景之部分為預覽之灰色區域或其他對照區域，可指示正被記錄的場景之部分的拐角，包括識別正被記錄的場景之部分的中心的 標記、指示正被記錄之場景之部分的實線框等。另外，記錄場景之一部分包括記錄視訊以及一或多個靜態影像。以此方式，使用者可 準備視覺指示504居於場景之一部分中心以用於待記錄之即將來臨影像或視訊。
一個相機之擷取串流可包括整個場景，且彼串流之空間部分(例如藉由視覺指示504界定/定界的場景之空間部分)經輸出(諸如藉由圖2 之相機控制器212)以用於記錄。替代地，第一相機之串流可包括整個場景而第二相機之串流包括正被或待記錄的場景之部分。圖5B繪示 擷取 場景506的器件200之第一相機202及擷取場景506之正被或待記錄之部分508的器件200之第二相機204的實例。以此方式，顯示器216可預覽正由第一相機202擷取的場景506且 呈現(例如 顯示)包括正由第二相機204擷取 以用於記錄的(場景506之)部分508的視覺指示。
在額外或替代實施方案中，器件可經組態以記錄擷取串流中之任一者或兩者。在一個實例中，器件可請求使用者選擇待記錄的串流中之一者或自動地選擇待記錄之串流。在另一實例中，一個 擷取串流可經獨佔地使用以用於預覽。器件可請求使用者選擇使用哪一 擷取串流用於預覽，或器件可自動地選擇擷取串流以用於預覽。在另一實例中，器件自動地記錄兩個擷取串流。若記錄兩個擷取串流，則使用者可經請求以選擇記錄中之一者或兩者用於儲存(丟棄未經選擇記錄)。
在一些實例實施方案中，第一相機202及第二相機204為器件200之雙相機的部件。在一些雙相機中 ，兩個相機202及204具有相似能力，諸如解析度、調色板、縮放、焦距、快門速度等。替代地，兩個相機202及204可具有不同能力。在一些實例中，第一相機202可為彩色相機且第二相機204可為可在低光設定中具有較佳保真度的黑白相機。在一些其他實例中，第一相機202可為高解析度相機(諸如8百萬像素、13百萬像素等)且第二相機204與第一相機202相比可為較低解析度相機，例如以運用自動聚焦輔助第一相機。在一些其他實例中，第一相機 202可為廣角視野相機且第二相機204與第一相機202相比可為具有較長焦距之較窄視場相機，例如以擷取遠離器件之物件。一些器件可包括雙相機之不同組態，且其他器件可包括多於兩個相機。本發明之實施方案適用於器件之任何相機組態及類型。使用兩個相機組態之所提供實例僅僅出於說明之目的而提供，且本發明不應限制於所提供實例中之任一者或由所提供實例中之任一者所限制。
圖6為描繪用於輸出視覺指示之實例操作 600之繪示性流程圖。所輸出視覺指示可呈現於顯示器上以輔助使用者定位相機，以使得器件可接收包括正被記錄的預期場景之擷取串流。舉例而言，使用者可使用視覺指示識別定位相機之方式以便使其視場包括預期場景。下文關於兩個影像串流(諸如來自第一相機202的第一影像串流及來自器件 200之第二相機204的第二影像串流)描述實例操作 600 。然而，態樣適用於任何數目個影像串流(包括一個影像串流或三個或三個以上影像串流)。
雖然關於器件 200 、相機控制 器 212 或影像信號處理器214描述實例操作(包括實例操作 600)，但任何有能力之組件或模組可執行操作。舉例而言，即使器件 200 或相機控 制 器 212 可經描述為執行操作，影像信號處理器214 (諸如圖2A或圖2B中)、處理器206 (圖2A)、相機控制器212 (圖2A)或其他模組或組件仍可執行操作。另外，術語「輸出」可包括提供至獨立器件、提供至遠端顯示器、顯示於器件之所包括顯示器上、自器件之一個組件提供至器件之另一組件，或自器件之一個組件提供至在器件外部的模組。本發明不應限制於執行如實例操作中所描述之操作的特定組件或模組。
在602處開始，器件200可處理與場景之全部相關聯的第一影像串流。在一個實例中，第一相機202可擷取場景506 (圖5B)並提供第一影像串流至器件 200 之相機控 制器 212 ，其處理傳入之第一影像串流。在另一實例中，器件 200 之相機控制 器 212 處理自另一器件接收或儲存於記憶體(諸如 記憶體 208)中之影像串流 。 在一些實例實施方案中，影像信號處理器214可處理第一影像串流。舉例而言，影像信號處理器300 (圖3)可將濾波器302A至302N應用於第一影像串流。另外或替代地，影像信號處理器300可對第一影像串流執行其他功能，諸如裁剪、縮放、去交錯等。
器件200之相機控制器212亦可獨立處理與第一影像串流中之場景之空間部分(例如 小於或等於全部之部分)相關聯的第二影像串流(604)。在一個實例中，第二相機204可 擷取 場景506之 空間部分508  (圖5B)且 提供所得第二影像串流至相機控 制 器 212 ，其處理傳入之第二影像串流。在其他實例中，第二影像串流可藉由另一器件或自記憶體 (諸如記憶體208)提供。參考將濾波器302A至302N應用於第一影像串流的影像信號處理器300之先前實例，影像信號處理器300可將濾波器304A至304N應用於第二影像串流，且亦或替代地可執行其他功能，諸如裁剪、縮放、去交錯等。
在用於處理第二影像串流之一些實例實施方案中，器件200 (諸如相機控制器212或影像信號處理器214)可判定第一影像串流之場景506中的視覺指示之大小及位置(606)。舉例而言，器件 200 可將視覺指示嵌入至經處理第一影像串流中，在經處理第一影像串流上建立一層，擴增經處理第一影像串流等，以使得 擷取之場景506及視覺指示可同時被顯示(諸如於顯示器216上)。
應 注 意本 發 明不應限 制 於具有比第一相機202更小視場之第二相機204。舉例而言，相機可在不同縮放 位準處以使得具有比另一相機更大視場之相機擷取比另一相機更小之場景部分。另外，如前提及，影像信號處理器214可為任何數目個處理器、執行緒及/或核心。在一些實例實施方案中，影像信號處理器214及處理器206可為 系 統晶片(SoC)之部件。因而，應注意本發明之各種態樣不限於任何特定硬體。
前進至608，器件200可輸出經處理第一影像串流以用於預覽。在一些實例實施方案中，相機控 制 器 212 可產生經處理第一影像串流。在產生經處理第一影像串流後，器件 200 可在顯示器216上 預覽場景506  (610)。舉例而言，器件 200 可輸出經處理第一影像串流至顯示器216，且顯示器216藉由顯示經處理第一影像串流而預覽場景506。在產生及輸出經處理第一影像串流(諸如藉由相機控 制 器 212)期間或之後，亦可輸出與第二影像串流相關聯 之場景的空間部分之視覺指示(612)。 顯示器216可視情況在正被預覽之場景506上顯示視覺指示(614)。舉例而言，經處理第一影像串流可包括視覺指示或以其他方式鏈接至視覺指示以使得相機控制器212可將視覺指示與待記錄於經處理第一影像串流中的場景之部分相關聯。
雖然實例操作 600 展示以序列形式處理影像串流及以序列形式產生經處理第一影像串流及視覺指示，但處理不同影像串流可經同時執行且輸出或產生經處理影像串流及視覺指示亦可經同時執行。可在輸出經處理第一影像串流時輸出經處理第二影像串流。舉例而言，相機控 制器212可產生與正被記錄的場景之部分相關聯的經處理第二影像串流之至少一部分。經處理影像串流可儲存在器件之記憶體(諸如 記憶體 208)中或輸出至另一器件或記憶體。若顯示器 216預覽經處理第一影像串流及視覺指示，則視覺指示指示在經處理第一影像串流中 擷取的場景之部分正被記錄在第二影像串流之至少一部分中。
雖然實例操作 600 (及在本 發 明中之其他實例操作)描述使 用經處理第二影像串流以用於記錄，但經處理第二影像串流之僅僅一部分可用於記錄。舉例而言，數位縮放可用於第二相機 204以使得由第二相機204擷取的整個場景將不被記錄。應 注意影像串流可指影像串流之一或多個時間或空間部分或全部串流，且本發明不應限制於影像串流之特定實施方案。
運用展示於場景之預覽上的視覺指示，使用者可較佳理解移動器件或相機的方式以便定位正被或待記錄的串流(串流之部分)中之所關注物件。具有視覺指示之場景的預覽可稱為「縮放輔助」預覽。在一些實例實施方案中，使用者可希望在以下各者的兩者或大於兩者之間切換：(1)縮放輔助預覽，其中該預覽可描繪正被記錄的場景之部分的一指示以及正被 擷取 的整個場景之預覽兩者；(2)習知預覽，其中該預覽可描繪僅僅正被記錄之物；(3)同時視圖，其中描繪縮放輔助預覽及習知預覽之組合(諸如 縮放輔助預覽及習知預覽之 並 排(SBS)視圖、圖像中圖像(PiP)視圖、加窗視圖等)；(4)替代預覽，其中該預覽可描繪與習知預覽相比不同之場景部分；(5)不同縮放 位準預覽，其中該預覽可描繪在與習知預覽相比不同之縮放位準(諸如不同數位縮放位準)下的場景之一部分；或(6)同時視圖，其中描繪上述預覽中之兩者或更多者的組合。
圖7繪示在縮放輔助預覽702與正被或待記錄的場景之部分的預覽704之間的顯示器216之 實例切換操作706。在一些實例實施方案中，器件200可允許按鈕、選單、手勢或其他基於使用者之命令判定何時在預覽702與預覽704之間切換。在一些實施方案中，命令在縮放輔助預覽功能性之啟動與去啟動之間雙態觸發。在一些其他實施方案中，在一個或多個其他預覽仍被產生但並未顯示或輸出以供顯示的同時，命令改變預覽。
在一個實例中，顯示器216可呈現縮放輔助按鈕708以允許使用者在預覽702與預覽704之間切換，其中預覽702包括指示場景之部分正被或待記錄的視覺指示710。在其他實例中，使用者可使用滑移手勢，搖動器件200，或提供聽覺、視覺或其他觸碰命令以在預覽 702與預覽704之間切換。
另外或替代地，可藉由器件 200 基於一或多個 準 則自動地(例如「運作中」)判定在預覽702與預覽704之間切換的決策。舉例而言，用於使得器件200自預覽704切換至預覽702的一或多個準則可包括相機移動、物件移動至正被 擷取的場景之部分中、所關 注物件之運動(例如所關注物件可藉由器件 200自動地追蹤以用於記錄)等，其可使得器件200呈現縮放輔助預覽702以 輔助使用者定位第一相機202及 / 或第二相機204。同樣，用於使得器件200自預覽702切換至預覽704的一或多個準則可包括例如正被追蹤(例如基於使用者選擇或預定 準則追蹤)的所關注物件之經判定運動量、經判定深度及 / 或經判定大小相對於各種相關聯臨限值 位準的評定(或分析)。
圖8為描繪用於在正被 擷取 之場景(諸如正 由第一相機202擷取的第一影像串流中之場景)與正被或待記錄的場景之一部分(諸如由第二相機204擷取的第二影像串流之至少一部分)之間切換的實例操作800之繪示性流程圖。舉例而言，相機控制器212 (單獨或與其他組件(諸如處理器206)合作操作 ) 可判定是否在輸出(諸如 用於預覽)經 處理第一影像串流(及視覺指示)與經處理第二影像串流之間切換。輸出影像串流可為藉由顯示器216預覽的影像串流。
在一些實例實施方案中，相機控 制 器 212 可產生多於一個影像串流(諸如第一影像串流及第二影像串流兩者)以用於記錄。在一個實例中，相機控制器212可產生並輸出當前並未預覽之經處理影像串流以用於記錄。諸如藉由能夠檢查每一影像串流及選擇待保持或刪除的正被檢查之影像串流，可向使用者呈現選擇保持哪一經記錄影像串流的一選項。雖然實例操作800展示在正被 擷取之影像串流與正被記錄之影像串流之間的切換，但兩個影像串流可皆被記錄，且本 發明不應限制於記錄一個影像串流或如所提供特定實例中所展示的記錄。
在802處開始，經處理第一影像串流可經產生以用於預覽。舉例而言，相機控 制器 212 (諸如 藉由使用影像信號處理器214)可產生經處理第一影像串流。顯示器216可視情況例如藉由呈現經處理第一影像串流及視覺指示而顯示縮放輔助預覽(804)。返回參看圖7 ，顯示器216可顯示具有視覺指示710之縮放輔助預覽702。器件200接著可自一或多個準則(諸如使用者觸按縮放輔助按鈕、滑動螢幕、在場景中之移動、相機移動等)判定器件200是否將自輸出經處理第一影像串流切換至輸出經處理第二影像串流(806)。舉例而言，器件200 判定顯示器216是否應自縮放輔助預覽702切換 至正被記錄的場景部分之預覽704，如圖 7 之實例中所描繪。若器件 200 不將切換，則器件 200 繼續輸出經處理第一影像串流(802)。舉例而言，顯示器216繼續呈現具有視覺指示710之縮放輔助預覽702 (804)。
若器件200將自輸出經處理第一影像串流切換，則器件200切換至輸出經處理第二影像串流以用於預覽(808)。 在一個實例中，相機控制器212可切換以產生經處理第二影像串流。在另一實例中，相機控制器212產生兩個經處理影像串流，且器件 200判定自縮放輔助預覽702切換至經處理第二影像串流之預覽704輸出至顯示器216。以此方式，顯示器216可視情況例如藉由向使用者預覽正被或待記錄之物而呈現經處理第二影像串流(810)。
器件 200  (諸如 相機控 制 器 212)接著可自一或多個 準 則(諸如一或多個準則之變化或額外使用者請求或輸入)判定器件200是否將自輸出經處理第二影像串流切換至經處理第一影像串流(812)。 舉例而言，器件 200 判定顯示器216是否 應自呈現正被記錄之場景部分704切換 至圖7中之縮放輔助預覽702。若無切換將 發 生，則器件 200 繼續輸出經處理第二影像串流(808)。舉例而言，顯示器216繼續呈現正被記錄之場景部分704(808)。 若切換將 發 生(812)，則器件 200 切換至輸出經處理第一影像串流，例如以使得縮放輔助預覽可呈現於顯示器 216上。在一個實例中，若兩個經處理影像串流由相機控 制 器 212 或影像信號處理器214產生，則器件 200 可在輸出所產生影像串流之間切換。在另一實例中，相機控 制 器212可輸出一個經處理影像串流並切換待輸出之經處理影像串流。
在一些實例實施方案中，顯示器216可同時顯示縮放輔助預覽及正被或待記錄的場景之部分。圖9A繪示呈現同時預覽902之實例顯示器，同時預覽包括縮放輔助預覽904 (具有視覺指示908)及正被記錄的場景906之部分。顯示器902 (其可為顯示器216之一個實施方案)另外可包括用以在預覽之間(諸如在預覽904及906之同時顯示與正被或待記錄之物的預覽906之間)切換的按鈕910。 雖然同時預覽902  (包括預覽904及906)經展示為並排，但預覽904及906可以任何方式 ( 諸如圖像中圖像、 獨立窗等)同時呈現。另外，雖然預覽906係以信箱方式展示，僅僅展示縮放輔助預覽904之一部分，且預覽中之每一者顯示於一半顯示器上，但每一預覽904及906之 全部或任何部分可展示於任何數量顯示器上。舉例而言，顯示器216可以信箱方式顯示預覽904及906兩者，可僅僅顯示預覽904及906中之每一者的一部分，允許使用者判定如何同時顯示預覽904及906，或允許使用者改變將用於預覽904及906中之每一者的顯示器902之多少。因此應注意本發明不應限制於實例顯示器或所提供預覽中之任一者。
使用者可希望在預覽之同時顯 示(「同時預覽」)與 縮放輔助預覽之間切換(或器件 200 可藉由切換處理影像串流之輸出而自動地切換)。圖9B繪示在同時預覽902與縮放輔助預覽904之間切換的顯示器之實例操作912。在一個實例中，使用者可按壓縮放輔助 (ZA) 按鈕以在預覽902與預覽904之間切換。器件200可另外或替代地基於一個或多個其他 準則(諸如 相機移動、物件移動等)而切換至顯示器216之 輸出以使得顯示器在呈現預覽902與904之間切換。
另外或替代地，顯示器可在同時預覽902、 縮放輔助預覽904及正被或待記錄之物的預覽906之間切換。舉例而言，器件 200可在輸出經處理影像串流之間切換以用於預覽中之每一者。圖9C繪示 如由切換操作914A至914C指示的在縮放輔助預覽904、正被 或待記錄之場景之部分的預覽906及 / 或同時預覽902之間切換的顯示器之實例。在一個實例中，使用者可按壓ZA按鈕以在該等預覽中循環。在另一實例中，顯示器可包括多個按鈕(諸如軟按鈕及/或實體按鈕)以使得使用者可直接切換至預期預覽。在另一實例中，使用者可對於一個預覽向左滑移並對於另一個預覽向右滑移(或在任何其他方向上滑移，諸如向上、向下或對角地)。其他準則(諸如相機移動、物件移動等)可另外或替代地用於器件以判定切換預覽。
圖10為描繪用於在同時預覽與正被記錄的場景之預覽之間切換的實例操作1000之繪示性流程圖。舉例而言，相機控 制器212 (或器件200)可自同時輸出經處理第一影像串流(及視覺指示)及經處理第二影像串流(諸如 用於在顯示器216上顯示同時預覽)以 用於預覽切換至輸出僅僅經處理第二影像串流(諸如 用於在顯示器216上 顯示正被記錄之物)以用於預覽。在一些替代實施方案中，當在同時預覽與正被或待記錄之物的預覽之間切換時，相機控 制器 212 (或器件 200)可同時輸出經處理第一影像串流及經處理第二影像串流以用於預覽。關於圖9B論述圖 10 之實例操作1000，但圖10 之實例操作1000中的相似程序或步驟可用於在圖9C或其他實例實施方案中所繪示的預覽之間切換。
在1002處開始 ， 器件200可同時輸出經處理第一影像串流及經處理第二影像串流以用於在顯示器216上之同時預覽。舉例而言，相機控 制 器212 (諸如 藉由使用影像信號處理器214)可同時輸出經處理第一影像串流及經處理第二影像串流。顯示器216可顯示同時預覽902，包括縮放輔助預覽及正被或待記錄之物的預覽(1004)。器件200 接著可自一或多個準則(諸如藉由使用者觸按縮放輔助按鈕或滑移螢幕自顯示器216接收使用者命令，判定場景中之移動或相機移動，等)判定器件200 (或相機控制器212)是否將自同時輸出經處理第一及第二影像串流切換至僅僅輸出經處理第二影像串流以用於預覽(1006)。舉例而言，器件200判定顯示器216是否應自同時預覽902切換(913)至正被記錄之物的預覽904。若無切換將發生，則器件200 繼續同時輸出經處理第一及第二影像串流(1002)。舉例而言，顯示器216繼續呈現同時預覽902 (1004)。
若切換將 發 生(1006)，則器件 200 切換至輸出經處理第二影像串流(1008)。 在一個實例中，相機控 制 器 212  (諸如 藉由使用影像信號處理器214)可切換至輸出經處理第二影像串流。在另一實例中，相機控制 器 212 輸出兩個經處理影像串流以用於預覽，且器件 200 判定自輸出經處理第一影像串流以供顯示器216呈現同時預覽切換至輸出經處理第二影像串流以供顯示器216呈現。以此方式，顯示器216可視情況顯示經處理第二影像串流(1010)，並預覽正被或待記錄之物。
器件 200接著可自該一或多個準則(諸如一或多個 準則之變化或額外使用者請求或輸入)判定是否自輸出經處理第二影像串流以用於預覽切換至同時輸出經處理第一及第二影像串流以用於預覽(1012)。舉例而言，器件 200 判定顯示器216是否 應自呈現來自指示正被記錄之場景部分的預覽904之 預覽切換(913)至圖9A中的同時預覽902。若無切換將 發生，則器件200 繼續輸出經處理第二影像串流(1008)。舉例而言，顯示器216繼續呈現指示正被或待記錄之場景部分的預覽904 (1010)。若切換將發 生(1012)，則器件 200 切換至同時輸出經處理第一及第二影像串流(1002)。以此方式，同時預覽902可藉由顯示器216呈現。在一些替代實施方案中，器件 200 (諸如藉由使用相機控 制器 212)可同時輸出經處理第一影像串流及經處理第二影像串流兩者，且顯示器 216自呈現正被記錄之物的預覽切換至呈現同時預覽。
在一些實例實施方案中，顯示器216可允許使用者與所呈現預覽交互(諸如 使用者調整展示於顯示器216上的視覺指示之大小及 / 或移動該視覺指示)。在一些實例中，若顯示器216為觸敏式顯示器，則器件200可自顯示器216接收使用者提供捏縮手勢以減小視覺指示之大小及 /或擴展手勢以增加視覺指示之大小的一指示。另外或替代地，使用者可提供拖曳手勢以移動視覺指示之位置。在一些其他實例中，使用者可經由顯示器216或器件200或接收聽覺命令之麥克風 的實體按鈕(諸如方向按鈕、縮放或捲動輪等)提供命令。在一些其他實例中，器件200可包括或耦接至接收力命令的陀螺儀及/或加速度計。
圖11A繪示 提供縮放輔助預覽之實例顯示器1102， 其中第一視覺指示1104經 調整大小至第二視覺指示1106以 指示正被或待記錄的場景之更多部分。實例顯示器1102可為器件200(或耦接至器件200)的顯示器216之一個實施方案。場景部分1108對應於第一視覺指示1104，且場景部分1110對應於第二視覺指示1106。在一些實例中，使用者經由顯示器216提供用於第一視覺指示1104之擴展手勢以自第一視覺指示1104切換至第二視覺指示1106及因此自場景部分1108切換至正被或待記錄的場景部分1110。
圖11B繪示 提供輔助預覽之實例顯示器1112， 其中第一視覺指示1114經 移動至第二視覺指示1116以 指示正被或待記錄的場景之不同部分。實例顯示器1112可為器件200( 或耦接至器件 200) 的顯示器216之一個實施方案。場景部分1118對應於第一視覺指示1114，且場景部分1120 對應於第二視覺指示1116。在一些實例中，使用者經由顯示器216提供用於第一視覺指示1114之 拖曳手勢以自第一視覺指示1114切換至第二視覺指示1116 (諸如移動視覺指示)及因此自場景部分切換至正被或待記錄的場景部分1110。
圖12為描繪用於基於用以調整視覺指示之使用者輸入調整被或待記錄的場景之一部分之實例操作1200的繪示性流程圖。關於圖11A及圖11B論述圖12之實例操作1200，但圖12之實例操作1200中的相似程序或步驟可用於對待或正被記錄用於其他實例實施方案之物調整大小。舉例而言，雖然描述縮放輔助預覽，但調整視覺指示可在同時預覽或其他預覽中發生。
在1202處開始，顯示器216可顯示包括正被或待記錄的場景之部分之視覺指示的縮放輔助預覽(或替代地，同時預覽)。當顯示器216呈現縮放輔助預覽時，器件 200可諸如自顯示器216接收使用者輸入或請求以調整視覺指示調整(1204)，顯示器216自與顯示器之使用者互動提供使用者命令。舉例而言，器件 200 可視情況接收使用者命令以調整圖11A中的視覺指示 1104 之大小(1206)。 另外或替代地，器件 200 可視情況接收使用者命令以移動視覺指示之位置(1208)。 藉由請求調整(諸如 經由與顯示器216之互動)視覺指示，使用者指示器件 200將記錄與由縮放輔助預覽中之視覺指示當前指示的相比不同之場景部分。
回 應於使用者命令，器件 200 可調整處理第二影像串流(1210)。 在調整第二影像串流之處理(1210)中，器件 200 可視情況調整在第二影像串流中正被記錄或待記錄的場景之部分之大小(1212)。 舉例而言，當場景部分1108 (圖11A)經輸出用於記錄時，若使用者改變第一視覺指示1104至第二視覺指示1106，則器件200調整處理第二影像串流以使得場景部分1110經輸出用於記錄。另外或替代地，器件 200可視情況改變正被或待記錄的場景之部分之空間位置(1214)。舉例而言，當場景部分1118 (圖11B)經輸出用於記錄時，若使用者移動視覺指示1114至預覽1112中之視覺指示1116的位置，則器件200調整處理第二影像串流以使得場景部分1120經輸出用於記錄。
在一些實例實施方案中，在將一或多個濾波器應用於所 擷取 第二影像串流之前，器件 200 可調整第二相機204擷取 用於記錄的場景之什麼部分，或發送命令至第二相機204以調整正被擷取之物。在一個實例中，相機控制器212可發送命令至第二相機204以改變第二相機204之光學縮放 位準 。在另一實例中，相機控 制 器 212 可 發 送命令至第二相機204以調整第二相機204之平移及/或傾斜(諸如用於安全相機)。
在一些其他實例實施方案中，器件 200 可裁剪來自第二相機204之所擷取第二影像串流(或在應用一或多個濾波器之後的經處理第二影像串流)。以此方式，器件200可調整裁剪第二影像串流以使得與經調整視覺指示相關聯的場景之僅僅部分經輸出用於記錄。舉例而言，第二相機204擷取比記錄之物更多的場景(諸如數位縮放可用於第二影像串流以展示將或正被記錄之物)。若器件200將記錄當前正在第二影像串流中記錄的場景之不同部分，則第二相機204可擷取相同場景，且器件200 (諸如相機控制器212)可在不調整第二相機204情況下 調整正被記錄的第二影像串流之部分。
返 回 參看圖12， 器件200可 回 應於調整處理第二影像串流及/或 回 應於調整視覺指示之使用者輸入而調整產生所顯示視覺指示(1216)。在一些實例實施方案中，器件200 可視情況調整待在預覽中顯示的視覺指示之大小(1218)。另外或替代地，器件200 可視情況移動視覺指示至待在預覽中顯示的新位置(1220)。
除使用者請求改變視覺指示之大小及 / 或位置(諸如 藉由在觸敏式顯示器216上之使用者手勢或其他使用者輸入)之外或替代使用者請求改變視覺指示之大小及/或位置，器件200亦可回應於一或多個準則而自動地調整產生視覺指示之大小及 / 或位置(及因此正被或待記錄場景之部分)。在一個實例中，若器件 200 追蹤用於記錄之物件(諸如臉、個人、英式足球等)，且相機不能聚焦於該物件(諸如該 物件在記錄中模糊)，則器件200可記錄包括物件之更多場景(增加視覺指示之大小及因此自物件「縮小」)以便調整焦點以使物件在記錄中清晰。舉例而言，器件 200可發送命令至相機以光學地縮小以使得更多場景被 擷取。在另一實例中，若減小場景之亮度，則器件200可命令相機擷取更多場景以用於記錄(其增加視覺指示之大小)以試圖擷取更多環境光。在另一實例中，若器件 200正追蹤移動物件，則器件調整正被或待記錄的場景之部分 (因此調整在預覽中視覺指示之位置)以試圖追蹤物件。
在一些實例實施方案中 ， 第二相機204不 擷取 與第一相機202一樣多的場景，或與第一相機202相比，第二相機204擷取不同場景部分。舉例而言，一些雙相機具有具有寬視場之第一相機及具有較窄視場之第二相機(諸如攝遠相機)。以此方式，第二相機可能不能 擷取第一影像串流中之全部場景。若器件 200之使用者試圖調整縮放輔助預覽中之視覺指示(諸如 經由顯示器216移動視覺指示或調整視覺指示大小)至 並 未由第二相機204擷取 的場景之區域，則器件 200 可自動地切換至使用第一影像串流(自第一相機202所 提供)以 記錄場景之新的部分。自使用第二影像串流至用於記錄之第一影像串流的切換對於使用者可係無縫且不可見的。舉例而言，相機控制器212可自輸出用於記錄的經處理第二影像串流之至少一部分無縫地切換至輸出用於記錄的經處理第一影像串流的至少一部分。替代地，器件200可將用於記錄之串流已改變通知使用者(諸如聽覺或視覺通知)。在一些其他實例實施方案中，兩個影像串流可被記錄，且器件 200可 將兩個影像串流之部分拼接在一起以產生對應於藉由視覺指示所指示的場景之部分的經處理影像串流。
圖13A繪示 由第一相機202擷取 的實例場景1302及由第二相機204擷取 或能夠 擷取 的場景之實例部分1304。如所示，由第二相機204擷取 的場景部分1304小於由第一相機202擷取 的場景1302。在 繪示 之實例中，場景部分1306可最初被記錄或待記錄。若待記錄之場景部分經調整為場景部分1308，則第二相機204可能不能 擷取 用於記錄之場景部分。舉例而言，使用者可在顯示器 216上做手勢以在縮放輔助預覽中調整視覺指示以自記錄場景部分1306改變至記錄場景部分1308，場景部分1308並 未由第二相機204全部 擷取 。器件 200 可自使用用於記錄之第二影像串流切換至使用用於記錄之第一影像串流以使得場景之全部預期部分被記錄。
圖13B繪示由第一相機202擷取的圖13A中之實例場景1302及正被或待記錄的場景部分1308，其中第一影像串流(自第一相機202所提供)包括被記錄或待記錄的場景部分1308(對應於影像1310)。以此方式，第二影像串流(自第二相機204所提供)可並不用於記錄場景部分1308。
圖14為描繪用於在經處理第一影像串流與經處理第二影像串流之間切換以用於記錄場景之一部分的實例操作1400之 繪示 性流程圖。在1402處開始，顯示器216可呈現包括視覺指示的預覽(諸如縮放輔助預覽或同時預覽)。運用指示正被或待記錄之場景部分顯示於顯示器216上的視覺指示，器件200(諸如藉由使用相機控制器212)可輸出經處理第二影像串流以用於記錄(1404)。器件200接著可接收使用者命令以調整視覺指示(1406)。舉例而言，器件200可自顯示器216接收藉由使用者經由與顯示器216之 互動提供的使用者命令。在一些實例實施方案中，器件 200 可接收使用者命令以調整視覺指示之大小(1408)。另外或替代地，器件200 可接收使用者命令以移動視覺指示之位置以用於預覽(1410)。
在器件200調整正被記錄的場景之部分情況下，器件200可調整視覺指示以使得視覺指示對應於正被記錄的場景之經調整部分(1412)。回應於使用者命令，器件200 可判定用於記錄的場景之至少一部分是否在第二影像串流中之視場外部(1414)。舉例而言，器件200 判定由第二相機204擷取的場景部分1304 (圖13A)是否不包括用於記錄之全部場景1308。若第二影像串流包括用於記錄之全部場景 1308，則器件200繼續輸出經處理第二影像串流以用於記錄(1404)。舉例而言，相機控制 器212調整用於記錄的第二影像串流之部分並繼續產生及輸出經處理第二影像串流以用於記錄。
若第二影像串流不包括用於記錄之全部場景 (諸如第二相機204不擷取圖13A中之全部場景部分1308)，則器件200 可自輸出用於記錄之經處理第二影像串流切換至輸出用於記錄之經處理第一影像串流(1416)。舉例而言，相機控制器212可自輸出經處理第二影像串流之一部分切換至輸出對應於圖13B中之場景部分1308的經處理第一影像串流的一部分。在一些替代實施方案中，相機控 制器212可同時輸出經處理第一影像串流及經處理第二影像串流兩者。以此方式，器件 200可判定自使用經處理第二影像串流以用於記錄切換至使用經處理第一影像串流以用於記錄場景之部分。
除使用者請求改變視覺指示之大小及 / 或位置(諸如 藉由在顯示器216上之使用者手勢或其他使用者輸入)之外或替代使用者請求改變視覺指示之大小及/或位置，器件200亦可回應於場景、器件200及/或其他組件之一或多個準則而自使用經處理第二影像串流自動地切換至使用經處理第一影像串流以用於記錄。在一些實例實施方案中，亮度變化可使得器件200切換影像串流以用於記錄。舉例而言，雙相機可包括彩色相機及黑白相機，其中黑白相機與彩色相機相比在低光情形下具有較佳保真度。以此方式，若場景之亮度降至低於臨限值，則器件 200可判定自使用彩色相機之影像串流切換至使用黑白相機之影像串流以用於記錄。
在一些其他實例實施方案中，相機中之一或多者 (諸如第一相機202及第二相機204)可經移動以使得正被追蹤之物件可超出正由相機中之一者擷取的場景之部分。舉例而言，若第一相機 202包括寬視野且第二相機204為攝遠相機，則第一影像串流及/或第二影像串流中之全域運動可使得物件離開或將離開第二相機204之 視場。結果，器件 200 可將影像串流自第二相機204切換 至第一相機202以 用於記錄以便保持追蹤物件。類似地，正被追蹤之物件可移動(局域運動)以使得第二影像串流可能不包括該物件。器件 200 可自使用第二影像串流(其可由攝遠相機 擷取)切換 至使用第一影像串流(其可由較寬視場相機擷取)。
圖15為描繪用於基於一或多個 準則自經處理第二影像串流切換至經處理第一影像串流以用於記錄的實例操作1500之 繪示 性流程圖。在1502處開始，器件200可輸出經處理第二影像串流以用於記錄。器件200接著可判定場景之一或多個特性的變化(1504)。在一個實例中，器件 200 可 視 情 況 判 定 影 像 串 流 中 之 至 少 一 者 中 的 亮 度 或 明 度 之 變 化(1506)。舉例而言，環境光強度可經判定為降至低於用於正被用於記錄之當前經處理影像串流的臨限值 。在另一實例中，器件 200可視情況判定影像串流中之至少一者中的 全域運動(1508)。舉例而言，第二相機204可經移動以使得第一相機202將用以擷取場景之部分以用於記錄。在另一實例中，器件200 可視情況判定物件之局域運動(1510)。舉例而言，正由器件200 追蹤之物件可移出第二相機204之 視場以使得經處理第一影像串流待用於記錄。
基於場景之一或多個特性的改變，器件 200 自輸出經處理第二影像串流以用於記錄切換至輸出經處理第一影像串流以用於記錄(1512)。在一個實例中，相機控制器212 可自輸出經處理第二影像串流以用於記錄切換至輸出經處理第一影像串流以用於記錄，其中經處理第一及/ 或第二影像串流的一部分可經儲存以便後續使用。在另一實例中，相機控 制 器 212 可輸出兩個經處理影像串流，且器件 200 可判定自使用經輸出處理第二影像串流切換至使用經輸出處理第一影像串流以用於記錄。
在自動地在用於記錄之經處理影像串流之間切換的器件200 之另一實例實施方案中，外來物件可侵佔正被或待記錄的場景之部分。舉例而言，在記錄孩子的英式足球比賽中，坐在父親前方之人可突然進入正被或待記錄的場景之部分(諸如站立、移動他或她的頭等)以使得器件 200 並不記錄(或輸出用於記錄)場景之預期部分。若物件阻止或阻擋正被記錄的場景之一小部分，則使用相同影像串流之記錄可繼續有限中斷。然而，若物件阻止或阻擋場景之大部分，則器件 200可判定嘗試使用不同影像串流以用於記錄。在一些實例實施方案中，器件 200可切換至另一經處理影像串流以試圖 擷取場景之預期部分(諸如若另一相機具有 並 不由外來物件阻擋的場景之部分的不同優勢或另一相機具有較寬視場以便「縮小」以 擷取 場景)。 舉例而言，器件 200 可判定場景之部分的百分比被阻擋，可判定外來物件在距正被記錄之場景之中心的距離內，等等。
圖16為描繪用於基於阻擋正被或待記錄之場景之一部分的物件自經處理第二影像串流切換至經處理第一影像串流以用於記錄的實例操作1600之繪示性流程圖。在1602處開始，器件200可輸出經處理第二影像串流以用於記錄。在一個實例中，相機控 制器212可輸出經處理第二影像串流以用於記錄。在另一實例中，相機控 制器212可輸出多個經處理影像串流，且器件200可使用經處理第二影像串流以用於記錄場景之部分。
運用正用於記錄場景之部分的經處理第二影像串流，器件200可判定物件移動以阻擋正被或待記錄的場景之一部分(1604)。器件200接著可基於物件判定是否自經處理第二影像串流切換至經處理第一影像串流(1606)。在一個實例中，器件200 可判定物件是否阻擋大於正被或待記錄的場景之部分的一百分比。在另一實例中，器件 200可判定物件是否在距阻擋正被或待記錄的場景之部分之中心的經定義距離內。在另一實例中，器件200可自物件之移動預測物件是否將阻擋用於記錄的場景之部分的百分比或用於記錄的場景之部分之中心。若器件 200判定不切換經處理影像串流以用於記錄場景之部分，則器件 200繼續輸出經處理第二影像串流以用於記錄場景之部分(1602)。若器件200 判定切換經處理影像串流以用於記錄場景之部分，則器件 200切換至輸出經處理第一影像串流以用於記錄場景之部分(1608)。
替代地，若相機控 制 器 212 輸出經處理第一影像串流及經處理第二影像串流兩者，則器件 200可自使用經處理第二影像串流切換至使用經處理第一影像串流以用於記錄場景之部分。在一些實例實施方案中，器件200可繼續追蹤阻擋物件。若阻擋物件空出正被或待記錄的場景之部分，則器件200可判定切換經處理影像串流以用於記錄。替代地，器件200可繼續使用當前經處理影像串流以用於記錄直至另一準則使得器件判定切換使用經處理影像串流以用於記錄為止。
除非特別描述為以特定方式來實施，否則本文中所描述之技術可以硬體、軟體、韌體或其任何組合而實施。亦可將描述為模組或組件之任何特徵一起實施於整合式邏輯器件中或分開來實施為離散但可互操作之邏輯器件。若以軟體予以實施，則該等技術可至少部分藉由包含指令210之 非暫時性處理器可讀儲存媒體(諸如 圖 2 之實例器件200中的記憶體208)來實現，指令210在由處理器206 (或影像信號處理器214)執行時使得器件200執行上文所描述的方法中之一或多者。非暫時性處理器可讀資料儲存媒體可形成電腦程式產品之一部分，其可包括封裝材料。
非暫時性處理器可讀儲存媒體可包含隨機存取記憶體(RAM)(諸 如 ， 同 步 動 態 隨 機 存 取 記 憶 體(SDRAM))、 唯 讀 記 憶 體(ROM)、非揮發性隨機存取記憶體(NVRAM)、電可抹除可程式化唯讀記憶體(EEPROM)、快閃記憶體、其他已知儲存媒體及其類似者。另外地或替代地，該等技術可至少部分地藉由攜載或傳達呈指令或資料結構之形式並可藉由電腦或其他處理器存取、讀取及/或執行的程式碼之處理器可讀通信媒體來實現。
結合本文所揭示之實施例描述的各種 繪示性邏輯區塊、模組、電路及指令可藉由諸如圖2A及圖2B之實例器件200中之處理器206或影像信號處理器214的一或多個處理器執行。此(等)處理器可包括(但不限於)一或多個數位信號處理器(DSP)、一般用途微處理器、特殊應用積體電路(ASIC)、特殊應用指令集處理器(ASIP)、場可程式化閘陣列 (FPGA) 或其他等效整合式或離散邏輯電路。如本文中所使用之術語「處理器」可指上述結構或適用於實施本文中所描述之技術之任何其他結構中的任一者。另外，在一些態樣中，本文所描述之功能性可提供於專用軟體模組或如本文中所述而組態之硬體模組內。此外，該等技術可完全實施於一或多個電路或邏輯元件中。一般用途處理器可為微處理器，但在替代例中，處理器可為任何習知之處理器、控制器、微控制器或狀態機。處理器亦可實施為計算器件之組合 (例如，DSP與微處理器之組合、 複數個微處理器、結合DSP核心之一或多個微處理器，或任何其他此類組態)。
雖然本發明展示說明性態樣，但應 注意，可在不偏離所附申請專利範圍之範疇的情況下在本文中進行各種變化及修改。與本文所描述之態樣一致的方法申請專利範圍之該等功能，步驟或作用，除非另外明確陳述，否則不必按任何特定之次序執行。 舉例而言，圖6、 圖8、 圖10、圖12及圖14至圖16中所繪示之實例操作的步驟(若藉由器件、相機控制器、處理器或影像信號處理器執行)可按任何次序並以任何頻率(諸如對於每一影像擷取，經處理影像串流中之影像擷取的週期性間隔、預定義時段、接收使用者手勢之時等等)執行。此外，雖然可能以單數形式描述或主張元件，但除非明確地陳述對單數形式之限 制，否則涵蓋複數形式。舉例而言，雖然描述兩個經處理影像串流，但一個經處理影像串流或三個或三個以上經處理影像串流可用於執行本 發明之態樣。相應地，本發明不限於所繪示之實例，且用於執行本文中所描述之功能性的任何手段包含於本發明之態樣中。
100:實例器件 102:第一相機 104:第二相機 110:實例器件 112:第一相機 114:第二相機 200:實例器件 202:第一相機 204:第二相機 206:處理器 208:記憶體 210:指令 212:相機控制器 214:影像信號處理器 216:顯示器 218:輸入/輸出(I/O)組件 220:電力供應器 300:影像信號處理器 302A:濾波器 302B:濾波器 302N:濾波器 304A:濾波器 304B:濾波器 304N:濾波器 402:實例場景 404:場景之部分 406:場景之預期部分 502:顯示器 504:視覺指示 506:場景 508:場景之空間部分 600:實例操作 602:步驟 604:步驟 606:步驟 608:步驟 610:步驟 612:步驟 614:步驟 616:步驟 702:縮放輔助預覽 704:預覽 706:實例切換操作 708:縮放輔助按鈕 710:視覺指示 800:實例操作 802:步驟 804:步驟 806:步驟 808:步驟 810:步驟 812:步驟 902:顯示器/同時預覽 904:縮放輔助預覽 906:正被記錄的場景 908:視覺指示 910:按鈕 912:實例操作 913:切換 914A:切換操作 914B:切換操作 914C:切換操作 1000:實例操作 1002:步驟 1004:步驟 1006:步驟 1008:步驟 1010:步驟 1012:步驟 1102:實例顯示器 1104:第一視覺指示 1106:第二視覺指示 1108:場景部分 1110:場景部分 1112:實例顯示器 1114:第一視覺指示 1116:第二視覺指示 1118:場景部分 1120:場景部分 1200:實例操作 1202:步驟 1204:步驟 1206:步驟 1208:步驟 1210:步驟 1212:步驟 1214:步驟 1216:步驟 1218:步驟 1220:步驟 1302:場景 1304:場景部分 1306:場景部分 1308:場景部分 1310:影像 1400:實例操作 1402:步驟 1404:步驟 1406:步驟 1408:步驟 1410:步驟 1412:步驟 1414:步驟 1416:步驟 1500:實例操作 1502:步驟 1504:步驟 1506:步驟 1508:步驟 1510:步驟 1512:步驟 1600:實例操作 1602:步驟 1604:步驟 1606:步驟 1608:步驟
作為舉例而非作為限制，在隨附圖式之諸圖中繪示本發明之態樣，且在諸圖中相似參考數字指類似元件。
圖1A描繪包括多個相機之實例器件。
圖1B描繪包括多個相機之另一實例器件。
圖2A為用於影像處理之實例器件的方塊圖。
圖2B為用於影像處理之實例器件的另一方塊圖。
圖3為實例影像信號處理器之方塊圖。
圖4A繪示由相機擷取之實例場景。
圖4B繪示圖4A之實例場景、待記錄之圖4A之場景的預期部分，及正被記錄之圖4A之場景的實際部分。
圖5A繪示預覽正被擷取的圖4A之場景及正被記錄或待記錄的圖4A之場景之部分的視覺指示的實例顯示器。
圖5B繪示擷取圖4A之場景的第一相機及擷取正被或待記錄的圖4A之場景之部分的第二相機之實例。
圖6為描繪用於輸出視覺指示之實例操作之繪示性流程圖。
圖7繪示在正被擷取的圖4A之場景的預覽與正被或待記錄的圖4A之場景之部分之間切換的顯示器之實例。
圖8為描繪用於在正被擷取之場景與正被或待記錄之場景的一部分之間切換之實例操作的繪示性流程圖。
圖9A繪示同時預覽正被擷取的圖4A之場景及正被或待記錄的圖4A之場景之部分的實例顯示器。
圖9B繪示在正被記錄或待記錄的圖4A之場景之部分的預覽與正被擷取之圖4A的場景及正被或待記錄的圖4A之場景之部分的同時預覽之間切換的顯示器之實例。
圖9C繪示在圖4A之場景的縮放輔助預覽、正被或待記錄的圖4A之場景之部分的預覽及圖4A之場景的同時預覽之間切換的顯示器之實例。
圖10為描繪用於在場景之同時預覽與正被或待記錄之場景的預覽之間切換之實例操作的繪示性流程圖。
圖11A繪示預覽正被擷取的圖4A之場景及對正被或待記錄的圖4A之場景的視覺指示調整大小的實例顯示器。
圖11B繪示預覽正被擷取的圖4A之場景及移動正被或待記錄的圖4A之場景的視覺指示的實例顯示器。
圖12為描繪用於基於使用者調整正被或待記錄的圖4A之場景之部分的視覺指示而調整正被或待記錄的圖4A之場景的部分的實例操作之繪示性流程圖。
圖13A繪示由第一相機擷取的實例場景及由第二相機擷取或能夠由第二相機擷取的場景之實例部分。
圖13B繪示圖13A中之實例場景及正被或待記錄的圖13A之場景的部分。
圖14為描繪用於在第一影像串流與第二影像串流之間切換的實例操作之繪示性流程圖。
圖15為描繪用於自經處理第二影像串流切換至經處理第一影像串流的實例操作之繪示性流程圖。
圖16為描繪用於自經處理第二影像串流切換至經處理第一影像串流的另一實例操作之繪示性流程圖。
600:實例操作
602:步驟
604:步驟
606:步驟
608:步驟
610:步驟
612:步驟
614:步驟
616:步驟

Claims (30)

  1. 一種用於控制多個相機系統之裝置，該裝置其包含：記憶體，其經組態以儲存該影像資料；至少一處理器，其與該記憶體通信，該至少一處理器經組態以：從一第一相機接收一第一影像串流，該第一影像串流具有一場景的一第一視場(FOV)；從一第二相機接收一第二影像串流，該第二影像串流具有該場景的一第二FOV，該場景的該第二FOV與該場景的該第一FOV不同；將該場景中之一物件判定為一所關注物件；顯示一第一輸出影像串流的一第一預覽，其中該第一輸出影像串流僅包括該第一影像串流、僅包括該第二影像串流或者同時包括該第一影像串流及該第二影像串流兩者；判定與該第一相機或該第二相機中的至少一個相關聯的指示運動的一第一度量；判定與該場景中的該所關注物件相關聯的指示運動的一第二度量；基於該第一度量及該第二度量，判定是否切換至顯示一第二輸出影像串流的一第二預覽，其中該第二輸出影像串流與該第一輸出影像串流不同。
  2. 如請求項1所述之裝置，其中與該第一相機或該第二相機中的至少一個相關聯的該運動包括平移、傾斜或旋轉中的一個或多個。
  3. 如請求項1所述之裝置，其中該至少一處理器進一步經組態 以：追蹤該場景中的該所關注物件；及基於該所關注物件的追蹤，判定與該所關注物件相關聯的指示運動的該第二度量。
  4. 如請求項1所述之裝置，其中該至少一處理器進一步經組態以：基於該第一度量或該第二度量中的至少一個判定該所關注物件的一部分已經移動超出該第一FOV或該第二FOV中的至少一個；及基於該所關注物件的該部分已經移動超出該第一FOV或該第二FOV中的至少一個的該判定，切換至顯示該第二輸出影像串流的該第二預覽。
  5. 如請求項1所述之裝置，其中該至少一處理器進一步經組態以：基於該第一度量或該第二度量中的至少一個與一分別的臨限值的一比較，判定是否切換至顯示該第二輸出影像串流的該第二預覽。
  6. 如請求項1所述之裝置，其中該第一輸出影像串流是單獨的該第一影像串流，且其中該第二輸出影像串流是單獨的該第二影影像串流。
  7. 如請求項1所述之裝置，其中該第一輸出影像串流同時是該第一影像串流及該第二影像串流兩者，且其中該第二輸出影像串流是單獨的該第二影像串流或單獨的該第一影像串流中的一個。
  8. 如請求項1所述之裝置，其中該第二FOV是該第一FOV的一部分，該第一FOV的該部分小於該第一FOV之全部。
  9. 如請求項8所述之裝置，其中該至少一處理器進一步經組態 以：在該第一影像串流上產生指示與該第二FOV相關聯的該第一FOV的該部分的一視覺指示；及顯示包括該視覺指示的該第一影像串流的該預覽。
  10. 如請求項1所述之裝置，其中進一步包含：該第一相機；該第二相機；及一顯示器，其經組態以顯示該第一預覽及該第二預覽，其中該第一度量包含與該第一相機或該第二相機中的至少一個相關聯的全域運動的一量測。
  11. 如請求項10所述之裝置，其中該裝置是一無線通信器件。
  12. 如請求項10所述之裝置，其中該裝置是一虛擬實境耳機、一擴增實境耳機、一無人機或汽車。
  13. 如請求項10所述之裝置，其中該裝置包含一第一器件及至少一第二器件，其中該至少一第二器件與該第一器件分離，且其中該第一器件包括該記憶體、該至少一處理器、及該顯示器，且其中該至少一第二器件包括該第一相機及該第二相機。
  14. 如請求項13所述之裝置，其中該第一器件是一無線通信器件，且該至少一第二器件是一無人機。
  15. 如請求項13所述之裝置，其中該第一器件是一無線通信器件，且該至少一第二器件是一安全相機。
  16. 一種用於控制多個相機系統之方法，該方法其包含：從一第一相機接收一第一影像串流，該第一影像串流具有一場景的一第 一視場(FOV)；從一第二相機接收一第二影像串流，該第二影像串流具有該場景的一第二FOV，該場景的該第二FOV與該場景的該第一FOV不同；將該場景中之一物件判定為一所關注物件；顯示一第一輸出影像串流的一第一預覽，其中該第一輸出影像串流僅包括該第一影像串流、僅包括該第二影像串流或者同時包括該第一影像串流及該第二影像串流兩者；判定與該第一相機或該第二相機中的至少一個相關聯的指示運動的一第一度量；判定與該場景中的該所關注物件相關聯的指示運動的一第二度量；基於該第一度量及該第二度量，判定是否切換至顯示一第二輸出影像串流的一第二預覽，其中該第二輸出影像串流與該第一輸出影像串流不同。
  17. 如請求項16所述之方法，其中與該第一相機或該第二相機中的至少一個相關聯的該運動包括平移、傾斜或旋轉中的一個或多個。
  18. 如請求項16所述之方法，進一步包括：追蹤該場景中的該所關注物件；及基於該所關注物件的追蹤，判定與該所關注物件相關聯的指示運動的該第二度量。
  19. 如請求項16所述之方法，進一步包括：基於該第一度量或該第二度量中的至少一個判定該所關注物件的一部分已經移動超出該第一FOV或該第二FOV中的至少一個；及基於該所關注物件的該部分已經移動超出該第一FOV或該第二FOV中 的至少一個的該判定，切換至顯示該第二輸出影像串流的該第二預覽。
  20. 如請求項16所述之方法，進一步包括：基於該第一度量或該第二度量中的至少一個與一分別的臨限值的一比較，判定是否切換至顯示該第二輸出影像串流的該第二預覽。
  21. 如請求項16所述之方法，其中該第一輸出影像串流是單獨的該第一影像串流，且其中該第二輸出影像串流是單獨的該第二影影像串流。
  22. 如請求項16所述之方法，其中該第一輸出影像串流同時是該第一影像串流及該第二影像串流兩者，且其中該第二輸出影像串流是單獨的該第二影像串流或單獨的該第一影像串流。
  23. 如請求項16所述之方法，其中該第二FOV是該第一FOV的一部分，該第一FOV的該部分小於該第一FOV之全部。
  24. 如請求項23所述之方法，進一步包括：在該第一影像串流上產生指示與該第二FOV相關聯的該第一FOV的該部分的一視覺指示；及顯示包括該視覺指示的該第一影像串流的該預覽。
  25. 一種非暫時性電腦可讀儲存媒體，其上儲存有指令，執行該指令時使一處理器執行以下操作：處理來自一第一相機的一第一影像串流，該第一影像串流具有一場景的一第一視場(FOV)；處理來自一第二相機的一第二影像串流，該第二影像串流具有該場景的一第二FOV，該場景的該第二FOV與該場景的該第一FOV不同；將該場景中之一物件判定為一所關注物件； 輸出一第一輸出影像串流的一第一預覽，其中該第一輸出影像串流僅包括該第一影像串流、僅包括該第二影像串流或者同時包括該第一影像串流及該第二影像串流兩者；判定與該第一相機或該第二相機中的至少一個相關聯的指示運動的一第一度量；判定與該場景中的該所關注物件相關聯的指示運動的一第二度量；基於該第一度量及該第二度量，判定是否切換至輸出一第二輸出影像串流的一第二預覽，其中該第二輸出影像串流與該第一輸出影像串流不同。
  26. 如請求項25所述之非暫時性電腦可讀儲存媒體，進一步包括使該處理器執行以下操作之指令：追蹤該場景中的該所關注物件；及基於該所關注物件的追蹤，判定與該所關注物件相關聯的指示運動的該第二度量。
  27. 如請求項25所述之非暫時性電腦可讀儲存媒體，進一步包括使該處理器執行以下操作之指令：基於該第一度量或該第二度量中的至少一個判定該所關注物件的一部分已經移動超出該第一FOV或該第二FOV中的至少一個；及基於該所關注物件的該部分已經移動超出該第一FOV或該第二FOV中的至少一個的該判定，切換至輸出該第二輸出影像串流的該第二預覽。
  28. 如請求項25所述之非暫時性電腦可讀儲存媒體，進一步包括使該處理器執行以下操作之指令：基於該第一度量或該第二度量中的至少一個與一分別的臨限值的一比 較，判定是否切換至輸出該第二輸出影像串流的該第二預覽。
  29. 如請求項25所述之非暫時性電腦可讀儲存媒體，其中該第二FOV是該第一FOV的一部分，該第一FOV的該部分小於該第一FOV之全部。
  30. 如請求項29所述之非暫時性電腦可讀儲存媒體，進一步包括使該處理器執行以下操作之指令：在該第一影像串流上產生指示與該第二FOV相關聯的該第一FOV的該部分的一視覺指示；及輸出包括該視覺指示的該第一影像串流的該預覽。
TW112114453A 2017-09-11 2018-09-10 用於以不同縮放位準定向一相機之輔助 TWI843532B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US15/701,293 2017-09-11
US15/701,293 US10630895B2 (en) 2017-09-11 2017-09-11 Assist for orienting a camera at different zoom levels

Publications (2)

Publication Number Publication Date
TW202333486A TW202333486A (zh) 2023-08-16
TWI843532B true TWI843532B (zh) 2024-05-21

Family

ID=63834630

Family Applications (2)

Application Number Title Priority Date Filing Date
TW112114453A TWI843532B (zh) 2017-09-11 2018-09-10 用於以不同縮放位準定向一相機之輔助
TW107131762A TWI803517B (zh) 2017-09-11 2018-09-10 用於以不同縮放位準定向一相機之輔助

Family Applications After (1)

Application Number Title Priority Date Filing Date
TW107131762A TWI803517B (zh) 2017-09-11 2018-09-10 用於以不同縮放位準定向一相機之輔助

Country Status (9)

Country Link
US (4) US10630895B2 (zh)
EP (1) EP3682627A2 (zh)
KR (1) KR20200087746A (zh)
CN (2) CN111066315B (zh)
AU (1) AU2018330318A1 (zh)
BR (1) BR112020004680A2 (zh)
SG (1) SG11202000954XA (zh)
TW (2) TWI843532B (zh)
WO (1) WO2019051376A2 (zh)

Families Citing this family (25)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20160131720A (ko) * 2015-05-08 2016-11-16 엘지전자 주식회사 이동단말기 및 그 제어방법
US10630895B2 (en) 2017-09-11 2020-04-21 Qualcomm Incorporated Assist for orienting a camera at different zoom levels
JP7027844B2 (ja) * 2017-11-29 2022-03-02 株式会社デンソー カメラモジュール
CN108391035B (zh) * 2018-03-26 2020-04-21 华为技术有限公司 一种拍摄方法、装置与设备
EP3780575B1 (en) * 2018-05-23 2022-11-16 Huawei Technologies Co., Ltd. Photographing method and terminal device
EP3855713B1 (en) * 2018-09-21 2024-02-14 LG Electronics Inc. Mobile terminal
WO2020101636A1 (en) * 2018-11-12 2020-05-22 Hewlett-Packard Development Company, L.P. Dual camera regions of interest display
US11227155B2 (en) 2019-01-23 2022-01-18 Alclear, Llc Remote biometric identification and lighting
JP7158307B2 (ja) * 2019-02-07 2022-10-21 シャープ株式会社 電子機器、制御プログラム、制御装置、および制御方法
KR102664705B1 (ko) 2019-02-19 2024-05-09 삼성전자주식회사 복수의 카메라들을 이용하여 이미지의 배율을 변경하기 위한 전자 장치 및 방법
CN112954219A (zh) * 2019-03-18 2021-06-11 荣耀终端有限公司 一种多路录像方法及设备
US10956694B2 (en) * 2019-04-05 2021-03-23 Zebra Technologies Corporation Device and method for data capture aiming assistance
US11196943B2 (en) * 2019-05-31 2021-12-07 Apple Inc. Video analysis and management techniques for media capture and retention
CN112106344B (zh) * 2019-08-29 2024-04-12 深圳市大疆创新科技有限公司 显示方法、拍照方法及相关装置
US11606504B2 (en) 2019-09-10 2023-03-14 Samsung Electronics Co., Ltd. Method and electronic device for capturing ROI
KR102680342B1 (ko) * 2019-09-23 2024-07-03 삼성전자주식회사 복수의 이미지 센서들에 의해 획득되는 이미지 데이터에 기초하여 비디오 hdr 처리를 수행하기 위한 전자 장치
CN114915726A (zh) * 2019-11-15 2022-08-16 华为技术有限公司 一种拍摄方法及电子设备
CN110944113B (zh) * 2019-11-25 2021-04-27 维沃移动通信有限公司 对象显示方法及电子设备
CN115004675A (zh) * 2020-02-03 2022-09-02 索尼半导体解决方案公司 电子设备
US11265474B2 (en) * 2020-03-16 2022-03-01 Qualcomm Incorporated Zoom setting adjustment for digital cameras
CN113572945A (zh) * 2020-04-29 2021-10-29 摩托罗拉移动有限责任公司 远摄相机取景器
CN114205515B (zh) * 2020-09-18 2023-04-07 荣耀终端有限公司 一种视频的防抖处理方法及电子设备
KR20220075028A (ko) * 2020-11-26 2022-06-07 삼성전자주식회사 다중 크롭 기능을 갖는 이미지 센서를 포함하는 전자 장치
CN112911059B (zh) * 2021-01-22 2022-06-07 维沃移动通信（杭州）有限公司 拍照方法、装置、电子设备及可读存储介质
WO2024048961A1 (ko) * 2022-08-31 2024-03-07 삼성전자주식회사 디스플레이의 변형에 기반하여 하나 이상의 카메라들을 제어하기 위한 전자 장치 및 그 방법

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100141767A1 (en) * 2008-12-10 2010-06-10 Honeywell International Inc. Semi-Automatic Relative Calibration Method for Master Slave Camera Control
US20110050963A1 (en) * 2008-05-19 2011-03-03 Panasonic Corporation Image capturing apparatus and image encoding apparatus
US20120268641A1 (en) * 2011-04-21 2012-10-25 Yasuhiro Kazama Image apparatus
US20160044235A1 (en) * 2014-08-07 2016-02-11 Lg Electronics Inc. Mobile terminal and controlling method thereof
US20160381289A1 (en) * 2015-06-23 2016-12-29 Samsung Electronics Co., Ltd. Digital photographing apparatus and method of operating the same

Family Cites Families (26)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6803931B1 (en) 1999-11-04 2004-10-12 Kendyl A. Roman Graphical user interface including zoom control box representing image and magnification of displayed image
IL159537A0 (en) 2001-06-28 2004-06-01 Omnivee Inc Method and apparatus for control and processing of video images
US7221398B2 (en) * 2003-05-01 2007-05-22 Hewlett-Packard Development Company, L.P. Accurate preview for digital cameras
US7424218B2 (en) 2005-07-28 2008-09-09 Microsoft Corporation Real-time preview for panoramic images
JP5347717B2 (ja) * 2008-08-06 2013-11-20 ソニー株式会社 画像処理装置、および画像処理方法、並びにプログラム
KR101024705B1 (ko) 2009-04-21 2011-03-25 주식회사 코아로직 영상 처리 장치 및 방법
KR101527037B1 (ko) 2009-06-23 2015-06-16 엘지전자 주식회사 이동 단말기 및 그 제어방법
US9582166B2 (en) * 2010-05-16 2017-02-28 Nokia Technologies Oy Method and apparatus for rendering user interface for location-based service having main view portion and preview portion
JP5884421B2 (ja) 2011-11-14 2016-03-15 ソニー株式会社 画像処理装置、画像処理装置の制御方法およびプログラム
US10681304B2 (en) * 2012-06-08 2020-06-09 Apple, Inc. Capturing a panoramic image using a graphical user interface having a scan guidance indicator
US9002339B2 (en) * 2012-08-15 2015-04-07 Intel Corporation Consumption and capture of media content sensed from remote perspectives
CN104112267B (zh) * 2013-04-19 2018-01-23 朱建国 一种简易、精确采集平面作品尺度信息的方法
US9672627B1 (en) * 2013-05-09 2017-06-06 Amazon Technologies, Inc. Multiple camera based motion tracking
US9518822B2 (en) * 2013-09-24 2016-12-13 Trimble Navigation Limited Surveying and target tracking by a network of survey devices
US9736381B2 (en) 2014-05-30 2017-08-15 Intel Corporation Picture in picture recording of multiple regions of interest
WO2016004115A1 (en) * 2014-07-01 2016-01-07 Apple Inc. Mobile camera system
KR20160029536A (ko) 2014-09-05 2016-03-15 엘지전자 주식회사 이동 단말기 및 그것의 제어방법
US10475185B1 (en) * 2014-12-23 2019-11-12 Amazon Technologies, Inc. Associating a user with an event
CN110769149B (zh) 2015-04-23 2021-05-11 苹果公司 用于处理来自多相机的内容的方法、电子设备和存储介质
US9749543B2 (en) 2015-07-21 2017-08-29 Lg Electronics Inc. Mobile terminal having two cameras and method for storing images taken by two cameras
KR20170029978A (ko) * 2015-09-08 2017-03-16 엘지전자 주식회사 이동단말기 및 그 제어방법
US20180288310A1 (en) 2015-10-19 2018-10-04 Corephotonics Ltd. Dual-aperture zoom digital camera user interface
US9854156B1 (en) 2016-06-12 2017-12-26 Apple Inc. User interface for camera effects
DK179471B1 (en) 2016-09-23 2018-11-26 Apple Inc. IMAGE DATA FOR ENHANCED USER INTERACTIONS
CN106713772B (zh) 2017-03-31 2018-08-17 维沃移动通信有限公司 一种拍照方法及移动终端
US10630895B2 (en) 2017-09-11 2020-04-21 Qualcomm Incorporated Assist for orienting a camera at different zoom levels

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110050963A1 (en) * 2008-05-19 2011-03-03 Panasonic Corporation Image capturing apparatus and image encoding apparatus
US20100141767A1 (en) * 2008-12-10 2010-06-10 Honeywell International Inc. Semi-Automatic Relative Calibration Method for Master Slave Camera Control
US20120268641A1 (en) * 2011-04-21 2012-10-25 Yasuhiro Kazama Image apparatus
US20160044235A1 (en) * 2014-08-07 2016-02-11 Lg Electronics Inc. Mobile terminal and controlling method thereof
US20160381289A1 (en) * 2015-06-23 2016-12-29 Samsung Electronics Co., Ltd. Digital photographing apparatus and method of operating the same

Also Published As

Publication number Publication date
TWI803517B (zh) 2023-06-01
US20230362482A1 (en) 2023-11-09
KR20200087746A (ko) 2020-07-21
SG11202000954XA (en) 2020-03-30
TW201921909A (zh) 2019-06-01
WO2019051376A3 (en) 2019-04-25
EP3682627A2 (en) 2020-07-22
AU2018330318A1 (en) 2020-02-27
BR112020004680A2 (pt) 2020-09-15
CN111066315B (zh) 2021-07-06
US20200244874A1 (en) 2020-07-30
US10630895B2 (en) 2020-04-21
CN113329160B (zh) 2023-08-18
TW202333486A (zh) 2023-08-16
WO2019051376A2 (en) 2019-03-14
US11750918B2 (en) 2023-09-05
CN111066315A (zh) 2020-04-24
CN113329160A (zh) 2021-08-31
US11394876B2 (en) 2022-07-19
US20190082101A1 (en) 2019-03-14
US20220321776A1 (en) 2022-10-06

Similar Documents

Publication Publication Date Title
TWI843532B (zh) 用於以不同縮放位準定向一相機之輔助
RU2649773C2 (ru) Управление камерой посредством функции распознавания лица
US20110267499A1 (en) Method, apparatus and system for performing a zoom operation
KR101918760B1 (ko) 촬상 장치 및 제어 방법
JP4852652B2 (ja) 電子ズーム装置、電子ズーム方法、及びプログラム
US20160373660A1 (en) Display control apparatus, display controlling method, and program
CN112740651B (zh) 用于操作包括显示器的系统的方法、设备、装置及计算机可读介质
JP6892524B2 (ja) 対象追跡に基づくスローモーションビデオキャプチャ
US9906710B2 (en) Camera pan-tilt-zoom (PTZ) control apparatus
WO2023185683A1 (zh) 微距拍摄方法、电子设备和计算机可读存储介质
KR20220129102A (ko) 디지털 카메라들을 위한 줌 설정 조정
CN114422692A (zh) 视频录制方法、装置及电子设备
JP2019022026A (ja) 撮像装置
KR101645427B1 (ko) 유저 인터페이스를 통한 카메라 장치의 동작 방법
JP6831473B2 (ja) 撮影装置とその制御方法および制御プログラム
JP2011211757A (ja) 電子ズーム装置、電子ズーム方法、及びプログラム
JP2020092394A (ja) 画像処理装置、画像処理方法
US20240163558A1 (en) Information processing apparatus, information processing method, and storage medium
US20240163544A1 (en) Information processing apparatus, information processing method, and storage medium
JP2015144347A (ja) 撮像装置及び撮像方法