TWI459233B - 由一具有相機及顯示器之裝置執行的方法及用於模擬影像之反射之裝置 - Google Patents

由一具有相機及顯示器之裝置執行的方法及用於模擬影像之反射之裝置 Download PDF

Info

Publication number
TWI459233B
TWI459233B TW098115012A TW98115012A TWI459233B TW I459233 B TWI459233 B TW I459233B TW 098115012 A TW098115012 A TW 098115012A TW 98115012 A TW98115012 A TW 98115012A TW I459233 B TWI459233 B TW I459233B
Authority
TW
Taiwan
Prior art keywords
reflective
captured image
image
display
graphic element
Prior art date
Application number
TW098115012A
Other languages
English (en)
Other versions
TW201001231A (en
Inventor
Enrique GARCIA
Original Assignee
Sony Ericsson Mobile Comm Ab
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Ericsson Mobile Comm Ab filed Critical Sony Ericsson Mobile Comm Ab
Publication of TW201001231A publication Critical patent/TW201001231A/zh
Application granted granted Critical
Publication of TWI459233B publication Critical patent/TWI459233B/zh

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T15/003D [Three Dimensional] image rendering
    • G06T15/04Texture mapping
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/60Methods for processing data by generating or executing the game program
    • A63F2300/69Involving elements of the real world in the game world, e.g. measurement in live races, real video
    • A63F2300/695Imported photos, e.g. of the player

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Graphics (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Studio Devices (AREA)
  • User Interface Of Digital Computer (AREA)

Description

由一具有相機及顯示器之裝置執行的方法及用於模擬影像之反射之裝置
例如手持及可攜式裝置及其他計算裝置之電子裝置的擴展係持續極迅速地成長。大多數此等裝置包括一些種類之顯示器以提供一使用者視覺資訊。在一些範例中,此等裝置可用金屬外觀或光澤性質顯示圖形影像以(例如)增強使用者經驗。
一方法可藉由一具有一相機及一顯示器之裝置執行。該方法可包括識別一待呈現在該顯示器上之圖形元件;擷取一在該顯示器前之一區域的影像;基於該圖形元件決定使該擷取影像失真之資訊;基於該決定資訊使該擷取影像失真;及在該顯示器上顯示與該圖形元件組合之該失真影像。
此外,擷取該影像可包括週期性地擷取該顯示器前之該區域的靜止影像。
此外,擷取該影像可包括擷取該顯示器前之該區域的視訊。
此外,決定用於使該擷取影像失真之資訊可包括決定該圖形元件之一幾何形狀;及使該擷取影像失真可包括使該擷取影像保形以模擬來自該幾何形狀的一反射。
此外,使該擷取影像失真可包括改變該擷取影像之一方位以模擬一反射型表面。
此外,使該擷取影像失真可包括應用反射比程度至該擷取影像。
此外,該擷取、失真及顯示可依特定間隔重複。
在另一實施方案中,一裝置可包括一顯示器,其係用以顯示資訊;一相機,其係用以擷取該顯示器前之一區域的一影像;及處理邏輯。該處理邏輯可識別一用於在該顯示器上呈現的圖形元件;使該擷取影像失真以模擬該擷取影像之一反射;組合該失真影像及該圖形元件以產生一反射型圖形元件;及在該顯示器上呈現該反射型圖形元件。
此外,該相機可週期性地擷取在該顯示器前之該區域的靜止影像。
此外,該相機可擷取在該顯示器前之該區域的視訊。
此外,識別該圖形元件之該處理邏輯可包括決定該圖形元件之一幾何形狀;且其中使該擷取影像失真之該處理邏輯可包括使該擷取影像保形以模擬來自該幾何形狀的一反射。
此外,該顯示器係一觸控螢幕且該反射型圖形元件可基於一使用者之觸摸變化。
此外,該擷取影像之一方位可改變以模擬一反射型表面。
此外,該裝置亦可包括一外殼,其中該相機及顯示器可位於該外殼的分開部分上。
此外,該裝置亦可包括一外殼,其中該相機可位於在該顯示器之一部分下的該外殼內。
在另一實施方案中,一裝置可包括用於識別一具有一反射型表面之圖形元件的構件;用於擷取在面對一使用者之顯示器前的該區域之一影像的構件;用於變化該擷取影像以仿真自該使用者的觀點之一物體的反射之構件;及用於在該圖形元件之反射型表面上顯示該變化影像的構件。
此外,該變化影像可用在規則間隔處之另一變化影像替換。
此外,用於識別一圖形元件之構件可包括決定該圖形元件的一幾何形狀;及用於變化該擷取影像的構件可包括使該擷取影像保形以模擬一來自該幾何形狀的反射。
此外,用於變化該擷取影像之構件可包括用於改變該擷取影像之一方位以模擬一反射型表面的構件。
此外,用於變化該擷取影像之構件可包括應用反射比程度至該擷取影像的構件。
以下實施方式參考附圖。不同圖式中的相同參考數字可識別相同或類似元件。另外,以下實施方式不限制本發明。
綜述
在一電腦顯示器上產生反射型外觀已漸符合需要以增強使用者經驗。例如,在一圖形使用者介面上之一命令按鈕或另一介面工具集(widget)可描述為結晶化玻璃、金屬或可具有反射型性質的其他材料。因為具有一反射型表面的電腦顯示器大體上不符合需要,故當需要時必須模擬反射型性質。儘管習知顯示器可包括具有一金屬化、閃亮或光澤外觀之影像,因為其不顯示將會在顯示器之反射型部分中反射的實際影像之一指示,該等影像並不仿真真實反射型外觀。圖1提供本文所述系統及方法可如何使用一相機來收集任何在電腦顯示器前之影像及應用該等影像來模擬一在顯示器之一部分上(例如在一命令按鈕或另一圖形元件上)的反射型表面的範例性說明。參考圖1,一電子裝置100(如包括一相機的蜂巢式無線電話)可擷取一在裝置之顯示器前的區域之影像(例如,一使用者之臉及周圍背景),及應用該影像至顯示器上之圖形元件以提供一反射的外觀。在一些實施方案中,可將該等擷取影像定位在顯示器上及/或失真以提供反射離開二或三維物體之外觀。
範例性裝置
圖2A係其中可實施本文所述方法及系統的範例性電子裝置100之圖式。實施方案在本文中係於具有一顯示器之電子裝置的背景中描述。如本文使用,術語「電子裝置」可包括一蜂巢式無線電話;一個人通信系統(PCS)終端機,其可結合一蜂巢式無線電話與資料處理、傳真及資料通信能力;一PDA,其可包括一無線電話、傳呼器、網際網路/內部網路存取、網頁瀏覽器、組織器、日曆及/或一全球定位系統(GPS)接收器;一遊戲裝置;一媒體播放器裝置;一數位相機;一桌上型、膝上型或掌上型電腦;或包括一顯示器之任何其他裝置。電子裝置100亦可包括通信、媒體播放、記錄及/或儲存能力。
參考圖2A,電子裝置100可包括一外殼210、一揚聲器220、一顯示器230、控制按鈕240、一數字鍵盤250、一麥克風260及一相機270。外殼210可保護電子裝置100之組件防止外部元件。外殼210可自熱塑性、金屬、彈性體(如,合成橡膠及/或天然橡膠)及/或其他類似材料製造。揚聲器220可對電子裝置100之使用者提供聲訊資訊。揚聲器220可包括能轉換一電信號至一對應聲波的任何組件。例如,使用者可透過揚聲器220聽音樂。
顯示器230可對使用者提供視覺資訊。顯示器230可包括一能顯示信號之裝置,該信號係藉由電子裝置100產生成為在一螢幕(如液晶顯示器(LCD)、陰極射線管(CRT)顯示器、有機發光二極體(OLED)顯示器、表面傳導電子發射顯示器(SED)、電漿顯示器、場發射顯示器(FED)、雙穩態顯示器等等)上之文字或影像。顯示器230可提供(例如)關聯相機270之視訊或靜止影像。例如,顯示器230可呈現目前藉由一透鏡或相機270之取景器聚焦的影像。顯示器230亦可用來呈現藉由相機270取得及/或藉由電子裝置100接收之儲存圖像或視訊。作為另一範例,按鈕、圖符、虛擬鍵或其他圖形元件(大體上在圖2A中描述為圖形元件235)可經由顯示器230呈現。另外,顯示器230可提供關聯傳入或傳出呼叫、文字訊息、遊戲、電話簿、目前日期/時間、容量設定等等之資訊至電子裝置100的使用者。在一實施方案中,顯示器230亦可結合一觸摸面板(未顯示)作用為一觸控螢幕介面,以當使用者與顯示於顯示器230上之圖形元件235互動時偵測使用者輸入。
亦可包括控制按鈕240以允許使用者與電子裝置100互動來造成電子裝置100執行一或多個操作,例如撥打電話呼叫、播放各種媒體、存取一應用程式等等。例如,控制鈕按240可包括一快門鍵,用於致使使用者能用相機270拍攝一圖像。控制鈕按240亦可包括一撥號按鈕、切斷按鈕、播放按鈕等等。控制鈕按240之一可為一允許使用者檢視顯示器230上之各種設定的功能表按鈕。
亦可包括數字鍵盤250以提供輸入至電子裝置100。數字鍵盤250可包括標準電話數字鍵盤。數字鍵盤250上的鍵可取決於藉由使用者選定的特定應用執行多個功能。麥克風260可自使用者接收聲訊資訊。麥克風260可包括能轉換空氣壓力波至一對應電信號的任何組件。
相機270可致使裝置100擷取及/或儲存一透過相機270的鏡頭檢視的場景之視訊及/或影像(如圖像)。相機270可在電子裝置100及/或其他可能遠端位置內之一記憶體中儲存圖像/視訊。相機270亦可與電子裝置100內之處理邏輯通信以相對於拍攝及儲存圖像/視訊控制各種態樣,如以下詳述。在一些實施方案中,相機270可結合閃光燈(未顯示)及其他相機附件運作,例如包括在電子裝置100中或結合其操作之光感測器及光源。在本文描述的實施方案中,可定位相機270以擷取在顯示器230前之影像(如使用者的臉及周圍區域)。相機270亦可為一電子裝置,其可數位地擷取及/或儲存影像及/或視訊。在一實施方案中,相機270可為一用於收集一模擬反射型顯示器之影像的專用相機。在另一實施方案中,可將相機270用作一習知相機及用作一用於收集一模擬反射型顯示器之影像的機構兩者。
以上相對於電子裝置100描述之組件不限於本文所述者。其他組件(如連接埠、記憶體槽及/或額外相機)可位於電子裝置100上,包括(例如)在外殼210之後或側面板上。
圖2B係一說明根據範例性實施方案之電子裝置100的組件之圖式。電子裝置100可包括匯流排281、處理邏輯282、記憶體283、輸入裝置284、輸出裝置285、通信介面286、電源供應287及相機270。在其他實施方案中,電子裝置100可依一些其他方法組態及可包括其他或不同組件。例如,電子裝置100可包括一天線及用於處理資料之一或多個調變器、解調變器、編碼器、解碼器等。
匯流排281可允許電子裝置100之組件間的通信。處理邏輯282可包括一處理器、微處理器、一應用特定積體電路(ASIC)、一場可程式化閘極陣列(FPGA)或類似者。處理邏輯282可執行軟體指令/程式或資料結構以控制電子裝置100及/或電子裝置100內之組件的操作。電子裝置100之實施方案可使用一個別處理邏輯組件或多個處理邏輯組件(如,多個處理邏輯282),如並聯操作的處理邏輯組件。
記憶體283可包括一隨機存取記憶體(RAM)或另一類型之動態儲存裝置,其儲存用於藉由處理邏輯282執行之資訊及指令;一唯讀記憶體(ROM)或另一類型之靜態儲存裝置,其儲存用於藉由處理邏輯282使用之靜態資訊及指令;一快閃記憶體(例如電子可抹除可程式化唯讀記憶體
(EEPROM))裝置,其用於儲存資料及/或指令;及/或一些其他類型之磁性或光學記錄媒體及其對應驅動器。記憶體283可用來儲存自相機270擷取的視訊及/或影像。記憶體283亦可用來在藉由處理邏輯282執行指令期間儲存暫時變數或其他中間資訊。藉由處理邏輯282使用之指令亦可(或替代地)儲存於可藉由處理邏輯282存取之另一類型電腦可讀取媒體中。一電腦可讀取媒體可包括一或多個邏輯或實體記憶裝置。
輸入裝置284可包括一機構,其允許一使用者輸入資訊至電子裝置100,如麥克風260、數字鍵盤250、控制按鈕240、一觸控螢幕、一鍵盤、一姿態為主的裝置、一光學字元辨識(OCR)為主的裝置、一操縱桿、一虛擬鍵盤、一語音至文字(speech-to-text)引擎、一滑鼠、一筆、語音辨識及/或生物特徵量測機構等等。輸出裝置285可包括一輸出資訊至使用者之機構,其包括一顯示器(如顯示器230)、一印表機、一或多個揚聲器(如揚聲器220)等等。
通信介面286可包括任何收發器類機構,其致使電子裝置100與其他裝置及/或系統通信。例如,通信介面286可包括一數據機或一至LAN之乙太網路介面。通信介面286亦可包括用於經由網路通信之機構,例如無線網路。例如,通信介面286可包括一或多個射頻(RF)發射器、接收器及/或收發器,及一或多個天線,其係用於經由一網路發送及接收RF資料。
電源供應287可包括一或多個電源供應,其提供電力至電子裝置100的組件。例如,電源供應287可包括一或多個電池及/或自其他裝置接收電力之連接,例如一汽車中的配件插座、一外部電池或一壁插座。電源供應287亦可包括計量邏輯以使使用者及電子裝置100的組件具備關於電池充電位準、輸出位準、電源錯誤等等之資訊。
相機270可提供視訊及/或靜止影像,其可在顯示器230或另一輸出裝置285上檢視。解析度能力範圍可(例如)自高畫質視訊(如1080p及720p)至較低解析度(例如VGA及以下)。亦可將視訊及/或靜止影像經由處理邏輯282、使用者介面邏輯284及/或顯示邏輯285整合至圖形元件235(圖1)中或顯示器230上所示之其他資訊中。
如以下將詳述,電子裝置100(與本文所述原理一致)可執行關於回應於使用者輸入或回應於處理邏輯282在顯示器上顯示模擬反射型表面的某些操作。電子裝置100可回應於執行包含在一電腦可讀取媒體(如記憶體283)中之顯示器組態/再程式化應用程式之軟體指令的處理邏輯282來執行此等操作。
軟體指令可經由通信介面286自另一電腦可讀取媒體或自另一裝置讀取至記憶體283中。包含在記憶體283中之軟體指令可造成處理邏輯282執行稍後將描述的程序。或者,可用固線式電路以取代或組合軟體指令以實施與本文所述原理一致之程序。因此,與具體實施例之原理一致的實施方案係不限於硬體電路及軟體的任何特定組合。
圖3係一可包括在電子裝置100內之範例性組件的功能方塊圖。如圖符,電子裝置100可包括使用者介面邏輯310、影像邏輯320、處理器邏輯330、相機邏輯340及顯示器邏輯350。在其他實施方案中,電子裝置100可包括比在圖3中所說明者較少、額外或或不同類型之功能組件(如,一網頁瀏覽器及/或觸摸面板控制器)。功能組件之各者可實施為硬體、在硬體上操作之軟體、韌體或類似者。
使用者介面邏輯310可整合來自輸入裝置284之一或多個機構。使用者介面邏輯310可包括於處理邏輯282中。使用者介面邏輯310可允許使用者接收選項之一功能表。功能表可允許使用者選擇關聯藉由電子裝置100執行之應用程式的各種功能或模式。使用者介面邏輯310可允許使用者啟動一特定模式,如一藉由在電子裝置100中運行之應用程式定義的模式。例如,使用者介面邏輯310可允許使用者選擇一「反射型圖符模式」以允許電子裝置100在顯示器230上顯示模擬反射型圖形。在一些實施方案中,使用者介面邏輯310可基於藉由電子裝置100之使用者發動的應用程式,關聯一包括在電子裝置100內之一特定應用程式/裝置之功能的執行,或一些其他應用程式或功能特定事件而為應用程式控制且可自動地再組態圖形元件(例如圖1的圖形元件235)之外觀。在一些實施方案中,使用者介面邏輯310的一或多個態樣可組合處理器邏輯330及/或影像邏輯320之一或多個。
影像邏輯320可控制影像在關聯顯示器230之反射型圖形元件上的外觀。例如,影像邏輯320可指示處理器邏輯330以改變關聯顯示器230上之圖形元件235的顯示資訊。影像邏輯320可包括於(例如)處理邏輯282中。影像邏輯320可接收關於一模擬反射型圖形元件235之大小及形狀的影像(如,自相機邏輯340)及資訊(如,自使用者介面310及/或處理器邏輯330)。在一實施方案中,影像邏輯320可接收用於圖形元件235之失真特性以達成反射型模擬。在另一實施方案中,影像邏輯320可基於圖形元件決定用於失真擷取影像之資訊。失真特性可回應於應用程式軟體中之指令自(例如)處理器邏輯330提供。失真特性可包括待顯示之模擬反射型圖形元件的特徵,例如大小、幾何形狀、視角、反射比程度等等。基於失真特性,影像邏輯320可計算對於自相機270接收之影像的失真,以在反射型圖形元件235上提供一實際反射型外觀。
處理器邏輯330可讀取及執行軟體指令/程式以識別待顯示在顯示器230上之反射型圖形元件的指示。處理器邏輯310可包括控制使用者介面邏輯310、影像邏輯320、相機邏輯340及/或顯示器邏輯350之操作的邏輯。處理器邏輯330可包括(例如)在處理邏輯282中。
相機邏輯340可整合使用者設定及自動化特徵用於擷取相機270中之影像。相機邏輯340可包括處理邏輯以調整相機270之特徵,例如快門速率、影像解析度、視訊品質及其他特徵。相機邏輯340亦可包括用於控制有關相機270之組件的處理邏輯,組件例如一透鏡總成、一近接感測器、一閃光燈、一測距器及類似者。
顯示器邏輯350可包括處理邏輯以解譯信號及指令;及一顯示裝置(例如顯示器240),其具有一顯示區域以提供資訊至電子裝置100的使用者。顯示器邏輯350之實施方案可向電子裝置100之使用者顯示靜止影像(如照片)、移動影像(如視訊)、文字、數字、符號、圖形元件等等。顯示器邏輯320之實施方案可包括媒體,其當光通過媒體時改變性質,或顯示器邏輯320可包括反射光之媒體。
範例性操作
圖4A係說明一反射型圖形元件之現存表示法的示意圖。圖形元件可用作(例如)一圖形使用者介面上的一命令按鈕。圖4A的影像使用各種陰影來提供一球形形狀及閃亮表面的外觀。然而,圖4A的影像不提供反射型外觀,因為未顯示基於圖形元件前之區域的影像之表示法。
圖4B係一根據本文所述系統及方法的一範例性模擬反射型圖形元件的示意圖。圖形元件可用作(例如)一圖形使用者介面上的命令按鈕。如圖4B中顯示,一在電子裝置之顯示器前的區域之影像係顯示於一圖形圖符之模擬反射中。影像可基於用於圖形元件的特定準則失真。在圖4B的範例中,特定準則可為一特定半徑之一反射型球。因此,顯示器前之區域的擷取影像可失真(如翻轉、彎曲、伸展或以其他方式改變方位)以提供依特定半徑之球反射的外觀。此外,可調整影像(如,濾光、變暗、照亮等等)以模擬模擬反射型圖形元件之反射比程度。例如,一模擬鏡表面可具有比一模擬上漆金屬表面較高程度之反射比,及反射比程度可在模擬中說明。如圖4B中顯示,擷取及失真影像可接著應用於顯示圖形元件以提供一在球上反射的外觀。在一些實施方案中,經擷取及失真影像可基於連續或依週期性間隔更新。可將模擬反射型圖形元件用於各種應用,包括(例如)如在一用於觸敏顯示器之圖形使用者介面上的介面工具集。
圖5係一說明關聯用於在一顯示器上顯示一模擬反射型影像之電子裝置100的範例性操作之流程圖。可接收用於一模擬反射型圖形元件的準則(方塊510)。例如,電子裝置100可自定義用於一待顯示之影像的某些準則的應用程式軟體或另一資訊來源接收指令。準則可定義特性以允許擷取影像模擬自一物體之反射。
影像準則可包括圖形元件之大小及幾何形狀,模擬發光條件、反射角、反射比程度及類似者。例如,準則可定義一特定幾何大小及形狀,例如一小球。在一實施方案中,準則可包括在顯示器內之一穩固位置上的固定形狀。例如,準則可定義一用於圖形使用者介面視窗之反射型邊界形狀。在另一實施方案中,準則可包括用於一單一反射型物體之多個狀態。例如,一球之準則可包括在一組態中之真實球尺寸(如,在一未選定狀態中的圖符)及在一第二組態中至少一稍微壓縮尺寸(如,在一使用者選定狀態中的圖符)。在又另一實施方案中,準則可包括隨著時間改變形狀。例如,準則可定義在一視訊環境中之一反射型表面(此一動畫角色之太陽眼鏡)。因此,模擬反射型表面之形狀及角度可隨著循序視訊框架改變(如,對應於動畫角色之模擬運動)。
可收集來自一相機的影像(方塊520)。例如,相機270可擷取在電子裝置100的顯示器前之區域的影像。影像可依即時或接近即時格式。在一實施方案中,擷取影像可依數位格式。用於擷取影像之影像解析度可為電子裝置之能力內的任何解析度。電腦處理速率及記憶體容量可為決定用於特定應用程式之影像解析度的因子。
影像可加以失真(方塊530)。影像可基於在一應用程式中提供的準則失真。例如,電子裝置100內之邏輯(如影像邏輯320)可將來自方塊510之定義準則應用至方塊520中擷取的影像。
失真的影像可應用至一顯示器上的一定義位置(方塊540)。例如處理邏輯282可將在方塊530中失真之影像在顯示器230上之一特定位置處嵌入,如在一特定圖形元件235上嵌入。顯示器230上之位置可為一基於在一應用程式中提供之準則的定義位置。接著程序可返回方塊520及自該點重複直至用於一模擬反射型圖形元件之新準則被提供。方塊520、530及540重複的頻率可基於(例如)相機的性質(如每秒圖框數)及電子裝置100的處理容量。
圖6提供一說明在範例性電子裝置之顯示器上的範例性模擬反射的圖式。如圖6中顯示,一坐在顯示器前之使用者可在顯示器上之一反射型圖形元件中見到其反射之至少一部分。圖6提供一使用者可根據本文描述的方法及系統見到之三個範例性螢幕610、620及630。在一實施方案中(顯示在螢幕610中),係提供一具有在顯示器上之一穩固位置中的固定形狀之模擬反射型圖形元件。所示之模擬反射型圖形元件係一用於螢幕視窗之圖框的形式。使用者之一模擬反射因此可出現在圖框上。
在另一實施方案中(顯示在螢幕620中),可提供一組具有多個狀態的模擬反射型圖形元件。螢幕620中的模擬反射型圖形元件可表示待藉由使用者選定的命令按鈕或其他介面工具集。圖符可具有一對應於一第一反射型形狀之第一狀態(顯示在「選項1」及「選項3」上)。圖符可具有一對應於一第二反射形狀之第二狀態(顯示在「選項2」上)。第一狀態可(例如)表示一未選定選項,而第二狀態可表示一使用者的選擇。在一實施方案中,使用者之選擇可為在一觸控螢幕上之觸摸的形式,以致選定圖符之模擬反射可由於使用者之觸摸而擬態變形。在另一實施方案中,使用者的選擇可為依在選定命令按鈕上定位一指標且鍵擊一滑鼠之形式。
在又另一實施方案中(如顯示於螢幕630中),一模擬反射型圖形元件可隨著時間改變形狀及/或方位。在螢幕630中,一動畫角色包括該角色之太陽眼鏡中的模擬反射型圖形元件。該角色可為(例如)一在互動式視訊遊戲中的角色,以致當該角色出現面對使用者(即,實質上朝向顯示器正前方之區域)時,使用者之失真反射可出現在該角色的太陽眼鏡中。因此,模擬反射型圖形元件可為使用者提供一沈浸式環境。
圖7係一其中可實施本文所述方法及系統的另一範例性電子裝置700之圖式。電子裝置700可包括外殼710、相機720及顯示器230。其他組件,例如控制按鈕、一數字鍵盤、一麥克風、連接埠、記憶體槽/或一額外相機可位於電子裝置700上,包括(例如)在外殼710之後或側面板上。圖7說明相機720係與顯示器230成整體地位在外殼710上。更特定言之,相機720可位在顯示器230之至少一部分的表面下。在一實施方案中,相機720可定位在顯示器下的一位置處以致最佳地仿真一來自電子裝置700之使用者的最普通觀點的一物體之反射。相機720可包括任何影像擷取技術,其提供在看穿顯示器230之一部分時收集在顯示器230前之區域的影像之能力。
結論
本文所述實施方案可使用一相機來收集在電腦顯示器前之影像且應用收集到影像以模擬在一顯示器或其一部分上的反射型表面。影像可定位在一圖形元件內及/或基於圖形元件之一代表形狀失真以提供反射離開圖形元件之一外觀。
本文所述之具體實施例的前述說明提供解說及說明'但並非欲詳盡或將本發明限於所揭示的準確形式。可根據以上教示來進行修改及變更,或可自本發明之實現獲得。
例如,實施方案已主要在一電子裝置之背景中描述。然而,此等實施方案可配合具有一顯示器及一定向以擷取影像之相機的任何類型裝置使用。另外,當本文描述之實施方案已在具有一整合式顯示器及相機之裝置的背景中描述時,其他實施方案可使用一具有可透過(例如)一有線或無線連接來操作性連接的分開組件之裝置。
此外,儘管已參考圖5描述一系列方塊,方塊的次序可在其他實施方案中變化。此外,可並行地執行非相依方塊。
本文描述之態樣可在方法及/或電腦程式產品中實施。因此,態樣可體現於硬體及/或軟體(包括韌體、常駐軟體、微碼等)內。另外,本文所說明之態樣可採取在一電腦可使用或電腦可讀取儲存媒體上之電腦程式產品的形式,該電腦程式產品具有體現於媒體中供一指令執行系統使用或組合其使用的電腦可使用或電腦可讀取程式碼。用來實施此等態樣之實際軟體碼或專用控制硬體係不受限制。因此,態樣的操作及行為係描述而無須參考特定軟體碼:應理解軟體及控制硬體能設計以基於本文說明實施該等態樣。
另外,本文所說明之特定態樣可實施為實行一或多個功能之「邏輯」。此邏輯可包括韌體,硬體(例如處理器、微處理器、特定應用積體電路或場可程式化閘極陣列),或硬體及軟體之組合。
應強調的係術語「包含」在用於此說明書中時,係視為指定陳述特徵、整體、步驟或組件之存在,但並不排除存在或新增一或多個其他特徵、整體、步驟、組件或其群組。
即使特徵的特定組合係在申請專利範圍中引用及/或在說明書中揭示,但並不預期此等組合會限制本發明。事實上,可將許多此等特徵依未在申請專利範圍明確引用及/或在說明書中揭示之方式組合。
本申請案之說明中所使用的元件、動作或指令不應視為對於本發明之關鍵或基本,除非明確說明如此。另外,本文所使用的冠詞「一」旨在包括一或多個項目。若僅旨在表示一個項目時,則使用術語「一個」或類似語言。另外,除非另外明確表述,本文所使用的片語「基於」旨在表示「至少部分基於」。
100...電子裝置
170...相機
210...外殼
220...揚聲器
230...顯示器
235...圖形元件
240...控制按鈕
250...數字鍵盤
260...麥克風
270...相機
281...匯流排
282...處理邏輯
283...記憶體
284...輸入裝置
285...輸出裝置
286...通信介面
287...電源供應
310...使用者介面邏輯
320...影像邏輯
330...處理器邏輯
340...相機邏輯
350...顯示器邏輯
610...螢幕
620...螢幕
630...螢幕
700...電子裝置
710...外殼
720...相機
併入及構成此說明書之一部分的附圖說明本文所述一或多個具體實施例,及連同說明解釋此等具體實施例。圖式中:圖1係一說明本文描述之系統及方法的一實施方案之示意圖;圖2A係其中可實施本文所述方法及系統的範例性電子裝置之圖式;圖2B係一說明根據一範例性實施方案之圖2A的電子裝置之組件的方塊圖;圖3係圖2B之電子裝置的功能方塊圖;圖4A係一說明一閃亮圖形影像之現存表示法的示意圖;圖4B係一根據本文描述之方法及系統之模擬反射型圖形影像的圖式;圖5係一說明關聯圖1及2A及2B之範例性電子裝置的範例性操作之流程圖;圖6係一說明在範例性電子裝置之顯示器上的範例性模擬反射的圖式;及圖7係其中可實施本文所說明之方法及系統的另一範例性電子裝置之圖式。

Claims (19)

  1. 一種藉由一具有一相機及一觸控螢幕顯示器之裝置執行的方法,該方法包括:自一使用者接收一模式之一選擇以使得該裝置在該觸控螢幕顯示器上呈現多個經模擬反射型圖符;基於接收該使用者之該模式之該選擇識別一呈現在該觸控螢幕顯示器上之圖形元件;擷取一在該觸控螢幕顯示器前之一區域的影像;基於該圖形元件決定用於使該擷取影像失真之資訊,該資訊包括該圖形元件之一第一反射型形狀及一第二反射型形狀,其中該第二反射型形狀對應於該圖形元件之經模擬變形以作為該使用者之觸控之一結果;基於該決定資訊使該擷取影像失真(distort)以保形該擷取影像以模擬來自於該第一反射型形狀之一反射;在該顯示器上顯示與該圖形元件組合之模擬來自於該第一反射型形狀之該反射之失真的該擷取影像;自該使用者接收在該觸控螢幕顯示器上之該圖形元件之一選擇;回應於該接收該使用者之該圖形元件之選擇,基於該經決定資訊使該擷取影像失真以保形該擷取影像以模擬來自於該第二反射型形狀之一反射;及在該觸控螢幕顯示器上顯示與該圖形元件組合之模擬來自於該第二反射型形狀之該反射之該擷取影像。
  2. 如請求項1之方法,其中擷取該影像包括週期性地擷取 該觸控螢幕顯示器前之該區域的靜止影像。
  3. 如請求項1之方法,其中擷取該影像包括擷取該觸控螢幕顯示器前之該區域的視訊。
  4. 如請求項1之方法,其中回應於接收該使用者之該圖形元件之選擇,使該擷取影像失真包括改變該擷取影像之一方位以模擬一反射型表面。
  5. 如請求項1之方法,其中回應於接收該使用者之該圖形元件之選擇,使該擷取影像失真包括應用反射比程度至該擷取影像。
  6. 如請求項1之方法,其中該圖形元件為一按鈕或一虛擬鍵(virtual key)之其中一者。
  7. 一種用以模擬一影像之一反射之裝置,該裝置包含:一顯示器,其係用以顯示資訊及接收來自一使用者之多個選擇;一相機,其係用以擷取該觸控螢幕顯示器前之一區域的該影像;及處理邏輯,其係用以:接收一模式之一選擇以使得該裝置在該觸控螢幕顯示器上呈現多個經模擬反射型圖符;基於該模式之該選擇而識別一在該觸控螢幕顯示器上呈現的圖形元件,該圖形元件具有對應於一第一反射形狀之一第一狀態及對應於一第二反射形狀之一第二狀態;使該擷取影像失真為該第一狀態以模擬離開該第一 反射形狀之該擷取影像之一反射;組合該失真影像及該圖形元件以產生一第一反射型圖形元件;在該觸控螢幕顯示器上呈現該第一反射型圖形元件;在該觸控螢幕顯示器上接收該第一反射型圖形元件之該選擇;回應於在該觸控螢幕顯示器上之該第一反射型圖形元件之該選擇,使該擷取影像失真為該第二狀態以模擬離開該第二反射形狀之該擷取影像之一反射;組合該失真影像及該第一反射型圖形元件以產生一第二反射型圖形元件;及在該觸控螢幕顯示器上呈現該第二反射型圖型元件。
  8. 如請求項7之裝置,其中該相機週期性地擷取在該觸控螢幕顯示器前之該區域的靜止影像。
  9. 如請求項7之裝置,其中該相機擷取在該觸控螢幕顯示器前之該區域的視訊。
  10. 如請求項7之裝置,其中在該觸控螢幕顯示器之該第一反射型圖型元件之該選擇使該第一反射型圖形元件失真以擬態變形以作為該使用者之觸控之一結果。
  11. 如請求項7之裝置,其中該擷取影像之一方位係改變以模擬一反射型表面。
  12. 如請求項7之裝置,其進一步包含: 一外殼,其中該相機及該顯示器係位於該外殼的分開部分上。
  13. 如請求項7之裝置,其進一步包含:一外殼,其中該相機係位於該顯示器之一部分下的該外殼內。
  14. 如請求項7之裝置,其中該圖形元件為一按鈕、一圖符(icon)或一虛擬鍵之其中一者,其經由觸控螢幕顯示器接收使用者輸入。
  15. 一種用以模擬一影像之一反射之裝置,該裝置包含:用於接收一模式之一選擇以使得該裝置在一觸控螢幕顯示器上呈現多個經模擬反射型圖符之構件;用於識別一具有一反射型表面之圖形元件的構件,該反射型表面包括一第一反射型形狀及一第二反射型形狀,其中該第二反射型形狀對應於該圖形元件之經模擬變形以作為一使用者之觸控之一結果;用於擷取在該觸控螢幕顯示器前的該區域之該影像的構件;用於基於該圖形元件之該第一反射型形狀而決定用於使該擷取影像失真之資訊之構件;用於基於該圖形元件之該第二反射型形狀而決定用於使該擷取影像失真之資訊之構件;用於變化該擷取影像以仿真自該使用者的觀點之該圖形元件之該第一反射型形狀的一反射之構件,其中該擷取影像係基於該經決定之資訊而變化,該經決定之資訊 係用於基於該圖形元件之該第一反射型形狀而使該擷取影像失真;用於變化該擷取影像以仿真自該使用者的觀點之該圖形元件之該第二反射型形狀的一反射之構件,其中該擷取影像係基於該經決定之資訊而變化,該經決定之資訊係用於基於該圖形元件之該第二反射型形狀而使該擷取影像失真;用於當無觸控施加在該圖形元件時,在該圖形元件之該反射型表面上顯示該變化影像、仿真來自於該第一反射型形狀之該反射的構件;及用於當一觸控施加在該圖形元件時,在該圖形元件之該反射型表面上顯示該變化影像、仿真來自於該第二反射型形狀之該反射的構件。
  16. 如請求項15之裝置,其中該擷取影像可用在規則性間隔處之另一擷取影像替換。
  17. 如請求項15之裝置,其中用於識別一圖形元件之該構件包括用於決定該圖形元件的一第一幾何形狀及一第二幾何形狀之構件;及其中用於變化該擷取影像的該構件包括用於使該擷取影像保形以模擬一來自該第一幾何形狀及該第二幾何形狀的反射之構件。
  18. 如請求項15之裝置,其中用於變化該擷取影像以仿真來自於該圖形元件之該第二反射型形狀之一反射之該構件包括用於變化該擷取影像之一方位以模擬一反射型表面的構件。
  19. 如請求項15之裝置,其中用於變化該擷取影像以仿真來自於該圖形元件之該第二反射型形狀之一反射之該構件包括用於應用反射比程度至該擷取影像的構件。
TW098115012A 2008-06-27 2009-05-06 由一具有相機及顯示器之裝置執行的方法及用於模擬影像之反射之裝置 TWI459233B (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
US12/147,719 US8184143B2 (en) 2008-06-27 2008-06-27 Simulated reflective display

Publications (2)

Publication Number Publication Date
TW201001231A TW201001231A (en) 2010-01-01
TWI459233B true TWI459233B (zh) 2014-11-01

Family

ID=40561819

Family Applications (1)

Application Number Title Priority Date Filing Date
TW098115012A TWI459233B (zh) 2008-06-27 2009-05-06 由一具有相機及顯示器之裝置執行的方法及用於模擬影像之反射之裝置

Country Status (3)

Country Link
US (1) US8184143B2 (zh)
TW (1) TWI459233B (zh)
WO (1) WO2009156804A1 (zh)

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9092053B2 (en) * 2008-06-17 2015-07-28 Apple Inc. Systems and methods for adjusting a display based on the user's position
US20100091085A1 (en) * 2008-10-15 2010-04-15 Sony Corporation And Sony Electronics Inc. Augmenting tv menu icon with images in front of tv
US9143668B2 (en) * 2010-10-29 2015-09-22 Apple Inc. Camera lens structures and display structures for electronic devices
US20120135783A1 (en) * 2010-11-29 2012-05-31 Google Inc. Mobile device image feedback
US9875724B2 (en) * 2012-08-21 2018-01-23 Beijing Lenovo Software Ltd. Method and electronic device for adjusting display
US9672649B2 (en) 2013-11-04 2017-06-06 At&T Intellectual Property I, Lp System and method for enabling mirror video chat using a wearable display device
US9607411B2 (en) 2014-04-23 2017-03-28 Ebay Inc. Specular highlights on photos of objects
EP3316590A1 (en) * 2016-10-30 2018-05-02 Advanced Digital Broadcast S.A. A method and a system for generating a video stream
US10168811B2 (en) 2017-05-01 2019-01-01 Microsoft Technology Licensing, Llc Reflective display

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20020154142A1 (en) * 2001-04-20 2002-10-24 Koninklijke Philips Electronics N.V. Display apparatus and image encoded for display by such an apparatus
US20070222796A2 (en) * 2003-07-11 2007-09-27 The University Of North Carolina At Chapel Hill Methods and systems for controlling a computer using a video image and for combining the video image with a computer desktop
TW200824427A (en) * 2006-11-22 2008-06-01 Visumotion Gmbh Arrangement and method for the recording and display of images of a scene and/or an object

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
USH716H (en) * 1987-11-16 1989-12-05 Parallax induced pointing error avoidance method and means for systems using touch screen overlays
US5063448A (en) * 1989-07-31 1991-11-05 Imageware Research And Development Inc. Apparatus and method for transforming a digitized signal of an image
JP2959249B2 (ja) * 1991-11-15 1999-10-06 ソニー株式会社 映像効果装置
US5706031A (en) * 1994-11-14 1998-01-06 Lucent Technologies Inc. Computing and telecommunications interface system
US6088018A (en) * 1998-06-11 2000-07-11 Intel Corporation Method of using video reflection in providing input data to a computer system
US6452593B1 (en) * 1999-02-19 2002-09-17 International Business Machines Corporation Method and system for rendering a virtual three-dimensional graphical display
US7909696B2 (en) * 2001-08-09 2011-03-22 Igt Game interaction in 3-D gaming environments
FR2842977A1 (fr) * 2002-07-24 2004-01-30 Total Immersion Procede et systeme permettant a un utilisateur de melanger en temps reel des images de synthese avec des images video
GB2417846A (en) 2004-09-03 2006-03-08 Sony Comp Entertainment Europe Rendering an image of a display object to generate a reflection of a captured video image
US7808540B2 (en) * 2007-01-09 2010-10-05 Eastman Kodak Company Image capture and integrated display apparatus

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20020154142A1 (en) * 2001-04-20 2002-10-24 Koninklijke Philips Electronics N.V. Display apparatus and image encoded for display by such an apparatus
US20070222796A2 (en) * 2003-07-11 2007-09-27 The University Of North Carolina At Chapel Hill Methods and systems for controlling a computer using a video image and for combining the video image with a computer desktop
TW200824427A (en) * 2006-11-22 2008-06-01 Visumotion Gmbh Arrangement and method for the recording and display of images of a scene and/or an object

Also Published As

Publication number Publication date
US20090322909A1 (en) 2009-12-31
TW201001231A (en) 2010-01-01
US8184143B2 (en) 2012-05-22
WO2009156804A1 (en) 2009-12-30

Similar Documents

Publication Publication Date Title
TWI459233B (zh) 由一具有相機及顯示器之裝置執行的方法及用於模擬影像之反射之裝置
JP7230055B2 (ja) アプリケーションプログラムの表示適応方法及びその装置、端末、記憶媒体、並びにコンピュータプログラム
US11930268B2 (en) Shooting method and terminal device
CN110809115B (zh) 拍摄方法及电子设备
US9262867B2 (en) Mobile terminal and method of operation
CN111049973B (zh) 一种屏幕显示的控制方法、电子设备及计算机可读存储介质
CN109525874B (zh) 一种截屏方法及终端设备
CN109743498B (zh) 一种拍摄参数调整方法及终端设备
US20060146009A1 (en) Image control
CN111010523B (zh) 一种视频录制方法及电子设备
CN109495616B (zh) 一种拍照方法及终端设备
CN108563383A (zh) 一种图像查看方法及移动终端
JP7361917B2 (ja) スクリーンショット表示方法及び装置、及び端末デバイス
CN111368114A (zh) 信息展示方法、装置、设备及存储介质
CN111464746B (zh) 拍照方法及电子设备
CN110853128A (zh) 虚拟物体显示方法、装置、计算机设备及存储介质
CN111857793B (zh) 网络模型的训练方法、装置、设备及存储介质
CN110022445B (zh) 一种内容输出方法及终端设备
CN108510266A (zh) 一种数字对象唯一标识符识别方法及移动终端
CN111064896A (zh) 设备控制方法及电子设备
CN108317992A (zh) 一种物距测量方法及终端设备
CN113452834B (zh) 一种显示方法、装置、存储介质及电子设备
CN111083374A (zh) 滤镜添加方法及电子设备
CN110750200A (zh) 一种截屏图片的处理方法及终端设备
CN109636720B (zh) 一种图像显示方法及终端设备

Legal Events

Date Code Title Description
MM4A Annulment or lapse of patent due to non-payment of fees