TWI571807B - 在智慧型手持裝置中用於改善可用性之適應性本文字體和影像調整技術 - Google Patents
在智慧型手持裝置中用於改善可用性之適應性本文字體和影像調整技術 Download PDFInfo
- Publication number
- TWI571807B TWI571807B TW101123735A TW101123735A TWI571807B TW I571807 B TWI571807 B TW I571807B TW 101123735 A TW101123735 A TW 101123735A TW 101123735 A TW101123735 A TW 101123735A TW I571807 B TWI571807 B TW I571807B
- Authority
- TW
- Taiwan
- Prior art keywords
- face
- distance
- display
- facial
- logic
- Prior art date
Links
- 230000003044 adaptive effect Effects 0.000 title description 2
- 230000001815 facial effect Effects 0.000 claims description 49
- 238000004458 analytical method Methods 0.000 claims description 39
- 230000000007 visual effect Effects 0.000 claims description 16
- 230000009471 action Effects 0.000 claims description 14
- 230000008859 change Effects 0.000 claims description 9
- 238000012800 visualization Methods 0.000 claims description 4
- 230000004044 response Effects 0.000 claims 2
- 238000000034 method Methods 0.000 description 15
- 238000010586 diagram Methods 0.000 description 12
- 238000012937 correction Methods 0.000 description 6
- 238000012545 processing Methods 0.000 description 5
- 238000005516 engineering process Methods 0.000 description 4
- 238000013459 approach Methods 0.000 description 3
- 238000004891 communication Methods 0.000 description 3
- 230000006870 function Effects 0.000 description 3
- 238000001514 detection method Methods 0.000 description 2
- 239000011521 glass Substances 0.000 description 2
- 238000003384 imaging method Methods 0.000 description 2
- 239000004973 liquid crystal related substance Substances 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 239000004065 semiconductor Substances 0.000 description 2
- 101100172132 Mus musculus Eif3a gene Proteins 0.000 description 1
- 238000003491 array Methods 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 238000004590 computer program Methods 0.000 description 1
- 239000004020 conductor Substances 0.000 description 1
- 239000000470 constituent Substances 0.000 description 1
- 230000001419 dependent effect Effects 0.000 description 1
- 230000009977 dual effect Effects 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 239000000835 fiber Substances 0.000 description 1
- 239000012530 fluid Substances 0.000 description 1
- 210000003128 head Anatomy 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 238000001459 lithography Methods 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 238000013507 mapping Methods 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 229910044991 metal oxide Inorganic materials 0.000 description 1
- 150000004706 metal oxides Chemical class 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000035945 sensitivity Effects 0.000 description 1
- 238000001228 spectrum Methods 0.000 description 1
- 230000007704 transition Effects 0.000 description 1
- 238000002604 ultrasonography Methods 0.000 description 1
- 235000012431 wafers Nutrition 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/70—Determining position or orientation of objects or cameras
- G06T7/73—Determining position or orientation of objects or cameras using feature-based methods
- G06T7/74—Determining position or orientation of objects or cameras using feature-based methods involving reference images or patches
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
- G09G5/22—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of characters or indicia using display control signals derived from coded signals representing the characters or indicia, e.g. with a character-code memory
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
- G06F3/012—Head tracking input arrangements
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
- G06F3/04847—Interaction techniques to control parameter settings, e.g. interaction with sliders or dials
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F40/00—Handling natural language data
- G06F40/10—Text processing
- G06F40/103—Formatting, i.e. changing of presentation of documents
- G06F40/109—Font handling; Temporal or kinetic typography
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/20—Analysis of motion
- G06T7/269—Analysis of motion using gradient-based methods
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/20—Image preprocessing
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
- G09G5/22—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of characters or indicia using display control signals derived from coded signals representing the characters or indicia, e.g. with a character-code memory
- G09G5/24—Generation of individual character patterns
- G09G5/26—Generation of individual character patterns for modifying the character dimensions, e.g. double width, double height
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2320/00—Control of display operating conditions
- G09G2320/08—Arrangements within a display terminal for setting, manually or automatically, display parameters of the display terminal
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2354/00—Aspects of interface with display user
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- Human Computer Interaction (AREA)
- General Health & Medical Sciences (AREA)
- Health & Medical Sciences (AREA)
- Computer Hardware Design (AREA)
- Multimedia (AREA)
- Artificial Intelligence (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Computational Linguistics (AREA)
- Oral & Maxillofacial Surgery (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Controls And Circuits For Display Device (AREA)
- User Interface Of Digital Computer (AREA)
- Image Analysis (AREA)
- Image Processing (AREA)
- Telephone Function (AREA)
- Closed-Circuit Television Systems (AREA)
- Control Of Indicators Other Than Cathode Ray Tubes (AREA)
- Studio Devices (AREA)
Description
實施例大致上係有關於消費者電子裝置之顯示器可用性。更明確言之,實施例係有關於裝置中用以改善可用性的適應性顯示器調整。
人們可能一整天在多種不同狀況下使用手持裝置,其中手持裝置顯示器與使用者眼睛間距可能改變。為了要舒適地觀看顯示內容,使用者可能需導航瀏覽裝置螢幕,戴上眼鏡,按壓按鈕及/或手動操控顯示器(例如於觸控螢幕裝置之情況下)。從使用者的觀點,此等活動對裝置的使用性具有負面影響。
依據本發明之一實施例,係特地提出一種包含一指令集合之非過渡電腦可讀取儲存媒體,若該等指令由一處理器執行時,造成一系統獲得與該系統之一前向相機相關聯的一影像;對該影像進行一面部距離分析;及至少部分基於該面部距離分析,改變與該系統相關聯的顯示內容之一視覺化特性。
藉研讀後文說明書及隨附之申請專利範圍且藉參考如下附圖,熟諳技藝人士將更為瞭解本發明之實施例的各項
優點,附圖中:第1圖為依據一實施例,具有前向相機及後向相機二者之一手持裝置實例的方塊圖;第2圖為依據一實施例,面部距離分析之一實例的方塊圖;第3A及3B圖為依據一實施例,相關面部特徵度量之實例的略圖;第4A圖為依據一實施例,一種進行校準之方法實例的流程圖;第4B圖為依據一實施例,一種進行即時面部距離分析之方法實例的流程圖;第5圖為依據一實施例,本文字體視覺化特性修正之一實例的方塊圖;及第6圖為依據一實施例,行動平台之一實例的方塊圖。
實施例可包括一種行動平台具有前向相機來獲得一影像,顯示器來輸出顯示內容,及邏輯來於該影像上進行面部距離分析。該邏輯也可至少部分基於該面部距離分析而修正該顯示內容之一視覺化特性。
實施例也可包括一種設備具有邏輯來從一行動平台之一前向相機獲得一影像,且於該影像上進行一面部距離分析。該邏輯也可至少部分基於該面部距離分析而修正與該行動平台相關聯的顯示內容之一視覺化特性。
其它實施例可包括一種包含一指令集合之非過渡電腦可讀取儲存媒體,該等指令當由一處理器執行時使得一行動平台從該行動平台之一前向相機獲得一影像。該等指令也使得該行動平台於該影像上進行一面部距離分析,及至少部分基於該面部距離分析而修正該顯示內容之一視覺化特性。
現在轉向參考第1圖,顯示一手持裝置10。例示說明之手持裝置10具有一後向相機12,係經組配來拍攝使用者14關注的各個主題之相片及/或視訊。手持裝置10也可包括一顯示器16,係經組配來輸出一顯示內容,取決於安裝於其中的軟體應用程式及/或該手持裝置10的其它功能,該顯示內容可包括文字、影像及其它內容。確實,顯示內容容易包括由後向相機12所拍攝的相片及/或視訊,以及透過網路連結所得的相片及/或視訊(例如視訊會議饋送)。容後詳述,手持裝置10也可為另一型行動平台,諸如膝上型電腦、行動網際網路裝置(MID)、智慧型平板、個人數位助理器(PDA)、無線智慧型話機、媒體播放器、成像裝置等,或固定型平台諸如智慧型電視(TV)、液晶顯示器(LCD)面板、桌上型個人電腦(PC)、伺服器、工作站等。
於該具體實施例中,該手持裝置10也包括一前向相機18,也可經組配來拍攝影像及視訊,且於顯示器16上顯示所拍攝的內容。更明確言之,前向相機18可用來在與其它個體的視訊會議期間記錄使用者14。容後詳述,由前向相機18所拍攝的使用者14之影像也可用來即時調整透過該顯
示器16輸出的顯示內容來使得該內容對該使用者14變得更加具有可讀性。
第2圖驗證可進行手持裝置10之校準來決定一校準面部距離20及針對一校準影像21之一或多個校準顯示設定值,其中相對於校準面部距離20可做出隨後即時面部距離決定。容後詳述,校準面部距離20可表示使用者與手持裝置10間之距離,或校準期間之一面部特徵距離,諸如使用者頭部的寬度/高度、使用者眼睛之寬度/直徑,或使用者兩眼間距。此外,視情況而定,距離可以像素、吋、厘米等測量。
即時面部距離決定可用來修正本文字體視覺化特性(例如本文字體高度、字型等)以及其它視覺化特性,諸如顯示強度、顯示內容數量等。舉例言之,校準面部距離20可與針對該使用者於該距離20為舒適的某個字體大小(例如14點大小)相關聯,其中比較使用者在校準影像21時的位置,當決定使用者所拍攝的隨後即時影像22係相對應於更為遠離行動裝置10的某個距離時,顯示內容的字體大小可成比例地加大來確保對使用者仍然可舒適地閱讀。此外,顯示強度(例如背光亮度)可提高來改善能見度,所顯示的顯示內容數量可減少來考慮由較大型字體所占有的額外螢幕面積等。
同理,若判定面部距離決定及校準面部距離20係指示該使用者更為靠近顯示器16,則字體大小可縮小,顯示強度可減低,所顯示的顯示內容量可增加等。若屬適宜則其
它視覺化特性也可於行進間調整。確實,行動裝置10也可檢測影像裡的眼部配戴件,且在存在有該眼部配戴件時,選擇性地繞過及/或更進一步調整視覺化特性修正。舉例言之,手持裝置10可有或無眼部配戴件而針對使用者校準,因而基於使用者是否佩戴眼鏡而可維持與選擇性地存取兩個校準顯示設定值集合。據此,從使用者觀點,例示說明之辦法可提供實質上更高的裝置可用性。確實,針對手持裝置10,其中顯示強度可自動地減低的情況可導致較少功耗及較長的電池壽命。
現在轉向第3A及3B圖,顯示面部特徵型別之實例,該面部特徵可用來針對隨後即時影像22相對於校準影像21做面部距離決定。舉例言之,相對面部寬度(例如x對x’之比)、面部高度(例如y對y’之比)、面部面積(例如由面部所占有的像素對映圖百分比)、眼間距(例如兩眼間距)等及/或其組合全部皆可用來決定面部距離。如此,若校準影像21的面部寬度(x)為100像素,而即時影像22的面部寬度(x’)為50像素,則x對x’之比為2.0。使用哪個面部特徵之決定可基於計算複雜度,因而減少處理額外負擔與提高速度。就此點而言,使用相機來進行面部距離分析可提供面部特徵的擷取,否則透過其它距離檢測解決方案,諸如基於紅外線(IR)的解決方案或基於超音波的解決方案可能無法辨識該面部特徵。此外,該例示說明之辦法許可從有限量資訊進行操作,諸如面部輪廓及/或兩眼的中心,因而免除全臉辨識及其相關聯的處理額外負擔之任何需要。此外,此種面部距
離分析的流線性辦法許可相機非對齊時(例如當相機非正對使用者臉部時)的更高容許度。
第4A圖顯示進行校準之方法26。方法26可於可執行軟體體現為儲存在機器-或電腦-可讀取媒體內的邏輯指令集,該等媒體諸如隨機存取記憶體(RAM)、唯讀記憶體(ROM)、可程式規劃唯讀記憶體(PROM)、韌體、快閃記憶體等,於使用電路技術之固定功能邏輯硬體,該等技術諸如特定應用積體電路(ASIC)、互補金氧半導體(CMOS)、或電晶體-電晶體邏輯(TTL)技術,或其任一項組合。舉例言之,進行方法26所示操作的電腦程式代碼可以一或多個程式語言之任一項組合寫成,該等語言包括物件取向之程式語言,諸如爪哇、聊天(Smalltalk)、C++等及習知程序程式語言,諸如「C」程式語言或相似的程式語言。
處理方塊27提供決定具有前向相機的一系絖是否係在固定設定模式。若是,則例示說明之方塊28輸出具有固定設定值之顯示內容,諸如固定字體大小、顯示強度及/或顯示內容量。然後於方塊29使用者可被提示將系統置放在從觀看觀點為舒適的距離。如此,以手持裝置為例,使用者可將裝置移動至距使用者眼睛某個距離。另一方面,於固定式平台諸如智慧型電視之情況下,使用者可坐在或站在距該固定式平台的顯示器之舒適觀看距離。方塊30可提供拍攝使用者在舒適距離的校準影像,其中例示說明之方塊31進行該校準影像的面部距離分析。舉例言之,面部距離分析可能涉及決定一或多個校準面部距離,諸如使用者
兩眼間距、使用者面部寬度、使用者面部高度、使用者面部二維面積、使用者眼睛寬度等。在方塊32連同顯示內容之固定設定值,面部距離分析之結果可儲存至適當儲存位置用於後來所拍攝影像的即時處理期間取回。
若於方塊27決定系統非在固定設定模式,則例示說明之辦法提供於校準期間使用可變設定模式。更明確言之,方塊33可供輸出具有可變設定值,諸如可變字體大小、顯示強度及/或顯示內容量的顯示內容。據此於方塊34,使用者可被提示定位系統在任意距離,及從觀看觀點選擇舒適的顯示設定值。如此,以手持裝置為例,使用者可將裝置定位在距使用者眼睛的任意距離,且擇定最舒適的字體大小、顯示強度及/或顯示內容量等。方塊35可供拍攝使用者的校準影像,其中例示說明之方塊37對該校準影像進行面部距離分析。如前文已述,面部距離分析可涉及決定一或多個校準面部距離,其中於方塊39該面部距離分析結果及所擇定的可變設定值可儲存供後來取回。
第4B圖顯示基於即時面部距離分析而調整字體大小之方法36。使用電路技術諸如ASIC、CMOS或TTL技術或其任一項組合,在固定功能邏輯硬體(例如相機管線),方法36可於可執行軟體體現為儲存在機器-或電腦-可讀取媒體諸如RAM、ROM、PRPM、韌體、快閃記憶體等的邏輯指令集。處理方塊38提供運用行動平台的前向相機拍攝即時影像。取決於各項考慮諸如電池壽命、螢幕更新率、使用者偏好等,影像拍攝頻率可為固定式或可程式規劃。於方塊
40,可在即時影像上進行面部距離分析,其中例示說明之方塊42做出相對於校準面部距離的面部距離決定。如前文討論,相對面部距離決定可考慮面部特徵,諸如面部寬度、面部高度、面部面積、兩眼間距等。
例示說明之方塊44判定面部距離決定及校準面部距離是否指示使用者已經移動更為遠離行動平台的顯示器(例如相較於校準面部距離)。舉例言之,於即時影像識別的兩眼間距可小於校準兩眼間距,或於即時影像識別的面部寬度可小於校準面部寬度。若是,則可推定顯示內容讓使用者更難觀看,因此相對於校準字體大小,方塊46增加顯示內容的字體大小。
舉例言之,第5圖顯示手持裝置10,具有一顯示器16以第一字體大小原先輸出影像內容56及本文內容58。當判定使用者係更為遠離顯示器16時,手持裝置10自動地加大字體大小使得本文內容58’變較大。於該具體實施例中,影像內容56維持相同,但視情況而定,也可加大影像內容56。該加大量可成比例,使得例如若針對校準影像21(第3A圖)對即時影像22(第3B圖)之面部寬度比為x:x’,則字體大小可加大相同比例。如此,於前述相對面部寬度比為2.0之實例中(亦即100像素對50像素),字體大小可比校準設定值加倍(例如從14點增至28點)。
現在回頭參考第4B圖,另一方面,於方塊48若從面部距離決定及校準面部距離而判定該使用者係更為靠近該行動平台的顯示器,相對於校準字體大小,方塊50縮小顯示
內容的字體大小,原因在於可推定顯示內容係較不易讓使用者閱讀。又復,字體大小修正可量化成多個程度,來控制字體大小修正的敏感度及頻次。也可做其它調整諸如顯示強度調整及顯示內容調整。舉例言之,呼叫者識別符(ID)初始螢幕可經調整來在較近距離顯示更多細節,而在距使用者眼睛較遠距離只以大型字體顯示呼叫者的姓。
例示說明之方塊52提供是否遭逢該調整之使用者超控(override)。使用者超控可透過本文字體的手動調整(例如觸控式螢幕的互動)或其它機制檢測。此外,使用者超控可能在影像拍攝及/或面部距離分析前發生。若出現超控,則方塊54可供取消及/或繞過字體大小修正。此外,若在影像中檢測得眼部配戴件(或若使用者手動選擇操作的「眼部配戴件模式」),則可一起調整及/或繞過面部距離分析及字體視覺化特性修正。若該面部距離分析指示相對於校準面部距離,使用者未曾移動更靠近或更遠離該顯示器,則例示說明之方法可確保字體大小維持於校準狀態。
第6圖顯示一種系統60,具有一顯示器70經組配來輸出顯示內容,一後向相機62及一前向相機64經組配來拍攝該系統60之一使用者的影像。如前文討論,系統60容易取代手持裝置10(第1、2及5圖)。據此,例示說明之系統60可為行動平台之一部分,諸如膝上型電腦、行動網際網路裝置(MID)、智慧型平板、個人數位助理器(PDA)、無線智慧型話機、媒體播放器、成像裝置等或其任一項組合。系統60也可為固定型平台之一部分諸如智慧型電視(TV)、液晶顯
示器(LCD)面板、桌上型個人電腦(PC)、伺服器、工作站等或其任一項組合。於某些平台之情況下,諸如具有網路瀏覽器或LCD面板的智慧型TV,系統60可不包括後向相機62。更明確言之,系統60可包括處理器66經組配來如前文討論,執行邏輯68而從前向相機64獲取影像,進行影像上的面部距離分析,及至少部分基於該面部距離分析而修正該顯示內容之一或多個視覺化特性。
邏輯68可嵌置於處理器66,從記憶體裝置諸如系統記憶體72、大容量儲存裝置74(例如硬碟機/HDD、光碟、快閃記憶體)、其它儲存媒體或其任一項組合取回為指令集。系統記憶體72可包括例如動態隨機存取記憶體(DRAM)組配為記憶體模組,諸如雙排式記憶體模組(DIMM)、小外形DIMM(SODIMM)等。系統60也可包括網路控制器76,該網路控制器可針對寬廣多項目的提供非在平台上通訊功能,諸如小區式電話(例如W-CDMA(UMTS)、CDMA2000(IS-856/IS-2000)等)、WiFi(例如IEEE 802.11,2007年版,LAN/MAN無線LANS)、低速無線PAN(例如IEEE 802.15.4-2006,LR-WPAN)、藍牙(例如IEEE 802.15.1-2005,無線個人區域網路)、WiMax(例如IEEE 802.16-2004,LAN/MAN寬帶無線LANS)、全球定位系統(GPS)、展頻(例如900MHz)、及其它射頻(RF)電話用途。網路控制器76也可提供非在平台上有線通訊(例如RS-232(電子工業聯盟/EIA)、乙太網路(例如IEEE 802.3-2005,LAN/MAN CSMA/CD存取方法)、電力線通訊
(例如X10,IEEE P1675)、USB(例如通用串列匯流排2.0規格)、數位用戶線路(DSL)、纜線數據機、T1連結)等功能。如此顯示內容可透過網路控制器76獲得。
據此,使用者面部度量的基本知識或預設知識可經槓桿運用來從使用者觀點改善裝置可用性。此外,使用基於相機的距離檢測,使得能夠擷取面部特徵,經歷相當長距離提供更為穩健的顯示器操作。
此處描述之實施例可應用於全部型別的半導體積體電路(「IC」)晶片。此等IC晶片之實例包括但非限於處理器、控制器、晶片組組件、可規劃邏輯陣列(PLA)、記憶體晶片、網路晶片及其類。此外,於若干圖式中,信號導體線係以線表示。若干可能不同來指示更多組成信號路徑,具有數目標示來指示多個組成信號路徑的號碼,及/或在一或多端具有箭頭來指示一次資訊流方向。但不應以有限方式解譯。反而此等額外細節可連結一或多個具體實施例用來協助更容易瞭解電路。任何表示的信號線,無論是否有額外資訊,實際上可包含一或多個信號,信號可於多個方向行進,可以任何適當型別的信號方案體現,例如以差分對體現的數位線或類比線、光纖線、及/或單端線。
大小/模型/數值/範圍之實例可已經給定,雖然本發明之實施例並非限於此。因製造技術(例如微影術)隨著時間的經過成熟,預期可製造更小型裝置。此外,為求例示說明及討論上的簡明,眾所周知之電源/接地連結至IC晶片及其它組件可顯示或可不顯示於圖式內,因而不會隱蔽本發明
之實施例之某些面向。又復,配置可以方塊圖形式顯示來避免遮蔽本發明之實施例,也有鑑於下述事實,有關此等方塊圖配置體現的特定細節係高度取決於欲體現實施例的平台,亦即此等特定細節係在熟諳技藝人士的見識範圍內。當陳述特定細節(例如電路)來描述本發明之實施例時,熟諳技藝人士顯然易知可實施本發明之實施例而無或有此等特定細節或其變化。如此描述可視為例示說明性而非限制性。
「耦合」一詞於此處可用來直接或間接地指示關注組件間之任一型關係,可應用於電氣、機械、流體、光學、電磁學、電機、或其它連結。此外,如此處使用的「第一」、「第二」等詞只用來協助討論,除非另行指示不具任何特定時間或時序意義。
由前文說明熟諳技藝人士將瞭解本發明之實施例之寬廣技術可以多種形式體現。因此雖然已經就特定實例描述本發明之實施例,但本發明之實施例之真諦並非受此所限,原因在於當研究附圖、說明書、及如下申請專利範圍時其它修改為熟諳技藝人士所顯然易知。
10‧‧‧手持裝置、行動裝置
12、64‧‧‧後向相機
14‧‧‧使用者
16‧‧‧顯示器
18、62‧‧‧前向相機
20‧‧‧校準面部距離
21‧‧‧校準影像
22‧‧‧即時影像
24‧‧‧距離
26、36‧‧‧方法
27-39、38-54‧‧‧方塊
56‧‧‧影像內容
58、58’‧‧‧本文內容
60‧‧‧系統
66‧‧‧處理器
68‧‧‧邏輯
70‧‧‧顯示器
72‧‧‧系統記憶體
74‧‧‧大容量儲存裝置
76‧‧‧網路控制器
第1圖為依據一實施例,具有前向相機及後向相機二者之一手持裝置實例的方塊圖;第2圖為依據一實施例,面部距離分析之一實例的方塊圖;第3A及3B圖為依據一實施例,相關面部特徵度量之實
例的略圖;第4A圖為依據一實施例,一種進行校準之方法實例的流程圖;第4B圖為依據一實施例,一種進行即時面部距離分析之方法實例的流程圖;第5圖為依據一實施例,本文字體視覺化特性修正之一實例的方塊圖;及第6圖為依據一實施例,行動平台之一實例的方塊圖。
26‧‧‧方法
27-39‧‧‧方塊
Claims (27)
- 一種包含一組指令的非過渡電腦可讀取儲存媒體,該等指令在受一處理器執行時使得一系統可進行下列動作:取得與該系統之一前向相機相關聯的一影像;對該影像進行一面部距離分析;至少部分基於該面部距離分析而改變與該系統相關聯的顯示內容之一視覺化特性;識別出該影像中之一或多個面部特徵;及至少部分基於該一或多個面部特徵而作出一面部距離判定。
- 如申請專利範圍第1項之媒體,其中,該等指令在受執行時使得該系統可進行下列動作:進行對該系統的一校準來取得一校準面部距離;及將該校準面部距離及一或多個校準顯示設定值儲存到一記憶體位置,其中,該面部距離判定係相關於該校準面部距離所作。
- 如申請專利範圍第1項之媒體,其中,該等指令在受執行時使得該系統可進行下列動作:在該面部距離判定及一校準面部距離指示出一使用者離顯示器更遠時,將該顯示內容之字體大小加大。
- 如申請專利範圍第1項之媒體,其中,該等指令在受執行時使得該系統可進行下列動作:在該面部距離判定及該校準面部距離指示出一使用者離顯示器更近時,將該顯示內容之字體大小縮小。
- 如申請專利範圍第1項之媒體,其中,該一或多個面部特徵包括下列中至少一者:面部寬度、面部高度、面部面積、眼睛寬度及眼睛間距。
- 如申請專利範圍第1項之媒體,其中,該等指令在受執行時使得該系統可進行下列動作:至少部分基於該面部距離分析而改變該顯示內容之量。
- 如申請專利範圍第1項之媒體,其中,該等指令在受執行時使得該系統可進行下列動作:至少部分基於該面部距離分析而將與該系統相關聯的一顯示強度改變。
- 如申請專利範圍第1項之媒體,其中,該等指令在受執行時使得該系統可進行下列動作:檢測該影像中之眼部配戴件;及由於檢測到該眼部配戴件而調整對該視覺化特性的改變。
- 如申請專利範圍第1項之媒體,其中,該等指令在受執行時使得該系統可進行下列動作:接收一使用者超控;並且回應於該使用者超控而將對該視覺化特性的改變取消。
- 一種系統,其包含:一前向相機,用以獲得一影像;一顯示器,用以輸出顯示內容;及邏輯,用以進行下列動作,對該影像進行一面部距離分析; 至少部分基於該面部距離分析而改變該顯示內容之一視覺化特性;識別出該影像中之一或多個面部特徵;及至少部分基於該一或多個面部特徵而作出一面部距離判定。
- 如申請專利範圍第10項之系統,其中,該邏輯可進行下列動作:進行對該系統的一校準來取得一校準面部距離;及將該校準面部距離及一或多個校準顯示設定值儲存到一記憶體位置,其中,該面部距離判定係相關於該校準面部距離所作。
- 如申請專利範圍第10項之系統,其中,該邏輯可進行下列動作:在該面部距離判定及一校準面部距離指示出一使用者離該顯示器更遠時,將該顯示內容之字體大小加大。
- 如申請專利範圍第10項之系統,其中,該邏輯可進行下列動作:在該面部距離判定及一校準面部距離指示出一使用者離該顯示器更近時,將該顯示內容之字體大小縮小。
- 如申請專利範圍第10項之系統,其中,該一或多個面部特徵包括下列中至少一者:面部寬度、面部高度、面部面積、眼睛寬度及眼睛間距。
- 如申請專利範圍第10項之系統,其中,該邏輯可至少部分基於該面部距離分析而改變該顯示內容之一量。
- 如申請專利範圍第10項之系統,其中,該邏輯可至少部分基於該面部距離分析而將與該系統相關聯的一顯示強度改變。
- 如申請專利範圍第10項之系統,其中,該邏輯可進行下列動作:檢測該影像中之眼部配戴件;及由於檢測到該眼部配戴件而調整對該視覺化特性的改變。
- 如申請專利範圍第10項之系統,其中,該邏輯可進行下列動作,接收一使用者超控;及回應於該使用者超控而將對該視覺化特性的改變取消。
- 一種設備,其包含:邏輯,用以進行下列動作:取得與一系統之一前向相機相關聯的一影像;對該影像進行一面部距離分析;至少部分基於該面部距離分析而改變與該系統相關聯的顯示內容之一視覺化特性;識別出該影像中之一或多個面部特徵;及至少部分基於該一或多個面部特徵而作出一面部距離判定。
- 如申請專利範圍第19項之設備,其中,該邏輯可進行下列動作: 進行對該系統的一校準來取得一校準面部距離;及將該校準面部距離及一或多個校準顯示設定值儲存到一記憶體位置,其中,該面部距離判定係相關於該校準面部距離所作。
- 如申請專利範圍第19項之設備,其中,該邏輯可進行下列動作:在該面部距離判定及一校準面部距離指示出一使用者離顯示器更遠時,將該顯示內容之字體大小加大。
- 如申請專利範圍第19項之設備,其中,該邏輯可進行下列動作:在該面部距離判定及一校準面部距離指示出一使用者離顯示器更近時,將該顯示內容之字體大小縮小。
- 如申請專利範圍第19項之設備,其中,該一或多個面部特徵包括下列中至少一者:面部寬度、面部高度、面部面積、眼睛寬度及眼睛間距。
- 如申請專利範圍第19項之設備,其中,該邏輯可至少部分基於該面部距離分析而改變將該顯示內容之一量。
- 如申請專利範圍第19項之設備,其中,該邏輯可至少部分基於該面部距離分析而將與該系統相關聯的一顯示強度改變。
- 如申請專利範圍第19項之設備,其中,該邏輯可進行下列動作:檢測該影像中之眼部配戴件;及由於檢測到該眼部配戴件而調整對該視覺化特性 的改變。
- 如申請專利範圍第19項之設備,其中,該邏輯可進行下列動作:接收一使用者超控;及回應於該使用者超控而將對該視覺化特性的改變取消。
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US13/175,402 US20130002722A1 (en) | 2011-07-01 | 2011-07-01 | Adaptive text font and image adjustments in smart handheld devices for improved usability |
Publications (2)
Publication Number | Publication Date |
---|---|
TW201303748A TW201303748A (zh) | 2013-01-16 |
TWI571807B true TWI571807B (zh) | 2017-02-21 |
Family
ID=47390203
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
TW101123735A TWI571807B (zh) | 2011-07-01 | 2012-07-02 | 在智慧型手持裝置中用於改善可用性之適應性本文字體和影像調整技術 |
Country Status (7)
Country | Link |
---|---|
US (1) | US20130002722A1 (zh) |
EP (1) | EP2727331A4 (zh) |
JP (1) | JP5859645B2 (zh) |
KR (1) | KR20140028131A (zh) |
CN (1) | CN103733605B (zh) |
TW (1) | TWI571807B (zh) |
WO (1) | WO2013006516A1 (zh) |
Families Citing this family (24)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9582083B2 (en) * | 2011-12-22 | 2017-02-28 | Apple Inc. | Directional light sensors |
TWI498829B (zh) * | 2012-04-18 | 2015-09-01 | Hon Hai Prec Ind Co Ltd | 電子顯示設備及其選擇用戶介面的方法 |
CN103377643B (zh) * | 2012-04-26 | 2017-02-15 | 富泰华工业(深圳)有限公司 | 字体调整系统及方法 |
US9165535B2 (en) * | 2012-09-27 | 2015-10-20 | Google Inc. | System and method for determining a zoom factor of content displayed on a display device |
CN103871392A (zh) * | 2012-12-14 | 2014-06-18 | 鸿富锦精密工业(武汉)有限公司 | 自动调整阅读软件显示字体大小的系统及方法 |
KR20140093513A (ko) * | 2013-01-18 | 2014-07-28 | 삼성전자주식회사 | 휴대 단말기의 디스플레이 제어 장치 및 방법 |
JP2014146128A (ja) * | 2013-01-28 | 2014-08-14 | Canon Inc | 情報処理装置、情報処理システム、情報処理方法及びプログラム |
CN104122986A (zh) * | 2013-04-27 | 2014-10-29 | 昆山研达电脑科技有限公司 | 显示器字体调整装置及其实现方法 |
KR102101741B1 (ko) * | 2013-08-16 | 2020-05-29 | 엘지전자 주식회사 | 이동 단말기 및 이의 제어방법 |
CN103648042A (zh) * | 2013-11-27 | 2014-03-19 | 乐视致新电子科技(天津)有限公司 | 一种字符输出控制方法和装置 |
CN103795864B (zh) * | 2014-01-29 | 2016-09-28 | 华为技术有限公司 | 移动终端前后摄像头的选择方法和移动终端 |
US20160048202A1 (en) * | 2014-08-13 | 2016-02-18 | Qualcomm Incorporated | Device parameter adjustment using distance-based object recognition |
US10129312B2 (en) * | 2014-09-11 | 2018-11-13 | Microsoft Technology Licensing, Llc | Dynamic video streaming based on viewer activity |
KR20160057651A (ko) * | 2014-11-14 | 2016-05-24 | 삼성전자주식회사 | 디스플레이 장치 및 그 제어 방법 |
KR20160115081A (ko) | 2015-03-25 | 2016-10-06 | 김광영 | 휴대 장치의 폰트 및 이미지 크기 자동 조정 방법 및 그 휴대 장치 |
CN105827872A (zh) * | 2016-06-07 | 2016-08-03 | 维沃移动通信有限公司 | 一种移动终端的控制方法及移动终端 |
US11494897B2 (en) * | 2017-07-07 | 2022-11-08 | William F. WILEY | Application to determine reading/working distance |
WO2019192783A1 (en) * | 2018-04-02 | 2019-10-10 | Arcelik Anonim Sirketi | A household appliance |
KR102285156B1 (ko) * | 2019-01-29 | 2021-08-06 | 엔에이치엔커머스 주식회사 | 무선단말 화면 크기 자동 변환 방법 |
WO2020190648A1 (en) * | 2019-03-15 | 2020-09-24 | Biotrillion, Inc. | Method and system for measuring pupillary light reflex with a mobile phone |
US11178389B2 (en) * | 2019-03-25 | 2021-11-16 | Microsoft Technology Licensing, Llc | Self-calibrating display device |
CN110851032A (zh) * | 2019-11-06 | 2020-02-28 | 北京字节跳动网络技术有限公司 | 用于目标设备的显示样式调整方法和装置 |
US11640491B2 (en) * | 2021-02-12 | 2023-05-02 | Adobe Inc. | Automatic font value distribution for variable fonts |
JP7394813B2 (ja) * | 2021-07-20 | 2023-12-08 | Lineヤフー株式会社 | 端末装置、制御方法及び制御プログラム |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20080049020A1 (en) * | 2006-08-22 | 2008-02-28 | Carl Phillip Gusler | Display Optimization For Viewer Position |
US20090186659A1 (en) * | 2008-01-17 | 2009-07-23 | Platzer Kasper | Active display readability enhancement for mobile devices depending on movement |
US20110126119A1 (en) * | 2009-11-20 | 2011-05-26 | Young Daniel J | Contextual presentation of information |
Family Cites Families (29)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7545434B2 (en) * | 2002-02-04 | 2009-06-09 | Hewlett-Packard Development Company, L.P. | Video camera with variable image capture rate and related methodology |
CN100461212C (zh) * | 2004-06-04 | 2009-02-11 | 松下电器产业株式会社 | 显示控制方法及装置以及便携设备 |
KR100643470B1 (ko) * | 2005-09-29 | 2006-11-10 | 엘지전자 주식회사 | 휴대용 단말기의 그래픽 신호 표시장치 및 방법 |
US7591558B2 (en) * | 2006-05-31 | 2009-09-22 | Sony Ericsson Mobile Communications Ab | Display based on eye information |
TW200804947A (en) * | 2006-07-06 | 2008-01-16 | Asia Optical Co Inc | Method of distance estimation to be implemented using a digital camera |
JP4845698B2 (ja) * | 2006-12-06 | 2011-12-28 | アイシン精機株式会社 | 眼部検出装置、眼部検出方法及びプログラム |
CN101299807A (zh) * | 2007-04-30 | 2008-11-05 | 深圳Tcl新技术有限公司 | 一种自动调整显示参数的显示设备及其实现方法 |
US20080316372A1 (en) * | 2007-06-20 | 2008-12-25 | Ning Xu | Video display enhancement based on viewer characteristics |
CN101419481A (zh) * | 2007-10-25 | 2009-04-29 | 达方电子股份有限公司 | 姿势提醒方法及其装置 |
US8209635B2 (en) * | 2007-12-20 | 2012-06-26 | Sony Mobile Communications Ab | System and method for dynamically changing a display |
JP2009282436A (ja) * | 2008-05-26 | 2009-12-03 | Fujifilm Corp | 液晶表示装置及び液晶表示方法 |
JP2009294740A (ja) * | 2008-06-03 | 2009-12-17 | Mitsubishi Electric Corp | データ処理装置及びプログラム |
CN101354869A (zh) * | 2008-09-09 | 2009-01-28 | 南京Lg新港显示有限公司 | 根据输入信号自动调整显示器亮度的调节装置及调节方法 |
JP2010107773A (ja) * | 2008-10-30 | 2010-05-13 | Toshiba Corp | 表示制御装置及び表示制御方法 |
CN101404150B (zh) * | 2008-11-14 | 2011-03-09 | 深圳市凯立德欣软件技术有限公司 | 亮度调整装置及亮度调整方法和导航装置及导航方法 |
CN101751209B (zh) * | 2008-11-28 | 2012-10-10 | 联想(北京)有限公司 | 一种调整屏幕呈现元素的方法及计算机 |
JP2010176170A (ja) * | 2009-01-27 | 2010-08-12 | Sony Ericsson Mobilecommunications Japan Inc | 表示装置、表示制御方法および表示制御プログラム |
JP5249994B2 (ja) * | 2009-08-24 | 2013-07-31 | シャープ株式会社 | 半導体光検出素子および半導体装置 |
CN102045429B (zh) * | 2009-10-13 | 2015-01-21 | 华为终端有限公司 | 一种调节显示内容的方法和设备 |
US20110084897A1 (en) * | 2009-10-13 | 2011-04-14 | Sony Ericsson Mobile Communications Ab | Electronic device |
US8305433B2 (en) * | 2009-12-23 | 2012-11-06 | Motorola Mobility Llc | Method and device for visual compensation |
TWI401409B (zh) * | 2009-12-29 | 2013-07-11 | Avermedia Information Inc | 具有物體實際尺寸估計功能之實物攝影機 |
US8982160B2 (en) * | 2010-04-16 | 2015-03-17 | Qualcomm, Incorporated | Apparatus and methods for dynamically correlating virtual keyboard dimensions to user finger size |
US20110263946A1 (en) * | 2010-04-22 | 2011-10-27 | Mit Media Lab | Method and system for real-time and offline analysis, inference, tagging of and responding to person(s) experiences |
KR101725044B1 (ko) * | 2010-05-27 | 2017-04-11 | 삼성전자주식회사 | 촬영이 가능한 디스플레이 장치 |
US20120081392A1 (en) * | 2010-09-30 | 2012-04-05 | Apple Inc. | Electronic device operation adjustment based on face detection |
US9131060B2 (en) * | 2010-12-16 | 2015-09-08 | Google Technology Holdings LLC | System and method for adapting an attribute magnification for a mobile communication device |
US9183806B2 (en) * | 2011-06-23 | 2015-11-10 | Verizon Patent And Licensing Inc. | Adjusting font sizes |
US9111143B2 (en) * | 2013-09-27 | 2015-08-18 | At&T Mobility Ii Llc | Method and apparatus for image collection and analysis |
-
2011
- 2011-07-01 US US13/175,402 patent/US20130002722A1/en not_active Abandoned
-
2012
- 2012-06-30 EP EP12807708.8A patent/EP2727331A4/en not_active Withdrawn
- 2012-06-30 JP JP2014519206A patent/JP5859645B2/ja not_active Expired - Fee Related
- 2012-06-30 WO PCT/US2012/045161 patent/WO2013006516A1/en active Application Filing
- 2012-06-30 CN CN201280038178.4A patent/CN103733605B/zh not_active Expired - Fee Related
- 2012-06-30 KR KR1020147002393A patent/KR20140028131A/ko active Search and Examination
- 2012-07-02 TW TW101123735A patent/TWI571807B/zh active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20080049020A1 (en) * | 2006-08-22 | 2008-02-28 | Carl Phillip Gusler | Display Optimization For Viewer Position |
US20090186659A1 (en) * | 2008-01-17 | 2009-07-23 | Platzer Kasper | Active display readability enhancement for mobile devices depending on movement |
US20110126119A1 (en) * | 2009-11-20 | 2011-05-26 | Young Daniel J | Contextual presentation of information |
Also Published As
Publication number | Publication date |
---|---|
CN103733605A (zh) | 2014-04-16 |
US20130002722A1 (en) | 2013-01-03 |
EP2727331A1 (en) | 2014-05-07 |
EP2727331A4 (en) | 2015-06-17 |
JP2014529385A (ja) | 2014-11-06 |
WO2013006516A1 (en) | 2013-01-10 |
KR20140028131A (ko) | 2014-03-07 |
CN103733605B (zh) | 2018-01-05 |
JP5859645B2 (ja) | 2016-02-10 |
TW201303748A (zh) | 2013-01-16 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
TWI571807B (zh) | 在智慧型手持裝置中用於改善可用性之適應性本文字體和影像調整技術 | |
TWI413979B (zh) | 調整顯示畫面的方法、電子裝置,與電腦程式產品 | |
US9691125B2 (en) | Transformation of image data based on user position | |
KR20190046845A (ko) | 정보 처리 장치 및 방법, 그리고 프로그램 | |
TWI493432B (zh) | 使用者介面產生裝置與相關方法 | |
WO2020140758A1 (zh) | 图像显示方法、图像处理方法和相关设备 | |
JP5793975B2 (ja) | 画像処理装置、画像処理方法、プログラム、記録媒体 | |
WO2015194075A1 (ja) | 画像処理装置、画像処理方法及びプログラム | |
WO2016197639A1 (zh) | 屏幕画面显示方法及装置 | |
US20130286240A1 (en) | Image capturing device and operating method of image capturing device | |
US11128909B2 (en) | Image processing method and device therefor | |
US20240045502A1 (en) | Peripheral luminance or color remapping for power saving | |
WO2018219290A1 (zh) | 一种信息终端 | |
US20150172550A1 (en) | Display tiling for enhanced view modes | |
JP6720966B2 (ja) | 情報処理装置、情報処理方法、およびプログラム | |
KR20150054129A (ko) | 헤드 마운트 디스플레이 및 제어 방법 | |
US20150264269A1 (en) | Image-capturing device and method for correcting deviated viewing angle in image capturing | |
US20230324988A1 (en) | Display calibration | |
US10969865B2 (en) | Method for transmission of eye tracking information, head mounted display and computer device | |
WO2020170945A1 (ja) | 表示制御装置、撮像装置、表示制御方法、及び表示制御プログラム | |
JP2015039472A (ja) | 姿勢検出方法及び携帯端末装置及びプログラム | |
US12022182B2 (en) | Visual feature based video effects | |
US20230368475A1 (en) | Multi-Device Content Handoff Based on Source Device Position | |
US20220180473A1 (en) | Frame Rate Extrapolation | |
KR20160115081A (ko) | 휴대 장치의 폰트 및 이미지 크기 자동 조정 방법 및 그 휴대 장치 |