TW201214299A - Selecting view orientation in portable device via image analysis - Google Patents

Description

201214299 六、發明說明： 【發明所屬之技術領域】 本發明關於顯示資訊之方法及系統，更特別地關於設 定攜帶式裝置之顯示器上所顯示視角方位之方法及系統。 ; 【先前技術】 爲改進數量曰益增多之攜帶式裝置的多功能性，製造 商將攜帶式裝置配置改進之元件，諸如更快CPU、更大顯 示器、無線選項、新輸入方法、更長持久電池、感測器等 。此多功能性及增加之電力使得該些裝置可用於更多應用 ，此在過去僅可於大系統、個人電腦、或膝上型電腦中執 行。 典型攜帶式裝置包括一或更多顯示器，其中最大顯示 器爲矩形。較舊的行動電話僅運行有限數量的應用，諸如 電話播打、聯絡清單管理、或玩遊戲。應用經設計用於顯 示器之特定方位，對應於手持電話之自然方式。例如，因 爲電話之握持方式，顯示器總是以人像模式顯示資訊。然 而，使用攜帶式裝置中新應用，諸如網頁瀏覽器及電子郵 ' 件客戶端，以及來自獨立供應商之新應用的激增，裝置的 * 單一方位對許多應用而言不能適當操作。此外，使用者希 望在相同應用中具有不同視角，諸如以人像或景觀模式注 視網頁。 一些攜帶式裝置具有慣性感測器，諸如陀螺儀及加速 計，其允許攜帶式裝置檢測位置改變。攜帶式裝置檢測到 -5- 201214299 使用者旋轉裝置時，顯示器上視角因此改變。由於檢測係 依據慣性或重力量測’許多情況下無法檢測顯示器之位置 改變。例如，若攜帶式裝置之玩家平躺，或若攜帶式裝置 置於桌上’慣性量測將無法提供準確資訊以決定顯示器中 視角的最佳方位。 此即本發明之實施例產生之內容。 【發明內容】 本發明之實施例提供設定顯示於攜帶式裝置之顯示器 上之視角之方位的方法、系統、及電腦程式。攜帶式裝置 包含顯示器及面對使用者之攝像機，其中有關使用者之裝 置的方位可從使用者臉部之視訊影像決定，其係即時捕捉 的。來自攝像機之視訊影像係使用臉部識別演算法分析， 且裝置中視角方位可依據玩家之特徵決定，諸如形成於眼 睛間之線、從眼睛至鼻子之線、從眼睛至嘴巴之線、從鼻 子至嘴巴之線等。 應理解的是本發明可以多種方式實施，諸如電腦可讀 取媒體上之程序、設備、系統、裝置或方法。以下說明本 發明之許多發明的實施例。 在一實施例中，方法包括捕捉在該顯示器前之區域的 影像之作業。此外，當人物位在該顯示器前之該區域中時 ，識別人物臉部之一或更多特徵之位置。方法包括依據該 些特徵之該位置而決定該臉部之軸線之另一作業。設定顯 示於該攜帶式裝置之該顯示器中該視角之該方位以實質上 -6- 201214299 對應於該臉部之該軸線。 在另一實施例中，攜帶式裝置包括顯示器、攝像機、 及玩家定位器模組。攝像機捕捉在該顯示器前之區域之影 像。當人物位於在該顯示器前之該區域中時，玩家定位器 模組識別人物之臉部之特徵的位置。此外，玩家定位器模 組依據該特徵之該位置而決定該臉部之軸線。選擇顯示於 該顯示器上之視角之該方位，使得該視角之該方位實質上 對應於該臉部之該軸線。 在又另一實施例中，電腦程式嵌入電腦可讀取儲存媒 體中，當藉由一或更多處理器執行時，設定顯示於攜帶式 裝置之顯示器上之視角之方位。該電腦程式包括捕捉在該 顯示器前之區域之影像的程式指令。此外，當人物位在該 顯示器前之該區域中時，識別人物臉部之一或更多特徵之 位置的程式指令。該電腦程式亦包括依據該特徵之該位置 而決定該臉部之軸線的程式指令’及設定該攜帶式裝置之 該顯示器中該視角之該方位以實質上對應於該臉部之·該軸 線的程式指令。 從下列詳細說明結合藉由範例描繪本發明之原理的附 圖，本發明之其他方面將變得顯而易見。 【實施方式】 下列實施例說明設定攜帶式裝置之顯示器上所示視角 方位之方法及設備。本發明之實施例分析以面對攜帶式裝 置之使用者的攜帶式裝置之攝像機拍攝之視訊影像。檢測 201214299 臉部、頭部、或圍繞頭部之區域的一或更多特徵，以決定 玩家（或玩家之臉部）的位置，及最佳匹配位置或玩家臉 部之攜帶式裝置螢幕上視角方位。此外，程序可以整合入 攜帶式裝置之硬體、於攜帶式裝置之處理器上執行之電腦 實施之方法、或所提供之特定程控硬體予以體現。例如， 作業可定義爲編碼至特定應用晶片之邏輯，或一些作業可 於攜帶式裝置之通用處理器上之晶片或其他者之上處理。 然而，對於熟悉本技藝之人士將顯而易見的是本發明 不需一些或全部該些特定細節即可體現。在其他範例中， 未詳細說明已知程序作業以免不必要地混淆本發明。 圖1描繪根據一實施例之使用攜帶式裝置104同時平躺 之玩家102。攜帶式裝置104可以人像或景觀模式顯示內容 。攜帶式裝置1〇4使用演算法決定對使用者而言何爲顯示 內容之最佳或最適方式。若攜帶式裝置104依據慣性或重 力量測演算法，該演算法在許多場景下將失敗。典型地， 該演算法假設使用者手持裝置同時站立或坐下。 若使用者站立且使用者手中持有攜帶式裝置之一邊， 裝置正確地決定以景觀格式顯示內容。但若如圖1中所示 使用者平躺，且仍以相同方式手持裝置，裝置可錯誤地以 人像格式顯示內容。此問題係當裝置利用動作感測器以決 定有關裝置之重力方向時造成。該些裝置調整有關重力而 非有關使用者之內容方位。 而且’該些裝置可承受相反影響》若其未有關重力而 正確傾斜’有時便未切換至人像模式。本發明之實施例檢 -8- 201214299 測使用者眼睛或臉部之位置，並決定顯示資訊之最適方式 〇 應注意的是儘管本發明之實施例說明某攜帶式裝置， 諸如攜帶式遊戲裝置，本發明之原理可用於任一類型之裝 置，諸如遊戲控制器、攜帶式遊戲裝置、行動電話、攝像 機、平板電腦、膝上型電腦、個人數位助理（PDA )、攜 帶式音樂播放器、攜帶式視訊播放器、遙控器、數位相框 、攝影機、攜帶式電視、全球定位系統（GPS)裝置等。 圖2顯示根據一實施例之與置於桌上之攜帶式裝置204 互動之玩家2 02。若攜帶式裝置2 04檢查有關重力，桌上裝 置之任何位置將測量相同有關重力。若裝置於桌上旋轉， 因爲有關重力未改變，裝置將不改變視角方位，且裝置將 無法切換顯示器中視角方位。 爲予說明，假設攜帶式裝置可以四種不同模式之一呈 現顯示器上視角。若顯示器之任意側指定爲北側，其餘三 側則指定爲東、南、及西，攜帶式裝置可呈現顯示器上視 角，使得視角之頂部對應於顯示器中北 '南、東、或西側 之一。此意即二模式將爲人像模式，一爲另一者旋轉18 0。 ，及二模式爲景觀模式。一些裝置可僅具有二模式，人像 及景觀，或三模式，其中一側無法用作視角等之頂部。此 外，其他裝置可具有更多呈現模式，例如，視角可相距45° 而非90°，並可具有8不同模式。再進一步，一裝置可以任 何方位顯示場景，無關乎顯示器之位置，而係專門依據玩 家之位置。除非另有說明，以下參照具4視角方位選擇可 -9 - 201214299 能性之裝置，說明本發明之原理，但本發明之原理可應用 於具任何可能顯示方位數量之任何裝置。 圖3 A描繪根據一實施例之手持背面幾乎平行於地板之 攜帶式裝置之玩家。圖3A及3B描繪當使用者手持幾乎平行 於地板之攜帶式裝置302時，即顯示器304之表面幾乎平行 於地板，正確設定視角方位之問題。在圖3B中，顯示器 304以景觀模式顯示圖表。圖3B描繪根據一實施例，當裝 置幾乎平行於地板時改變裝置位置之影響。在圖3B中，使 用者將裝置302旋轉90°，預期將視角切換爲人像模式。然 而，由於攜帶式裝置幾乎平行於地板，因爲裝置相對於重 力幾乎未改變位置，攜帶式裝置3 02中重力感測器未檢測 到位置改變。結果，顯示器3 04仍爲景觀模式而非人像模 式。隨著使用者變成更熟悉裝置之行爲，使用者學習傾斜 攜帶式裝置至垂直位置以觸發方位改變。有時，使用者傾 斜裝置至垂直位置，接著快速回至水平位置，攜帶式裝置 仍未改變視角方位。此來回傾斜變成惹腦使用者，且使用 者具有多功能攜帶式裝置之經驗變成不滿意。 此外，諸如行動電話之攜帶式裝置的許多遊戲，使用 傾斜來輸入指令。例如，可藉由以一側上或下傾斜裝置而 驅動車輛。該些裝置需要玩家坐正，因爲模糊位置是硬編 碼。本發明之實施例允許裝置藉由檢測玩家臉部之特徵而 設定任何地方之模糊位置。遊戲可依據玩家臉部之相對位 置而設定顯示器中視角方位。重力並非因子，使其可於外 太空玩該些遊戲。 -10- 201214299 圖4描繪根據一實施例，依據玩家位置而選擇視角方 位之程序。攜帶式裝置406包括顯示器414及面對使用者之 可錄像攝像機408。來自攝像機408之視訊影像上臉部識別 軟體可檢測可用於決定臉部方位之臉部的一或更多特徵。 通常，可於電腦應用軟體、硬體、或硬體及軟體之組合中 定義臉部識別系統，以自動識別或驗證數位影像或來自視 訊源之視訊訊框的人物頭部位置。一實施例比較來自影像 的選擇之臉部特徵與臉部資料庫。資料庫可耦合至允許特 定臉部特徵之識別的邏輯，同時允許預期特徵配置之變化 。例如，一些人眼睛等之間或多或少具有分離，及使用者 的年齡亦可影響與資料庫互動之可允許容限。在另一實施 例中，臉部識別演算法藉由從對象臉部之影像汲取界標、 或特徵而識別臉部。例如，演算法可分析眼睛、鼻子、顴 骨、下巴等之相對位置、尺寸、或形狀。該些特徵接著用 於搜尋具匹配特徵的其他影像，或計算特定人類特徵存在 之可能性，接著計算其位置。在仍另一實施例中，演算法 可用於將臉部影像之圖庫正常化，接著壓縮臉部資料，僅 將該資料儲存於有助於臉部檢測之影像中》此將提供可快 速檢索及搜尋之臉部元資料。探測影像亦可與臉部資料比 較。 在一實施例中，除了臉部識別以外，使用者頭部之上 或周圍的目標可用於檢測方位。範例包括但不侷限於眼鏡 、帽子、耳飾、頭戴式耳機、襯衫領子、項鍊、髮夾等》 該些特徵單獨或與臉部特徵可用於檢測方位及/或相對於 -11 - 201214299 攜帶式裝置之螢幕的位置。 應注意的是此處使用之臉部識別係指檢測玩家臉部中 特徵，諸如眼睛、鼻子、嘴巴等。在仍另一實施例中，不 需實際上「識別」特定使用者以設定視角方位。然而，其 他實施例亦可提供使用者識別，以允許每一使用者定義使 用攜帶式裝置之偏愛及其他控制。因此本實施.例不應解譯 爲排他或侷限，而僅係示範或描繪。 檢測之特徵可包括眼睛、鼻子、嘴巴、耳朵、臉部輪 廓、眼鏡等之一或更多項。臉部方位可依據連接至該些特 徵的線而決定，諸如連接眼睛、眼睛及鼻子、鼻子及嘴巴 、眼睛及嘴巴、耳朵等線。 線404連接使用者402之眼睛。視訊攝像機408捕捉玩 家4 〇2之影像，其係於顯示器41 4中表示。注意的是玩家 402手中持有裝置406。玩家402之影像顯示於裝置406旁僅 係爲呈現之目的。此外，玩家412之捕捉之影像顯示於顯 示器414上，但本發明之其他實施例並未於顯示器上呈現 玩家，而是執行背景之臉部識別分析，同時其他應用決定 於顯示器414中顯示何者。 裝置406檢測玩家之眼睛並製造連接玩家眼睛之線4 1 0 。線4 1 〇平行或接近於連接玩家眼睛之實際線404。攜帶式 裝置決定線410平行於顯示器上假設水平線，因此，景觀 模式之視角方位正確。 爲予說明，當意欲藉由有關使用者位置之程式顯示視 角時，顯示器中所示視角中水平線文中稱爲平行於顯示器 -12- 201214299 之頂部及底部線之線。顯示器之頂部係在水平之上，及顯 示器之底部係在水平以下。在許多地方，視角之水平線將 對應於顯示器中所示水平線。例如，若使用者觀看自然景 色，而拍攝景色之攝像機係平行於地板置放，·視角中水平 將對應於景色中水平。然而，若拍攝自然景色之攝像機係 採45°角度，那麼視角之真實水平將不對應於景色水平。 爲予說明，視角水平定義顯示器方位。亦應注意的是，水 平線亦將傳達有關何者在水平之上及何者在水平以下。如 此一來，視角方位可具有正確水平線，但係顛倒，使得顯 示器中顯示正確視角方位。 可以不同頻率執行臉部識別。例如，可於每一視訊訊 框、每十訊框、每秒等執行臉部識別。臉部識別分析之頻 率取決於所需處理量及裝置之響應。通常執行分析愈多， 將需要愈大量計算資源’且當裝置改變位置時，將以更快 裝置檢測視角方位所需改變。在一實施例中，除非檢測許 多訊框需要視角方位改變，視角方位並未改變。此避免當 使用者玩遊戲且在回到先前位置之前進行裝置快速移動時 ，切換視角之問題’此意即玩家不想改變裝置方位。在另 一實施例中’當裝置檢測必須改變方位時，臉部識別頻率 增加。此有助於避免誤測。 圖5A-5B描繪根據一實施例，當玩家改變裝置位置時 ’如何調整視角方位。在圖5 A中，攝像機5 0 6拍攝在攝像 機前之區域的視訊影像’其包括玩家臉部。裝置5 02保持 在豎立位置。裝置5 0 2中臉部識別演算法分析來自攝像機 -13- 201214299 506之視訊影像以檢測玩家眼睛之位置，致使裝置502以人 像模式顯示視角504。 一旦玩家旋轉裝置90°，影像分析將檢測有關改變之 裝置的眼睛位置，且視角將旋轉90°以回應於裝置之旋轉 。因爲演算法未取決於重力量測，即使裝置502係保持幾 乎平行於地板，圖5B中視角504係以景觀模式顯示。 應注意的是，若玩家將裝置瞄準另一人物，視角之方 位亦將調整。例如，若使用者觀看圖片並希望將圖片顯示 予另一人物，玩家可將顯示器朝向其他人物瞄準。臉部檢 測演算法將檢測其他人物之臉部及因此顯示影像。 圖6描繪根據一實施例，依據玩家臉部特徵而選擇視 角方位。可槪略計算有關使用者之裝置604的角度，作爲 臉部特徵線之一與沿視訊影像之軸線向下之假想線間之角 度。藉由挑選最接近直角爲計算之角度可選擇裝置之內容 方位。而且，藉由選擇最接近視角水平之角度可選擇方位 。以下說明後者方法，但本發明之原理可應用於視角之垂 直軸線或使用者臉部之不同軸線。 在分析玩家6 1 2之影像之後，攜帶式裝置檢測玩家的 眼睛及嘴巴，其係以圖像符號620代表，其中眼睛及嘴巴 藉由叉號代表。藉由將眼睛連接一起而形成線616。線616 將影像平面劃分爲二半平面，嘴巴之位置用於決定哪一半 平面包含眼睛以上部分頭部，及哪一半平面包含嘴巴。線 616之正向文中係指從玩家右眼（出現於圖片左側）至玩 家左眼（出現於圖片右側）。在另一實施例中，未檢測嘴 -14- 201214299 巴，且藉由假設玩家爲站立而重力用於決定上或下之方 0 方法計算線61 6與平行於顯示器之軸之線間之角度 以決定臉部與顯示器之相對位置，並選擇顯示器6 04中 角606之最適方位。顯示器604具有軸線608及610，其分 平行於線6 1 8及6 1 4。由於四方位可能爲顯示器604中視 ，計算四角度，其中每一角度指示連接眼睛之線與可能 角水平相距多遠。因而，從線616之正部分至線618及6 之正及負方向計算角度α|-α4。 在圖6之範例中，〇14爲α|-α4之最小角度。結果，選 線6 1 4作爲視角6 0 6之水平，其中6 1 4之正方向對應於與 有關之方向，此使能將視角方位設定爲正確方向而未顛 。由於軸線6 1 0平行於線6 1 4，選擇軸線6 1 0作爲視角方 之水平。 藉由即時進行此程序，在任何時候攜帶式裝置均能 持顯示予使用者之內容的正確方位。相較於利用動作感 器（陀螺儀、加速計）之現有系統，依據影像識別設定 角方位提供更穩固系統。 在一實施例中，插補用於較佳決定臉部特徵。來自 多影像之資訊是相關的以便藉由使用來自許多影像之影 資料而改進臉部識別。此改進臉部識別，尤其是如低光 背光環境之困難情況下。 圖7描繪根據一實施例，依據第二位置而選擇視角 位。因爲角度cu爲所有角度αι -〇14之最小者，連接玩家眼 式 視 別 角 視 14 擇 〇U 倒 位 維 測 視 許 像 或 方 睛 -15- 201214299 之線616最接近線618。因此設定視角606之方位使得平行 於線61 8之顯示器之橫向軸線608爲視角之水平，其中水平 以上之半平面對應於玩家前額所在之半平面。換言之，水 平之正方向定義爲從左至右之方向，形成與線616之正方 向的最小α角度》 應理解的是圖6及7中所描繪之實施例爲依據玩家臉部 之特定特徵及顯示器位置之視角方位的示範計算。其他實 施例可利用不同特徵或可計算不同角度，但仍執行一些計 算。例如，可藉由連接眼睛之線、連接鼻子及嘴巴之線、 從眼睛至嘴巴之線等，定義臉部之特徵。顯示器之位置可 相對於縱向軸線、橫向軸線、從顯示器左上角至顯示器右 下角之對角線、顯示器之任一側、裝置之任一側等加以比 較。在一些狀況下，如上述，最近角度係搜尋某參考線， 同時在其他狀況下，不同角度爲較佳角度，諸如當比較垂 直軸線時之90°角度，或當使用從眼睛至嘴巴等之線時之 3 〇 °角度。因此圖6及7中所描繪之實施例不應解譯爲排他 或偈限，而僅係示範或描繪。 圖8描繪根據一實施例之替代臉部特徵之檢測。在圖8 中，攜帶式裝置檢測使用者之眼睛及嘴巴。爲決定視角方 位，製造連接眼睛及每一眼睛與嘴巴之線。線接著爲攜帶 式裝置中玩家定位器模組所用，以決定玩家之位置及接著 選擇顯示器之最適方位，如先前參照圖6及7所討論。在圖 6及7中，參照玩家眼睛而僅執行一計算。在一實施例中， 執行二或更多計算以選擇方位》例如，可參照連接右眼及 -16- 201214299 嘴巴之線而執行一計算，及參照連接左眼及嘴巴之線而執 行另一計算。接著評估二計算結果（諸如平均結果）以選 擇最適方位。 在另一實施例中，檢測眼睛及鼻子。計算連接眼睛之 第一線，接著計算垂直於第一線並通過鼻子之第二線。使 用類似於參照圖6及7中所說明之演算法的演算法來計算視 角之方位。 圖9描繪根據一實施例之檢測玩家臉部輪廓之實施例 。臉部識別演算法分析影像以便決定玩家臉部之位置。決 定臉部輪廓，接著定義大致估計臉部位置之幾何圖。在一 實施例中，配賦緊密匹配輪廓之橢圓形予臉部輪廓。接著 使用橢圓形之對稱長及短軸以選擇方位。例如，短軸應平 行於連接眼睛之線，並使用參照圖6中所說明之相同方法 。可替代使用橢圓形之對稱長軸，並可使用類似幾何方法 以決定方位。在另一實施例中，使用橢圓形以大致估計臉 部輪廓。 除了臉部輪廓，亦可使用頭部輪廓。在具短髮之使用 者中，臉部輪廓及頭部輪廓類似，但當使用者具有長髮時 ，諸如圖9中’臉部輪廓可極不同。在又另—實施例中， 臉部輪廓與有關臉部中其他特徵之其他資訊相結合，諸如 眼睛、鼻子、嘴巴等，或與頭部之輪廓相結合，以改進準 確性。而且’方位演算法可根據照明狀況而改變。例如， 在玩家背後具背光之情況下’將比臉部輪廓或其他臉部特 徵更易於檢測頭部輪廓。在此狀況下，臉部輪廓可用於選 -17- 201214299 擇方位’至少直至照明狀況改進。 圖1 〇描繪根據一實施例之使用紅外光及紅外線感測器 檢測玩家眼睛之程序。攜帶式裝置包括紅外光發射器及檢 測眼睛之反射1 002的紅外線感測器。該二點接著用於以類 似於先前說明之方法的方式計算方位。 眼睛的平滑表面有利於感測器檢測之紅外光的反射。 類似地，使用者之眼鏡將有利於紅外光的反射，但光之反 射將不如每一眼睛只有一點，而係一圓圈或類似幾何圖。 在另一實施例中，除了紅外光外，可使用其他類型之 光。例如，光可來自攜帶式裝置之發光二極體（LED )， 或來自藉由顯示器發射之光，或藉由閃光燈等。當臉部識 別係依據顯示器之反射時，若顯示器上視角爲黑暗時，方 位演算法可暫時中止，致使缺少從使用者之眼睛或眼鏡反 射之光》 圖1 1描繪根據一實施例之檢測玩家眼鏡。當使用者配 戴眼鏡1 52時，若眼鏡染色則難以甚至無法檢測眼睛。在 此狀況下，攜帶式裝置檢測眼鏡之幾何，並使用幾何計算 使用者臉部方位。在大部分狀況下，可檢測眼鏡之玻璃表 面，且爲予計算每一玻璃爲矩形形狀。假設玩家臉部之眼 鏡係挺直，連接矩形中心之線實質上將平行於連接眼睛之 線，該線可依循先前所說明之程序而用於決定視角方位。 在其他實施例中，其他幾何圖可用於玻璃表面之槪算，諸 如圓形、蛋形、橢圓形、方形等。 應注意的是頭髮可覆蓋部分眼鏡。在此狀況下，演算 -18- 201214299 法將依據可見之玻璃表面而大約估計玻璃位置。例如，若 右側玻璃完全可見，且左側玻璃被頭髮覆蓋，演算法將檢 測右側玻璃之形狀，接著使用此形狀決定包括不可見之左 側玻璃。通常，每一玻璃之底部將不被覆蓋，且演算法可 依據檢測之表面的較低邊界而設定玻璃位置。 圖I2描繪根據一實施例之檢測玩家配戴雙耳式耳機。 在一實施例中，影像分析使可檢測雙耳式耳機1 64。形成 連接覆蓋耳朵之雙耳式耳機的左側164及右側166之線。此 線接著用於評估玩家頭部之位置。在一實施例中，雙耳式 耳機之位置與其他臉部特徵結合，以便改進使用者位置之 檢測性。 在另一實施例中，雙耳式耳機包括耳蓋上紅外光，且 攜帶式裝置中紅外線感測器或攝像機用於檢測雙耳式耳機 之紅外光位置。 在另一實施例中’加速計倂入雙耳式耳機以追蹤雙耳 式耳機之運動。此資訊與攜帶式裝置共享而協同追蹤雙耳 式耳機運動並因此設定顯示器方位。追縱資訊透過共用帶 而與迷你插孔通訊，儘管亦可使用任何其他通訊機構，諸 如無線或紅外線通訊。 圖1 3描繪根據一實施例，當玩家g/\下時之視角選擇。 在本實施例中，攜帶式裝置追縱玩家之臉部特徵。因爲攜 帶式裝置並非僅依賴重力量測，攜帶式裝置可針對玩家位 置’而適當選擇顯示器之方位。 在一貫施例中’攜帶式裝置亦可追縱臉部執行之動作 -19 201214299 。例如，可檢測眼睛之長眨眼以便執行指令，諸如關閉視 窗或出現下一滑動。其他動作亦可用作輸入，只要攜帶式 裝置可檢測臉部位置及臉部位置改變。例如，頭部左轉可 使視角向一側滾動，點頭可使視角向下滾動等。甚至僅眼 睛執行之動作，未移動頭部，可用作輸入。向左看可使遊 戲場景向左滾動，向上看可開啓選單，眼睛長關可暫停遊 戲等。 若攜帶式裝置包括於攜帶式裝置不同側之二顯示器， 及二攝像機，每一攝像機捕捉在相應顯示器前之區域，可 檢測使用者係注視哪一顯示器。在此狀況下，攜帶式裝置 可使用此資訊以關閉或使未被觀看之顯示器變暗。若攜帶 式裝置之後檢測到使用者改變顯示器，那麼被關閉之顯示 器將被開啓，且原開啓之顯示器可關閉或變暗。在一實施 例中，若攜帶式裝置於裝置之每一側均檢測到一使用者， 二顯示器可同步開啓。例如，手持攝像機之使用者可拍攝 另一人之相片，且二者可觀察相片會成什麼樣子。此可歸 納而允許二不同使用者於不同顯示器擷取相同內容，諸如 看電影或瀏覽相簿。應注意的是分別執行每一側之臉部識 別程序，因此每一顯示器中視角之方位彼此獨立。 圖14A-14B描繪根據一實施例之具有顯示器及面對臉 部攝像機之隨意置放裝置中視角選擇。追蹤臉部特徵以設 定顯示器方位亦可用於更大裝置，諸如平板電腦、電子書 閱讀器、或筆記型電腦。在圖14A中，平板電腦裝置172具 有支架，使得平板電腦裝置可以人像或景觀模式設定於支 -20- 201214299 架上。平板電腦具有面對使用者之攝像機，並依據使用者 眼睛位置而選擇顯示器之方位。類似地，在圖14B中，電 子書閱讀器裝置174已以人像模式設定於支架上。由於電 子書閱讀器裝置1 74檢測到使用者坐在椅子上，電子書閱 讀器裝置174以匹配於閱讀器中顯示器之位置的人像模式 設定視角方位。若使用者改變電子書閱讀器裝置1 7 4爲景 觀模式，電子書閱讀器裝置1 7 4因此在檢測到相對於讀者 眼睛之相對改變後將轉動顯示器之方位。 在一實施例中，視角方位係依據顯示器上所示內容或 玩家位置或二者。例如，用於顯示電影之應用可將視角方 位侷限於僅爲景觀。臉部識別係用於檢測玩家位置並調整 視角水平，以匹配玩家位置。 在另一實施例中，使用者選擇視角方位係因此設定爲 臉部位置或設定爲固定位置。例如，使用者可決定看電影 同時躺在沙發上。使用者可具有以標準景觀模式顯示之圖 片，而非具有以人像顯示之電影，以匹配玩家位置。 在更大裝置中，諸如具大顯示器之TV或電腦，可存在 許多在不同位置之觀眾。裝置可從不同探索選擇以設定視 角方位。例如，若僅有一位觀眾，接著另一觀眾加入，視 角方位可固定於第一觀眾之位置，或裝置可嘗試檢測觀眾 之位置，並選擇匹配大多數觀眾之方位，或視角方位僅依 據重力而與觀眾等無關。 圖15A-1 5B描繪根據一實施例之駕駛手持攜帶式裝置 之視角選擇。圖15A及15B顯示使用具GPS功能裝置之駕駛 -21 - 201214299 ，諸如行動電話1 502或專用GPS裝置。： 1502上觀看地圖及方向資訊。在圖15A中 行動電話1 502，及行動電話1 502檢測駕駛 眼睛之線1 5 04。接著如先前說明，參照線 方位。 在圖15B中，駕駛向前看路。行動電 駕駿眼睛之線1 506。儘管線1 506之方向 1 504而改變，行動電話1 5 02將仍以正確方 參照圖6中說明，因爲行動電話15 02將尋 之最近角度。最近角度仍對應於地圖或駕 像。 在一些國家中，駕駛中未使用免持裝 上編寫文字或談話是違法的。在一實施例 測到電話在移動中而有關玩家臉部未改變 使用來自慣性感測器或GP S模組之資訊而 中。當行動電話檢測到使用者在汽車中， 一些特徵，諸如未使用免持裝置而寫文字 動其他特徵，諸如緊急呼叫或於行動電話 特徵亦可作爲親代控制。此系統亦可通知 或可使車輛於適當關閉後不啓動。雙親接 保證之後可遙控啓動車輛》若人員爲乘客 機構允許車中人員使用該些特徵。 圖16A-16B描繪根據一實施例之相對 角固定的攜帶式裝置。在攜帶式裝置上執 _駛於行動電話 ，駕駛直接注視 眼睛並製造連接 1 5 0 4而設定視角 話1 502檢測連接 參照圖1 5 A之線 位顯示資訊，如 找相對於線1506 駛方向之人像圖 置而於彳T動電話 中，行動電話檢 。行動電話藉由 可檢測到在移動 行動電話便關閉 或談話，同時啓 上閱讀地圖。此 雙親違反情形， 著在接獲駕駛等 而非駕駛，置換 於玩家臉部之視 行的許多遊戲使 -22- 201214299 用傾斜作爲輸入以控制遊戲。例如，在駕駛遊戲中，傾斜 或將裝置轉向右造成將車輛駛向右，傾斜至左而將車輛駛 向左。 圖16A及16B描繪甚至當使用者傾斜裝置以輸入指令時 ’保持顯示器穩定視角之方法。換言之，假設顯示器中視 角具有自然檢視水平，當裝置輕微傾斜向左或向右時，視 角水平相對於觀眾並不改變。 圖16A顯示在裝置1610上之競賽遊戲。遊戲之視角包 括許多目標，諸如樹木1604、告示板1602、及車輛1 606。 圖16B顯示當玩家將裝置旋轉約30°後之相同遊戲。通常， 視角參照玩家並未改變，除了 一些目標以外，其固定於裝 置之位置而未固定於玩家之位置。例如，因爲玩家駕駛遊 戲且玩家使用裝置作爲方向盤，車輛1606亦旋轉30°。由 於裝置旋轉，「方向盤旋轉」及車輛隨著裝置旋轉。然而 ，與背景相關的其他目標諸如樹木1604及告示板1602參照 玩家並未旋轉。 旋轉裝置之槪念可藉由將視角想成固定於玩家而非固 定於裝置而予歸納。玩家可緩慢地將裝置旋轉360°，而視 角參照玩家並未改變。當然，視角邊緣必須改變以適應顯 示器之動作。若爲動態內容，諸如遊戲，遊戲可添加動態 內容以塡補缺口。若爲靜態內容，諸如相片，未藉由相片 覆蓋之顯示器部分將塡補背景，諸如空白。 圖17顯示根據本發明之一實施例之攜帶式裝置之顯示 器上所示視角方位之設定程序流程。在作業1 702中，捕捉 -23- 201214299 在顯示器前之區域的影像。在一實施例中，影像係以 式裝置中之視訊攝像機捕捉。在另一實施例中，紅外 測器用以捕捉在顯示器前之區域附近的資訊。 此外，在作業1 704中，方法識別當人物位於顯示 之區域中時，人臉中特徵之位置。在作業1704之後， 前進至作業1 706，其中依據特徵之位置而決定臉部之 。所決定之臉部特徵可包括眼睛、嘴巴、鼻子、連接 之線、連接眼睛及鼻子之線、臉部形狀、玩家配戴之 、玩家頭上之雙耳式耳機等。 在作業1706之後，方法前進至作業1708，其中設 帶式裝置之顯示器上所示視角之方位。方位經設定使 角實質上對應於臉部之一軸線。在一實施例中，方位 定使得平行於連接眼睛之線的臉部之軸線爲最接近顯 中視角之水平軸線。在另一實施例中，設定視角之水 線以確實平行連接玩家眼睛之線，使得顯示器中所示 ，或至少部分景觀，當攜帶式裝置相對於玩家移動時 穩定。 圖18描繪可用於實施本發明之實施例的裝置架構 帶式裝置爲計算裝置並包括出現於計算裝置中之典型 ，諸如處理器、記憶體（RAM、ROM等）、電池或其 源、及永久儲存裝置（諸如硬碟）。通訊模組允許攜 裝置與其他攜帶式裝置、其他電腦、伺服器等交換資 通訊模組包括通用序列匯流排（USB )連接器、通訊 (諸如Ethernet)、超音波通訊、藍牙及WiFi。 攜帶 線感 器前 方法 軸線 眼睛 眼鏡 定攜 得視 經設 示器 平軸 景觀 保持 。攜 模組 他電 帶式 訊。 鏈路 -24- 201214299 輸入模組包括輸入按鈕及感測器、麥克風、觸敏螢幕 、攝像機（正面、背面、深度攝像機）、及讀卡機。其他 輸入/輸出裝置，諸如鍵盤或滑鼠，亦可透過通訊鏈路而 連接至攜帶式裝置，諸如USB或藍牙。輸出模組包括顯示 器（具觸敏螢幕）、發光二極體（LED)、振動觸覺反饋 、及揚聲器。其他輸出裝置亦可透過通訊模組連接至攜帶 式裝置。 •來自不同裝置之資訊可爲位置模組所用以計算攜帶式 裝置及手持裝置之使用者的位置。該些模組包括磁力計、 加速計、陀螺儀、GPS、羅盤、及藉由任何攝像機捕捉之 影像資訊。此外，位置模組可分析以攝像機及麥克風捕捉 之聲音或影像資料，以計算位置。視角產生器製造視角並 選擇呈現顯示器中視角之適當方位。 應理解的是圖1 8中所描繪之實施例爲攜帶式裝置之示 範實施。其他實施例可利用不同模組、模組之子集、或指 派相關工作給不同模組。圖1 8中所描繪之實施例不應解譯 爲排他或侷限，而僅係示範或描繪^ 本發明之實施例可以各種電腦系統組態體現，包括手 持式裝置、微處理器系統、依據微處理器或程控之消費性 電子產品、迷你電腦、主訊框電腦等。本發明亦可於分散 型計算環境中體現，其中工作係藉由經由有線或無線網路 鏈接之遠端處理裝置執行。 基於上述實施例，應理解的是本發明可採用各種包含 儲存於電腦系統中資料的電腦實施作業。該些作業需要物 -25- 201214299 理量之物理操作。形成部分本發明之文中所說明之任何作 業爲有用的機器作業。本發明亦指執行該些作業的裝置或 設備。設備可爲所需用途而特定建構，或設備可爲通用型 電腦，藉由儲存於電腦中之電腦程式而選擇性啓動或組配 。尤其，各種通用型機器可連同根據文中學說而寫入之電 腦程式而使用，或其可更便利地組建更專門之設備以執行 所需作業。 本發明亦可體現爲電腦可讀取媒體上之電腦可讀取碼 。電腦可讀取媒體爲任一可儲存資料之資料儲存裝置，其 之後可藉由電腦系統讀取。電腦可讀取媒體之範例包括硬 碟、網路附接儲存器（NAS )、唯讀記憶體、隨機存取記 憶體、CD-ROM、CD-R、CD-RW、磁帶、及其他光學及非 光學資料儲存裝置。電腦可讀取媒體可包括分佈於網路耦 合電腦系統上之電腦可讀取有形媒體，使得電腦可讀取碼 係以分散的方式儲存及執行。 儘管方法作業係以特定順序說明，應理解的是可於作 業之間執行其他內務處理作業，或可調整作業使其以略爲 不同時間發生，或可分散於允許處理作業以與處理相關之 各種間隔發生之系統中，只要以所欲方式執行覆蓋作業之 處理即可。 儘管爲求理解清晰度之目的而仔細說明上述發明，在 申請專利範圍內顯然可體現某改變及修改。因此，本實施 例被視爲描繪而非侷限，且本發明不侷限於文中所提供之 細節’而是可於申請專利範圍及等效論述內加以修改) -26- 201214299 【圖式簡單說明] 胃ή 照τ列結合附圖之說明，本發明可最佳地理解 ，其中：

Hi描繪根據一實施例之使用攜帶式裝置同時平躺之 玩家。 圖2顯示根據〜實施例之與置於桌上之攜帶式裝置互 動之玩家。 ffl3AiSlt根據一實施例之手持背面幾乎平行於地板之 攜帶式裝置之玩家。 Η 3 B描繪根據—實施例，當裝置幾乎平行於地板時改 變裝置位置之影響。 圖4描繪根據~實施例，依據玩家位置而選擇視角方 位之程序。 圖5 Α-5Β描繪根據一實施例，當玩家改變裝置位置時 ，如何調整視角方位。 圖6描繪根據一實施例，依據玩家臉部特徵而選擇視 角方位。 圖7描繪根據一實施例，依據第二位置而選擇視角方 位。 圖8描繪根據一實施例之替代臉部特徵之檢測。 圖9描繪根據一實施例之檢測玩家臉部輪廓之實施例 〇 圖1 0描繪根據一實施例之使用紅外光及紅外線感測器 -27- 201214299 檢測玩家眼睛之程序。 圖11描繪根據一實施例之檢測玩家眼鏡。 圖12描繪根據一實施例之檢測玩家配戴雙耳式耳機。 圖13描繪根據一實施例，當玩家趴下時之視角選擇。 圖ΜΑ-14Β描繪根據一實施例之具有顯示器及面對臉 部攝像機之隨意置放裝置中視角選擇。 圖15 Α-15Β描繪根據一實施例之駕駛手持攜帶式裝置 之視角選擇。 圖16Α-16Β描繪根據一實施例之相對於玩家臉部之視 角固定的攜帶式裝置。 圖17顯示根據本發明之一實施例之攜帶式裝置之顯示 器上所示視角方位之設定程序流程。 圖18描繪可用於實施本發明之實施例之裝置架構。 【主要元件符號說明】 102、 202、 402、 412、 612:玩家 104、 204、 302、 406、 502、 604、 1610:攜帶式裝置 152 :眼鏡 164、166 :雙耳式耳機 172 :平板電腦裝置 174:電子書閱讀器裝置 304 、 414 、 604 :顯示器 404 、 410 、 614 、 616 、 618 、 1504 、 1506 :線 408、506 :攝像機 -28- 201214299 504、 606 ：視角 6 2 0 :圖像符號 608、 610 ：軸線 1002 :反射 1 5 0 2 :行動電話 1604 ：樹木 1 6 0 2 :告示板 1606:車輛 1702、 1704、 1706、 1708：作業

Claims (1)

1. 201214299 七、申請專利範圍： 1. —種顯示於攜帶式裝置之顯示器上視角之方位的設 定方法’該方法包含： 捕捉在該顯示器前之區域的影像； 當人物位在該顯示器前之該區域中時，識別臉部特徵 之位置； 依據該特徵之該位置而決定該臉部之軸線；以及 設定顯示於該攜帶式裝置之該顯示器上該視角之該方 位以實質上對應於該臉部之該軸線。 2. 如申請專利範圍第1項所述之方法，其中，設定該 視角之該方位進一步包括： 選擇該視角之方位，使得該視角之水平軸線實質上對 應於該顯示器之縱向或橫向軸線，及使得該臉部之水平軸 線與該視角之該水平軸線間之角度的絕對値小於或等於45 度。 3. 如申請專利範圍第1項所述之方法，進一步包括： 隨著該臉部之特徵之該位置改變，繼續設定該視角之 該方位。 4 ·如申請專利範圍第1項所述之方法，其中，該臉部 之該特徵包括該人物之眼睛及鼻子。 5 .如申請專利範圍第4項所述之方法，其中，該臉部 之該軸線貫穿雙眼，且其中，該鼻子係位於該軸線以下。 6.如申請專利範圍第1項所述之方法，其中，該臉部 之該特徵包括眼睛及嘴巴。 -30- 201214299 7 .如申請專利範圍第1項所述之方法，其 之該特徵包括該人物之眼睛，其中，決定該軸 括使用該眼睛之位置及重力來計算該軸線。 8 ·如申請專利範圍第1項所述之方法，設 該方位進一步包括使用裝置慣性資訊及該臉部 該位置來決定該視角之適當方位。 9·如申請專利範圍第丨項所述之方法，進一 繼續追蹤該臉部之該特徵之該位置，該特 物之眼睛； 檢測該眼睛之眨眼；以及 回應於檢測該眼睛之該眨眼而執行在該攜 作業。 1 〇.如申請專利範圍第1項所述之方法，其 視角之該方位進一步包括： 選擇該視角之方位使得該視角之水平軸線 部之水平軸線。 11. 如申請專利範圍第1 〇項所述之方法， 角包括至少一目標，其位置相對於該裝置之位 ’該視角包括至少一目標，其位置相對於該臉 軸線。 12. —種攜帶式裝置，包含： 顯示器； 攝像機，捕捉在該顯示器前之區域之影像 玩家定位器模組’識別位於在該顯示器前 中，該臉部 線進一步包 定該視角之 之該特徵之 步包括： 徵包括該人 帶式裝置中 中，設定該 對應於該臉 其中，該視 置，及其中 部之該水平 :及 之該區域中 -31 - 201214299 人物之臉部之特徵的位置，及依據該特徵之該位置而決定 該臉部之軸線； 其中，顯示於該顯示器上之視角之該方位實質上對應 於該臉部之該軸線。 13. 如申請專利範圍第12項所述之攜帶式裝置，其中 ，該攜帶式裝置係選自下列物件組成之群組：遊戲控制器 、攜帶式遊戲裝置 '行動電話、攝像機、平板電腦、膝上 型電腦、個人數位助理（PDA )、攜帶式音樂播放器、攜 帶式視訊播放器、遙控器、數位相框、攝影機、攜帶式電 視、或全球定位系統（GPS )裝置。 14. 如申請專利範圍第12項所述之攜帶式裝置，其中 ，該攝像機爲紅外線感測器，該臉部之該特徵包括該人物 之眼睛，該眼睛係以該紅外線感測器檢測。 1 5 .如申請專利範圍第1 2項所述之攜帶式裝置，其中 ，該臉部之該特徵包括該人物之鼻子及嘴巴。 1 6 .如申請專利範圍第1 2項所述之攜帶式裝置，其中 ，該臉部之該特徵包括代表該臉部之輪廓的橢圓形，其中 ，該臉部之該軸線對應於該橢圓形之短軸。 17.—種嵌入電腦可讀取儲存媒體中之電腦程式，當 藉由一或更多處理器執行時，用於設定顯示於攜帶式裝置 之顯示器上之視角之方位，該電腦程式包含： 捕捉在該顯示器前之區域之影像的程式指令； 當人物位在該顯示器前之該區域中時，識別臉部特徵 之位置的程式指令； -32- 201214299 依據該特徵之該位置而決定該臉部之軸線的程式指令 :以及 設定顯示於該攜帶式裝置之該顯示器上該視角之該方 位以實質上對應於該臉部之該軸線的程式指令。 1 8 .如申請專利範圍第1 7項所述之電腦程式，其中， 設定該方位的程式指令進一步包括= 選擇該視角之方位的程式指令，使得該視角之水平軸 線實質上對應於該顯示器之縱向或橫向軸線，及使得該臉 部之水平軸線與該視角之該水平軸線間之角度的絕對値小 於或等於4 5度。 19.如申請專利範圍第17項所述之電腦程式，其中， 當該人物未戴眼鏡時，該臉部之該特徵包括該人物之眼睛 ，及當該人物戴眼鏡時，該臉部之該特徵包括該人物之眼 鏡。 2 〇 ·如申請專利範圍第1 7項所述之電腦程式，其中， 該臉部之該特徵包括置於該臉部之雙耳上之耳機。 2 1 ·如申請專利範圍第1 7項所述之電腦程式，其中， 該攝像機爲紅外線感測器，其中，該人物配戴之耳機發射 紅外光，該耳機係以該紅外線感測器檢測。 -33-