TW200937255A - Movement-based interfaces for personal media device - Google Patents

Movement-based interfaces for personal media device Download PDF

Info

Publication number
TW200937255A
TW200937255A TW097137543A TW97137543A TW200937255A TW 200937255 A TW200937255 A TW 200937255A TW 097137543 A TW097137543 A TW 097137543A TW 97137543 A TW97137543 A TW 97137543A TW 200937255 A TW200937255 A TW 200937255A
Authority
TW
Taiwan
Prior art keywords
media device
vibration
mode
audio
media
Prior art date
Application number
TW097137543A
Other languages
English (en)
Other versions
TWI409667B (zh
Inventor
Michael Culbert
Scott Forstall
Nicholas V King
Michael M Lee
Original Assignee
Apple Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Apple Inc filed Critical Apple Inc
Publication of TW200937255A publication Critical patent/TW200937255A/zh
Application granted granted Critical
Publication of TWI409667B publication Critical patent/TWI409667B/zh

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017Gesture based interaction, e.g. based on a set of recognized hand gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/016Input arrangements with force or tactile feedback as computer generated output to the user
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0346Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of the device orientation or free movement in a 3D space, e.g. 3D mice, 6-DOF [six degrees of freedom] pointers using gyroscopes, accelerometers or tilt-sensors
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16Sound input; Sound output
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72448User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions
    • H04M1/72454User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions according to context-related or environment-related conditions
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2200/00Indexing scheme relating to G06F1/04 - G06F1/32
    • G06F2200/16Indexing scheme relating to G06F1/16 - G06F1/18
    • G06F2200/163Indexing scheme relating to constructional details of the computer
    • G06F2200/1637Sensing arrangement for detection of housing movement or orientation, e.g. for controlling scrolling or cursor movement on the display of an handheld computer
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/038Indexing scheme relating to G06F3/038
    • G06F2203/0381Multimodal input, i.e. interface arrangements enabling the user to issue commands by simultaneous use of input devices of different nature, e.g. voice plus gesture on digitizer

Description

200937255 九、發明說明: 【發明所屬之技術領域】 本發明係關於個人化媒體設備,且更特定言之係關於用 於個人化媒體設備之基於移動的介面。 【先前技術】 - 緊密攜帶型個人化媒體設備(例如,攜帶型MP3播放 . 器、攜帶型視頻播放器及具備媒體能力之蜂窩電話)之增 長已使得使用者能夠在步行、奔跑、駕駛或在其他活動期 〇 間與此等緊密攜帶型媒體設備互動且存取諸如視頻及音頻 (例如,語音及音樂)之多媒體。 現有攜帶型媒體設備(諸如蜂窩電話)之一問題在於使用 者在與媒體設備之視頻顯示器、圖形使用者介面((3111)及/ 或小鍵盤建立介面時可變得分散對其他活動之注意力。舉 例而言,奔跑者可在奔跑時攜帶個人媒體設備以收聽音樂 或發送/接收蜂寫電話呼叫。在典型個人化媒體設備中, 奔跑者必須查看設備之顯示器以與媒體應用互動以便選擇 肖於播放之歌曲。又’使用者可能必須按壓螢幕或其小鍵 盤上之-個或多個鍵以執行歌曲選擇。與個人化媒體設備 之此等互動可將使用者注意力自使用者周遭環境轉移而可 能會發生危險,此等互動迫使使用者中斷其他活動或使使 用者干擾其環境内其他的活動。因此,存在將一使用者介 =供於個人化媒體設備中同時最小化使用者與個人化媒 2備之實體互動及視覺互動中之任—者或此兩者的需 尤其疋在使用者執行需要(例如)使用者視覺之其他活 134797.doc 200937255 動時。 【發明内容】 本發明在各種實施例中藉由提供使得個人化媒體設備使 用者能夠經由設備之使用者啟動式移動來控制個人化媒體 設備及/或允許使用者自個人化媒體設備接收基於運動的 -資訊之系統、方法及設備來解決先前技術中之缺陷。 ,在各種態樣中,本發明將位置、定向或移動(POM)感測 器用於媒體設備中。POM感測器可包括(但不限於)加速 ❹ 計、回轉儀、光感測器、紅外線(IR)感測器、近接感測 器、電容近接感測器、聲響感測器、聲波或聲納感測器、 雷達感測器、影像感測器、視頻感測器、全球定位系統 (GPS)探測器、RF探測器、RF或聲響多普勒探測器、視頻 感測器、指南針、磁力計或其他相似環境感測器。 在一態樣中’媒體設備包括至少一感測器,其基於媒體 設備之位置、定向及移動中之至少一者生成一感測器信 號。媒體設備亦包括一處理器,其接收該感測器信號且至 〇 少部分地基於該感測器信號來控制媒體設備之一個或多個 操作。在一組態中’該媒體設備包括一資料庫或資料儲存 器’ ’其具有一個或多個已知移動模式,其中每一移動模式 肖媒體設備之-操作相關聯。在—特徵中,該處理器將該 感測器信號與-個或多個已知移動模式相比較以決定媒體 設備之相關聯操作。比較功能可包括採用模式識別 或技術。 、 在-組態中,操作包括步進通過與應用相關聯的元素的 134797.doc 200937255 列表。步進可以增量發生,該等増量與位置變化速率、定 向變化速率及移動速率中之至少一者的強度成比例。操作 可包括開始或發起-個或多個應用、停止或結束一個或多 個應用、選擇或撤鎖選擇一個或多個元素、增加或減少一 個或多個設定、移動通過元素列表、啟動或結束通信會 Ί放音樂或視頻、暫停音樂或視頻及啟動或結束音頻 視頻記錄會話中之至少一者。元素可包括歌曲、視頻、 音樂槽、音頻檔、視頻稽、照片、媒體槽、應用圖示、啟 ® 動圖示、控制按鈕、資料檔案及聯繫資料中之至少一者。 在組態中,感測器包括至少一加速計、回轉儀、指南 針u IR探測器、聲波探測器、高度計、磁場探測器、探 測器、GPS、光感測器及多普勒探測器。在一特徵中,生 成感測器信號可基於一時間段上檢測到媒體設備之位置、 定向及移動中之至少一者的序列。 在另一組態中,該媒體設備包括一啟動介面,其接收使 用者輸入以基於感測器信號使能或禁止對該媒體設備的操 作的控制。該媒體設備可包括蜂窩電話、無線通信設備、 媒體播放器、MP3播放器、視頻播放器、pDA及攜帶型電 腦中之至少一者。該媒體設備可包括一振動源,其生成一 個或多個振動模式。在一組態中,該媒體設備包括一個或 多個振動模式之資料儲存器,其中每一振動模式與媒體設 備之應用的至少一元素相關聯。在一特徵中,振動模式之 生成在元素被使用者選擇時發生。 在進步組態中’該媒體設備包括一音頻源,其生成一 134797.doc 200937255 個或多個音頻模式。該媒體設 + 询了匕括一個或多個音頻模 =貝枓儲存器’其中每-音_式與媒體設備之應用的 被二:Γ目關聯。在一特徵中’音頻模式之生成在元素 給:選擇時發生。在另-組態中,該媒體設備包括一 關耳^ 其用於接收感測器信號且儲存與感測器信號相 !二知移動模式。該媒體設備亦可包括複數個已知組 及音頻模式中之每一者其中組合振動 ❿ ❹ 碰 、琛體°又備之操作及/或元素相關 聯。 徵中’移動模式識別應用程式可由使用者藉由固 偌仑叹備’觸摸顯示器,按顯示器上之圖示,按媒體設 之按鈕及/或單獨或結合特定移動模式觸摸聚光 來啟動。在另一特徵中’該媒體設備之一個或多 一、可由使用者藉由固持媒體設備,觸摸顯示器,按顯 二之圖不’按媒體設備介面上之按鈕及,或單獨或結 :、疋已知移動模式觸撰聚光圈來啟動。在某些組態中, 藉由要长使用者明確地與媒體設備之一部分互動(例如, 觸摸顯示器、接4 、圖示及/或聚光圈)同時執行移動模 ^ 化或消除無意地啟動媒體設備操作之可能性。 媒體設備應用程式介 式亦可由在媒體設備上執行之另一應用程 式進行呼叫或啟動。 該媒體設備亦可採用緊握探測器或近接感測器,其在電 話在使用者手中昧、仓〆 寸進伃檢測以使得媒體設備可忽略非基於 使用者手移動及/或定位之位置、定向或移動的變化,或 134797.doc 200937255 致能運動檢測應用程式之啟動。在—特徵中,緊握探測器 可包括一個或多個開關及/或按鈕以探測至少一、二、= 及四個手指的存在。 在另一態樣中,媒體設備包括一收發器,其發送且接收 使用者通信。該媒體設備可包括一移動模式感測器,其基 &該媒體設備之位置、定向及移動中之至少-者檢測移動 模式。該媒體設備亦可包括一模式識別單元,其接收且識 別移動模式。在-組態中,該識別至少部分地基於統計模 ❿ 型。 在進一步態樣中,媒體設備包括—移動模式感測器,其 基於該媒體設備之位置、定向及移動中之至少一者或其變 化來檢測-移動模式或移動模式之序列。該媒體設備可包 括一模式識別單元,其接收且識別移動模式。該媒體設備 亦可包括一通信應用,其提供至該媒體設備及來自該媒體 «^備之基於使用者的通信,且回應於所識別的移動模式一 覽與使用者相關聯的實體之聯繫列表。在—特徵中,實體 為另一人。 以下更詳細論述根據本發明之原理將基於移動的介面用 於媒體設備之各種優點及應用。 【實施方式】 本發明之以上及其他特徵、其性質及各種優點將基於結 合隨附圖式考慮以下實施方式而變得更顯而易I,其中通 篇中相似參考符號指代相似部件。 圖1A為根據本發明之一說明性實施例之媒體設備1〇〇的 134797.doc 200937255 透視圖。媒體設備100包括外殼102、第一外鉸部分1〇4、 第二外殼部分106、顯示器108、小鍵盤11〇、揚聲器外殼 孔H2、麥克風外殼孔114、頭戴耳機插孔丨“及框架側壁 122。儘管未圖示’但在某些實施例中,框架側壁122為駐 留於外殼102内或鄰近於外殼1〇2之框架的暴露部分,該外 殼102提供對於媒體設備1〇〇及各種内部組件之結構支撐。 外殼102亦包括各種間隙118,該等間隙118可包括開口、
間隔、通孔或在外殼102之元件之間的其他路徑,其使得 空氣或聲音能夠通過外殼1〇2。 在一實施例中,外殼102包括緊固在一起以包圍媒體設 備100之各種組件的第一外殼部分1〇4及第二外殼部分 106。在某些實施例中,外殼1〇2亦包括提供對於媒體設備 1〇〇之結構支撐的暴露框架12(^外殼102及其外殼部分1〇4 及106可包括基於聚合物的材料,其藉由(例如)射出成形形 成以界定媒體設備1〇〇之形狀因數。在一實施例中,外殼 102圍繞及/或支撐内部組件,諸如,具有積體電路組件之 一個或多個電路板、内部射頻(RF)電路、内部天線、揚聲 器、麥克風、硬碟機、處理器及其他組件。稍後參看圖3 論述關於某些内部組件之進一步細節。外殼1〇2提供用於 顯不器108、小鍵盤110、外部插孔116、資料連接器或其 他外部介面元件之安裝。外殼1〇2可包括一個或多個外殼 孔112以促進包括语音及音樂之聲音自外殼内之揚聲器 傳遞至使用者。外殼102可包括—個或多個外殼孔114以促 進由内部麥克風接收來自媒體設備使用者之聲音(諸如語 134797.doc 200937255 音)。 在某些實施例中,外殼102包括與外殼102相關聯的一個 或多個間隙118。此等間隙us可由媒體設備1〇〇之製造及/ 或裝配過程產生。舉例而言,在某些情況下,第一外殼部 分104與第二外殼部分1〇6或側壁122之機械附著導致在部 • 分104與1〇6之間的折縫12〇或接合。在某些媒體設備1〇〇 • 中’折縫120非氣密的,從而導致產生沿折縫之間隙118。 其他間隙可在裝配期間在(例如)小鍵盤Π0之一個或多個鍵 〇 與外殼102之間或在顯示器108與外殼102之間形成,從而 導致產生額外間隙118。在其他實施例中,外殼1 〇2可包括 經整合以形成媒體設備1 〇〇之外殼1 〇2的額外部分。 媒體設備100可包括無線通信設備,諸如,蜂窩電話、 衛星電話、無繩電話、個人數位助理(PDA)、呼叫器、攜 帶型電腦或能夠無線通信之任何其他設備。實際上,圖1 展示廣泛種類之媒體設備1 〇 〇的例示性蜂窩電話版本。 媒體設備100亦可整合於其他設備或結構之封裝内,諸 Ο 如’車輛、視頻遊戲系統、用具、衣服、頭盔、眼鏡、可 穿戴服飾、立體聲系統、娛樂系統或其他攜帶型設備。在 . 某些實施例中,設備1 〇〇可銜接或連接至無線允用附件系 統(例如,wi-fi銜接系統),該無線允用附件系統給媒體設 備100提供短程通信功能性。替代類型之媒體設備100可包 括(例如)媒體播放器’諸如,可賭自加利福尼亞庫比蒂諾 (Cupertin〇)ApPle有限公司之iP〇d ⑧或 Appie® iPh〇ne ;柚珍 個人電腦,諸如可購自加利福尼亞帕洛阿爾托(ρ^Ο 134797.doc 200937255
Alt〇)Hewlett Packard有限公司之心⑽ p〇cket pc;及能 夠無線通信(借助於或非借助於無線允用附件系統)之任何 其他設備。 在某些實施例中,媒體設備1〇〇可與(例如)遠端計算系 統或伺服器同步以接收媒體(使用無線或有線通信路徑” 無線同步使彳于媒體設備100能夠傳輸且接收媒體及資料而 -不需要有線連接。媒體可包括(但不限於)以串流及/或離散 (例如,祂案及封包)格式之聲音或音頻槽、音樂、視頻、 〇 多媒體及數位資料。 在同步期間,主機系統可將媒體提供至用戶端系統或嵌 入於媒體設備100内之軟體應用程式。在某些實施例中, 媒體及/或資料”下載"至媒體設備丨〇〇。在其他實施例中’ 媒體設備100能夠將媒體上載至遠端主機或其他用戶端系 統。在2003年4月25日申請之美國專利申請案第1〇/423,49〇 號中提供關於媒體設備100之某些實施例之能力的進一步 細節,該案之全文以引用的方式併入本文中。 圖1B為根據本發明之一 §尤明性實施例之媒體設備1 〇 〇的 另一透視圖。在此實施例中’與圖1A之實施例相對比,媒 體設備框架及/或框架側壁不暴露至設備之外表面。然 而’在某些實施例中’框架與第一外殼部分1 〇4或第二外 殼部分106中之一者的至少一部分在内部連接。 圖2展示根據本發明之一說明性實施例的具有繫戴式頭 戴耳機200及替代地無線耳機206之圖1的媒體設備1〇〇 ^繫 戴式頭戴耳機200包括經由外部插孔116連接至媒體設備 134797.doc -13· 200937255 100之電纜212。在一實施例中,電纜經提供用於音頻信號 自媒體設備100至頭戴耳機200之輸送。在另一實施例中, 頭戴耳機200包括分別對應於使用者之左耳及右耳的左外 殼202及右外殼204。每一外殼202及204可包括如稍後參看 圖4所述之揚聲器及/或聲響總成。頭戴耳機2〇〇可視需要 包括麥克風以促進將聲音自使用者發送至媒體設備1〇〇。 作為頭戴耳機200之替代物,使用者可利用包括外殼2〇8之 無線耳機206。在一實施例中,耳機2〇6採用無線通道21〇 以自設備100接收音頻信號或將音頻信號傳輸至設備1〇〇。 外殼208可包括如稍後參看圊4所述之揚聲器、麥克風及/ 或聲響總成。 圖3展不根據本發明之一說明性實施例之媒體設備丨〇〇的 簡化功能方塊圖。媒體設備或播放器3〇〇可包括處理器 3〇2、儲存設備3〇4、使用者介面3〇8、顯示器31〇、c〇DEc 312、匯流排318、記憶體320、通信電路322、揚聲器或傳 感器324、麥克風326、振動源驅動器328及p〇M感測器 330。處理器3〇2可控制許多功能及媒體播放器中所包 括之其他電路的操作。處理器3〇2可驅動顯示器31〇且可自 使用者介面308接收使用者輸入。 儲存叹備304可儲存媒體(例如,音樂及視頻檔)、軟體 (例如,用於將功能植入於設備3〇〇上广優選資訊(例如, 媒體回放優選)、生活方式資訊(例如,食物優選)、锻煉資 訊(例,,由鍛煉監測設備獲得之資訊)、交易資訊(例如, 諸如U卡貝#之資訊)、無線連接資訊(例如,可使媒體 134797.doc -14- 200937255 設備能夠與另一設備建立無線通信之資訊)、預訂資訊(例 如’保持追蹤使用者預訂之網路播客(podcast)或電視節目 秀或其他媒體的資訊)及任何其他適當資料。儲存設備3〇4 可包括一個或多個儲存媒體,其包括(例如)硬碟機、諸如 ROM之永久記憶體、諸如RAM之半永久記憶體或快取記 •憶體。 • s己憶體320可包括可用於執行設備功能之一個或多個不 同類型之記憶體。舉例而言,記憶體32〇可包括快取記憶 〇 體、ROM&/或RAM。匯流排318可提供一資料傳送路徑, 其用於將資料傳送至至少儲存設備3〇4、記憶體32〇及處理 器302,自至少儲存設備304、記憶體320及處理器3〇2傳送 資料,或在其之間傳送資料。可包括編碼器/解碼器 (CODEC) 112以將數位音頻信號轉換為類比信號以用於驅 動揚聲器324產生包括語音、音樂及其他相似音頻之聲 音。CODEC 112亦可將自麥克風326之音頻輸入轉換為數 位音頻信號。C〇DEC 112可包括用於處理數位及/或類比 ® 視頻信號之視頻CODEC。 使用者介面308可允許使用者與媒體設備3〇〇互動。舉例 -而言’使用者輸入設備308可採取多種形式,諸如,按 紐小鍵盤、撥號盤、點擊輪(click wheei)或觸控螢幕。 通信電路322可包括用於無線通信(例如,短程及/或遠程通 信)之電路。舉例而言,無線通信電路可為wi_fi允用電 路,其允許根據802.U標準中之一者進行的無線通信。亦 可替代所識別之協定或除所識別之協定以外使用其他無線 134797.doc 200937255 網路協定標準。其他網路標準可包括藍芽、八 τ 王球行動通信 系統(GSM)及基於分瑪多重存取(CDMA)的無線協〜、甬 信電路322亦可包括使設備300能夠電耗合至 乃一設備(例 如,電腦或附件設備)且與該另一設備通信之電路。 在一實施例中,媒體設備300可為專用於處理諸如音頻 及視頻之媒體的攜帶型計算設備。舉例而言,媒體設備 3〇〇可為媒體播放器(例如,MP3播放器)、遊戲播放器、遠 端控制器、攜帶型通信設備、遠端定序介面、音頻旅行播 放器或其他適當個人化設備。媒體設備3〇〇可為電池供電 且而度攜帶型以便允許使用者收聽音樂,播放遊戲或視 頻,記錄視頻或照相,與他人通信及/或控制其他設備。 另外,媒體設備300可經定大小以使得其相對容易地裝配 於使用者口袋或手中。藉由成為手持式,媒體設備3〇〇(或 圖1中所示之媒體設備1 〇〇)相對較小且容易被其使用者手 持且利用且因此實際上可隨時供使用者在旅行中播帶。 如先剛所論述,媒體設備300之相對較小的形狀因數使 得使用者能夠容易地操縱設備位置、定向及移動。因此, 本發明之實施例提供用於檢測到位置、定向及移動之此等 變化以藉由影響此等變化使得使用者能夠與媒體設備3〇〇 建立介面或控制媒體設備300的改良技術。此外,媒體設 備300可包括振動源328,其在處理器302之控制下(例如)用 以促進將運動、振動及/或移動資訊發送至與媒體設備操 作有關的使用者。 圖4展示根據本發明之一說明性實施例的包括振動源414 134797.doc 200937255 及/或POM感測器416之媒體設備400的橫向剖視圖。媒體 設備400包含上部外殼402。主結構框架404緊固至外殼 402 ’該外殼402可使用壓鑄過程由可壓鑄材料製得。框架 404包括圍繞侧壁406及腹板或底板408。腹板408在側壁 406之間延伸且形成在外殼402與腹板408之間的印刷電路 • 板隔室。印刷電路板隔室在頂部由外殼402限制且在底部 由腹板408限制。印刷電路板隔室包括印刷電路板41〇及相 關聯電組件412 ^腹板408支撐或安放電池414,該電池414 〇 又形成蜂窩電話400之背面。 媒體設備400可採用整體框架構件4〇4,其由單一可壓铸 材料(通常鎂或鋅)構成,其中側壁406及腹板4〇8經由壓鑄 製造技術由相同或不同的材料構造而得。在一實施例中, 媒體設備400包括至少一振動源414。在另一實施例中,媒 體設備400包括至少一ΡΟΜ感測器416。在某些實施例中, 至少一振動源414及ΡΟΜ感測器416中之一者或兩者與腹板 408、電路板410及/或側壁406之一部分通作。 馨 w 在圖4所示之實施例中,p〇M感測器416及振動源4i4與 腹板408及/或框架4〇4通信。在某些實施例中,p〇M感測 器416及振動源414中之至少一者安裝至腹板4〇8、框架 404、電路板410、外殼4〇2及媒體設備4〇〇之任何其他組件 或元件中之一或多者及/或與之通信。 在一實施例中,印刷電路板41〇之一 储存器-處理請、電池及驅動電路= 形成用於振動源414之振動生成電路。在某些實施例中, 134797.doc -17- 200937255 振動源414包括生成馬達。在其他實施例中,振動源包括 回應於在處理器302上執行之應用程式生成振動、振動模 式及/或振動序列之螺線管或其他元件。 藉由實例說明,由日本東京T〇ky〇 pans “如价心 Corporation有限公司製造之振動生成馬達"ρΜι6、、 . fM25或FM29”或"CM_5”中卜者可用作振動源4i4。藉由 -進-步實例說明,"FM"馬達採用附著至併入於圓柱箱中之 ㈣軸的偏心構件。偏心構件根據旋轉軸之旋轉來旋轉, © 且藉此振動自麵合至腹板彻、框架4〇4、電路板41〇、外 殼402及媒體設備400之任何其他組件或元件中之至少一者 的振動源414生成。藉由另一實例說明,"CM”馬達採用以 偏心方式安裝之電樞線圈。藉由旋轉電樞,生成振動。此 外,若振動源4U採用螺線管,則螺線管内之鐵心互逆移 動且藉此生成振動。 不管所採用之實體元件,振動源414均可回應於處理器 〇 302由驅動電路328及/或418驅動。由振動源414造成之電 功率的消耗可為實質的。因此,可採用一應用程式以提供 用於視媒體設備400之功率需要對振動源414進行之啟動 及/或停用。在某些實施例中’振動源驅動電路”^及/或 41 8經組態以調整呈一個或多㈣先選$或界定之序列及/ 或模式之振動頻率、振動強度及/或振動週期中之至少一 者。 圖5為根據本發明之一說明性實施例的在媒體設備内 之一維加速度感測器或加速計5〇2的透視圖。在某些實施 134797.doc 200937255 例中,POM感測器416包括加速度感測器及/或加速計 5〇2,其探測在媒體設備5〇〇之三個軸向上的加速度,亦 即,上下方向(Y軸)、左右方向(X軸)及前後方向(2軸)。加 速度感測器允許媒體設僑5〇〇在X軸、γ軸及z軸方向上發 生待決定之傾斜及移動。在一實施例中,由加速度感測器 • 5 0 2所探測之加速度資料傳輸至處理器3 〇 2以用於處理以使 -得能決定媒體設備500之位置、定向及/或移動。 在一實施例中,媒體設備500包括三軸或三維線性加速 © 度感測器5〇2 ’其探測在圖5所示之三個軸向中之每一者上 的線性加速度。在替代實施例中,採用二軸線性加速計, 其探測沿X軸及γ軸(或其他成對之軸線)中之每一者的線性 加速度。視預期被探測的及/或用於控制媒體設備5〇〇的位 置、定向及移動的類型而定’二軸感測器可為足夠的。藉 由實例說明,二軸或二軸線性加速計5 〇2可為可睛自
Analog Devices有限公司或 STMicroelectronics®之類型。 ❹ 加速度感測器5〇2可為基於石夕微加工MEMS(微機電系統)技 術之静電電谷或電容耗合類型β在某些實施例中,可採用 其他形式之加速計技術(諸如但不限於,基於壓電或壓阻 的感測器)以提供三轴或二軸加速度探測。 由於線性加速度感測器502可僅能夠探測沿對應於加速 度感測器之每一軸線之直線的加速度,因此加速度感測器 5 02可能不自b夠直接探測呈非線性(例如,環形)路徑形式之 移動、旋轉、旋轉移動、角位移、傾角、位置、姿態 (attitude)或另一物理特性。因此,在某些實施例中,經由 134797.doc -19- 200937255 額外處理自加速度感測器502輸出之線性加速度信號,關 於媒體設備500之位置、定向或移動的額外資訊可藉由在 處理器302上執行之應用程式來推斷或計算得出。 舉例而言,藉由探測靜態線性加速度(例如,重力),加 速度感測器502之線性加速度輸出可用於藉由使傾角與所 . 探測之線性加速度相關來推斷或計算媒體設備500相對於 ' 重力向量之傾角或傾斜。以此方式,加速度感測器502可 結合處理器302(或另一處理器)使用以決定媒體設備5〇〇之 ^ 傾角、姿態或位置。同樣地,當媒體設備500經受由(例如) 使用者手造成之動態加速度時可經由處理由加速度感測器 502所生成之線性加速度信號來計算或推斷媒體設備之各 種移動、移ίΜ莫式及/或位置。在—實施例中,加速度感 測器502可包括嵌入式信號處理器或其他類型之專用處理 器以用於在將信號輸出至處理器3〇2之前執行對自加速度 感測器502及/或媒體設備5〇〇中之其他加速計輸出之加速 藝 度信號的任何所要處理。在某些實施例中,當加速度感測 器5〇2預期探測靜態加速度(例#,重力)時該⑷嵌入式或 專用處理器可將所探測之加速度信號轉換為相應傾角。 圖為根據本發明之-說明性實施例的在媒體設備議内 之一對二維加速計6〇2及6〇4的透視圖。在某些實施例中, 非使用單一三維加速計,兩個二維加速計602及604可相對 於彼此而配置以便使得能三維檢測媒體設備600之位置、 定向及移動。 圖7為根據本發明之一說明性實施例的在媒體設備7〇〇内 134797.doc -20· 200937255 之一對二維加速計702及704的透視圖。在某些實施例中, 兩個或兩個以上之三維加速計可由媒體設備7〇〇用於增強 檢測能力。在其他實施例中,複數個加速計7〇2及7〇4可定 位於媒體設備7〇〇内在複數個位置中之任一者處。 圖8展示根據本發明之一說明性實施例的在媒體設備8〇〇 内或附著於媒體設備800之複數個ρ〇Μ感測器8〇2、8〇4及 806的透視圖。在一實施例中,回轉感測器或回轉儀8〇2可 代替或除加速度感測器804以外經採用。在某些實施例 中,回轉感測器802可包括旋轉或振動元件。可用於此實 施例中之例示性MEMS回轉感測器可購自Anal〇g Devices 有限a司不同於線性加速度感測器804 ’回轉感測器8〇2 能夠直接探測圍繞由回轉感測器8〇2之回轉元件所界定之 軸線的旋轉(或角速率)。由於在回轉感測器8〇2與線性加速 度感測器804之間存在基本差異(例如,基於角度對基於向 1之輸出),因此對來自此等不同感測器設備之輸出信號 執行不同處理操作。 舉例而α ,當使用回轉感測器8〇2而非加速度感測器來 計算傾角或傾斜時,不同演算法及/或應用程式可由處理 器302用於決定媒體設備8〇〇之位置、定向及/或移動。在 實施例中,g使用回轉感測器802時,在探測開始時初 始化傾斜值。接著,對自回轉儀802輸出之角速度的相關 資料求積分。此外,計算傾斜量與先前經初始化之傾斜值 之間的變化。在此種狀況下,所計算出之傾斜對應於一角 度。與之對比,當使用加速度感測器8〇4時,傾斜可藉由 134797.doc 21 200937255 將每一軸向分量之重力之加迷度值與預定參考值相比較來 計算得出。因此,所計算出之傾斜可表示為—向量,且在 未初始化的情況下絕對方向可由加速計決定。在某些實施 例中,可採用一個或多個P0M感測器以探測絕對及相對位 置、定向及移動資訊中之至少一者。 經計算為傾斜之值的類型在回轉儀8〇2與加速計8〇4之間 亦可不同。舉例而言,該值在使用回轉儀8〇2時可為角 度,而在使用加速度感測器804時可為向量。因此,當使 〇 用回轉儀802而非加速度感測器804或反之亦然時,關於傾 斜之感測器資料可由考慮在回轉感測器8〇2與加速計8〇4之 間的基本差異之預定轉換來處理。歸因於回轉儀之性質以 及在線性加速計與回轉儀之間的基本差異為熟習此項技術 者所知的事實,本文中不提供進一步細節。雖然回轉感測 器歸因於其直接探測旋轉之能力提供某些優點,但線性加 速度感測器在結合攜帶型媒體設備8〇〇使用時可更具成本 效益。 φ 在某些實施例中,媒體設備800除加速計8〇4及回轉感測 器802中之至少一者以外可包括環境或p〇M感測器8〇6。額 外感測器806可為光感測器、紅外線(IR)感測器、近接感測 器、電容近接感測器、聲響感測器、麥克風、聲波或聲納 感測器、雷達感測器、影像感測器、視頻感測器、全球定 位系統(GPS)探測器、RF探測器、RF三角量測探測器、RF 或聲響多普勒探測器或其他相似環境感測器。在一實施例 中,媒體設備800採用複數個P〇M及環境感測器8〇2、8〇4 134797.doc •22· 200937255 及806以決定媒體設備8〇〇之位置、定向及/或移動。 如先前所論述,存在將一使用者介面提供於個人化媒體 設備中同時最小化使用者與個人化媒體設備之實體及視覺 互動中之任-者或兩者的需要,尤其是在使用者執行需要 (例如)使用者視覺之其他活動時。在—實施例中,此需要 #由提供一媒體設備來解決,該媒體設備包括基於媒體設 .冑之位置、定向及移動中之至少—者生成感測器信號的環 境或POM感測器。該媒體設備亦包括一處理器,其接收該 Ο 料或P〇M感測器信號且至少部分地基於該感測器信號來 控制媒體設備之-個或多個操作。舉例而言,藉由執行媒 體設備之-個或多個經界定或預先選定之移動,使用者可 控制該媒體設備之各種操作。 操作可包括步進通過與一應用相關聯的元素的列表。 步進可以任何增量發生,其中該增量與自媒體設備之環境 感測器之位置的變化速率、定向的變化速率及移動的速率 馨巾之至卜者的強度成比例。操作可包括開始或發起一個 或夕個應用、停止或結束一個或多個應用、選擇或撤銷選 擇-個或多個元素、增加或減少一個或多個設定、移動通 過元素列表、啟動或結束通信會話、播放音樂或視頻、暫 停:樂或視頻,及啟動或結束音頻或視頻記錄會話中之至 少-者。元素可包括歌曲、視頻、音樂標、音頻槽、視頻 檔、照片、媒體檔、應用圖示、啟動圖示、控制按鈕、資 料檔案及聯繫資料中之至少一者。 圖9為根據本發明之—々日日,祕每 ,, 說月吐實施例的包括在媒體設備 134797.doc -23- 200937255 内執行之各種應用程式或常式之電腦處理環境900的概念 圖。處理環境900包括移動模式識別應用程式9〇2、移動模 式訓練應用程式904、振動控制應用程式9〇6及音頻控制應 用程式908。處理環境900亦包括移動模式資料庫91〇、振 動模式資料庫912及音頻模式資料庫914。在某些實施例 中,處理環境900在處理器302上及/或在諸如媒體設備100 之媒體設備内的另一處理器上執行。 操作中’移動模式識別應用程式9〇2自至少一環境感測 器(諸如,圖8之加速度感測器804)接收感測器信號輸入, 且將所接收之感測器信號與資料庫91〇中之已知感測器信 號的列表相比較以決定媒體設備將執行之操作。在一實施 例中,感測器信號包括在一時間段上與媒體設備i 〇〇之移 動、位置及/或定向之序列或模式相關聯的感測器信號。 因此’在某些實施例中’應用程式902使用資料庫910中之 模式及/或POM指紋資訊的列表來識別位置、定向及/或移 動模式》 移動模式識別應用程式902可由使用者藉由固持顯示 器’按顯示器上之圖示,按媒體設備介面上之按鈕及/或 單獨或結合特定移動模式觸摸聚光圈來啟動。在某些實施 例中’媒體設備之一個或多個操作可由使用者藉由固持顯 示器’按顯示器上之圖示,按媒體設備介面上之按紐及/ 或單獨或結合特定已知移動模式觸摸聚光圈來啟動。藉由 要求使用者明確地與媒體設備之一部分互動(例如,觸摸 顯示器、按鈕、圖示及/或聚光圈)同時執行移動模式,來 134797.doc -24· 200937255 最小化或消除無意地啟動媒體設備操作之可能性。在一實 施例中,應用程式902可由在媒體設備上執行之另一應用 程式呼叫或啟動。 媒體設備可採用緊握探測器或近接感測器,其在電話在 使用者手中時進行檢測以忽略非基於使用者手移動及/或 定位之位置、定向或移動的變化,或致能運動檢測應用程 •式之啟動。在一實施例中,緊握探測器可包括一個或多個 開關及/或按紐以探測至少一、二、三及四個手指的存 ❹ 在0 圖10為根據本發明之一說明性實施例的包括使移動模式 與媒體設備内之一個或多個應用程式之資料元素相關聯的 一個或多個列表之資料庫1000的圖表。在一實施例中,如 上所淪述’元素可包括歌曲、視頻、音樂檔、音頻檔、視 頻標、照片、媒體檔、應用圖示、啟動圖示、控制按鈕、 資料檔案及聯繫資料中之至少一者。對應於在某些實施例 ❹ 中之資料庫91〇的資料庫1000可包括元素1008之多個列表 1002、1004及1〇〇6 ’其中每一列表與媒體設備ι〇〇之特定 應用相關聯。在某些實施例中,元素可包括待由應用程式 執行之操作。 在一實施例中,操作中,元素〗至Ν分別與移動模式i至 N相關聯。因此,當應用1〇〇2執行且移動模式識別應用程 式或常式902執行時,應用程式902可連續將所接收之感測 器信號與與應用1002相關聯的移動模式列表相比較以決定 何時將選擇元素中之一者。舉例而言,當執行媒體設備之 134797.doc -25- 200937255 電話應用_,使用者可以已知序列或模式移動媒體設備以 啟動對特定聯繫人之蜂窩電話呼叫。藉由監測來自環境或 POM感剛器之感測器信號輸入,應用程式9G2識別與(例 如)移動模式1相關聯的所接收感測器信號,該移動模式J 與凡素1相關聯。元素丨可(例如)包括特定聯繫人之電話號 碼。精由選擇元素1同時電話應用在執行,電話應用啟動 對特定聯繫人之呼叫。本文中稍後參看圖17詳細論述已知 移動模式之輸入、訓練及/或儲存。 圖11展不根據本發明之一說明性實施例的使用者藉由旋 轉及/或輕輕地抖動手1104或手腕而步進通過由應用程式 顯示於媒體设備丨丨〇〇上之項目之列表〗丨的例示性過程。 操作中,虽使用者旋轉其手1丨〇4時,媒體設備丨丨〇〇在方 向1106上旋轉。此觸發由一應用程式接收之感測器信號, °亥應用程式接著啟動項目之顯示列表或顯示窗在顯示器 1〇上在方向1108上之移動或移位。由於每一項目1112可 為元素,因此藉由重複地傾斜或旋轉其手11〇4且接著使 返回原始位置,使用者步進通過由應用程式所顯示之元 素的列表。在一實施例中,步進以一增量發生,該增量與 由媒體叹備11 〇〇之至少一環境感測器所檢測之使用者輕輕 抖動動作的位置的變化速率、定向的變化速率及移動的速 率中之至夕者的強度成比例。因此’在某些實施例中, 移動模式識別應用程式贿將不同速率之位置、定向及移 動的變化哉別為可與不同元素及/或操作相關聯的不同移 動模式。因此’使用者可藉由更快速地輕輕地抖動其手或 134797.doc •26- 200937255 手腕來增加移動通過列表之速率。 圖12展示根據本發明之一說明性實施例的能夠探測、識 別及/或記錄之媒體設備1200之位置、定向及移動的各種 維度。如圖12中所說明,由於媒體設備丨2〇〇之一個或多個 % &感測器能夠檢測在任何方向上之位置、定向及移動, 因此媒體設備100之使用者可生成由媒體設備12〇〇之移動 模式識別應用程式902可檢測、可記錄及可識別的無限組 移動模式。 圖13展示根據本發明之一說明性實施例的用於控制媒體 設備1300之例示性移動序列或模式。在此說明性移動中, 使用者在由路徑1302所指示之環形方向上移動媒體設備 1300。然而,此僅為使用者在固持媒體設備丨3〇〇時可執行 之無限數目之移動模式的一實例。舉例而言(但不限於), 媒體設備1300可由使用者前後、上下、左右搖動、以各種 迴路模式移動、傾斜、扭轉、旋轉、倒轉、擺動、搖動、 轉動及/或以三維空間内之任何序列移動。使用者可期望 使用一移動模式,其模擬某一其他活動或動作,諸如,棒 球擺動、高_夫球擺動、曲棍球擊球或任何其他已知的動 作或表現。用於檢測及/或輸入移動模式之時間段可基於 使用者選擇及/或應用程式選擇而可調整及/或改變^此 外,應用程式可視執行哪一次常式或特徵而定調整其模式 識別週期。舉例而言’聯繫列表應用程式可具有相對較^ 的模式識別週期以藉由使用者輕輕抖動纟手腕使得使用者 能快速步進通過聯繫列f此動作可㈣要約⑴秒。秋 134797.doc -27. 200937255 為了啟動對朋友的呼叫模式識別週期可經調整至約 至5移以允卉使用者(例如)模擬高爾夫球擺動以啟動對特 疋電話號碼之呼叫。 a某一實施例中,應用程式902在使用者執行移動模式 之月J或之後藉由經由至少—POM感測器取樣周圍環境以借 助於實體或演算法去β _ 异决考慮位置、定向及移動之背景變化。舉 、J而。右使用者在火車上,則該應用程式可探測火車之 Ο ❿ 速度且在探測移動模式時考慮此背景速度。在其他實施例 中移動模式包括與諸如全球位置、重力、磁場、導航資 訊角動量及速度之環境條件相關聯的資訊。藉由包括位 定向及移動資訊之額外正交向量,來有利地增強模式 識别之、擇性。在_實施例中,媒體設備包括一相機其 提供圍繞媒體叹備之環境的視覺及/或圖形量測。在某些 實&例中媒體⑵備採用水平集合方法以分析空間中之物 件其可I。合其他Ρ〇Μ感測器使用以增強對媒體設備之位 置、定向及/或移動的決定。 圖1 4為根據本發明之—說明性實施例的用於與在媒體設 :上執仃之應用程式建立介面及/或控制其之過程置彻的 程圖在某』實施例中,媒體設備(諸如媒體設備1〇〇)之 使用者介面使得使用者能啟動或停用—個或多㈣動控制 或/1面應用程式’諸如,圖9之應用程式搬、及 9〇8中之至少—者。在其他實施例中,-個或多個應用可 包括一選項或㈣,其允許使用者啟錢隸式902-刪 中之任一者以用於辞·庙斗、m 、以應用或用於該應用之特徵(步驟 134797.doc -28- 200937255 14〇2)。舉例而言,一旦啟動應用程式902,則使用者執行 移動模式(例如,上下搖動媒體設備)以啟動所要應用(例 如,蜂窩電話應用)(步驟1404)。其次,使用者觀察顯示器 及/或感覺已知振動模式或聽取已知音頻模式以確認已啟 動或發起電話應用(步驟14〇6)。一旦啟動,則電話應用可 •呈現使用者可呼叫之聯繫人列表及/或預定程式化之電話 -號碼列表。使用者接著可執行另一移動模式(例如,上下 翻轉媒體設備)以滾動通過聯繫人列表(步驟14〇8)。當在列 © 表中穴出及/或指定一所要聯繫人時,使用者可觀察顯示 器,感覺與該聯繫人相關聯的已知振動模式及/或聽取與 該聯繫人相關聯的已知音頻模式或以上之任何組合(步驟 1410)。一旦突出及/或識別聯繫人,使用者接著可執行進 一步移動模式(例如,左右搖動)以啟動對聯繫人之呼叫(步 驟1412)。在2005年12月5曰申請之美國專利申請案第 11/295,694號令亦描述媒體設備之使用者介面操作及導航 Q &某些態樣,該案之全文以引用的方式併入本文中。如圖 1 4中所說明,在某些實施例中,使用者可使用移動模式及 藉由接收基於運動及/或音頻的反饋而不需要觀察介面來 一覽由媒體設備之使用者介面所呈現的選單及應用特徵。 圖15為使振動模式與媒體設備内之一個或多個應用程式 之資料元素相關聯的資料庫1500或列表之圖表。在一實施 例中,如上所論述,元素可包括歌曲、視頻、音樂檔、音 頻檔、視頻檔、照片、媒體檔、應用圖示、啟動圖示、控 制按鈕、資料檔案及聯繫資料中之至少一者。對應於在某 134797.doc -29- 200937255 些實施例中之資料庫912的資料庫1500可包括元素15〇8之 多個列表15〇2、1504及1506,其中每一列表與媒體設備 (諸如圖1之媒體設備100)之特定應用相關聯。在某些實施 例中,元素可包括待由應用程式執行之操作。因此,當使 用者選擇(例如)對應於列表1502之元素!之在列表中的一特 定聯繫人時,振動控制應用程式9〇6自資料庫15〇〇擷取振 動模式1且使用振動模式1以控制振動源驅動器328,該振 動源驅動器3 2 8接著驅動振動源(例如,振動源4 1 4 ),從而 導致以已知振動模式1之媒體設備的振動。已知振動模式ι 接著由媒體設備使用者感覺且識別為與所要聯繫人或元素 相關聯。 在一實施例中,元素1至N分別與振動模式丨至N相關 聯。因此,當應用1502執行且振動模式識別應用程式或常 式906執行時,應用程式9〇6控制振動源414以在選擇特定 元素時啟動振動模式。 圖16為根據本發明之一說明性實施例的使音頻模式與媒 體設備内之應用程式之資料元素相關聯的資料庫16〇〇或列 表之圖表。在一實施例中,如上所論述,元素可包括歌 曲、視頻、音樂檔、音頻檔、視頻檔、照片、媒體檔、應 用圖不、啟動圖示、控制按鈕、資料檔案及聯繫資料中之 至少一者。對應於在某些實施例中圖9之資料庫914的資料 庫1600可包括元素1608之多個列表丨6〇2、16〇4及16〇6,其 中每一列表與媒體設備(諸如圖丨之媒體設備1〇〇)之特定應 用相關聯。在某些實施例中,元素可包括待由應用程式執 134797.doc -30- 200937255 卜、乍因此,當使用者選擇(例如)對應於列表1 602之 、在歹J表令的-特定聯繫人時,音頻控制應用程式 9〇1自資料庫1600操取音頻模式1且使用音頻模式!以控制 揚(例如,揚聲器324),從而導致音頻序列以已知音頻 =自媒體設備發出。已知音頻模式接著由媒體設備使用 者I取且識別為與所要聯繫人相關聯。 ra實施例中,疋素1至Ν分別與音頻模式1至Ν相關 聯。因此,當應用16〇2執 e ο 丁且㈢頻控制應用程式或常式 908執行時’應用程式9〇8 , 仅市』揭聲器324輸出以在選擇特 疋元素時啟動音頻模式。音頻模 曰用棋武可包括(但不限於)歌曲 之一部分、記錄之-部分、音頻檔之一部分、音調之一序 列、鈴聲之-序列及/或以上音頻輸出之一組合。 圖1 7為根據本發明之一說 乃注貫施例的用於基於一個或 多個模式識別演算法輸入且識 两乃』移勤模式之過程17〇〇的流 程圖。在某些實施例中,蔣叙磁々 ._ . 移動模式識別應用程式902及移 動模式訓練應用程式9〇4换用_加★ a 株用個或多個模式識別演算法 及/或技術以識別媒體設備 & 又價之各種移動模式。首先,媒體 设備100處於周圍實體三維環 —A 衣兄中’其中設備經歷位置、 疋向及移動之各種變化(步_ ,^ (步驟1702)。媒體設備100採用-個 或多個POM感測器以量測位置、 些實施例中’應用程式9()2及9 動之料。在某 ^ ^ ^ 4使用該或該等POM感測器 考慮頻寬、解析度、靈敏度、 ^ ^ ^ 夭具、k雜比、潛時及關於 資枓獲取之其他問題(步驟17〇4)。 應用程式902及904可執行感測
Ak旒之預處理以移除雜 134797.doc 200937255 訊及/或將所關注的模式與背景資訊隔離(步驟㈣及 m〇)。接著,應用程式902及904可藉由依據所識 測器信號之特徵找到新的表示來執行特徵提取(步驟咖 及m 2)。感測器信號之特定特徵可經識別為對於模 财具相關性(步驟1712及1724)。特徵選擇可包括識別感 測h號之判別特徵,諸如,類似模式之類似值或不同模 式之不同值。特徵選擇可包括識別(諸如)相對於感測# 叙平移、旋轉及/或縮放的不變特徵。特徵選擇可包括 =別相對於環境中之阻塞、失真、變形及變化的穩固特 徵0 訓練應用程式904可自使用者俘獲以輸人形式之 參 Γ的步二mr Γ實施例中,—應用可提供與元素相二 ?、、/、使侍使用者能將與元素相關聯的移動模式輸 入至資料庫91〇及/或1_中。在另一實施例中,提示使用 2執仃移動一次、兩次、三次或更多次以作為移動模式訓 練應用程式904之訓練過程的一部分。在其他實施例中, 使用者在特定移動之後可被給定選項以指示其與一特定元 素相關聯。此在媒體設備選擇錯誤元素的情況下可為有= 的,因為使用者將具有識別接著可用作進一步訓練資 預期元素的機會。 在預處理、特徵操取及選擇之後,應用程式⑽接著 執订模型學習及估計’藉此應用程式9〇4學習在感測器信 號之特徵及模式群與種類之間映射(步驟1726)。應用程式 904可選擇參數或非參數之模式識別模型。應用程式%何 J34797.doc •32· 200937255 選擇模型之類型,其包括模式識別分析之模板、決策理論 或統計、語法或結構、神經,及混合形式中之至少一者 (步驟 1728)。 一旦選擇特定模型,移動模式識別應用程式902使用自 移動模式訓練應用程式904之特徵及所學習之模型來執行 對所接收感測器信號之分類及/或匹配以將所接收之移動 模式指派至一模式種類。應用程式9〇2接著可將所接收之 ❹ ❹ 感測器信號與資料庫1〇00中之移動模式之集合相比較以在 所接收之感測器信號與已知移動模式之經儲存陣列之間找 到最接近匹配(步驟1712)。應用程式9〇2可藉由評估其在決 策中之信賴度來執行後處理(步驟1714)。應用程式9〇2接著 可決定資料庫職之哪—已知模式對應於所接收之感測器 信號。 在某些實施例中,已知移動模式之特徵可為有限的以最 小化處理功率及儲存之成本。因&,識別特定模式之選擇 性可視每-已知移動模式所儲存或使用之點或特徵的數目 二變°在另—實施例中’ 6知移動模式可由製造商或另 實體預先生成或儲存於媒體設備中。 論移=識別應用程式902可基於貝氏決策理 " 法、判別方法、非量度方法、演算法A關 § 心〜—⑽機器學習、無人監督學習及聚翻 及相似技術中之至少-者來執行模式識 了包括(但不限於)貝氏決策規則 ’ 密度及判心數、誤差❹及邊界類、正常 1貝氏網路及複合決策 134797.doc •33· 200937255 者充:成方法可包括(但不限於)最大相似 計算複雜性、成八::計鲁各種共同統計分布、維度及 ❹ ❹ 成刀刀析、費雪(d)線性判別、期望值 之,序資料、隱藏式馬可夫(—)模 度估5十之非參數技術中之至少—者。判別方法可包括(但 = :)、基:距離的方法、最近鄰分類、量度及切距、模 刀:性判別函數(超平面幾何學、梯度下降及感知 二=平方誤差程序及支持向量機)及人工神經網路。 可包括(但不限於)藉由字串之識別及字串匹 配。演算法無關機器學習技術可包括(但不 餐理論1差及方差、估計之重新取樣、裝袋二 (baggingandb—錯誤分類之估計及分類器組合 在某些實施例中,與媒體設備通信之遠端設備可包括一 個或多個POM感測器。遠端設備可將p〇M資訊中繼至媒體 設備以促進對媒體設備之控制。舉例而言,遠端設備可為 無線頭戴耳機或耳機。媒體設備可包括需要自使用者之是 或否輸入的應用。藉由上下點頭(指示”是”),使用者使耳 機位置及定向發生變化。P0M之此變化接著自耳機無線中 繼至媒體設備’該媒體設備接著將感測器信號與其運動模 式之已知資料庫相比較以決定使用者點頭的”是"。若使用 者左右搖頭(指示"否")’則媒體設備將探測到其搖頭。與 媒體設備建立介面之任何適當的無線設備可包括此能力。、 該設備可支援任何適當的無線標準或介面,諸如(但不π 於)’_A、GSMHwi_fi、8G2x、TDMAM^ 134797.doc -34- 200937255 相似的公用或專用無線協定。 該媒體設備可支援許多應用之基於運動的控制及介面技 術,其包括(但不限於)電子郵件、正文處理、文字處理、 介面導航、資料搜尋、網路衝浪、資料庫管理、遠端控制 系統、多媒體應用或隨媒體設備一起操作之任何應用。 Ο
熟習此項技術者將明白本發明中所涉及之方法可體現於 包括電腦可用及/或可讀媒體之電腦程式產品中。舉例而 言,此電腦可用媒體可由唯讀記憶體設備(諸如CD r〇m磁 碟或習知ROM設備)、或隨機存取記憶體(諸如硬碟機設備 或電腦磁碟)、或上面儲存有電腦可讀程式碼之快閃記憶 體設備組成。 應理解以上諸圖及描述之各種特徵、元素或過程可互換 或組合以實現或實踐本文中所述之本發明。熟習此項技術 者應瞭解本發明可由除所述實施例以外的實施例實踐,談 等所述實施例經呈現以用於說明目的而非用於限制,且本 發明僅由以下申請專利範圍限制。 【圖式簡單說明】 圖1A為根據本發明之一說明性實施例之具有暴露框架轉 成的媒體設備之透視圖; 圖1B為根據本發明之一說明性實施例之媒體設備的另一 透視圖; 圖2展示根據本發明之一說明性實施例的具有繫戴式頭 戴耳機及替代地無線耳機之圖1A及圖1B的媒體設備; 圖3展示根據本發明之一說明性實施例之媒體設備的簡 134797.doc -35- 200937255 化功能方塊圖; 圖4展示根據本發明之—說明性實施例的包括振動源及 POM感測器之媒體設備的橫向剖視圖; -圖5為根據本發明之一說明性實施例的在媒體設備内之 三維加速計的透視圖; 圖6為根據本發明之一說明性實施例的在媒體設備内之 一對二維加速計的透視圖; 圖7為根據本發明之一說明性實施例的在媒體設備内之 © 一對三維加速計的透視圖; 圖8展不根據本發明之一說明性實施例的在媒體設備内 之複數個POM感測器的透視圖; 圖9為根據本發明之—說明性實施例的包括在媒體設備 内執行之各種應用程式或常式之電腦處理環境9〇〇的概念 圖; 圖10為根據本發明之一說明性實施例的使移動模式與媒 冑°又備内之應用程式之資料元素相關聯的資料庫或列表之 v 圖表; 圖11展示根據本發明之一說明性實施例的使用者藉由旋 及/或輕輕地抖動手或手腕而步進通過或一覽由應用程 式顯示於媒體設備上夕馆。 _ -之項目之列表的例示性過程; 圖1 2展示根據太路> 發月之一說明性實施例的能夠探測、識 別及/或記錄之移動的各種維度; 圖13為根據本發明之 —說明性實施例的用於控制媒體設 備之例示性移動序列或模式; 134797.doc -36 - 200937255 圖14為根據本發明之—說明性實施例的用於與在媒體設 執行之應用程式建立介面及/或控制其之過程的流程 圖; ” 圖15為根據本發明之—說明性實施例的使振動模式與媒 體5又備内之應用程式之資料元素相關聯的資料庫或列表之 • 圖表; . 圖16為根據本發明之一說明性實施例的使音頻模式與媒 體设備内之應用程式之資料元素相關聯的資料庫或列表之 © 圖表;及 圖17為根據本發明之一說明性實施例的用於基於一個或 多個模式識別演算法輸入且識別移動模式之過程的流程 圖。 【主要元件符號說明】 100 102 104 ❹ 106 108 110 112 114 116 118 120 134797.doc 媒體設備 外殼 第一外殼部分 第二外殼部分 顯示器 小鍵盤 揚聲器外殼孔 麥克風外殼孔 頭戴耳機插孔 間隙 框架/折縫 -37- 200937255 122 框架側壁 200 繫戴式頭戴耳機 202 頭戴耳機左外殼 204 頭戴耳機右外殼 206 無線耳機 208 無線耳機外殼 210 無線通道 212 電欖 300 媒體設備/播放器 302 處理器 304 儲存設備 308 使用者介面 310 顯示器 312 編碼器/解碼器(CODEC) 318 匯流排 320 記憶體 322 通信電路 324 揚聲器/傳感器 326 麥克風 328 振動源驅動器 330 POM感測器 400 媒體設備 402 媒體設備之上部外殼 404 主結構框架 134797.doc .38· 200937255
406 側壁 408 腹板/底板 410 印刷電路板 412 相關聯電組件 414 電池/振動源 416 POM感測器 418 振動源驅動電路 500 媒體設備 502 三維加速度感測器/加速計 600 媒體設備 602 二維加速計 604 二維加速計 700 媒體設備 702 三維加速計 704 三維加速計 800 媒體設備 802 POM感測器 804 POM感測器 806 POM感測器 900 電腦處理環境 902 移動模式識別應用程式 904 移動模式訓練應用程式 906 振動控制應用程式 908 音頻控制應用程式 134797.doc -39- 200937255
910 移動模式資料庫 912 振動模式資料庫 914 音頻模式資料庫 1000 資料庫 1002 資料庫列表 1004 資料庫列表 1006 資料庫列表 1008 資料庫元素 1100 媒體設備 1102 項目列表 1104 使用者手 1106 方向 1108 方向 1110 顯示器 1112 項目 1200 媒體設備 1300 媒體設備 1302 路徑 1500 資料庫 1502 資料庫列表 1504 資料庫列表 1506 資料庫列表 1508 資料庫元素 1600 資料庫 134797.doc •40- 200937255 1602 資料庫列表 1604 資料庫列表 1606 資料庫列表 1608 資料庫元素 ❹ 134797.doc -41

Claims (1)

  1. 200937255 十、申請專利範圍: ]· 一種媒體設備,包括: 感測器,用於根據所述媒體設備的位置、定向和移動 中至少一個,生成感測器信號, 包括多個已知移動模式的資料記憶體,其中每個移動 . 模式與所述媒體設備的操作相關聯,及 處理器,用於接收所述感測器信號,並至少部分地根 據所述感測器信號和多個已知移動模式控制所述媒體設 ❹ 備的一個或多個操作。 2. 如請求項1所述的設備,其中控制動作包括將所述感測 器信號與一個或多個所述已知移動模式相比較,以決定 所述媒體設備的相關操作。 3. 如請求項2所述的設備,其中比較動作包括採用模式識 別演算法。 4. 如請求項3所述的設備,其中所述模式識別演算法包括 統計模型。 ® 5·如請求項1所述的設備,其中所述操作包括步進通過與 應用相關聯的元素的列表。 6.如請求項5所述的設備’其中步進以増量發生,所述增 量與位置變化速率、定向變化速率及移動速率中至少_ 個的強度成比例。 7·如請求項1所述的設備,其中操作包括開始或發起一個 或多個應用、停土或結束一個或多個應用、選擇或撤銷 選擇—個或多個元素、增加或減少一個或多個設定、移 134797.doc 200937255 動通過元素列表、啟動或結束通信會話、播放音樂或視 頻、暫停音樂或視頻、及啟動或結束音頻或視頻記錄會 話中的至少一個β 8. 如請求項7所述的設備,其中所述元素包括歌曲、視 頻、音樂檔、音頻檔、視頻檔、照片、媒體檔、應用圖 示、啟動圖示、控制按鈕、資料檔案和聯繫資料中的至 .少一個。 9. 如請求項1所述的設備,其中所述感測器包括至少一個 〇 加速計。 1 〇.如請求項1所述的設備,其中所述感測器包括加速計、 回轉儀、指南針、IR探測器、聲波探測器、高度計、磁 場探測器、RF探測器、GPS、光感測器及多普勒探測器 中的—個或多個。 11. 如睛求項1所述的設備,其中生成感測器信號是基於一 個時間段上檢測到所述媒體設備的位置、定向和移動中 所述至少一個的序列。 12. 如請求項1所述的設備,包括啟動介面,用於接收使用 者輸入,以至少部分地根據所述感測器信號使能或禁止 * 對所述媒體設備的操作的控制。 . 13.如請求項1所述的設備,其中所述媒體設備包括蜂窩電 話、無線通信設備、媒體播放器、MP3播放器、視頻播 放器、PDA及攜帶型電腦中的至少一個。 14.如請求項1所述的設備,包括用於生成一個或多個振動 模式的振動源。 134797.doc 200937255 15.如請求項14所述的設備,包括一個或多個振動模式的資 料記憶體,其中每個振動模式與所述媒體設備的應用的 至少一個元素相關聯。 16·如請求項15所述的設備,其中在元素被選擇時生成振動 模式。 17. 如請求項1所述的设備,包括用於生成一個或多個音頻 模式的音頻源。 18. 如請求項17所述的設備,包括一個或多個音頻模式的資 料記憶體,其中每個音頻模式與所述媒體設備的應用的 至少一個元素相關聯。 19·如請求項18所述的設備,其中在元素被選擇時生成音頻 模式。 20. 如請求項1所述的設備,包括輸入介面,用於接收所述 感測器信號,和存儲與所述感測器信號相關聯的已知移 動模式。 21. —種媒體設備,包括: 振動源,用於生成多個振動信號,其中每個振動信號 與已知振動模式相關聯, 包括多個已知振動模式的資料記憶體,其中每個振動 模式與所述媒體設備的操作相關聯,及 處理器,用於:i)決定所述媒體設備的操作,ii}認出 與所述媒體設備的操作相關聯的振動模式,及ni)控制所 述振動源’以生成與所述振動模式相關聯的振動信號。 22. —種媒體設備,包括: 134797.doc 200937255 振動源,用於生成多個振動信號,其中每個振動信號 與已知振動模式相關聯, 音頻源,用於生成多個音頻信號,其中每個音頻信號 與已知音頻模式相關聯, 包括多個組合的振動與音頻模式的資料記憶體,其中 每個組合的振動與音頻模式與所述媒體設備的操作相關 聯,及 處理器,用於:i)決定所述媒體設備的操作,Η)認出 〇 與所述媒體設備的操作相關聯的組合的振動與音頻模 式,及in)控制所述振動源和音頻源,以生成與所述組合 的振動與音頻模式相關聯的振動信號和音頻信號。 23. —種媒體設備,包括: 收發器,用於發送和接收使用者通信, 移動模式感測器,用於根據所述媒體設備的位置、定 向和移動中至少一個的一系列變化,檢測移動模式,及 模式識別單元,用於接收和識別所述移動模式。 〇 24.如請求項22所述的設備,其中識別是至少部分地基於統 計模型。 25· 一種媒體設備,包括: 移動模式感測器,用於根據所述媒體設備的位置、定 向和移動中至少一個,檢測移動模式, 模式識別單元,用於接收和識別所述移動模式,及 通信應用,用於:i)提供到所述媒體設備和來自所述 媒體設備的基於使用者的诵# 况用賓π逋彳0,及11}回應於所識別的移 動模式,一覽與使用者相關聯的實體的聯繫列表。 134797.doc
TW097137543A 2007-10-01 2008-09-30 用於個人化媒體設備的基於移動介面 TWI409667B (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
US11/906,197 US8942764B2 (en) 2007-10-01 2007-10-01 Personal media device controlled via user initiated movements utilizing movement based interfaces

Publications (2)

Publication Number Publication Date
TW200937255A true TW200937255A (en) 2009-09-01
TWI409667B TWI409667B (zh) 2013-09-21

Family

ID=40508993

Family Applications (1)

Application Number Title Priority Date Filing Date
TW097137543A TWI409667B (zh) 2007-10-01 2008-09-30 用於個人化媒體設備的基於移動介面

Country Status (7)

Country Link
US (1) US8942764B2 (zh)
EP (1) EP2195725A2 (zh)
KR (1) KR101242982B1 (zh)
CN (2) CN105045387A (zh)
DE (1) DE102008049653A1 (zh)
TW (1) TWI409667B (zh)
WO (1) WO2009045279A2 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI467391B (zh) * 2012-05-07 2015-01-01 Univ Southern Taiwan 可攜式電子裝置之互動應用系統及其方法

Families Citing this family (197)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7841967B1 (en) 2006-04-26 2010-11-30 Dp Technologies, Inc. Method and apparatus for providing fitness coaching using a mobile device
US8902154B1 (en) 2006-07-11 2014-12-02 Dp Technologies, Inc. Method and apparatus for utilizing motion user interface
US7796872B2 (en) 2007-01-05 2010-09-14 Invensense, Inc. Method and apparatus for producing a sharp image from a handheld device containing a gyroscope
US8508039B1 (en) 2008-05-08 2013-08-13 Invensense, Inc. Wafer scale chip scale packaging of vertically integrated MEMS sensors with electronics
US7934423B2 (en) 2007-12-10 2011-05-03 Invensense, Inc. Vertically integrated 3-axis MEMS angular accelerometer with integrated electronics
US8141424B2 (en) 2008-09-12 2012-03-27 Invensense, Inc. Low inertia frame for detecting coriolis acceleration
US8020441B2 (en) 2008-02-05 2011-09-20 Invensense, Inc. Dual mode sensing for vibratory gyroscope
US20090262074A1 (en) * 2007-01-05 2009-10-22 Invensense Inc. Controlling and accessing content using motion processing on mobile devices
US8250921B2 (en) 2007-07-06 2012-08-28 Invensense, Inc. Integrated motion processing unit (MPU) with MEMS inertial sensing and embedded digital electronics
US8047075B2 (en) 2007-06-21 2011-11-01 Invensense, Inc. Vertically integrated 3-axis MEMS accelerometer with electronics
US8952832B2 (en) 2008-01-18 2015-02-10 Invensense, Inc. Interfacing application programs and motion sensors of a device
US8462109B2 (en) * 2007-01-05 2013-06-11 Invensense, Inc. Controlling and accessing content using motion processing on mobile devices
US8620353B1 (en) 2007-01-26 2013-12-31 Dp Technologies, Inc. Automatic sharing and publication of multimedia from a mobile device
US8949070B1 (en) 2007-02-08 2015-02-03 Dp Technologies, Inc. Human activity monitoring device with activity identification
US9954996B2 (en) 2007-06-28 2018-04-24 Apple Inc. Portable electronic device with conversation management for incoming instant messages
US8555282B1 (en) 2007-07-27 2013-10-08 Dp Technologies, Inc. Optimizing preemptive operating system with motion sensing
US7800044B1 (en) 2007-11-09 2010-09-21 Dp Technologies, Inc. High ambient motion environment detection eliminate accidental activation of a device
US9569086B2 (en) * 2007-12-12 2017-02-14 Nokia Technologies Oy User interface having realistic physical effects
JP2009181501A (ja) * 2008-01-31 2009-08-13 Toshiba Corp 移動通信機器
JP4861357B2 (ja) * 2008-02-28 2012-01-25 京セラ株式会社 傾斜センサ内蔵小型電子機器及び補正方法
US8285344B2 (en) 2008-05-21 2012-10-09 DP Technlogies, Inc. Method and apparatus for adjusting audio for a user environment
KR101488796B1 (ko) * 2008-05-23 2015-02-02 엘지전자 주식회사 휴대 단말기 및 그 제어방법
US8936367B2 (en) 2008-06-17 2015-01-20 The Invention Science Fund I, Llc Systems and methods associated with projecting in response to conformation
US8384005B2 (en) 2008-06-17 2013-02-26 The Invention Science Fund I, Llc Systems and methods for selectively projecting information in response to at least one specified motion associated with pressure applied to at least one projection surface
US20100066983A1 (en) * 2008-06-17 2010-03-18 Jun Edward K Y Methods and systems related to a projection surface
US8262236B2 (en) * 2008-06-17 2012-09-11 The Invention Science Fund I, Llc Systems and methods for transmitting information associated with change of a projection surface
US8308304B2 (en) * 2008-06-17 2012-11-13 The Invention Science Fund I, Llc Systems associated with receiving and transmitting information related to projection
US20090309828A1 (en) * 2008-06-17 2009-12-17 Searete Llc, A Limited Liability Corporation Of The State Of Delaware Methods and systems for transmitting instructions associated with user parameter responsive projection
US8723787B2 (en) 2008-06-17 2014-05-13 The Invention Science Fund I, Llc Methods and systems related to an image capture projection surface
US8733952B2 (en) 2008-06-17 2014-05-27 The Invention Science Fund I, Llc Methods and systems for coordinated use of two or more user responsive projectors
US20090309826A1 (en) 2008-06-17 2009-12-17 Searete Llc, A Limited Liability Corporation Of The State Of Delaware Systems and devices
US8602564B2 (en) 2008-06-17 2013-12-10 The Invention Science Fund I, Llc Methods and systems for projecting in response to position
US8267526B2 (en) * 2008-06-17 2012-09-18 The Invention Science Fund I, Llc Methods associated with receiving and transmitting information related to projection
US20090313152A1 (en) * 2008-06-17 2009-12-17 Searete Llc, A Limited Liability Corporation Of The State Of Delaware Systems associated with projection billing
US8608321B2 (en) * 2008-06-17 2013-12-17 The Invention Science Fund I, Llc Systems and methods for projecting in response to conformation
US8430515B2 (en) 2008-06-17 2013-04-30 The Invention Science Fund I, Llc Systems and methods for projecting
US8955984B2 (en) 2008-06-17 2015-02-17 The Invention Science Fund I, Llc Projection associated methods and systems
US8944608B2 (en) 2008-06-17 2015-02-03 The Invention Science Fund I, Llc Systems and methods associated with projecting in response to conformation
US20090313150A1 (en) * 2008-06-17 2009-12-17 Searete Llc, A Limited Liability Corporation Of The State Of Delaware Methods associated with projection billing
US8641203B2 (en) 2008-06-17 2014-02-04 The Invention Science Fund I, Llc Methods and systems for receiving and transmitting signals between server and projector apparatuses
US8996332B2 (en) 2008-06-24 2015-03-31 Dp Technologies, Inc. Program setting adjustments based on activity identification
KR101443341B1 (ko) * 2008-06-30 2014-11-03 엘지전자 주식회사 휴대 단말기 및 그 동작제어 방법
US8140115B1 (en) * 2008-07-18 2012-03-20 Dp Technologies, Inc. Application interface
US8213914B2 (en) * 2008-08-04 2012-07-03 Lg Electronics Inc. Mobile terminal capable of providing web browsing function and method of controlling the mobile terminal
US8341557B2 (en) * 2008-09-05 2012-12-25 Apple Inc. Portable touch screen device, method, and graphical user interface for providing workout support
US8610830B2 (en) * 2008-09-11 2013-12-17 Apple Inc. Video rotation method and device
US8189429B2 (en) 2008-09-30 2012-05-29 Apple Inc. Microphone proximity detection
US8872646B2 (en) 2008-10-08 2014-10-28 Dp Technologies, Inc. Method and system for waking up a device due to motion
FR2938097B1 (fr) * 2008-10-30 2010-12-31 Oberthur Technologies Carte a microcircuit, dispositif electronique associe a une telle carte, et procede de commande d'un tel dispositif electronique
US20100117959A1 (en) * 2008-11-10 2010-05-13 Samsung Electronics Co., Ltd. Motion sensor-based user motion recognition method and portable terminal using the same
JP5227769B2 (ja) * 2008-12-05 2013-07-03 ソニーモバイルコミュニケーションズ, エービー 携帯端末およびコンピュータプログラム
US20100153313A1 (en) * 2008-12-15 2010-06-17 Symbol Technologies, Inc. Interface adaptation system
JP2010147973A (ja) * 2008-12-22 2010-07-01 Nec Corp 携帯端末装置、操作通知方法および操作通知プログラム
KR20100078141A (ko) * 2008-12-30 2010-07-08 삼성전자주식회사 휴대용 단말기에서 햅틱 기능 제공 방법 및 장치
US20100167715A1 (en) * 2008-12-31 2010-07-01 Motorola, Inc. Method and Apparatus for Social Networking in a Communication Network
JP5376960B2 (ja) * 2009-01-15 2013-12-25 株式会社東芝 測位装置及び測位時間間隔制御方法
US20100188397A1 (en) * 2009-01-28 2010-07-29 Apple Inc. Three dimensional navigation using deterministic movement of an electronic device
US8890898B2 (en) 2009-01-28 2014-11-18 Apple Inc. Systems and methods for navigating a scene using deterministic movement of an electronic device
KR20100096425A (ko) * 2009-02-24 2010-09-02 삼성전자주식회사 모션 센서 기반의 동작 인식 방법 및 이를 이용한 휴대 단말기
US8914731B2 (en) 2009-03-31 2014-12-16 Oracle International Corporation Analyzing user behavior to enhance data display
US8209353B2 (en) * 2009-03-31 2012-06-26 Oracle International Corporation Storing hierarchical data to enable paging
US8355887B1 (en) 2009-04-24 2013-01-15 Cypress Semiconductor Corporation Proximity based gesturing devices, systems and methods
KR101615872B1 (ko) * 2009-05-08 2016-04-27 삼성전자주식회사 휴대단말기의 햅틱 기능 전송 방법 및 시스템
US8565843B1 (en) * 2009-05-13 2013-10-22 Lugovations LLC Portable device shell
US9529437B2 (en) 2009-05-26 2016-12-27 Dp Technologies, Inc. Method and apparatus for a motion state aware device
US8407623B2 (en) * 2009-06-25 2013-03-26 Apple Inc. Playback control using a touch interface
US20110002487A1 (en) * 2009-07-06 2011-01-06 Apple Inc. Audio Channel Assignment for Audio Output in a Movable Device
US8095191B2 (en) * 2009-07-06 2012-01-10 Motorola Mobility, Inc. Detection and function of seven self-supported orientations in a portable device
US9000887B2 (en) 2009-07-23 2015-04-07 Qualcomm Incorporated Method and apparatus for communicating control information by a wearable device to control mobile and consumer electronic devices
US9174123B2 (en) * 2009-11-09 2015-11-03 Invensense, Inc. Handheld computer systems and techniques for character and command recognition related to human movements
CN102487416A (zh) * 2009-11-30 2012-06-06 美新半导体(无锡)有限公司 一种地磁传感器与手持设备或移动设备相结合的系统
US8682399B2 (en) 2009-12-15 2014-03-25 Apple Inc. Detecting docking status of a portable device using motion sensor data
US8923995B2 (en) * 2009-12-22 2014-12-30 Apple Inc. Directional audio interface for portable media device
KR20110074017A (ko) * 2009-12-24 2011-06-30 삼성전자주식회사 멀티미디어 기기 및 그 동작 제어 방법
US9046923B2 (en) * 2009-12-31 2015-06-02 Verizon Patent And Licensing Inc. Haptic/voice-over navigation assistance
US8479107B2 (en) * 2009-12-31 2013-07-02 Nokia Corporation Method and apparatus for fluid graphical user interface
US8989792B1 (en) 2010-01-22 2015-03-24 Amazon Technologies, Inc. Using inertial sensors to trigger transmit power management
US8965441B1 (en) 2010-01-22 2015-02-24 Amazon Technologies, Inc. Reducing wireless interference with transmit power level management
US9335825B2 (en) 2010-01-26 2016-05-10 Nokia Technologies Oy Gesture control
EP2354897A1 (en) * 2010-02-02 2011-08-10 Deutsche Telekom AG Around device interaction for controlling an electronic device, for controlling a computer game and for user verification
US20110196519A1 (en) * 2010-02-09 2011-08-11 Microsoft Corporation Control of audio system via context sensor
US9285589B2 (en) 2010-02-28 2016-03-15 Microsoft Technology Licensing, Llc AR glasses with event and sensor triggered control of AR eyepiece applications
US9091851B2 (en) 2010-02-28 2015-07-28 Microsoft Technology Licensing, Llc Light control in head mounted displays
US9223134B2 (en) 2010-02-28 2015-12-29 Microsoft Technology Licensing, Llc Optical imperfections in a light transmissive illumination system for see-through near-eye display glasses
US9229227B2 (en) 2010-02-28 2016-01-05 Microsoft Technology Licensing, Llc See-through near-eye display glasses with a light transmissive wedge shaped illumination system
US9097890B2 (en) 2010-02-28 2015-08-04 Microsoft Technology Licensing, Llc Grating in a light transmissive illumination system for see-through near-eye display glasses
US9128281B2 (en) 2010-09-14 2015-09-08 Microsoft Technology Licensing, Llc Eyepiece with uniformly illuminated reflective display
US9134534B2 (en) 2010-02-28 2015-09-15 Microsoft Technology Licensing, Llc See-through near-eye display glasses including a modular image source
US9129295B2 (en) 2010-02-28 2015-09-08 Microsoft Technology Licensing, Llc See-through near-eye display glasses with a fast response photochromic film system for quick transition from dark to clear
US9097891B2 (en) 2010-02-28 2015-08-04 Microsoft Technology Licensing, Llc See-through near-eye display glasses including an auto-brightness control for the display brightness based on the brightness in the environment
US9182596B2 (en) 2010-02-28 2015-11-10 Microsoft Technology Licensing, Llc See-through near-eye display glasses with the optical assembly including absorptive polarizers or anti-reflective coatings to reduce stray light
US20120206485A1 (en) * 2010-02-28 2012-08-16 Osterhout Group, Inc. Ar glasses with event and sensor triggered user movement control of ar eyepiece facilities
US9366862B2 (en) 2010-02-28 2016-06-14 Microsoft Technology Licensing, Llc System and method for delivering content to a group of see-through near eye display eyepieces
US20150309316A1 (en) 2011-04-06 2015-10-29 Microsoft Technology Licensing, Llc Ar glasses with predictive control of external device based on event input
US9759917B2 (en) 2010-02-28 2017-09-12 Microsoft Technology Licensing, Llc AR glasses with event and sensor triggered AR eyepiece interface to external devices
US9341843B2 (en) 2010-02-28 2016-05-17 Microsoft Technology Licensing, Llc See-through near-eye display glasses with a small scale image source
US20120249797A1 (en) 2010-02-28 2012-10-04 Osterhout Group, Inc. Head-worn adaptive display
AU2011220382A1 (en) 2010-02-28 2012-10-18 Microsoft Corporation Local advertising content on an interactive head-mounted eyepiece
US10180572B2 (en) 2010-02-28 2019-01-15 Microsoft Technology Licensing, Llc AR glasses with event and user action control of external applications
US20110223974A1 (en) * 2010-03-10 2011-09-15 Sony Ericsson Mobile Communications Ab Mobile communication device and method for operating a mobile communication device
US9977472B2 (en) * 2010-03-19 2018-05-22 Nokia Technologies Oy Method and apparatus for displaying relative motion of objects on graphical user interface
WO2011117681A1 (en) * 2010-03-25 2011-09-29 Nokia Corporation Contortion of an electronic apparatus
US8760392B2 (en) 2010-04-20 2014-06-24 Invensense, Inc. Wireless motion processing sensor systems suitable for mobile and battery operation
US8180208B2 (en) * 2010-05-19 2012-05-15 Eastman Kodak Company Identifying a photographer
US8200076B2 (en) * 2010-05-19 2012-06-12 Eastman Kodak Company Estimating gender or age of a photographer
US8180209B2 (en) * 2010-05-19 2012-05-15 Eastman Kodak Company Determining camera activity from a steadiness signal
US20110288913A1 (en) * 2010-05-20 2011-11-24 Google Inc. Interactive Ads
CN102906666A (zh) 2010-05-21 2013-01-30 诺基亚公司 用于控制设备的显示器输出的方法、设备和计算机程序
US9241064B2 (en) * 2010-05-28 2016-01-19 Google Technology Holdings LLC Smart method and device for adaptive user interface experiences
CN101854435B (zh) * 2010-05-31 2017-04-12 华为终端有限公司 信息处理方法及用户设备
TWI453414B (zh) * 2010-07-29 2014-09-21 Chi Mei Comm Systems Inc 可攜式電子裝置解鎖系統及方法
CN102346543B (zh) * 2010-07-29 2014-11-26 深圳富泰宏精密工业有限公司 便携式电子装置解锁系统及方法
US8767019B2 (en) 2010-08-31 2014-07-01 Sovanta Ag Computer-implemented method for specifying a processing operation
US8972467B2 (en) 2010-08-31 2015-03-03 Sovanta Ag Method for selecting a data set from a plurality of data sets by means of an input device
US9007304B2 (en) * 2010-09-02 2015-04-14 Qualcomm Incorporated Methods and apparatuses for gesture-based user input detection in a mobile device
US8594971B2 (en) 2010-09-22 2013-11-26 Invensense, Inc. Deduced reckoning navigation without a constraint relationship between orientation of a sensor platform and a direction of travel of an object
KR101915615B1 (ko) 2010-10-14 2019-01-07 삼성전자주식회사 모션 기반 사용자 인터페이스 제어 장치 및 방법
WO2012061917A1 (en) * 2010-11-12 2012-05-18 Research In Motion Limited Motion gestures interface for portable electronic device
TW201220174A (en) * 2010-11-15 2012-05-16 Ind Tech Res Inst Graphical user interface in multimedia apparatus and graphic object browsing method and system thereof
JP5768361B2 (ja) * 2010-11-22 2015-08-26 ソニー株式会社 送信装置、受信装置、コンテンツ送受信システム
KR20120066846A (ko) * 2010-12-15 2012-06-25 삼성전자주식회사 모바일 디바이스
US8397982B2 (en) 2010-12-17 2013-03-19 Motorola Mobility Llc Method and device for recognition of docking stations
US8786547B2 (en) * 2010-12-23 2014-07-22 Microsoft Corporation Effects of gravity on gestures
US20120202187A1 (en) * 2011-02-03 2012-08-09 Shadowbox Comics, Llc Method for distribution and display of sequential graphic art
WO2012114754A1 (ja) * 2011-02-24 2012-08-30 京セラ株式会社 電子機器
JP5103538B2 (ja) * 2011-02-25 2012-12-19 株式会社コナミデジタルエンタテインメント ゲーム装置、ゲーム制御プログラム、及びゲーム制御方法
US9407706B2 (en) * 2011-03-31 2016-08-02 Qualcomm Incorporated Methods, devices, and apparatuses for activity classification using temporal scaling of time-referenced features
US9094813B2 (en) * 2011-04-02 2015-07-28 Open Invention Network, Llc System and method for redirecting content based on gestures
TWI490768B (zh) * 2011-04-25 2015-07-01 Chiun Mai Comm Systems Inc 虛擬鍵盤控制系統和方法
JP5323126B2 (ja) * 2011-05-20 2013-10-23 シャープ株式会社 画像処理システム、画像処理装置、及び、指示受付装置
US9110510B2 (en) * 2011-06-03 2015-08-18 Apple Inc. Motion pattern classification and gesture recognition
US8319746B1 (en) 2011-07-22 2012-11-27 Google Inc. Systems and methods for removing electrical noise from a touchpad signal
US20130033418A1 (en) * 2011-08-05 2013-02-07 Qualcomm Incorporated Gesture detection using proximity or light sensors
US9703382B2 (en) * 2011-08-29 2017-07-11 Kyocera Corporation Device, method, and storage medium storing program with control for terminating a program
JP2014531662A (ja) 2011-09-19 2014-11-27 アイサイト モバイル テクノロジーズ リミテッド 拡張現実システムのためのタッチフリーインターフェース
US8886247B1 (en) * 2011-10-04 2014-11-11 Amazon Technologies, Inc. Proximity based power throttling
US9563278B2 (en) * 2011-12-19 2017-02-07 Qualcomm Incorporated Gesture controlled audio user interface
CN102540198B (zh) * 2011-12-21 2013-05-29 惠州Tcl移动通信有限公司 终端及其终端内导航功能的启动方法
KR101866974B1 (ko) * 2012-01-06 2018-06-14 한국전자통신연구원 행동 패턴 수집 장치 및 이를 이용한 행동 패턴 분석 시스템과 그 방법
TWI516980B (zh) * 2012-01-10 2016-01-11 群邁通訊股份有限公司 電子裝置解鎖系統及方法
US9823707B2 (en) 2012-01-25 2017-11-21 Nokia Technologies Oy Contortion of an electronic apparatus
US9519909B2 (en) * 2012-03-01 2016-12-13 The Nielsen Company (Us), Llc Methods and apparatus to identify users of handheld computing devices
US8867991B2 (en) * 2012-03-16 2014-10-21 Qualcomm Incorporated Use of proximity sensors with near-field communication
US20130247663A1 (en) * 2012-03-26 2013-09-26 Parin Patel Multichannel Gyroscopic Sensor
US8473975B1 (en) 2012-04-16 2013-06-25 The Nielsen Company (Us), Llc Methods and apparatus to detect user attentiveness to handheld computing devices
US9823696B2 (en) 2012-04-27 2017-11-21 Nokia Technologies Oy Limiting movement
CN103376984B (zh) * 2012-04-28 2016-11-16 宇龙计算机通信科技(深圳)有限公司 应用选择的方法及其通信终端
US8638230B2 (en) 2012-05-24 2014-01-28 Google Inc. Hardware attitude detection implementation of mobile devices with MEMS motion sensors
US9128562B2 (en) * 2012-05-25 2015-09-08 Sony Corporation Terminal apparatus, display system, display method, and recording medium for switching between pointer mode and touch-panel mode based on handheld activation
US9223494B1 (en) * 2012-07-27 2015-12-29 Rockwell Collins, Inc. User interfaces for wearable computers
US10433044B2 (en) * 2012-08-02 2019-10-01 Ronald Pong Headphones with interactive display
JP6011127B2 (ja) * 2012-08-06 2016-10-19 富士ゼロックス株式会社 行為検出プログラム及び行為検出装置
US10548514B2 (en) 2013-03-07 2020-02-04 Alpinereplay, Inc. Systems and methods for identifying and characterizing athletic maneuvers
US10408857B2 (en) * 2012-09-12 2019-09-10 Alpinereplay, Inc. Use of gyro sensors for identifying athletic maneuvers
US9383782B2 (en) * 2012-09-19 2016-07-05 Nec Corporation Mobile terminal, control method thereof, and program
TWI496526B (zh) * 2012-10-16 2015-08-11 Wistron Corp 利用旋轉離心力切換不同狀態之可攜式電子裝置
US9158332B2 (en) 2012-10-22 2015-10-13 Nokia Technologies Oy Limiting movement
US9158334B2 (en) 2012-10-22 2015-10-13 Nokia Technologies Oy Electronic device controlled by flexing
US9350918B1 (en) * 2012-11-08 2016-05-24 Amazon Technologies, Inc. Gesture control for managing an image view display
US20140243107A1 (en) * 2012-11-21 2014-08-28 Don't Shake It L.L.C. Novelty device
US20140351560A1 (en) 2013-05-24 2014-11-27 Motorola Mobility Llc Low Power Management of Multiple Sensor Integrated Chip Architecture
CN103092341B (zh) * 2012-12-31 2016-08-10 华为技术有限公司 控制终端的方法、装置与终端
KR101594404B1 (ko) * 2013-02-25 2016-02-17 한국산업기술대학교산학협력단 대상 물체의 3차원적 움직임 및 속도를 인식할 수 있는 입력장치 및 이를 이용한 전자 기기
US9223297B2 (en) 2013-02-28 2015-12-29 The Nielsen Company (Us), Llc Systems and methods for identifying a user of an electronic device
WO2014141951A1 (ja) * 2013-03-11 2014-09-18 ソニー株式会社 端末装置、端末装置の制御方法およびプログラム
US9065861B2 (en) 2013-05-07 2015-06-23 Brandon M. Singer Method of interacting with social media post using mobile electronic device
US9372103B2 (en) 2013-07-12 2016-06-21 Facebook, Inc. Calibration of grab detection
CN103426019A (zh) * 2013-07-18 2013-12-04 南京晟邦光电科技有限公司 一种环形非接触式射频标识卡
TWI514245B (zh) * 2013-08-20 2015-12-21 Inventec Corp 提供網頁瀏覽之瀏覽裝置、系統及其方法
US20150065116A1 (en) * 2013-08-28 2015-03-05 Sunrex Technology Corp. Remote control device and wireless communication system comprising the same
EP3047358B1 (en) 2013-09-17 2019-09-04 Nokia Technologies Oy Determination of an operation
US9495017B2 (en) * 2013-11-20 2016-11-15 Intel Corporation Computing systems for peripheral control
TWI488106B (zh) * 2013-12-13 2015-06-11 Acer Inc 可攜式電子裝置及其圖示位置調整方法
KR101623365B1 (ko) * 2013-12-18 2016-06-07 주식회사 엘지유플러스 잠금 상태에서 모바일 기기를 제어하는 방법 및 장치
CN104793840A (zh) * 2014-01-22 2015-07-22 宏碁股份有限公司 便携式电子装置及图示位置调整方法
KR102161546B1 (ko) * 2014-02-05 2020-10-05 삼성전자 주식회사 전자 기기 및 그의 운용 방법
TWI517021B (zh) * 2014-02-17 2016-01-11 拓連科技股份有限公司 項目變換之管理方法及系統,及相關電腦程式產品
US9710629B2 (en) 2014-05-13 2017-07-18 Google Technology Holdings LLC Electronic device with method for controlling access to same
US20150350141A1 (en) 2014-05-31 2015-12-03 Apple Inc. Message user interfaces for capture and transmittal of media and location content
US9389703B1 (en) * 2014-06-23 2016-07-12 Amazon Technologies, Inc. Virtual screen bezel
US9465445B2 (en) * 2014-07-02 2016-10-11 Nagravision S.A. Application swap based on smart device position
CN106605201B (zh) 2014-08-06 2021-11-23 苹果公司 用于电池管理的减小尺寸的用户界面
WO2016023169A1 (en) * 2014-08-12 2016-02-18 Shenzhen Sugr Technology Limited Company Methods and apparatus for motion control of a media player
WO2016036541A2 (en) 2014-09-02 2016-03-10 Apple Inc. Phone user interface
CN104244044A (zh) * 2014-09-25 2014-12-24 苏州乐聚一堂电子科技有限公司 运动感应远程音视频互动系统
EP3026522A1 (en) * 2014-11-26 2016-06-01 Nokia Technologies OY User interface
WO2016112316A1 (en) * 2015-01-09 2016-07-14 Nulman Yanir Motion base content selection
WO2016134031A1 (en) 2015-02-17 2016-08-25 Alpinereplay, Inc Systems and methods to control camera operations
US9746930B2 (en) 2015-03-26 2017-08-29 General Electric Company Detection and usability of personal electronic devices for field engineers
US10310726B2 (en) * 2015-05-14 2019-06-04 Oath Inc. Content navigation based upon motion
CN105825875A (zh) * 2015-08-28 2016-08-03 维沃移动通信有限公司 一种控制音乐播放器的方法及电子设备
US10104282B2 (en) * 2015-09-30 2018-10-16 Ricoh Co., Ltd. Yaw user interface
US10321208B2 (en) 2015-10-26 2019-06-11 Alpinereplay, Inc. System and method for enhanced video image recognition using motion sensors
CN105472150A (zh) * 2015-11-24 2016-04-06 努比亚技术有限公司 移动终端应用操作的撤回处理装置、终端及其实现方法
US10445733B1 (en) * 2018-08-06 2019-10-15 Capital One Service, LLC Systems and methods active signature detection
US20230009352A1 (en) * 2019-12-25 2023-01-12 Sony Group Corporation Information processing device, program, and method
US11079913B1 (en) 2020-05-11 2021-08-03 Apple Inc. User interface for status indicators

Family Cites Families (24)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1149465C (zh) 1995-10-09 2004-05-12 任天堂株式会社 三维图像显示游戏机系统和三维图像处理方法
EP0872994A1 (de) 1997-04-18 1998-10-21 Ascom Business Systems Ag Vorrichtung mit einem berührungsempfindlichen Bildschirm
CN1324552C (zh) * 1997-05-22 2007-07-04 盛群半导体股份有限公司 液晶显示驱动器强化多功能选择的方法及装置
JPH11205432A (ja) * 1998-01-08 1999-07-30 Matsushita Electric Ind Co Ltd 携帯端末装置
KR100595917B1 (ko) * 1998-01-26 2006-07-05 웨인 웨스터만 수동 입력 통합 방법 및 장치
US6861946B2 (en) * 2000-05-17 2005-03-01 Caveo Technology Llc. Motion-based input system for handheld devices
US7688306B2 (en) * 2000-10-02 2010-03-30 Apple Inc. Methods and apparatuses for operating a portable device based on an accelerometer
US7166791B2 (en) 2002-07-30 2007-01-23 Apple Computer, Inc. Graphical user interface and methods of use thereof in a multimedia player
US7956272B2 (en) 2002-07-30 2011-06-07 Apple Inc. Management of files in a personal communication device
US7194445B2 (en) * 2002-09-20 2007-03-20 Lenovo (Singapore) Pte. Ltd. Adaptive problem determination and recovery in a computer system
US20060181517A1 (en) 2005-02-11 2006-08-17 Apple Computer, Inc. Display actuator
US7301528B2 (en) * 2004-03-23 2007-11-27 Fujitsu Limited Distinguishing tilt and translation motion components in handheld devices
US7301529B2 (en) * 2004-03-23 2007-11-27 Fujitsu Limited Context dependent gesture response
WO2005103863A2 (en) 2004-03-23 2005-11-03 Fujitsu Limited Distinguishing tilt and translation motion components in handheld devices
US7526460B2 (en) * 2004-09-16 2009-04-28 Neal Solomon Mobile hybrid software router
US7593782B2 (en) 2005-01-07 2009-09-22 Apple Inc. Highly portable media device
TWI271984B (en) * 2005-03-31 2007-01-21 Primax Electronics Ltd Instructions generating and executing method of handheld electronic device
TW200704920A (en) 2005-07-29 2007-02-01 Godot Technology Inc Control mechanism and control method using gravity variation reception
US8870655B2 (en) 2005-08-24 2014-10-28 Nintendo Co., Ltd. Wireless game controllers
US8157651B2 (en) 2005-09-12 2012-04-17 Nintendo Co., Ltd. Information processing program
US8077147B2 (en) * 2005-12-30 2011-12-13 Apple Inc. Mouse with optical sensing surface
TWI302265B (en) * 2005-12-30 2008-10-21 High Tech Comp Corp Moving determination apparatus
US20080280642A1 (en) * 2007-05-11 2008-11-13 Sony Ericsson Mobile Communications Ab Intelligent control of user interface according to movement
US20080284739A1 (en) * 2007-05-17 2008-11-20 Microsoft Corporation Human Interface Device

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI467391B (zh) * 2012-05-07 2015-01-01 Univ Southern Taiwan 可攜式電子裝置之互動應用系統及其方法

Also Published As

Publication number Publication date
WO2009045279A2 (en) 2009-04-09
KR101242982B1 (ko) 2013-03-13
CN101430601A (zh) 2009-05-13
US8942764B2 (en) 2015-01-27
WO2009045279A3 (en) 2009-11-12
TWI409667B (zh) 2013-09-21
EP2195725A2 (en) 2010-06-16
KR20100083807A (ko) 2010-07-22
DE102008049653A1 (de) 2009-06-10
CN105045387A (zh) 2015-11-11
US20090088204A1 (en) 2009-04-02

Similar Documents

Publication Publication Date Title
TW200937255A (en) Movement-based interfaces for personal media device
US8836502B2 (en) Personal media device input and output control based on associated conditions
JP6602803B2 (ja) 双方向性コンテンツの触覚的に強化された双方向性
JP6504809B2 (ja) 触覚的に動作可能とされる映写されたユーザインターフェースのためのシステム及び方法
US11574009B2 (en) Method, apparatus and computer device for searching audio, and storage medium
CN111524501B (zh) 语音播放方法、装置、计算机设备及计算机可读存储介质
US20220342631A1 (en) Method and system for playing audios
CN111061405B (zh) 录制歌曲音频的方法、装置、设备及存储介质
WO2019165911A1 (en) Detecting patterns and behavior to prevent a mobile terminal drop event
CN111276122A (zh) 音频生成方法及装置、存储介质
CN111402844B (zh) 歌曲合唱的方法、装置及系统
CN111092991B (zh) 歌词显示方法及装置、计算机存储介质
US9720509B2 (en) Gesture detection system, gesture detection apparatus, and mobile communication terminal
CN112086102B (zh) 扩展音频频带的方法、装置、设备以及存储介质
CN111428079B (zh) 文本内容处理方法、装置、计算机设备及存储介质
CN109448676B (zh) 音频处理方法、装置及存储介质
CN111368136A (zh) 歌曲识别方法、装置、电子设备及存储介质
CN108831423B (zh) 提取音频数据中主旋律音轨的方法、装置、终端及存储介质
CN110287366A (zh) 推荐歌曲的方法、装置、终端及计算机可读存储介质
CN114329001B (zh) 动态图片的显示方法、装置、电子设备及存储介质
KR20230131385A (ko) 스마트폰을 이용한 가상현실 스피닝 게임 제공 방법 및 시스템
CN108090195B (zh) 一种歌曲播放方法和电子设备
KR101799320B1 (ko) 휴대 단말기 및 그 동작 방법
KR20170038569A (ko) 이동 단말기 및 그 제어방법
KR101645185B1 (ko) 휴대 단말기 및 그 동작 방법

Legal Events

Date Code Title Description
MM4A Annulment or lapse of patent due to non-payment of fees