TW201246008A - Information processing device, alarm method, and program - Google Patents

Information processing device, alarm method, and program Download PDF

Info

Publication number
TW201246008A
TW201246008A TW101100369A TW101100369A TW201246008A TW 201246008 A TW201246008 A TW 201246008A TW 101100369 A TW101100369 A TW 101100369A TW 101100369 A TW101100369 A TW 101100369A TW 201246008 A TW201246008 A TW 201246008A
Authority
TW
Taiwan
Prior art keywords
user
unit
danger
interest
potential source
Prior art date
Application number
TW101100369A
Other languages
English (en)
Inventor
Akihiko Kaino
Yoshiaki Iwai
Kenichiro Oi
Shunichi Homma
Jia-Ning Wu
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Publication of TW201246008A publication Critical patent/TW201246008A/zh

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/002—Specific input/output arrangements not covered by G06F3/01 - G06F3/16
    • G06F3/005—Input arrangements through a video camera
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/00—2D [Two Dimensional] image generation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/006—Mixed reality
    • G—PHYSICS
    • G08—SIGNALLING
    • G08G—TRAFFIC CONTROL SYSTEMS
    • G08G1/00—Traffic control systems for road vehicles
    • G08G1/005—Traffic control systems for road vehicles including pedestrian guidance indicator

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • Computer Hardware Design (AREA)
  • Computer Graphics (AREA)
  • Software Systems (AREA)
  • User Interface Of Digital Computer (AREA)
  • Traffic Control Systems (AREA)
  • Processing Or Creating Images (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
  • Studio Devices (AREA)
  • Alarm Systems (AREA)

Description

201246008 六、發明說明： 【發明所屬之技術領域】 本發明係關於資訊處理器件、警報方法及程式。 本發明含有與：川年丨㈣日在日本專利局中中請之日 本優先專利申請案JP 2011.016441中所揭示之標的物有關 的標的物，該案之全部内容特此以5丨用的方式併入。 【先前技術】 已提出將額外資訊添加或疊印至真實世界或真實世界影 像上用於呈現給使用者的用於擴增實境（AR)之各種應用程 式。舉例而言，在以下非專利文獻i中所描述之應用程式 中，預先將與地圖上之任意位置相關聯的虛擬標籤登記至 系統中。接著，在藉由使均者所攜帶之終端機所俘獲的影 像中’與出現於影像中之位置相關聯的標籤經顯示而疊印 至該位置上。 [引文清單] [非專利文獻] [NPL 1] 「Sekai Camera Support Center」，〈，線上>，<2010年 12月 22 曰搜尋〉，網際網路<URL:http://support.sekaicamera.com/en> 【發明内容】 [技術問題] 在擴增實境應用程式被提供之時間期間，使用者之注意 力很有可能被吸引至一應用程式螢幕。擴增實境應用程式 之勞幕給予使用者檢視真實世界之感覺，其不同於另一類 159181.doc 201246008 型之應用程式的螢幕。此感覺可具有後果且可甚至為危險 的。特又言之’實際上，行動終端機之螢幕或頭部安裝式 顯不器之螢幕的視角窄於人類視力的視角。此外，存在以 下可能桎：可藉由擴增實境應用程式之額外資訊使存在於 真貫世界中之真實物件瞒著使用者的檢視。此可增大在擴 增實境應用程式被提供之時間期間使用者未能注意到（或 過晚注意到）存在於真實世界中之危險的風險。 依據刚述内容，需要提供一種減小在擴增實境應用程式 被提供之時間期間使用者在真實世界中所面對之危險之風 險的資訊處理器件、警報方法及程式。 [問題之解決方案] ’本發明係針對一種包含一儲存指
步包含向該使用者通 159181.doc 在一例示性實施例中，本發明係 令之記憶體的裝置。該裝置包括一 用於執行該等指令以發送用以為一 空間之一表示上之一第一虑 201246008 头該所關/主之潛在來源。在另一例示性實施例中，本發明 係針對一種儲存指令之以有形方式體現之非暫時性電腦可 讀媒體，在藉由一處理器執行時，該等指令執行一方法， 該方法包含為一使用者顯示疊印至真實空間之一表示上的 一虛擬影像。該方法進一步包含為該使用者識別一所關注 之潛在來源，該所關注之潛在來源係在真實空間之該表示 中的一使用者聚焦區之外部。該方法進一步包含向該使用 者通知該所關注之潛在來源。 [本發明之有利效應] 根據本發明之實施例的資訊處理器件、警報方法、程式 可減小在擴增實境應用程式被提供之同時使用者將忽視一 所關注之潛在來源（諸如，使用者在真實世界中所面對之 危險）的風險。 【實施方式】 下文中，將參看附加圖式來詳細描述本發明之較佳實施 例。本文中，以相同參考數字來表示具有實質上相同之功 能及結構的結構元件，且可省略此等結構元件之重複解 釋》 此外’將按以下次序來提供「實施例之描述」： 1 ·根據實施例之資訊處理器件的概述 2. 根據實施例之資訊處理器件的組態實例 3. 根據一例示性實施例之處理程序的流程 4. 概要 1.根據實施例之資訊處理器件的概述 159181.doc 201246008 圖1為展示可使用擴增實境(AR)應用程式之情形之實例 :視圖參看圖i，在真實空間i中使用者…正行走於人 打道上’且在使用者Ua前方存在阻擋物1()及台階仏此 ▲外，使用者Ua具有資訊處理器件刚。資訊處理器件ι〇〇為 能夠提供AR應用程式之器件。資訊處理器件ι〇〇可為（例 如)智慧型電話、個人電腦(pc)、遊戲終端機、攜帶型音 樂播放器及以上各者之類似者或其他合適器件。在藉由資 訊處理器件100將AR應用程式提供至使用者仏之時間期 間使用者Ua之注意力可被吸引至資訊處理器件i 〇〇的榮 幕。資訊處理器件100之螢幕可展示真實世界之表示。然 而，因為螢幕之視角可窄於使用者Ua之視角，且額外應用 程式另外顯示於螢幕上，所以在AR應用程式被提供之時 間期間使用者Ua未能注意到（或過晚注意到）存在於真實空 間1中之所關注之物件或其他潛在來源（p〇tential s〇urce)的 風險增大。舉例而言，使用者可能錯過該使用者可能感興 趣之飯店或商店。其他感興趣之潛在來源可包括公用設施 (例如，電梯、公共電話、公共諮詢亭，等）、所關注之地 方（例如，醫院、汽車修理廠、博物館、電影院、公園、 熟人的家、學校、圖書館，等），或事件（例如，表演或展 覽）。對於使用者而言所關注之一例示性種類的潛在來源 包括可對使用者呈現某級別之人身危險的各種物件或地 方。本文中將使用後一實例來說明本發明之各種態樣。然 而5應理解’本發明並不限於關於表示對於使用者之人身 危險的使用者關注之潛在來源來使用，而事實上，本發明 15918l.doc 201246008 可關於使用者關注之任何合適潛在來源(例如，休間場 所、實用場所或另外場所）來使用。 •為人身危險之來源的一實例，使用者仏可被阻擔物⑺ 鮮倒。亦存在使用者^可能撞上台階12之可能性。此外， 存在㈣者Ua可能離開人行道且進人車道或進人其他危險 區之可能性。除了圖1中所展示之實例之外，纟真實世界 '、存在多種危險。根據本發明之實施例的資訊處理器件 〇〇藉由本文中在下文所描述之方案向使用者警報該等危 險之存在》 2.根據實施例之資訊處理器件的組態實例 2-1·硬體組態 圖2為展示圖1中所展示之資訊處理器件1〇〇之組態的實 例的方塊圖。參看圖2 ’資訊處理器件1〇◦包括成像單元 、感測ϋ單元104、定位單元1〇6、通信單元⑽、儲存 單元no、輸入單元〗12、顯示器單元1]4、語音輸出單元 U6、振動單元118、匯流排U9及控制單元12〇。 成像單元 成像單元102可包括具有諸如電荷耦合器件（CCD)或互補 金屬氧化物半導體（CMOS)之攝像器件的相機模組。成像 單元102可使得真實空間丨成像且藉此產生一或多個輸入影 像。藉由成像單元102所產生之輸入影像可用於AR應用程 式之提供且進一步用於使用者位置之估計及出現於輸入影 像中的真實物件之袓置的估計。成像單元1〇2可與資訊處 理器件100單獨地組態且在提供AR應用程式時連接至資訊 159 ⑻.doc 201246008 處理益件100。 感測器單元 感測器單元104可包括支援藉由資訊處理器件1〇〇進行之 危險辨識的一或多個感測器。舉例而言，感測器單元104 可包括迴轉感測器、加速度感測器及地磁感測器中之至少 一者，且量測資訊處理器件100之傾斜角、3軸加速度或方 向。資訊處理器件100之傾斜角、3軸加速度或方向可用於 估計資訊處理器件100之姿勢。 此外，感測器單元104可包括雷射或紅外線範圍感測 器，該感測器量測真實空間中之真實物件與使用者之間的 距離。該範圍感測器可能能夠沿著不同於成像單元102之 定向（光軸）之方向量測該距離（參見圖4)。此可允許資訊處 理态件100辨識存在於偏離資訊處理器件1〇〇之視角之位置 處的障礙物（例如，阻擋物1〇)之存在（參見圖5：^亦可基於 藉由範圍感測器所量測之距離及資訊處理器件1 〇〇之姿勢 來估計資訊處理器件100及障礙物的相對位置。應注意， 範圍感測器可經安裝而面向任何方向，而未必如圖5中所 說明面向下。 定位單元 定位單兀106可包括量測資訊處理器件1〇〇之位置的模 組。舉例而§，定位單元1〇6可為全球定位系統（GM)模 組，其接收GPS信號且量測資訊處理器件1〇〇之緯度、經 又及尚度或者久位單元106可為諸如piaceEngine(註冊 商h )之疋位模組，其基於自無線存取點所接收之無線電 159181.doc 201246008 信號之強度來量測資訊處理器件100的位置。 通信單元 通k單元108可包括用於使資訊處理器件1〇〇與另一器件 通信之通信介面。舉例而言，通信單元1〇8可自外部器件 接收關於危險之資訊。此外，通信單元1〇8可將關於危險 之資訊傳輸至類似於資訊處理器件1〇〇或不同於資訊處理 器件100的具有危險警報功能之器件。 儲存單元 儲存單元110可藉由使用以有形方式體現之非暫時性電 腦可讀儲存媒體（諸如，半導體記憶體、硬碟、CD_ROM , 等）來儲存用於藉由資訊處理器件100處理之程式及資料。 舉例而言，儲存單元110可儲存藉由成像單元102所產生之 輸入影像、自感測器單元丨04所輸出之感測器資料、藉由 定位單元106所量測之位置資料，及藉由通信單元1〇8所接 收的外部資訊。此外，儲存單元11〇可儲存用於稱後所描 述之影像辨識處理程序的特徵資料。儲存於儲存單元 中之特徵資料為表示真實空間中之一或多個真實物件之外 觀特徵的資料。 輸入單元 輸入單元112可藉由資訊處理器件1〇〇之使用者使用以操 乍資訊處理器件100或將資訊輸入至資訊處理器件100»舉 J而。’輪入單元112可包括小鍵盤、按鈕、開關、觸控 式面板及其類似者。輸入單元112可包括手勢辨識模組， 該模組辨識出現於輸入影像中的使用者之手勢。 201246008 顯示器單元 顯示器單元114可包括具有螢幕之顯示器模組，該營幕 顯示藉由AR應用程式所產生且疊印至真實空間上的虛擬 物件。在顯示器單元114之螢幕上，亦可顯示用以向使用 者警報危險之存在的用於警告之物件β顯示器單元114之 營幕可為透明類型或非透明類型。此外，顯示器單元114 可與資訊處理器件1 〇〇單獨地级態及/或在提供八尺應用程式 時連接至資訊處理器件100。 語音輸出單元 語音輸出單元11 6可通常為揚聲器’其將聲音或語音輸 出至使用者。語音輸出單元116可用以經由使用者之聽覺 向使用者警報危險之存在。 振動單元 振動單元118可為諸如電驅動之偏心馬達的振動器。振 動單元118可用以經由使用者之觸覺向使用者警報危險之 存在。 匯流排 匯流排119可使成像單元1〇2、感測器單元1〇4、定位單 儿1。〇6、通信單元108、儲存單元u〇、輸入單元ιΐ2、顯示 器單元114 a輸出單元116、振動單元及控制單元 120彼此連接。 控制單元 控制單TC120可包括諸如中央處理單元（cpu)或數位信號 處理β (DSP)之處理器121、f己憶體122及電月遂可讀媒體 I59I81.doc 201246008 123。在圖20中展示一種該例示性控制單元12〇。控制單元 120可執行指令，該等指令形成儲存於儲存單元11〇中之程 式以（例如）使得下文所描述的資訊處理器件1〇〇之各種功能 起作用。 2-2功能組態 圖3為展示可藉由圖2中所展示之資訊處理器件之控 制單元120實施的功能之組態之實例的方塊圖。參看圖3， 控制單元120可包括應用程式單元13〇、影像辨識單元 140、估計單元15〇、地圖儲存單元152、資訊獲取單元 160、危險辨識單元no、警報單元18〇及設定單元19〇。 應用程式單元 應用程式單元130可提供AR應用程式，該八尺應用程式 使用者顯示疊印至真實空間上之虛擬物件。舉例而言， 由應用程式單元13〇所提供之从應用程式可為具有諸如 航、工作支援、資訊服務或遊戲之任何目的的應用程式 應用程式單元13〇可產生與出現於輸入影像中之真實物 相關聯的待呈現給使用者之虛擬物件接著，應用程式 心〇將顯示所產生之虛擬物件的影像輸出至顯示器單: 制程式單元13G可基於輸人影像之 心 來判定虛擬物件之顯示位置。 的、。> 影像辨識單元 影像辨識單元14G可執行藉由 影像的影像㈣處理㈣心 成像之輪' 可對照著料於儲存。„舉例而言’影像辨識單元Η 、冶存早7L110中之特徵資料來檢查自輪八 159181.doc 201246008 影像所提取的特徵資料，且藉此辨識出現於輸入影像中之 真實空間中的真實物件或區域。舉例而言，可使用David G. Lowe 之「Distinctive Image Features from Scale-Invariant Keypoints」（電腦視覺國際期刊，2〇〇4)中所描述 * 之尺度不變特徵變換（SIFT)方法來進行藉由影像辨識單元 • 140對特徵資料的檢查。此外’舉例而言，可使用Mustafa Oezuysal等人之「Fast Keypoint Recognition using Rand〇m
Ferns」（針對圖案分析及機器智慧之IEEE會報，第32卷， 第3章，第448至461頁，2010年3月）中所描述之隨機蕨方 法來進行藉由影像辨識單元14〇對特徵資料的檢查。此 外，影像辨識單元140可辨識標記（自然的或人工的標記）， 該標記揭露真實物件或區域在真實空間中之出現。影像辨 識單7〇140可將識別由於影像辨識而辨識之真實物件或區 域的資訊（例如，識別符及輸入影像中之位置或範圍）輸出 至估計單元150。 估計單元 估計單元1 50可基於藉由影像辨識單元14〇進行之影像辨 識的結果來估計存在於真實空間中之每—真實物件的位置 及每一真實物件與成像單元1〇2之間的距離。舉例而言， 估计單το 150藉由比較每一真實物件（或標記）之實際大小與 在輸入影像中之大小而估計每—真實物件與成像單元丄〇 2 之間的距離。接著’估計單元15〇可根據所估計之距離及 成像單元102之位置及姿勢（資訊處理器件100之位置及姿 勢）來估計每—真實物件相對於資訊處理器件HH)的相對位 159181.doc 201246008 置。此外，估計單兀150可根據SLAM技術之原理動態地估 計真實空間中之每一真實物件與資訊處理器件丨〇 〇之間的 相對位置。在 Andrew J_ DaviS0n之「Real_Time Simultane〇us
Localization and Mapping with a Single Camera」（第 9屆電 腦視覺IEEE國際會議之論文集，第2卷，2〇〇3，第14〇3至 1410頁）中詳細地描述SLAM技術之原理。在危險之辨識 中，可假设真貫空間中之真實物件與資訊處理器件1〇〇之 間的距離以對應於真實空間中之真實物件與使用者之間的 距離。 應注意，估計單元150可自成像單元1〇2獲取諸如變焦比 之相機參數，且根據所獲取相機參數來校正每一真實物件 之位置的估計結果及距每一真實物件之距離。 地圖儲存單元 地圖儲存單元152可藉由使用諸如半導體記憶體或硬碟 之儲存媒體來儲存藉由估計單元150所估計之每一真實物 件的位置。隨者資訊處理器件1〇〇移動，資訊處理器件 可藉此辨識曾藉由影像辨識單元14〇辨識之真實物件或區 域’即使在該真實物件或區域自輸入影像消失之後亦如 此。 資訊獲取單元 資訊獲取單元16〇可獲取待用於藉由危險辨識單元17〇進 行之危險之辨識的關於危險之資訊。該關於危險之資訊可 先前儲存於儲存單元110中或經由通信單元108自外部器件 動態地獲取。 159181.doc • 14- 201246008 有ΓΓΓs，#訊獲取單元16。可獲取定義真實空間中呈 有相對低之安全級別之危險區域的危險區域資訊。舉2 :，該危險區域可為樓梯、電扶梯、車道、交叉口、站 °、工地及其類似者。危險區域資訊可包括指示每一危險 £域之識別符及每—危險區域之範圍的座標資料。 此外’資訊獲取單元⑽可獲取危險物件資訊，該危險 :::訊定義真實空間中很有可能對使用者造成危險的危 ::件。危險物件可為(例如)真實空間中之靜態物件及動 “件當令很有可能對使用者造成危險的真實物件。舉例 :言’危險物件可為諸如置放於路上之物件的靜態障礙 物、下落物件、廣告顯示牌（advertising display)、柱子或 牆壁。此外’舉例而言’危險物件可為可以高速移動之動 態物件，諸如汽車、自行車或火車。危險物件資訊可包括 指不每-危險物件之識別符的座標資料、特徵資料、每一 危險物件之位置或其類似者。 危險辨識單元 危險辨識單元170可辨識真實空間中使用者所面對之危 險。危險辨識單元170可基於用於AR應用程式之提供的= 入影像之影像辨識的結果來辨識危險。此外，危險辨識^ 元170可基於藉由感測器單元104之範圍感測器所量測的距 每一真實物件之距離來辨識使用輸入影像未辨識的危險。 此外，危險辨識單元丨70辨識真實空間中對應於引起使用 者所面對之危險的位置或區域》在辨識危險後，危險辨識 單元170即將表示危險之細節及在真實空間中之對應位置 159181.doc 15 201246008 或區域的資訊輸出至警報單元180。 圖6為用以描述可藉由危險辨識單元17〇使用以便根據此 實施例辨識危險之參數之實例的視圖。參看圖6，將本文 中所描述之十二個+1¾參數展示為可藉由危險辨識單元 170使用之參數的實例。 (1) 使用者位置 該使用者位置為（例如）攜帶資訊處理器件i〇〇之使用者 的位置。使用者之絕對位置可藉由定位單元1〇6使用Qps 信號量測。此外，可藉由估計單元15〇基於藉由影像辨識 單元140進行之影像辨識的結果來估計使用者對於附近真 實物件或區域的相對位置》當已知附近地標之絕對位置 時，可基於使用者距地標之相對位置及地標之已知位置來 计算使用者的絕對位置。在此實施例中，可假設使用者位 置、資訊處理器件100之位置及成像單元1〇2之位置大致彼 此相等β (2) 使用者之行進速度 舉例而言，可自使用者位置隨著時間之改變來計算使用 者之行進速度。此外，當感測器單元1〇4包括加速度感測 器時，可藉由加速度感測器之輸出值的整數來計算使用者 之行進速度。 (3) 靜態物件之位置 了藉由估什單元150基於藉由影像辨識單元14〇進行之影 像辨識的結果來估計靜態物件之相對位置。可先前藉由儲 存於儲存單元110中之位置資料來定義靜態物件之已知位 15918l.doc 201246008 置。此外’可使用自外部器件（稍後描述）所獲取之位置資 料來辨識靜態物件之位置。 (4) 距靜態物件之距離 可自靜態物件對於使用者位置之相對位置來計算靜態物 件與使用者之間的距離。此外，可使用包括於感測器單元 104中之範圍感測器來量測靜態物件與使用者之間的距 離。 (5) 對於靜態物件之接近速度 可自靜態物件與使用者之間的距離隨著時間之改變來計 算使用者對於靜態物件之接近速度（或靜態物件對於使用 者的接近速度）《» (6) 動態物件之位置 可（例如）藉由估計單元150基於藉由影像辨識單元14〇進 行之影像辨識的結果來估計動態物件之相對位置。此外， 可使用自外部器件（稍後描述）所獲取之位置資料來辨識動 態物件之位置。 (7) 距動態物件之距離 可自動態物件對於使用者位置之相對位置來計算動態物 件與使用者之間的距離。此外’可使用包括於感測器單元 104中之範圍感測器來量測動態物件與使用者之間的距 離。 (8) 對於動態物件之接近速度 可自動態物件與使用者之間的距離隨著時間之改變來計 算使用者對於動態物件之接近速度（或動態物件對於使用 159181.doc -17· 201246008 者的接近速度）。 (9) 危險物件之存在 可由於藉由影像辨識單元140進行之影像辨識而辨識危 險物件之存在。可（例如）藉由對照著已知識別符之清單檢 查所辨識之真實物件的識別符來判定所辨識之真實物件是 否為危險物件。或者，可將行進速度超過預定臨限值之真 實物件臨時辨識為危險物件。 此外’可藉由由通信單元1〇8接收在危險物件之附近所 發出的k標來辨識危險物件之存在。可自使用者位置與儲 存於地圖儲存單元152中之危險物件之位置之間的距離辨 識未出現於輸入影像中之附近危險物件的存在。 (10) 危險物件之位置 可以與靜態物件之位置或動態物件之位置相同的方式來 辨識危險物件之位置。 (Π)危險區域之範圍 可由於藉由影像辨識單元140進行之影像辨識而辨識危 險區域之範圍。可先前藉由儲存於儲存單元11〇中之危險 £域資訊來疋義危險區域之範圍。此外，可使用自外部器 件所獲取之危險區域資訊來辨識危險區域之範圍。 (12)物件佔用度 物件佔用度為表示所顯示之虛擬物件在螢幕上之比例的 參數。危險辨識單元170(例如）自應用程式單元13〇獲取指 示虛擬物件之顯示量（display V〇lume)(例如，虚擬物件在 螢幕上之大小的總值）的資訊。接著，危險辨識單元17〇藉 159181.doc • 18 · 201246008 由將虛擬物件之顯示 來計算物件佔用度。 量除以輸入影像之大小（或螢幕大小） 危險辨識單元17〇藉由使用上文所描述之十二個參數中 之至少一者來辨識真實空間中使用者所面對的危險。 圖7為用以描述可藉由危險辨識單元⑺根據此實施例辨 識之危險之類型的視® 4注意，「危險」源意謂提供使 用者所關注之物件的-特定實例。參看圖7，將可藉由危 險辨識單元17G辨識之危險分類為五種類型：「與靜態物件 之碰撞「與動態物件之碰撞」、「接近危險物件」、「接近/ 進入危險區域」及「使用者注意力的禁止 (1)與靜態物件之碰撞 舉例而言，當某一靜態物件與使用者之間的距離降至預 定臨限值以下時，危險辨識單元17〇可判定存在使用者可 能與該物件碰撞之可能性。此外，當對於某一靜態物件之 接近速度超過預定臨限值時，危險辨識單元工7〇可判定存 在使用者可能與該物件碰撞之可能性。接著，危險辨識單 元Π0可將很有可能與使用者碰撞之靜態物件之存在辨識 為危險。 (2)與動態物件之碰撞 舉例而s ’當某一動態物件與使用者之間的距離降至預 定臨限值以下時，危險辨識單元17〇可判定存在使用者可 能與該物件碰撞之可能性。此外，當對於某一動態物件之 接近速度（或動態物件對於使用者之接近速度）超過預定臨 限值時，危險辨識單元170可判定存在使用者可能與該物 139181.doc -19- 201246008 件碰撞之可能性。用於關於動態物件之判定的臨限值可不 同於用於關於靜態物件之判定的上文所描述之臨限值。接 著’危險辨識單元170可將很有可能與使用者碰撞之動態 物件之存在辨識為危險。 (3) 接近危險物件 危險辨識單元170可將使用者對危險物件之接近辨識為 危險。當藉由影像辨識或藉由接收來自危險物件之信標偵 測到該危險物件之存在時，危險辨識單元17〇可判定使用 者已接近該危險物件。此外，危險辨識單元17〇可藉由比 較危險物件與使用者之間的距離與預定臨限值而判定使用 者已接近該危險物件。 (4) 接近/進入危險區域 危險辨識單元170可將使用者接近危險區域或進入危險 區域辨識為危險。當當前使用者位置係在危險區域内時， 危險辨識單元170可判定使用者已進入該危險區域。此 外’危險辨識單元170可藉由比較危險區域之邊界與當前 使用者位置之間的距離與預定臨限值而判定使用者已接近 該危險區域。此外，危險辨識單元17〇可將地板（或地面）之 位準很大程度上變化的區域辨識為危險區域。 (5) 使用者注意力的禁止 危險辨識單元170可將使用者之注意力可能被禁止的狀 態辨識為危險。當上文所描述之物件占用度超過預定臨限 值時’危險辨識單元170可判定使用者之注意力被AR應用 程式禁止。此外，當使用者之行進速度超過預定臨限值 159181.doc -20- 201246008 時’危險辨識單元i 7 〇可判定使用者之注意力可能被禁 止。 田危險辨識單元170辨識牵涉到上文所描述之五種類型 中之任一者的危險時’其可將表示所辨識危險之細節（例 如’危險之類型、危險物件或危險區域之識別符或名稱， 等）及在真實空間中之對應位置或區域的資訊輸出至警報 單元180。 外部器件之實例 可藉由將關於危險之資訊自外部器件提供至資訊處理器 件100來增強資訊處理器件100辨識危險的性能。圖8至圖 1 〇展示此外部器件之實例。 參看圖8’無線電傳輸器2〇a係置放於台階12上。台階12 為很有可能對使用者Ua造成危險之真實物件或區域.無線 電傳輸器20a可週期性地傳輸用於向附近器件通知危險之 仏標。該信標可含有台階12之識別符及位置資料。當該信 標被通信單元1 08接收到時，資訊處理器件1 〇〇之資訊獲取 單元160獲取含於該信標中的資訊作為外部資訊，且將所 獲取資訊輸出至危險辨識單元丨70。危險辨識單元n〇可藉 此辨識台階12之存在及其位置。 參看圖9 ’使用者Ub可攜帶資訊處理器件2〇b。資訊處理 器件20b為具有與資訊處理器件ι〇〇等效之危險警報功能的 器件。使用者Ub正在使用者Ua所在之方向上奔跑。資訊 處理器件20b可辨識使用者ub之行進速度超過預定臨限值 且傳輸用於向附近器件通知危險之信標。舉例而言，該信 159181.doc -21 · 201246008 標可含有資訊處理器件20b之識別符、位置資料及速度資 料。當該信標被通信單元108接收到時，資訊處理器件1〇〇 之資訊獲取單元160獲取含於該信標中的資訊作為外部資 訊，且將所獲取資訊輸出至危險辨識單元17〇。危險辨識 單元170可藉此辨識存在使用者Ua可能與使用者Ub碰撞之 可能性。 參看圖10，展示可能能夠與資訊處理器件100通信之資 料伺服器2〇Ci資料伺服器20C為儲存與位置資料相關聯的 識別很有可能對使用者造成危險之真實物件或區域之資料 (例如，真實物件或區域之識別符）的伺服器。舉例而言， 儲存於資料伺服器20c中之資料對應於上文所描述之危險 物件資訊及危險區域資訊。資訊處理器件1〇〇之資訊獲取 單元160自資料伺服器20c下載危險物件資訊及危險區域資 訊（下載圖10中之資料22)。危險辨識單元17〇可藉此使用所 下载之危險物件資訊及危險區域資訊來辨識危險。 警報單元 田（例如）在AR應用程式提供至使用者之時間期間藉由危 險辨識單元170辨識出危險時，警報單元18〇可向使用者警 報危險之存在。舉例而言’可藉由控制AR應用程式之顯 示來進行藉由警報單元180進行之警報。更特定而言，在 此實施例中，當藉由危險辨識單元17〇辨識出危險時，警 報單元丨鳴斷AR應隸式1著，警報單元刚控制ar 應用程式之顯不。AR應用程式之顯示的控制可為簡單地 暫時中止或終止ARJ|用程式。此外，警報單元刚可拒絕 159181.doc •22· 201246008 顯不於AR應用程式中之虛擬物件的顯 — „ 作為一實例， 警報單元180使得所顯示之虛擬物件閃 4干透明。此 外’警報單元180可將用於警告之物件顯示於顯示器單元 114之螢幕上，AR應用程式係提供於顯示器單元U4之= 幕上。舉例而言，該用㈣告之物件可為向使用者指示藉 由危險辨識單元1 70所辨識之危險之位置或區域的物件。 或者或另外’可藉由除了 AR應用程式之顯示之控制以 外的手段來進行藉由警報單元18〇進行之警報。舉例而 言，警報單元180可藉由自語音輸出單元116輸出警告聲音 或警告訊息而向使用者警報危險之存在。此外，警報單元 180可藉由使振動單元118振動而向使用者警報危險之存 在。 警報單元180可為在不取決於八尺應用程式之情況下獨立 地併入至資訊處理器件100中的函式。或者，安裝至資訊 處理器件100中之AR應用程式中的任一者可具有如警報單 元180之函式。 圖11至圖14展示此實施例中藉由警報單元18〇進行的對 危險之存在之警報的實例。 (1)第一實例 圖11之左邊的影像Imll為可藉由ar應用程式顯示之輸 出影像的實例。在影像Iml 1中，虛擬物件T1經顯示而疊印 至真實空間中之建築物上。舉例而言，虛擬物件T1為表示 關於建築物中之飯店之評等的資訊的物件。 圖11之右邊的影像Iml2為在顯示影像Imll之後在由於使 159181.doc •23- 201246008 用者Ua已接近台階12而藉由警報單元180進行警報時的輸. 出影像之實例。在影像Iml2中，虛擬物件T1經顯示而為半 透明的。很有可能引起危險之真實物件或區域藉此不被虛 擬物件T1隱藏。此外，顯示向使用者指示台階之位置（區 域）的物件A1及指示訊息以向使用者警示的物件A2。使用 者可藉此迅速且準確地辨識他/她所面對之危險。 (2) 第二實例 圖12之左邊的影像im2i為可藉由AR應用程式顯示之輸 出影像的實例。亦在影像Im21中，虛擬物件T1經顯示而疊 印至真實空間中之建築物上。此外，對於使用者Ua而言很 有可能為障礙物之阻擋物10出現於影像Im2i*。 圖12之右邊的影像lm22為在顯示影像Im21之後在由於使 用者Ua已接近阻檔物1〇而藉由警報單元ι80進行警報時的 輸出影像之實例"在影像Im22中，自螢幕刪除虛擬物件 T1。此外’顯示向使用者指示阻擋物1〇之位置且進一步指 示訊息以向使用者警示的物件A3。儘管阻擔物1〇偏離勞幕 之視角，但危險辨識單元170可辨識藉由阻擋物1〇對使用 者Ua所造成之危險，此係因為感測器單元ι〇4之範圍感測 器量測距阻擋物10之距離或地圖儲存單元152儲存阻擋物 10的位置。 (3) 第三實例 圖13之左邊的影像Im3 1為可藉由AR應用程式顯示之輸 出影像的實例。亦在影像Im3 1中’虛擬物件T1經顯示而疊 印至真實空間中之建築物上。 159181.doc •24· 201246008 圆13之右邊的衫像Im3 2為在顯示影像im3 1之後在由於使 用者Ua已開始奔跑而藉由警報單元ι8〇進行警報時的輸出 影像之實例。在影像Im32中，自螢幕刪除虛擬物件丁丨，且 AR應用程式終止。以此方式，警報單元18〇可藉由簡單地 暫時中止或終止AR應用程式而向使用者警示。 (4)第四實例 圖14之左邊的影像lm41為可藉由AR應用程式顯示之輸 出影像的實例。亦在影像Im4l中，虛擬物件T1經顯示而疊 印至真實空間中之建築物上。此外，在使用者1^前方存在 溝渠14。溝渠14亦可辨識為危險物件或危險區域。 圖14之右邊的影像Im42為在顯示影像Im41之後在由於使 用者Ua已接近溝渠14而藉由警報單元18〇進行警報時的輸 出影像之實例。亦在影像Im42中，虛擬物件T1經顯示而為 半透明的。此外，警報單元18〇使振動單元118振動且自語 心輸出單兀116輸出警告訊息’以此方式，藉由經由聽覺 或觸覺進行警報而不僅僅是視覺警報，有可能更強烈地向 使用者警示。 設定單元 π疋單元19〇可管理關於藉由危險辨識單元HQ進行之危
險以不同方式進行警報。 声元180針對每一類型之所辨識危 。此外’設定單元190可經由輸入 159181.doc -25- 201246008 單元112提示使用者指定警報之方式。 此外’舉例而言，設定單元190可保持向使用者警報同 一危險之次數的上限。警報單元180計數針對危險物件及 危險區域之每一識別符或位置進行警報的次數。接著，警 報單元180可制止向使用者警報已向使用者進行警報達等 於上限之次數的危險之存在。此外，舉例而言，設定單元 190記錄使用者之動作歷史。舉例而言，使用者之動作歷 史可為藉由定位單元106所量測的使用者之移動的歷史。 接著，當使用者正執行類似於含於使用者之動作歷史中之 動作的動作時，警報單元180可制止向使用者警報危險之 存在。藉由以此方式停用警報，有可能防止針對已由使用 者辨識之危險進行過度警報。 此外，設定單元190可提示使用者指定應預先經由輸入 單元U2停用警報的危險物件或危險區域之識別符或位 置。在此狀況下，針對由使用者明確指定之危險物件或危 險區域停用藉由警報單元18〇進行之警報。 3.根據實施例之處理程序的流程 下文中參看圖1 5至圖19針對例示性之五個情境中之每一 者描述根據此實施例的藉由資訊處理器件1〇〇進行之處理 程序之流程的實例。應注意，資訊處理器件1〇〇可僅執行 五個情境中之一處理程序或執行複數個處理程序。此外， 資訊處理器件議可執行具有不同於下文料實例所描述 之處理程序之流程的處理程序。 3 -1.第一情境 159181.doc • 26 - 201246008 圖15為展示第一情境下之危險警報處理程序的流程之實 例的机程I在第—情境下，執行基於針對輸人影像之影 像辨識之結果進行的危險辨識。 參看圖15，首先藉由影像辨識單元140獲取輸入影像（步 驟siio)。接下來，影像辨識單元14〇辨識出現於所獲取輸 入影像中之真實物件（步驟SU2)。接著估計單元15〇估計 藉由影像辨識單元14 〇所辨識之每一真實物件之位置及使 用者位置（步驟SU4)。接著，估計單元15〇基於每一真實物 件之所估計位置及使用者位置來計算每一真實物件與使用 者之間的距離，且進一步計算使用者對於每一真實物件之 接近速度（步驟S116)。 接著，危險辨識單元170可藉由比較藉由估計單元15〇分 別估計及計算的每一真實物件與使用者之間的距離及使用 者對於每一真實物件之接近速度與預定臨限值而判定是否 存在危險（步驟S1 60)·»舉例而言，當使用者對於某一真實 物件之接近速度超過預定臨限值時，危險辨識單元17〇可 判定存在使用者可能與該真實物件碰撞之可能性。此外， 當某一危險物件與使用者之間的距離降至預定臨限值以下 時，危險辨識單元170可判定使用者正接近該危險物件。 當在步驟S160中危險辨識單元17〇判定存在危險時，警 報單元180插斷藉由應用程式單元13σ所提供之八尺應用程 式（步驟S170)。接著，警報單元18〇藉由圖u至圖14中所說 明之方式或另一方式向使用者警報危險之存在（步驟 S180)。另一方面，當在步驟316〇中危險辨識單元17〇判定 159181.doc •27· 201246008 不存在危險時，處理程序返回至步驟su〇。 3-2.第二情境 圖16為展示第二情境下之危險警報處理程序的流程之實 例的流程圖。在第二情境下，執行使用自資料祠服器所接 收之關於危險之資訊進行的危險辨識。 參看圖16,資訊獲取單元16〇首先經由通信單元ι〇8自外 部器件獲取關於危險之資訊（步驟sl2〇)。在此實例中，假 «X自圖1 0中所說明之資料伺服器2〇c獲取定義危險物件之 危險物件資訊及定義危險區域之危㈣域資訊。資訊獲取 單7G 160將在步驟812〇中所獲取之危險區域資訊儲存至儲 存單元uo中（步驟S122)e接著，定位單元1〇6量測使用者 位置（步驟S124)。在步驟8124中，替代於藉由定位單元 106來量測使用者位置，可藉由估計單元15〇基於輸入影像 之影像辨識的結果來估計使用者位置。 接著，危險辨識單元17〇可基於危險區域資訊及危險物 件資訊以及使用者位置而判定是否存在危險（步驟S162)。 舉例而言，當使用者位置被包括於藉由危險區域資訊所指 示之危險區域的範圍中時，或當危險區域之邊界與使用者 位置之間的距離降至預定臨限值以下時，危險辨識單元 1 70可判疋使用者已進入或正接近危險區域。此外，當藉 由危險物件資訊所指示之危險物件的位置與使用者位置之 間的距離降至預定臨限值以下時，危險辨識單元17〇可判 疋在使用者附近存在危險物件。 當在步驟S162中危險辨識單元17〇判定存在危險時，警 159181.doc -28- 201246008 程 所 驟 定 報單元180插斷藉由應用程式單元130所提供之AR應用 式（步驟Sl70)。接著，警報單元180可藉由圖11至圖14中 說明之方式或另一方式向使用者警報危險之存在（步 S18〇)。另一方面，當在步驟S162中危險辨識單元17〇判 不存在危險時，處理程序返回至步驟S124。 3-3•第三情境 圖17為展示第三情境下之危險警報處理程序的流程之實 例的机程圖。在第三情境下，執行基於自不同於資料伺服 器之外部器件所接收之資訊進行的危險辨識。 參看圖17，資訊獲取單元16〇首先經由通信單元1〇8自外 部器件獲取關於危險之資訊（步驟S130)。在此實例中，假 "又通知危險之信標係自圖8中所說明之無線電傳輸器20a或 圖9中所說明之資訊處理器件2〇b接收。當資訊獲取單元 160接收到通知危險之信標時，危險辨識單元170辨識危險 (步驟S164)。危險辨識單元17〇可在信標之接收後即立即 辨識危險或基於含於該信標中之位置資料及使用者位置來 判定是否存在危險。 當在步驟S164中危險辨識單元170辨識危險時，警報單 疋18〇插斷藉由應用程式單元130所提供之AR應用程式（步 驟S170)。接著，警報單元18〇藉由圖u至圖14中所說明之 方式或另一方式向使用者警報危險之存在（步驟sl8〇)。 3_4.第四情境 圖18為展示第四情境下之危險警報處理程序的流程之實 例的流程圖。在第四情境下，執行使用基於輸入影像之影 159181.doc -29· 201246008 像辨識的結果所產生之地圖進行的危險辨識。 參看圓18，首先藉由影像辨識單元14〇獲取輸入影像（步 驟S 140)。接下來，影像辨識單元ι4〇辨識出現於所獲取輸 入影像中之真實物件（步驟Sl42)。接著估計單元“Ο估 計藉由影像辨識單元14〇所辨識之每一真實物件的位置及 使用者位置（步驟S144卜接著，估計單元15〇將每一真實 物件之所估計位置及使用者位置儲存至地圖儲存單元M2 ^步驟⑽）。其後，估計單元15叫算儲存於地圖儲存 單疋152中之每一真實物件的位置與最新使用者位置之間 的距離’且進一步計算使用者對於每一真實物件之接近速 度（步驟S148)。 接著，危險辨識單元170藉由比較藉由估計單元15〇分別 估計及計算的每一真實物件與使用者之間的距離及使用者 對於每冑實物彳之接近速度與預定臨限值而判定是否存 在危險（步驟si66) m辨識單元17〇判定存在危險 時’警報單元180插斷藉由應用程式單元⑽所提供之从 應用程式（步鄉S170)。接著，警報單元18〇可藉由（例如）圖 11至圖14中所說明之方式或另—方式向使用者警報危險之 存在（步驟S18G)。另—方面，當在步驟si66中危險辨識單 元Π0判定不存在危險時’處理程序返回至步驟si4〇。 3-5.第五情境 圖19為展不第五情境下之危險警報處理程序的流程之實 例的流程圖。在第五情境下，執行使用自應用程式單元 130所獲取之資訊進行的危險辨識。 159181.doc •30· 201246008 參看圖19,危險辨識單元170首先自應用程式單元i3〇獲 取指不虛擬物件之顯示量的資訊(步驟S15〇”接著，产險 辨識翠元17G藉由將虛擬物件之顯示量除以輸人影像I大 小(或勞幕大小)而計算物件佔用度(步驟si52)。 接著’危險辨識單元17〇可藉由比較物件㈣度與預定 臨限值而狀是否存在危險（S168)D當危險辨識單元 判疋存在危險時’警報單元18〇插斷藉由應用程式單元13。 所提供之AR應用程式（步驟sl7〇卜接著，警報單元18〇可 藉由圖11至圖丨4中所說明之方式或另一方式向使用者警報 危險之存在（步驟S180)。另一方面，當在步驟S168中危險 辨識單元170判定不存在危險時，處理程序返回至步驟 S150。 4.概要 上文參看圖1至圖19詳細地描述本發明之各種實施例。 在AR應用程式提供至使用者之時間期間，當在真實空間 中辨識出使用者所面對之危險時，根據此等實施例之資訊 處理器件100向使用者警報危險的存在。此減小了使用者 在真實世界中所面對之危險的風險。結果，使用者可較不 擔心地使用AR應用程式。 此外’根據一實施例’可藉由控制AR應用程式之顯示 進行向使用者之警報。AR應用程式之使用者可藉此在不 錯過警報之情況下迅速辨識危險。 此外*根據一實施例’可藉由插斷AR應用程式進行警 報。因此，與安裝至資訊處理器件100中之AR應用程式之 159181.doc 201246008 類型無關’有可能在AR應用程式被提供的時間期間向使 用者警報危險之存在0此外’可將上文所描述之警報功能 實施為不取決於任何AR應用程式的獨立功能。在此狀況 下’可能不需要使得每一 AR應用程式設法減小危險之風 險’以使得AR應用程式之開發的靈活性可得以增強。 此外’根據一實施例，可基於用於AR應用程式之提供 的輸入影像之影像辨識的結果來辨識使用者所面對之危 險。特定言之’基於影像辨識之結果來估計諸如真實空間 中之真實物件與使用者之間的距離、使用者對於每一真實 物件之接近速度，或使用者之行進速度的參數。接著，可 使用所估計參數來辨識危險。在此狀況下，可藉由以低成 本擴展能夠提供AR應用程式之器件而容易地達成上文所 描述之危險警報處理程序。 此外’根據一實施例’可將真實空間中之彳艮有可能與使 用者碰撞之障礙物的存在辨識為危險。此減小了在使用者 之注意力被吸引至AR應用程式之同時使用者與障礙物碰 撞的風險。 此外，根據一實施例，亦可將使用者對危險區域之接近 或進入或對危險物件之接近辨識為危險。此減小了在使用 者之注意力被吸引至AR應用程式之同時使用者接近或進 入危險區域或使用者接近危險物件的風險。 此外，根據一實施例，可自外部器件提供關於危險之資 訊。當自資料伺服器提供定義危險區域或危險物件之資訊 時，與資訊處理器件100藉由自身來辨識危險的狀況相比 159l81.doc *32- 201246008 較而言，資訊處理器件100之危險辨識性能得以增強。此 外，當另一使用者之具有與資訊處理器件1〇〇等效之危險 警報功能的器件提供關於危險之資訊時，可藉由器件之間 的協作以較高的可靠性來辨識危險。此外，當發出關於危 險之資訊的器件被置放於很有可能引起危險之真實物件或 區域中時，危險可在具有高程度危險之位置中以更高的可 靠性被辨識。 此外，根據一實施例，將能夠沿著不同於成像器件之光 軸的方向量測距真實空間中之真實物件之距離的範圍感測 器用於危險辨識。此可使得能夠辨識僅藉由影像辨識不可 辨識之危險》 此外，根據一實施例，基於所顯示之虛擬物件在螢幕上 之比例來判定使用者的注意力是否被禁止。此減小了使用 者歸因於顯示於螢幕上之過多虛擬物件而過晚注意到存在 於真實世界中之危險的風險。 此外，根據一實施例，基於警報之次數、使用者之動作 歷史或藉由使用者進行之明顯設定而停用對於使用者而言 不必要的警報。此防止了使用者對AR應用程式之使用被 對於使用者而言不合需要的警報禁止。 此外，根據一實施例，可在危險之辨識後即暫時中止戋 終止AR應用程式。在此狀況下，使用者之注意力可更可 靠地被吸引至所辨識危險。此外，藉由AR應用程式所顯 示之虛擬物件可閃光或半透明。因此，出現於輸入影像中 之危險的存在不被虛擬物件完全隱藏。 159181.doc •33- 201246008 此外，根據一實施例，可在危險之辨識後即將用於警告 之物件顯示於螢幕上。該用於警告之物件可向使用者警報 所辨識危險之位置或區域。使用者可藉此迅速辨識危險之 引起。 儘管上文參看附加圖式描述了本發明之較佳實施例，但 本發明並不限於此。熟習此項技術者應理解，各種修改、 組合、子組合及變更可取決於設計要求及其他因素而發 生，只要其在附加申請專利範圍或其等效物之範疇内即 *5]* 〇 舉例而言，本技術可採用以下組態。 ⑴ 含 訊處理器件，其能夠向-使用者提供顯示叠印』 真實空間上之一虛擬物件的一擴增實境應用程式，其$ 一危險辨識單元，其辨識該使用者在該真實空間中汽 對之一危險；及 -警報單元，其在該擴增實境應用程式提供至該使用 之時間期間在藉由該危險辨識單元辨識出_危 用者警報一危險之存在。 门5玄 (2) 根據Π)之資訊處理器件，其中 該警報單元藉由控制該擴增實境應用 使用者警報-危險之存在。 '之顯-而向 (3) 15918 丨.doc •34· 201246008 根據（1)或（2)之資訊處理器件，其中 該警報單元藉由插斷該擴增實境應用程式而向該使用者 警報一危險之存在。 (4) 根據（1)至（3)中任一者之資訊處理器件，其中 在藉由該危險辨識單元辨識出—危險時，該警報單元暫 時中止或終止提供至該使用者之該擴增實境應用程式。 (5) 根據（1)至（4)中任一者之資訊處理器件，其中 在藉由該危險辨識單元辨識出一危險時，該警報單元使 得顯示於提供至該使用者之該擴增實境應用程式中的一虛 擬物件閃光或半透明。 (6) 根據⑴至（5)中任一者之資訊處理器件，其中 在藉由該危險辨識單元賴出―危㈣，該警報單元將 用於警告之物件顯示於_络墓 螢幕上，該擴增實境應用程式 係提供於該螢幕上。 ⑺ 根據⑴至（6)中任一者之資訊處理器件，立中 該用於警告之物件指示對 対應於藉由該危險辨識單元所辨 識之一危險之引起的一位置或一區域。 (8) 根據⑴至⑺中任—者之資訊處理器件，其t 該危險辨識單元將該真實 I間甲很有可能與該使用者碰 J59181.doc 35· 201246008 撞之一真實物件的存在辨識為一危險。 ⑼ 根據⑴至(8)中任一者之資訊處理器件，其進一步勺 含： l -資訊獲取單元，其獲取定義該真實空間中具有一相對 低之安全等級之一危險區域的危險區域資訊其中 該危險辨識單元將該使用者對藉由該危險區域資訊所定 義之該危險區域之接近或進入辨識為一危險。 (10) 根據（1)至（9)中任一者之資訊處理器件，其進一步包 含： 一資訊獲取單元，其獲取定義該真實空間中报有可能對 該使用者造成-危險之一危險物件的危險物件資訊，其^ 該危險辨識單元將該使用者對藉由該危險物件資訊所定 義之該危險物件之接近辨識為一危險。 (Π) 根據（1)至（1 〇)中任一者之資訊處理器件，其中 在該所顯示之虛擬物件在一螢幕上之一比例超過一預定 臨限值時，該危險辨識單元辨識一危險。 (12) 根據（1)至（11)中任—者之資訊處理器件，其中 該警報單元不向該使用者警報已向該使用者進行一警報 達等於一預定上限之次數的一危險之存在。 (13) 159181.doc •36· 201246008 根據（1)至（12)中任一者之資訊處理器件’其中 在該使用者正執行類似於含於該使用者之一動作歷史中 之一動作的一動作時，該警報單元不向該使用者警報一危 險之存在。 (14) 根據（1)至（13)中任一者之資訊處理器件’其進一步包 含： 一設定單元，其針對一先前由該使用者指定之一危險停 用藉由該警報單元進行的一警報。 (15) 根據（1)至（14)中任一者之資訊處理器件，其進一步包 含： 一範圍感測器，其量測該真實空間中之一真實物件與該 使用者之間的一距離，其中 該危險辨識單元基於藉由該範圍感測器所量測之距每一 真實物件之距離而辨識該使用者所面對的一危險。 (16) 根據（15)之資訊處理器件，其中 該範圍感測器經安裝而能夠沿著不同於用於該擴增實境 應用程式之提供的一成像器件之一光轴的一方向量測該距 離。 (17) 根據（1)至（15)中任一者之資訊處理器件，其進一步包 含： 乙 159181.doc -37- 201246008 一通信單兀’其自-外部器件接收關於-危險之資訊， 其中 該危險辨識單7C使用藉由該通信單元所接收之該關於一 危險之資訊來辨識該使用者所面對的-危險。 (18) 根據（17)之資訊處理器件其中 該外《ΡΙΙ件為置放於—真實物件上或置放於很有可能對 該使用者造成-危險之-區域中的一器件。 (19) 根據（17)之資訊處理器件，其中 料部器件為另—使用者之具有與該資訊處理器件等效 之危險警報功能的一器件。 (20) 根據（17)之資訊處理器件，其中 =於I危險之資訊為識職有可能對該制者造成一 =真實物件或-區域之-位置或-範圍的資訊，且 元基於該關於-危險之資訊及該使用者之 來辨識錢用者所面對的— (21) 一種在—資訊處理器件中 能夠向-使用者提供顯示疊印=二=訊處:器件 件的—擴增實境應㈣式，該方法包含Γ間上之-虛擬物 在該擴增實境應用程式提 該真實空間中_ #'該❹者之時間期間辨識 I59181.doc -38· 201246008 在危險經辨識出時向該使用者警報一危險之存在。 (22) 。種使件-電腦控制―資訊處㈣件之程式，該資訊處 理器件此夠向-使用者提供顯示疊印至一真實空間上之一 •纽物件的-擴增實境應用程式以起到以下各者的作用： I險辨識單％ ’其辨識在該真實空間中該使用者所面 對之一危險；及 §報單元’其在該擴增實境應用程式提供至該使用者 之時間期間在藉由該危險辨識單元辨識出一危險時向該使 用者警報一危險之存在。 【圖式簡單說明】 圖1為展示可使用擴增實境應用程式之情形之實例的視 圖； 圆2為展示根據實施例之資訊處理器件的組態之實例的 方塊圖； 圖3為展示藉由根據實施例之資訊處理器件之控制單元 所實施的功能之組態之實例的方塊圖； 圖4為用以描述根據實施例之資訊處理器件中之成像器 件及範圍感測器的佈局的第一例示性視圖； 圖5為用以描述根據實施例之資訊處理器件中之成像写 件及範圍感測器的佈局的第二例示性視圖； 圖6為用以描述可用於根據實施例辨識危險之參數之實 例的視圖， 圖7為用以描述可根據實施例辨識之危險之類型的視 159181.doc -39- 201246008 圖； 第==實施例之傳輪關於危險之資訊的器件之 第=二=實施例之傳輪關—之 於危險之資訊的器件之 圖為展不根據實施例之傳輸關 第一實例的視圖； 圖11為展示根據實施例的藉 實例的視圖； 由警報單元進行之警報之第 圖12為展示 實例的視圖； 根據實施例的藉由警報單元進行之警報之第 =為展示根據實施例的藉由警報單元進行之警報之第 三實例的視圖； d詈m之第 圖14為展示根據實施例的藉由警報單 四實例的視圖； ㊉仃之詈報之 圖為展不第一情境下之危險警報處理程序 例的流程圖； 圖為展不第二情境下之危險警報處理程序的流程 例的流程圖； 貝 第 的流程之實 圖17為展示第三情境下之危險警 例的流程圖； 報處理程序的流程之實 圖Μ為展示第四情境下之危險警報處理程序的流程 例的流程圖； 圖19為展示第五情境下之危險警報處理程序的流程 之實 之實 159lSl.doc -40 - 201246008 例的流程圖；及 圖20為圖2之控制單元之一實施的方塊圖 【主要元件符號說明】 1 真實空間 . 10 阻擋物（危險物件之實例） 12 台階（危險區域之實例） 20a-c 外部器件 100 資訊處理器件 102 成像單元 104 感測器單元 106 定位單元 108 通信單元 110 儲存單元 150 估計單元 160 資訊獲取單元 170 危險辨識單元 180 警報單元 190 設定單元 . A1 物件 . A2 物件 Iml 1 影像 Im 12 影像 ΤΙ 虛擬物件 Ua 使用者 159181.doc • 41 -

Claims (1)

  1. 201246008 七、申請專利範圍： 1 · 一種裝置，其包含： 一記憶體，其儲存指令；及 一控制單元，其執行該等指令以： 發送用以為一使用者顯示疊印至真實空間之一表示 上之一第一虛擬影像的信號； 發送用以為3亥使用者識別一所關注之潛在來源的信 號，該所關注之潛在來源係在真實空間之該表示中的 使用者聚焦區之外部；及 發送用以向該使用者通知該所關注之潛在來源的信 號。 2..如請求項丨之裝置，其中識別一所關注之潛在來源包含 分析用以產生真實空間之該表示的輸入信號。 3 ·如明求項丨之裝置，其中該所關注之潛在來源包含對於 該使用者而言係危險的一潛在來源。 4. 如吻求項丨之裝置，其中該所關注之潛在來源係至少部 分地由該第一虛擬影像封閉。 5. 如4求項i之裝置，纟中發送用以通知該使用者之信號 進步包含發送用以變更該第一虛擬影像之信號。 6·如哨求項!之裝置，其中發送用以通知該使用者之信號 進一步包含發送用以產生一音訊警報、一觸覺警報或— 視覺警報中之至少—者的信號。 青求項1之裝置，其中該視覺警報包含一第二虛擬影 159181.doc 201246008 8·如請求項1之裝置’其中該控制單元執行該等指令以： 發送用以監視一使用者動作之信號；及 部分地基於該所監視之使用者動作來識別該所關注之 潛在來源。 < 9.如請求項8之裝置’其中該控制單元執行該等指令以義 於該所監視之使用者動作來判定該制者是否 二 關注之潛在來源。 1〇·如請求項8之裝置’其中該所監視之使用者動作包含一 系列動作。 11·如請求項Η)之裝置，其中該控制單元執行該等指令 由比較該系列動作中之動作的-數目與使用者動作之一 ^限數目而判定該使用者是否知曉該所關注 源。 甘求 請求項歡裝置，其中該控制單元執行該等指令 疋忒系列動作是否指示該使用者已避開該所關注之潛 來源或已接近該所關注之潛在來源中的至少一者。 13·如4求項8之裝置’其中該控制單元執行該等指令 刀地基於該所監視之使用者動作來判定該所關注之潛 來源是否為該使用者所關注。 ' 14·如請求項13之裝置，其中該所監視之❹者動作為對於 該所關左之潛在來源所屬於的所關注之潛在來源之 型的一反應。 頸 .如請求項！之裝置，其中執行該等指令以識別該所關生 之潛在來源進一步包含執行真實空間之該表示的一分 139181.doc 201246008 析接收指不該裝置與該所關注之潛在來源之間的一距 離之—信號，或自一外部器件接收一信號中 者。 16. 17. 18. 19. 20. 如清求項15之裝置’其中執行—分析包含針對該所關注 之潛在來源而搜尋真實空間之該表示。 如明求項1之裝置’彡中該裝置為一使用者器件，且該 控制單元執行該等指令以將用以識別一所關注之潛在來 源的s亥等信號發送至一遠端伺服器。 如β求項1之裝置，其中該裝置為一伺服器，且該控制 早疋執行1¾等指♦以發送用α冑別一力關注之潛在來源 的佗號包含將用以識別一所關注之潛在來源的該等信號 發送至一使用者器件。 一種方法，其包含： 為使用者顯示疊印至真實空間之一表示上的一虛擬 影像； 為該使用者識別一所關注之潛在來源，該所關注之潛 在來源係在真實空間之該表示中的一使用者聚焦區之外 部；及 向該使用者通知該所關注之潛在來源。 一種儲存指令之以有形方式體現之非暫時性電腦可讀媒 體，在藉由一處理器執行時，該等指令執行一方法，該 方法包含： 為一使用者顯示疊印至真實空間之一表示上的一虛擬 影像； 159181.doc 201246008 為該使用者識別_所關注之潛在來源，該所關注之潜 在來源係在真實空間之該表示中的-使用者聚焦區之外 部；及 向該使用者通知該所關注之潛在來源。 159181.doc
TW101100369A 2011-01-28 2012-01-04 Information processing device, alarm method, and program TW201246008A (en)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2011016440A JP5691568B2 (ja) 2011-01-28 2011-01-28 情報処理装置、報知方法及びプログラム

Publications (1)

Publication Number Publication Date
TW201246008A true TW201246008A (en) 2012-11-16

Family

ID=46580333

Family Applications (1)

Application Number Title Priority Date Filing Date
TW101100369A TW201246008A (en) 2011-01-28 2012-01-04 Information processing device, alarm method, and program

Country Status (9)

Country Link
US (1) US10909759B2 (zh)
EP (1) EP2668553B1 (zh)
JP (1) JP5691568B2 (zh)
KR (1) KR20140014117A (zh)
CN (1) CN102682571B (zh)
BR (1) BR112013018603A2 (zh)
RU (1) RU2013133883A (zh)
TW (1) TW201246008A (zh)
WO (1) WO2012101720A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI758970B (zh) * 2020-11-24 2022-03-21 鴻海精密工業股份有限公司 可移動障礙物位置判斷方法、裝置、電子設備及系統

Families Citing this family (101)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101765214B1 (ko) 2011-07-01 2017-08-04 엠파이어 테크놀로지 디벨롭먼트 엘엘씨 제스처 기반 게임을 위한 안전 설계
CN103764235B (zh) 2011-08-31 2016-03-23 英派尔科技开发有限公司 用于基于姿势的游戏系统的位置设置
JP5826407B2 (ja) 2011-12-02 2015-12-02 エンパイア テクノロジー ディベロップメント エルエルシー ジェスチャーベースのゲームシステムの安全方式
US8790179B2 (en) * 2012-02-24 2014-07-29 Empire Technology Development Llc Safety scheme for gesture-based game system
KR101899977B1 (ko) * 2012-07-10 2018-09-19 엘지전자 주식회사 이동 단말기 및 그것의 제어 방법
JP5659195B2 (ja) * 2012-07-17 2015-01-28 株式会社東芝 画像提示装置及び方法
US8953841B1 (en) * 2012-09-07 2015-02-10 Amazon Technologies, Inc. User transportable device with hazard monitoring
KR101989893B1 (ko) * 2012-10-29 2019-09-30 엘지전자 주식회사 헤드 마운트 디스플레이 및 이를 이용한 오디오 신호 출력 방법
WO2014098033A1 (ja) * 2012-12-17 2014-06-26 Iwata Haruyuki 携帯型移動支援装置
EP2936443A1 (en) * 2012-12-21 2015-10-28 Metaio GmbH Method for representing virtual information in a real environment
CN103116451B (zh) * 2013-01-25 2018-10-26 腾讯科技（深圳）有限公司 一种智能终端的虚拟角色交互方法、装置和系统
US9878235B2 (en) * 2013-06-07 2018-01-30 Sony Interactive Entertainment Inc. Transitioning gameplay on a head-mounted display
JP6160290B2 (ja) * 2013-06-21 2017-07-12 富士通株式会社 情報処理装置、判定方法および判定プログラム
US9630105B2 (en) 2013-09-30 2017-04-25 Sony Interactive Entertainment Inc. Camera based safety mechanisms for users of head mounted displays
US9729864B2 (en) * 2013-09-30 2017-08-08 Sony Interactive Entertainment Inc. Camera based safety mechanisms for users of head mounted displays
US20150123992A1 (en) * 2013-11-04 2015-05-07 Qualcomm Incorporated Method and apparatus for heads-down display
JP2015118442A (ja) * 2013-12-17 2015-06-25 ソニー株式会社 情報処理装置、情報処理方法およびプログラム
JP6120444B2 (ja) * 2013-12-25 2017-04-26 Kddi株式会社 ウェアラブルデバイス
JP2015134079A (ja) * 2014-01-17 2015-07-27 株式会社ユニバーサルエンターテインメント ゲーミングマシン
US9654675B2 (en) * 2014-03-25 2017-05-16 Kessler Optics & Photonics Solutions Ltd. Optical attachment for deviating field of view
JP6376807B2 (ja) * 2014-04-02 2018-08-22 キヤノン株式会社 表示装置、表示制御方法及びプログラム
US10600245B1 (en) * 2014-05-28 2020-03-24 Lucasfilm Entertainment Company Ltd. Navigating a virtual environment of a media content item
JP2016004493A (ja) * 2014-06-18 2016-01-12 キヤノン株式会社 画像処理装置およびその制御方法
JP5777786B1 (ja) * 2014-09-12 2015-09-09 キヤノン株式会社 情報処理装置、情報処理方法、プログラム
KR102276847B1 (ko) * 2014-09-23 2021-07-14 삼성전자주식회사 가상 오브젝트 제공 방법 및 그 전자 장치
CN104333654B (zh) * 2014-10-14 2018-01-23 京东方科技集团股份有限公司 危险提醒方法及装置以及便携式电子设备
US9311802B1 (en) * 2014-10-16 2016-04-12 Elwha Llc Systems and methods for avoiding collisions with mobile hazards
US9582976B2 (en) * 2014-10-16 2017-02-28 Elwha Llc Systems and methods for detecting and reporting hazards on a pathway
CN107850953B (zh) 2014-11-05 2021-08-31 威尔乌集团 用于在虚拟现实环境中引导用户的感官反馈系统和方法
US9881422B2 (en) 2014-12-04 2018-01-30 Htc Corporation Virtual reality system and method for controlling operation modes of virtual reality system
JP6424601B2 (ja) * 2014-12-10 2018-11-21 富士通株式会社 表示制御方法、情報処理プログラム、及び情報処理装置
JP6609920B2 (ja) * 2014-12-25 2019-11-27 セイコーエプソン株式会社 表示装置、及び、表示装置の制御方法
JP6528409B2 (ja) * 2015-01-13 2019-06-12 日本電気株式会社 対象表示システム、管理装置、対象表示方法及び管理プログラム
JP2017091433A (ja) * 2015-11-17 2017-05-25 セイコーエプソン株式会社 頭部装着型表示装置、頭部装着型表示装置を制御する方法、コンピュータープログラム
JP6600945B2 (ja) * 2015-01-20 2019-11-06 セイコーエプソン株式会社 頭部装着型表示装置、頭部装着型表示装置の制御方法、および、コンピュータープログラム
US9760790B2 (en) * 2015-05-12 2017-09-12 Microsoft Technology Licensing, Llc Context-aware display of objects in mixed environments
CN105139576A (zh) * 2015-07-09 2015-12-09 小米科技有限责任公司 路况提示方法及装置
JP6436872B2 (ja) * 2015-07-09 2018-12-12 キヤノン株式会社 情報処理装置、情報処理方法、プログラム
US10416306B2 (en) * 2015-08-17 2019-09-17 Texas Instruments Incorporated Methods and apparatus to measure and analyze vibration signatures
JP2017060033A (ja) * 2015-09-17 2017-03-23 カシオ計算機株式会社 携帯情報機器、携帯情報システム、表示方法及びプログラム
JP2017062598A (ja) * 2015-09-24 2017-03-30 ソニー株式会社 情報処理装置、情報処理方法、およびプログラム
JP2017068589A (ja) * 2015-09-30 2017-04-06 ソニー株式会社 情報処理装置、情報端末、及び、情報処理方法
US9836652B2 (en) 2016-02-02 2017-12-05 International Business Machines Corporation Showing danger areas associated with objects using augmented-reality display techniques
JP6232649B2 (ja) * 2016-02-18 2017-11-22 国立大学法人名古屋大学 仮想空間表示システム
US9939635B2 (en) 2016-02-29 2018-04-10 Brillio LLC Method for providing notification in virtual reality device
JP2017183828A (ja) * 2016-03-28 2017-10-05 京セラ株式会社 ヘッドマウントディスプレイ
US10200581B2 (en) * 2016-03-31 2019-02-05 Peter G. Hartwell Heads down intelligent display and processing
GB201608886D0 (en) 2016-05-20 2016-07-06 Nokia Technologies Oy Virtual reality display
CN106125927B (zh) * 2016-06-23 2019-11-29 捷开通讯(深圳)有限公司 图像处理系统及方法
US20170372499A1 (en) * 2016-06-27 2017-12-28 Google Inc. Generating visual cues related to virtual objects in an augmented and/or virtual reality environment
JP2018005676A (ja) * 2016-07-05 2018-01-11 ソニー株式会社 情報処理装置、情報処理方法、およびプログラム
JP6696331B2 (ja) * 2016-07-06 2020-05-20 富士ゼロックス株式会社 情報処理装置、画像形成システムおよびプログラム
DE102016217263A1 (de) 2016-09-09 2018-03-15 Continental Teves Ag & Co. Ohg Verfahren zum Warnen einer Person vor einer Gefahrenquelle
CN106652332A (zh) * 2016-12-15 2017-05-10 英业达科技有限公司 虚拟实景装置的安防系统
JP6642457B2 (ja) * 2017-01-11 2020-02-05 京セラドキュメントソリューションズ株式会社 携帯端末装置、及び安全管理システム
GB2607199B (en) 2017-02-07 2023-06-14 Flir Detection Inc Systems and methods for identifying threats and locations,systems and method for augmenting real-time displays demonstrating the threat location and systems
US11488369B2 (en) 2017-02-07 2022-11-01 Teledyne Flir Detection, Inc. Systems and methods for identifying threats and locations, systems and method for augmenting real-time displays demonstrating the threat location, and systems and methods for responding to threats
US10311304B2 (en) 2017-02-07 2019-06-04 International Business Machines Corporation Mobile device accident avoidance system
US10169973B2 (en) 2017-03-08 2019-01-01 International Business Machines Corporation Discontinuing display of virtual content and providing alerts based on hazardous physical obstructions
EP3599537A4 (en) * 2017-03-21 2020-03-04 Sony Corporation INFORMATION PROCESSING DEVICE, INFORMATION PROCESSING PROCESS AND PROGRAM
US10360437B2 (en) * 2017-03-22 2019-07-23 T-Mobile Usa, Inc. Collision avoidance system for augmented reality environments
US10726792B2 (en) * 2017-04-17 2020-07-28 Intel Corporation Glare and occluded view compensation for automotive and other applications
JP6893122B2 (ja) * 2017-05-29 2021-06-23 エヌ・ティ・ティ・コミュニケーションズ株式会社 危険判定システム、危険判定方法及びコンピュータプログラム
WO2019000429A1 (en) * 2017-06-30 2019-01-03 Guangdong Virtual Reality Technology Co., Ltd. METHODS AND SYSTEMS FOR OPERATING AN APPARATUS THROUGH INCREASED REALITY
US10691945B2 (en) * 2017-07-14 2020-06-23 International Business Machines Corporation Altering virtual content based on the presence of hazardous physical obstructions
WO2019067650A1 (en) * 2017-09-27 2019-04-04 Apple Inc. TELEMETRY AND ACCESSORY TRACKING OF VISIOCASTIC SYSTEMS
EP3483104B1 (en) 2017-11-10 2021-09-01 Otis Elevator Company Systems and methods for providing information regarding elevator systems
CN109905262A (zh) * 2017-12-11 2019-06-18 上海逸云信息科技发展有限公司 一种cdn设备服务的监控系统及监控方法
US10726765B2 (en) 2018-02-15 2020-07-28 Valve Corporation Using tracking of display device to control image display
JP2019146022A (ja) * 2018-02-21 2019-08-29 オリンパス株式会社 撮像装置及び撮像方法
US11032403B2 (en) * 2018-03-22 2021-06-08 Daniel L C Leung Method to aid the walking-while-texting smart phone user navigate around obstacles in the forward path
JP2019166992A (ja) * 2018-03-23 2019-10-03 パナソニックＩｐマネジメント株式会社 車両制御装置およびコンピュータプログラム
CN110322669B (zh) * 2018-03-31 2022-01-04 汉唐传媒股份有限公司 一种基于现实投影游戏场的预警方法
US20190042843A1 (en) * 2018-04-05 2019-02-07 Intel Corporation Cable detection for ar/vr computing method and apparatus
WO2019207954A1 (ja) 2018-04-25 2019-10-31 ソニー株式会社 情報処理装置、情報処理方法、情報処理プログラム
US20190385372A1 (en) * 2018-06-15 2019-12-19 Microsoft Technology Licensing, Llc Positioning a virtual reality passthrough region at a known distance
WO2019245550A1 (en) * 2018-06-20 2019-12-26 Hewlett-Packard Development Company, L.P. Alerts of mixed reality devices
WO2019245543A1 (en) * 2018-06-20 2019-12-26 Hewlett-Packard Development Company, L.P. Alerts of mixed reality devices
DE102018213368A1 (de) * 2018-08-09 2020-02-13 Audi Ag System, Verfahren und Absicherungsvorrichtung für einen kraftfahrzeuglosen Verkehrsteilnehmer sowie Servervorrichtung für das System
CN110097736B (zh) * 2019-04-23 2021-11-30 维沃移动通信有限公司 报警方法及报警装置
US10832484B1 (en) * 2019-05-09 2020-11-10 International Business Machines Corporation Virtual reality risk detection
US11468604B2 (en) * 2019-06-25 2022-10-11 Google Llc Methods and systems for providing a notification in association with an augmented-reality view
KR102614495B1 (ko) * 2019-08-02 2023-12-15 엘지전자 주식회사 Xr 디바이스 및 그 제어 방법
WO2021054941A1 (en) * 2019-09-17 2021-03-25 Hewlett-Packard Development Company, L.P. Notification delivery
CN110641607B (zh) * 2019-10-08 2021-04-02 深圳市乐骑智能科技有限公司 基于位置检测数据的滑板车行驶辅助系统及电动滑板车
US20200045240A1 (en) * 2019-10-12 2020-02-06 Adam Diamond Hood with Multiple Cameras
CN110718043B (zh) * 2019-10-17 2021-07-30 辽宁中航信诺科技有限公司 基于ar人工智能设备的危险区域的检查报警方法
WO2021124299A1 (en) * 2019-12-21 2021-06-24 Elon Littwitz Walking assisting systems and methods
CN111564027B (zh) * 2020-05-08 2022-05-13 北京深演智能科技股份有限公司 报警信息处理方法及装置
US11561611B2 (en) * 2020-10-29 2023-01-24 Micron Technology, Inc. Displaying augmented reality responsive to an input
US20220188545A1 (en) * 2020-12-10 2022-06-16 International Business Machines Corporation Augmented reality enhanced situational awareness
US11393315B1 (en) * 2020-12-31 2022-07-19 Micron Technology, Inc. Hazard indicator
US11872486B2 (en) 2021-05-27 2024-01-16 International Business Machines Corporation Applying augmented reality-based gamification to hazard avoidance
US11663790B2 (en) * 2021-08-18 2023-05-30 Optum, Inc. Dynamic triggering of augmented reality assistance mode functionalities
US12106161B2 (en) * 2021-11-02 2024-10-01 International Business Machines Corporation Augmented reality object interaction and notification
US11983922B2 (en) * 2022-01-27 2024-05-14 Rovi Guides, Inc. Smart home management system for generating augmented reality scene of potentially hazardous condition
US11995739B2 (en) * 2022-02-09 2024-05-28 At&T Intellectual Property I, L.P. System for contextual diminished reality for meta verse immersions
US12105866B2 (en) * 2022-02-16 2024-10-01 Meta Platforms Technologies, Llc Spatial anchor sharing for multiple virtual reality systems in shared real-world environments
JP2023172541A (ja) 2022-05-24 2023-12-06 セイコーエプソン株式会社 表示方法および表示システム
US11747891B1 (en) * 2022-07-15 2023-09-05 Google Llc Content output management in a head mounted wearable device
WO2024043527A1 (ko) * 2022-08-25 2024-02-29 삼성전자 주식회사 가상 현실 장치를 제어하는 방법 및 이를 이용하는 가상 현실 장치

Family Cites Families (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3515926B2 (ja) * 1999-06-23 2004-04-05 本田技研工業株式会社 車両の周辺監視装置
US20020196202A1 (en) * 2000-08-09 2002-12-26 Bastian Mark Stanley Method for displaying emergency first responder command, control, and safety information using augmented reality
US20030210228A1 (en) * 2000-02-25 2003-11-13 Ebersole John Franklin Augmented reality situational awareness system and method
US20030218638A1 (en) * 2002-02-06 2003-11-27 Stuart Goose Mobile multimodal user interface combining 3D graphics, location-sensitive speech interaction and tracking technologies
JP4039075B2 (ja) * 2002-02-18 2008-01-30 日本電気株式会社 前方障害物検出機能付き携帯情報端末
JP2003284120A (ja) * 2002-03-20 2003-10-03 Fuji Photo Film Co Ltd 携帯通信端末用警告装置
US7762665B2 (en) * 2003-03-21 2010-07-27 Queen's University At Kingston Method and apparatus for communication between humans and devices
US7142231B2 (en) * 2003-12-29 2006-11-28 Nokia Corporation Method and apparatus for improved handset multi-tasking, including pattern recognition and augmentation of camera images
JP2006174288A (ja) * 2004-12-17 2006-06-29 Sharp Corp 携帯端末装置、衝突防止方法、衝突防止プログラムおよび記録媒体
US7283064B2 (en) * 2005-04-12 2007-10-16 Honeywell International, Inc. System and method for facilitating target aiming and aircraft control using aircraft displays
JP4642538B2 (ja) * 2005-04-20 2011-03-02 キヤノン株式会社 画像処理方法および画像処理装置
US7737965B2 (en) * 2005-06-09 2010-06-15 Honeywell International Inc. Handheld synthetic vision device
EP1926048B1 (en) * 2006-11-21 2010-02-24 Harman Becker Automotive Systems GmbH Presenting video images of a vehicle environment
JP2008199286A (ja) * 2007-02-13 2008-08-28 Nec Corp 携帯端末
JP2008230296A (ja) * 2007-03-16 2008-10-02 Mazda Motor Corp 車両用運転支援システム
DE102007033391A1 (de) 2007-07-18 2009-01-22 Robert Bosch Gmbh Informationsvorrichtung, Verfahren zur Information und/oder Navigation von einer Person sowie Computerprogramm
JP2009206868A (ja) * 2008-02-28 2009-09-10 Kyocera Corp 携帯通信端末、着信報知方法
US8605947B2 (en) * 2008-04-24 2013-12-10 GM Global Technology Operations LLC Method for detecting a clear path of travel for a vehicle enhanced by object detection
DE102008002322A1 (de) * 2008-06-10 2009-12-17 Robert Bosch Gmbh Tragbare Vorrichtung mit Warnsystem und Verfahren
DE102008002560A1 (de) * 2008-06-20 2009-12-24 Robert Bosch Gmbh Bilddatenvisualisierung
US20100238161A1 (en) * 2009-03-19 2010-09-23 Kenneth Varga Computer-aided system for 360º heads up display of safety/mission critical data
US8164543B2 (en) * 2009-05-18 2012-04-24 GM Global Technology Operations LLC Night vision on full windshield head-up display
CN201689517U (zh) * 2010-05-10 2010-12-29 佛山市神信锦盟科技有限公司 一种放射源智能监控装置及系统

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI758970B (zh) * 2020-11-24 2022-03-21 鴻海精密工業股份有限公司 可移動障礙物位置判斷方法、裝置、電子設備及系統

Also Published As

Publication number Publication date
KR20140014117A (ko) 2014-02-05
WO2012101720A1 (en) 2012-08-02
RU2013133883A (ru) 2015-01-27
JP5691568B2 (ja) 2015-04-01
CN102682571B (zh) 2016-12-14
BR112013018603A2 (pt) 2019-09-24
CN102682571A (zh) 2012-09-19
EP2668553A1 (en) 2013-12-04
JP2012155654A (ja) 2012-08-16
US20130293586A1 (en) 2013-11-07
US10909759B2 (en) 2021-02-02
EP2668553B1 (en) 2017-10-11
EP2668553A4 (en) 2014-08-20

Similar Documents

Publication Publication Date Title
TW201246008A (en) Information processing device, alarm method, and program
US20120194554A1 (en) Information processing device, alarm method, and program
JP6312715B2 (ja) モバイルデバイスを用いるナビゲーションのための方向性ビュー及びｘ線ビュー技法
JP6163017B2 (ja) 携帯端末、及び、危険報知システム
US9420559B2 (en) Obstacle detection and warning system using a mobile device
US11403806B2 (en) Information processing apparatus, information processing method, and recording medium
WO2015080925A1 (en) Geofences from context and crowd-sourcing
EP4130938A1 (en) Augmented reality
CN116710878A (zh) 情境感知扩展现实系统
KR20120040573A (ko) 이동식 태그를 이용한 증강 현실 제공 장치 및 방법
CN106289254A (zh) 导航方法及装置
JP2020115176A (ja) 情報処理装置、情報処理システム、及び、情報処理方法
JP6816909B1 (ja) 避難誘導システム、避難誘導方法、および、眼鏡型ディスプレイ
CN105246032A (zh) 一种基于ktv的室内导航方法及移动终端
JP2015138534A (ja) 電子機器
US20180293796A1 (en) Method and device for guiding a user to a virtual object
JP2005309537A (ja) 情報提示装置
JP6796000B2 (ja) 監視支援装置及び監視システム
JP7422344B2 (ja) 報知制御装置、報知装置、報知制御方法および報知制御プログラム
JP7420261B2 (ja) 画像処理装置、画像処理方法、及びプログラム
KR101979868B1 (ko) 사용자 단말 제어 시스템 및 방법
JP2024090643A (ja) 異常事象通知システムおよび異常事象通知方法
McGibney et al. Spatial Mapping for Visually Impaired and Blind Using BLE Beacons.
JP2024042771A (ja) 情報処理装置、情報処理方法及びプログラム
WO2015111264A1 (ja) 電子機器