TWI448958B - 影像處理器件，影像處理方法及程式 - Google Patents

影像處理器件，影像處理方法及程式 Download PDF

Info

Publication number
TWI448958B
TWI448958B TW100112668A TW100112668A TWI448958B TW I448958 B TWI448958 B TW I448958B TW 100112668 A TW100112668 A TW 100112668A TW 100112668 A TW100112668 A TW 100112668A TW I448958 B TWI448958 B TW I448958B
Authority
TW
Taiwan
Prior art keywords
calendar
user
image
input image
unit
Prior art date
Application number
TW100112668A
Other languages
English (en)
Other versions
TW201207717A (en
Inventor
Kouichi Matsuda
Masaki Fukuchi
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Publication of TW201207717A publication Critical patent/TW201207717A/zh
Application granted granted Critical
Publication of TWI448958B publication Critical patent/TWI448958B/zh

Links

Classifications

    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/36—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory
    • G09G5/37—Details of the operation on graphic patterns
    • G09G5/377—Details of the operation on graphic patterns for mixing or overlaying two or more graphic patterns
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/006—Mixed reality
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T1/00—General purpose image data processing

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Computer Hardware Design (AREA)
  • Computer Graphics (AREA)
  • Software Systems (AREA)
  • User Interface Of Digital Computer (AREA)
  • Processing Or Creating Images (AREA)
  • Image Processing (AREA)
  • Facsimiles In General (AREA)
  • Measuring And Recording Apparatus For Diagnosis (AREA)

Description

影像處理器件，影像處理方法及程式
本發明係關於一種影像處理器件，一種影像處理方法及一種程式。
用於輔助個人排程管理任務之電子設備已被廣泛使用，無關於該電子設備係作商務用途或供個人使用。例如，常用的PDA(個人資料助理)及智慧型手機通常配備用於排程管理之某種應用程式。存在其中用於管理排程之一應用程式係在一PC(個人電腦)上使用之相當多的情況。
除了排程管理功能之外，許多類型之上述電子設備亦配備通信功能。因此，一使用者將排程資料傳輸至其他使用者的設備，使得他/她可與其他使用者共用排程或協調排程。此外，在以下專利文獻1與2中所描述的技術係作為用於在使用者之間共用或交換排程之技術實例而為吾人所知。
引用清單 專利文獻
PTL 1：日本專利特許公開申請案第2005-004307號
PTL 2：日本專利特許公開申請案第2005-196493號
然而，在上述先前技術中，一排程係顯示於電子設備之一螢幕上。因此，當使用可攜式或小型設備時，使複數個使用者參考相同日曆(視情況而指向其)而協調排程並不容易。此外，存在的問題係：當使用一投影機將一影像投影於一螢幕上時，不僅排程被共用甚至私人排程亦被其他使用者查看。另一方面，一種在無電子設備輔助下使用一實體日曆管理排程之方法具有免受強加於電子設備之一螢幕上之限制之一優點，但其伴隨有以下困難：必需在一日曆中書寫排程且改變排程或共用資訊係麻煩。
因此，可期望提供允許複數個使用者容易地使用一實體日曆共用或協調排程之新穎及經改良之影像處理器件、影像處理方法及程式。
因此，提供一種用於將排程資料疊加於一時間量測物件上之裝置。該裝置包括用於接收表示一輸入影像之影像資料之一接收單元。該裝置進一步包括用於基於在該影像資料中所偵測的一時間量測物件之特徵而在該輸入影像中偵測該時間量測物件之存在之一偵測單元。該裝置進一步包括用於回應於在該輸入影像中偵測到該時間量測物件之存在而輸出用於疊加於該時間量測物件之一使用者視野上之排程資料的一輸出器件。
在另一態樣中，提供一種將排程資料疊加於一時間量測物件上之方法。該方法包括接收表示一輸入影像之影像資料。該方法進一步包括基於在該影像資料中所偵測的一時間量測物件之特徵而在該輸入影像中偵測該時間量測物件之存在。該方法進一步包括回應於在該輸入影像中偵測到該時間量測物件之存在而提供用於疊加於該時間量測物件之一使用者視野上之排程資料。
在另一態樣中，提供一種含有指令之經有形體現之非暫時性電腦可讀儲存媒體，當一處理器執行該等指令時，該等指令致使一電腦執行用於將排程資料疊加於一時間量測物件上之一方法。該方法包括接收表示一輸入影像之影像資料。該方法進一步包括基於在該影像資料中所偵測的一時間量測物件之特徵而在該輸入影像中偵測該時間量測物件之存在。該方法進一步包括回應於在該輸入影像中偵測到該時間量測物件之存在而提供用於疊加於該時間量測物件之一使用者視野上的排程資料。
在另一態樣中，提供一種用於將排程資料疊加於一時間量測物件上之裝置。該裝置包括用於接收表示一輸入影像之影像資料之一第一接收單元，該輸入影像包含一時間量測物件。該裝置進一步包括用於接收用於疊加於該時間量測物件之一使用者視野上之排程資料的一第二接收單元。該裝置進一步包括用於產生用於顯示疊加於該時間量測物件之該使用者視野上之經接收排程資料之顯示資訊的一產生單元。
在另一態樣中，提供一種系統。該系統包括一影像處理單元，該影像處理單元係經組態以獲得表示一輸入影像之影像資料並且產生疊加於一時間量測物件之一使用者視野上之排程資料之顯示資訊。該系統進一步包括一偵測單元，該偵測單元係經組態以基於該影像資料中之一時間量測物件之特徵而在該輸入影像中偵測該時間量測物件之存在，並且回應於在該輸入影像中偵測到該時間量測物件之存在而將排程資料提供至該影像處理單元以疊加於該時間量測物件之該使用者視野上。
如上所述，根據特定揭示實施例之一影像處理器件、一影像處理方法及一程式允許複數個使用者容易地使用一實體日曆而共用或協調排程。
在下文中，將參考隨附圖式詳細描述實施例。注意，在本說明書及隨附圖式中，使用相同參考數字表示具有大體上相同功能及結構之結構元件，且省略此等結構元件之重複說明。
此外，將根據以下順序描述「實施方式」。
1.系統概要
2.影像處理裝置之組態實例
3.影像處理流程
4.總結
<1.系統概要>
首先，將參考圖1描述根據一實施例之一影像處理器件之概要。圖1係圖解闡釋根據一實施例之一影像處理系統1之概要之一示意圖。參考圖1，影像處理系統1包含藉由一使用者Ua使用之一影像處理器件100a及藉由一使用者Ub使用之一影像處理器件100b。
該影像處理器件100a係與(例如)安裝於使用者Ua之頭部上之一成像器件102a及一頭戴式顯示器(HMD)104a連接。該成像器件102a係經引導而朝向使用者Ua之一眼睛方向，使真實世界成像並且將一系列輸入影像輸出至該影像處理器件100a。HMD 104a對使用者Ua顯示來自該影像處理器件100a之一影像輸入。藉由HMD 104a顯示之影像係藉由該影像處理器件100a產生之一輸出影像。HMD 104a可為透視類型顯示器或非透視類型顯示器。
該影像處理器件100b係與(例如)安裝於使用者Ub之頭部上之一成像器件102b及一頭戴式顯示器(HMD)104b連接。該成像器件102b係經引導而朝向使用者Ub之一眼睛方向，使真實世界成像並且將一系列輸入影像輸出至該影像處理器件100b。HMD 104b對使用者Ub顯示來自該影像處理器件100b之一影像輸入。藉由HMD 104b顯示之影像係藉由該影像處理器件100b產生之一輸出影像。HMD 104b可為透視類型顯示器或非透視類型顯示器。
影像處理器件100a與影像處理器件100b可經由一有線通信連接或一無線電通信連接彼此通信。可經由(例如)P2P(對等式)方法直接建立或經由諸如路由器或伺服器(圖式中未展示)之其他器件間接建立影像處理器件100a與影像處理器件100b之間的通信。
在圖1之一實例中，在使用者Ua與使用者Ub之間圖解闡釋真實世界中所存在的日曆3(亦即，時間量測物件)。如隨後將詳細描述般，影像處理器件100a產生藉由將關於使用者Ua所擁有之排程之資訊元素疊加於日曆3上而獲得之一輸出影像。應瞭解，在某些實施例中，可使用不同時間量測物件代替日曆3。例如，時間量測物件可包含時鐘、鐘錶(例如，手錶)、時間表或用於時間量測之其他此等物件。類似地，影像處理器件100b產生藉由將關於使用者Ub所擁有之排程之資訊元素疊加於日曆3上而獲得之一輸出影像。此外，在本發明實施例中，如稍後詳細描述，引入用於在影像處理器件100a與影像處理器件100b之間交換排程資料之一簡易介面。
另外，影像處理器件100a及影像處理器件100b並不限於圖1中圖解闡釋之一實例。例如，可使用具有一相機之一行動終端機實現影像處理器件100a或100b。在該情況下，具有一相機之行動終端機使真實世界成像並且藉由該終端機執行一影像處理，且接著在該終端機之一螢幕上顯示一輸出影像。此外，影像處理器件100a或100b可為其他類型之器件，包含PC(個人電腦)或遊戲終端機。例如，在某些實施例中，影像處理器件100a或100b可為連接至一網路(諸如，網際網路)之遠端伺服器。遠端伺服器可經由網路執行接收影像資料之步驟並在該影像資料中偵測日曆3。遠端伺服器接著可將排程資料提供至(例如)成像器件102b或HMD 104b。
在本說明書中之以下描述中，當無需區別影像處理器件100a與影像處理器件100b時，可藉由省略最後符號的字母而將影像處理器件100a及100b統稱為影像處理器件100。此外，應將相同的原理應用於成像器件102a及102b(成像器件102)、HMD 104a及HMD 104b(HMD 104)及其他元件。可參與影像處理系統1中之影像處理器件100之數目並不限於圖1中之一實例中所圖解闡釋之數目，而是可為三個或更多個。即，例如，影像處理系統1中可進一步包含由第三使用者所使用之第三影像處理器件100。
<2.影像處理器件之組態實例>
接著，參考圖2至圖12，將描述根據本發明實施例之影像處理系統100之組態。圖2係圖解闡釋根據本發明實施例之影像處理器件100之組態之一實例的一方塊圖。參考圖2，影像處理器件100包括一儲存單元110、一輸入影像獲得單元130(例如，一接收單元)、一日曆偵測單元140、一分析單元150、一輸出影像產生單元160(亦即，一輸出器件或輸出終端機)、一顯示單元170、一示意動作辨識單元180及一通信單元190。如本文中所使用，術語「單元」可為一軟體模組、一硬體模組或一軟體模組與一硬體模組之一組合。此外，在某些實施例中，可在一或多個器件或伺服器中體現影像處理器件100之各種單元。例如，可在不同器件中體現日曆偵測單元140、分析單元150或輸出影像產生單元160。
(儲存單元)
儲存單元110使用記憶體媒體(諸如，硬碟或半導體記憶體)儲存用於藉由影像處理器件100執行之一影像處理之一程式或資料。例如，由儲存單元110儲存之資料包含日曆112所共有之指示複數個日曆所共有之外觀特徵之特徵量。日曆所共有之特徵量係透過將一日曆影像及一非日曆影像用作為一教師影像之預先學習處理而獲得。此外，由儲存單元110儲存之資料包含呈注有日期的資訊之一清單形式之排程資料116。稍後將參考圖9描述排程資料之一實例。
(日曆所共有之特徵量)
圖3係圖解闡釋用於獲得由儲存單元110預先儲存之日曆112所共有之特徵量之學習器件120之組態之一實例的一方塊圖。圖4係展示藉由學習器件120執行之一學習處理之一圖解闡釋性視圖。圖5係展示由於學習處理而獲得之日曆112所共有的特徵量之一實例的一圖解闡釋性視圖。
參考圖3，學習器件120包括一學習記憶體122及一學習單元128。該學習器件120可為影像處理器件100之部分或不同於影像處理器件100之一器件。
學習記憶體122預先儲存一群組之教師資料124。教師資料124包含複數個日曆影像，每一日曆影像展示真實世界日曆；及複數個非日曆影像，每一非日曆影像展示除日曆以外之一物件。當學習器件120執行一學習處理時，學習記憶體122將該群組之教師資料124輸出至學習單元128。
學習單元128係一公開已知的教師(諸如SVM(支援向量機)或類神經網路)並且根據一學習演算法判定日曆112所共有之指示複數個日曆所共有之外觀特徵之特徵量。由學習單元128輸入之用於學習處理之資料輸入係在上述群組之教師資料124之各者中設定之特徵量。更特定言之，學習單元128在教師影像之各者中設定複數個特徵點並且將特徵點之一座標用作為教師影像之各者之特徵量之至少部分。由於學習處理產生之資料輸出包含在一抽象日曆之外觀(即，許多日曆所共有之外觀)上設定之複數個特徵點之座標。
圖4中圖解闡釋由學習單元128執行之學習處理流程之概要。圖4中之左上角圖解闡釋一群組之教師資料124中所包含的複數個日曆影像124a。首先，學習單元128在該複數個日曆影像124a之各者中設定複數個特徵點。設定特徵點之一方法可為一任意方法，例如，使用已知Harris運算子或Moravec運算子之一方法或快速特徵偵測方法。隨後，學習單元128根據所設定的特徵點判定每一日曆影像之特徵量126a。每一日曆影像之特徵量126a可包含除每一特徵點之一座標以外之額外參數值，諸如每一特徵點之亮度、對比度及方向。藉由將在David G. Lowe之「Distinctive Image Features from Scale-Invariant Keypoints」(International Journal of Computer Vision，2004)中描述的特殊不變特徵用作為特徵量，將實現在稍後描述之日曆偵測處理期間之抵抗影像中之雜訊、大小變動、照明旋轉及變動之高度穩健性。圖4中之左下側圖解闡釋一群組之教師資料124中所包含的複數個非日曆影像124b。學習單元128在此複數個非日曆影像124b中設定特徵點並以相同方式判定每一非日曆影像之特徵量126b。隨後，學習單元128依學習演算法循序輸入每一日曆影像之特徵量126a及每一非日曆影像之特徵量126b。由於機器學習之重複，故計算出日曆112所共有之特徵量並且獲得日曆112所共有之特徵量。
參考圖5，概念性地圖解闡釋日曆112所共有之特徵量之內容。一般而言，許多日曆(尤其是月曆)具有指示年份及月份之一標籤、一週的日子之一標題及每一日期之一圖框。因此，在圖5之一實例中，日曆112所共有的特徵量包含分別對應於指示月份及年份之一標籤之一角、一週的日子之一標題之一角、每一日期之一圖框之一角及日曆本身之一角之特徵點的一座標。另外，此處圖解闡釋主要用於偵測一月曆之日曆112所共有的特徵量之一實例。然而，可執行每一類型之日曆(諸如，月曆、周曆及展示一整年之一日曆)之學習處理且可獲得每一類型之日曆之日曆112所共有的特徵量。
儲存單元110預先儲存由於此學習處理而獲得之日曆112所共有之特徵量。接著，該儲存單元110在影像處理器件100執行影像處理時將日曆112所共有之特徵量輸出至一日曆偵測單元140。
(輸入影像獲得單元)
輸入影像獲得單元130獲得使用成像器件102成像之一系列輸入影像。圖6圖解闡釋作為藉由該輸入影像獲得單元130獲得之一實例之一輸入影像IM01。在該輸入影像IM01中展示一日曆3。該輸入影像獲得單元130將所獲得之此輸入影像循序輸出至日曆偵測單元140、分析單元150及示意動作辨識單元180。
(日曆偵測單元)
日曆偵測單元140使用由儲存單元110儲存之日曆112所共有之上述特徵量偵測自該輸入影像獲得單元130輸入之輸入影像中所展示之一日曆。更特定言之，該日曆偵測單元140首先判定輸入影像之特徵量(如在上述學習處理中般)。該輸入影像之特徵量包含(例如)在輸入影像中設定之複數個特徵點的座標。接著，該日曆偵測單元140核對輸入影像之特徵量與日曆112所共有之特徵量，因此，該日曆偵測單元140偵測輸入影像中展示之一日曆。
該日曆偵測單元140可進一步偵測(例如)輸入影像中展示之一日曆之一方向。在偵測輸入影像中展示之一日曆之一方向時，該日曆偵測單元140使用日曆所共有之特徵量(其包含分別對應於複數個眼睛方向之複數個特徵量集合)。
圖7係展示對應於眼睛方向之特徵量之集合之一實例的一圖解闡釋性視圖。圖7中央圖解闡釋一日曆C0，該日曆C0圖解闡釋一抽象日曆之一外觀(一基本特徵量集合)。假定將藉由自正面成像獲得之一日曆影像及一非日曆影像作為一教師影像，使用所學習的特徵量呈現該日曆C0。日曆偵測單元140使日曆112所共有之此特徵量中包含的特徵點之座標經受一仿射轉換或使座標經受3D旋轉，以產生分別對應於複數個眼睛方向之複數個特徵量集合。在圖7之一實例中，圖解闡釋分別對應於眼睛方向α1至α8之八個特徵量集合C1至C8。因此，日曆偵測單元140核對(例如)基本特徵量集合C0及特徵量集合C1至C8之各者與輸入影像之特徵量。在此情況下，若特徵量集合C4與輸入影像中之一特定區域匹配，則該日曆偵測單元140可辨識日曆係展示於該區域中且日曆之一方向對應於一眼睛方向α4之一方向。
圖8係展示日曆偵測之結果之一實例之一圖解闡釋性視圖。參考圖8，在輸入影像IM01中之一區域R1中圖解闡釋其中展示日曆3之一虛線圖框。輸入影像IM01係藉由自不同於日曆3之一前面方向之一眼睛方向使日曆3成像而獲得。由於圖7中所例示之複數個特徵量集合與輸入影像之特徵量之核對，日曆偵測單元140在此輸入影像IM01中辨識日曆3之位置及方向。
(分析單元)
分析單元150分析由日曆偵測單元140偵測之日曆之每一日期係定位於影像中之何處。更特定言之，分析單元150使用(例如)OCR(光學字元辨識)技術辨識由日曆偵測單元140偵測之日曆所指示之月份、一週的日子與日期之至少一者。例如，分析單元150首先將光學字元辨識(OCR)應用於由日曆偵測單元140偵測之輸入影像中之日曆之一區域(例如，圖8中圖解闡釋之一區域R1)。在圖8之一實例中，藉由應用光學字元辨識(OCR)，可讀取指示日曆3之年份及月份之一標籤「2010年4月」及每一日期圖框中之數字。因此，分析單元150可辨識日曆3係2010年四月之一日曆並且辨識日曆3之每一日期之一圖框定位於輸入影像中之何處。
此外，分析單元150可基於(例如)關於各年份及月份之日期及一周的日子之知識而分析由日曆偵測單元140偵測之一日曆之每一日期定位於影像中之何處。更特定言之，例如，已知2010年4月1日係星期四。因此，即使分析單元150無法使用光學字元辨識(OCR)讀取每一日期圖框中之數字，該分析單元150仍可自日曆3上之特徵點之座標辨識每一日期圖框並且辨識「2010年4月1日」定位於何處。此外，該分析單元150可基於使用(例如)光學字元辨識(OCR)辨識之日期位置而估計年份及月份。
(輸出影像產生單元)
一輸出影像產生單元160基於分析單元150所作之分析的結果產生一輸出影像，該輸出影像係藉由使以注有日期的資訊之一清單之形式包含於排程資料中之一或多個資訊元素與對應於每一資訊元素之一日期相關聯並且將相關聯之資訊元素疊加於一日曆上加以獲得。在該情況下，該輸出影像產生單元160可根據由日曆偵測單元140偵測之日曆的方向而在輸出影像中改變包含於排程資料中之資訊元素的顯示。
(排程資料)
圖9圖解闡釋由儲存單元110儲存之排程資料119之一實例。參考圖9，排程資料116具有五個欄位：「所有者」、「日期」、「標題」、「類別」及「細節」。
「所有者」意指產生每一排程項目(每一排程資料記錄)之一使用者。在圖9之一實例中，第1至第3排程項目之一所有者係使用者Ua。此外，第四排程項目之一所有者係使用者Ub。
「日期」意指對應於每一排程項目之一日期。例如，第一排程項目指示2010年4月6日之排程。「日期」欄位可指示代替一單一日期之具有一開始日期及一結束日期的一週期。
「標題」係由指示每一排程項目中直接描述之排程內容之一字元串形成。例如，第一排程項目指示將在2010年4月6日舉行一小組會議。
「類別」係指示是否對除所有者以外之使用者揭示每一排程項目之一旗標。可取決於稍後描述之使用者的示意動作而將在「類別」中指定為「揭示」之排程項目傳輸至其他使用者的器件。另一方面，不將在「類別」中指定為「未揭示」之排程項目傳輸至其他使用者的器件。例如，第二排程項目係指定為「未揭示」。
「細節」指示每一排程項目之排程內容之細節。例如，可在「細節」欄位中儲存選用的資訊元素(諸如，會議的開始時間、排程準備中「要做」的內容)。
輸出影像產生單元160自儲存單元110讀取此排程資料並且使所讀取之排程資料中包含的資訊元素(諸如，標題或所有者)與對應於輸出影像中之每一資訊元素之一日期相關聯。
(顯示單元)
一顯示單元170使用HMD 104對一使用者顯示由輸出影像產生單元160產生之輸出影像。
(輸出影像之實例)
圖10及圖11分別顯示由輸出影像產生單元160產生之輸出影像之一實例。圖10中圖解闡釋之一輸出影像IM11係其中排程項目之顯示方向係按照由日曆偵測單元140偵測之一日曆之方向而傾斜之一實例。另一方面，圖11中圖解闡釋之一輸出影像IM12係不取決於日曆方向之顯示的一實例。
參考圖10，圖9中例示之排程資料116中所包含之四個排程項目係以其中該等排程項目之各者係與對應日期相關聯之一狀態顯示於輸出影像IM11中。例如，在第6天之一圖框中顯示第一排程項目之一標題(即，「小組會議」)(參見D1)。此外，在第17天之一圖框中顯示第二排程項目之一標題(即，「生日宴會」)(參見D2)。此外，在第19天之一圖框中顯示第三排程項目之一標題(即，「參觀一公司」)(參見D3)。又此外，在第28天之一圖框中顯示第四排程項目之一標題(即，「歡迎宴會」)及該項目之所有者之一使用者之名稱「Ub」(參見D4)。當所有排程項目皆以按照日曆3之方向而傾斜之一狀態顯示時，將展示如同將資訊寫入一實體日曆之一影像提供至使用者。
參考圖11，圖9中例示之排程資料116中所包含之四個排程項目係以其中該等排程項目之各者係以相同方式與對應日期相關聯之一狀態顯示於輸出影像IM12中。在圖11中圖解闡釋之一實例中，排程項目之各者並未按照日曆3之方向傾斜，而是使用字組氣球顯示。
在如圖10及圖11中所描述之實例中，假定產生輸出影像IM11或IM12之器件係影像處理器件100a。在該情況下，上述四個排程項目係藉由影像處理器件100a顯示給使用者Ua。另一方面，甚至在使用者Ua及使用者Ub看見同一實體日曆3時，除非是將要自影像處理器件100a傳輸至使用者Ub之項目，否則影像處理器件100b並不顯示除由使用者Ub產生之排程項目以外的項目。因此，共用一實體日曆之使用者Ua及使用者Ub可在不對另一方揭示個人排程之情況下討論排程，同時取決於情境而確認該排程並且指向日曆。
此處，在圖9中例示之第一至第三排程項目之一所有者係使用者Ua且第四排程項目之一所有者係使用者Ub。可取決於自使用者透過使用示意動作之一介面或下文描述之其他使用者介面之指令而在影像處理器件100之間交換由不同於器件本身之使用者之一使用者產生之一排程項目。
另外，例如，若HMD 104係屬透視類型，則輸出影像產生單元160僅產生待疊加於日曆3上之排程項目之各者的顯示D1至D4作為輸出影像。另一方面，若HMD 104係屬非透視類型，則輸出影像產生單元160產生藉由將排程項目之各者的顯示D1至D4疊加於輸入影像上而獲得之一輸出影像。
(示意動作辨識單元)
一示意動作辨識單元180辨識一使用者對由日曆偵測單元140在輸入影像中偵測到之一日曆的真實世界示意動作。例如，示意動作辨識單元180可監測疊加於輸入影像中之日曆上之一手指區域，偵測手指區域之大小變動並且辨識已指定一特定排程項目。可透過(例如)膚色或與預先儲存之手指影像的核對偵測待疊加於日曆上之手指區域。另外，例如，當具有大於一預定臨限值之一大小之手指區域連續指向相同日期時，示意動作辨識單元180可辨識使用者在手指區域之大小已暫時變小的時候輕拍日期。另外，示意動作辨識單元180可另外辨識除輕拍示意動作以外之任意示意動作，諸如可辨識使用指尖圍繞一日期圓周作一個圓圈之一示意動作或使用指尖拖曳一排程項目之一示意動作。將此等示意動作之一者預先設定為指示將排程項目傳輸至其他影像處理器件100之一命令。將其他類型的示意動作預先設定為(例如)指示指定排程項目之詳細顯示之一命令。
若示意動作辨識單元180在輸入影像中展示之使用者示意動作中辨識設定為指示排程項目之傳輸之一命令之一示意動作，則該示意動作辨識單元180請求通信單元190傳輸該指定排程項目。
(通信單元)
通信單元190將由一使用者在影像處理器件100之使用者之排程資料中指定之資料傳輸至其他影像處理器件100。更特定言之，例如，若示意動作辨識單元180已辨識指示傳輸排程項目之一示意動作，則通信單元190選擇由該示意動作指定之排程項目並且將所選的排程項目傳輸至其他影像處理器件100。
在圖12之一實例中，在一輸出影像IM13中展示使用者的手指區域F1。另外，儘管手指區域F1係展示於輸入影像中，然排程項目D1至D4並未展示於輸入影像中，此不同於輸出影像IM13。另外，例如，示意動作辨識單元180辨識輕拍4月19日之一日期之一指示的一示意動作。通信單元190自儲存單元110之排程資料116獲得對應於4月19日之該日期之排程項目。通信單元190進一步核對所獲得的排程項目之「類別」。接著，除非所獲得的排程項目在「類別」中被指定為「未揭示」，否則通信單元190將排程項目傳輸至其他影像處理器件100。
此外，通信單元190在已自其他影像處理器件100傳輸排程項目時接收排程項目。接著，通信單元190將所接收的排程項目儲存於儲存單元110之排程資料116中。例如，圖9中之第四排程項目係在使用者Ua之影像處理器件100a中自使用者Ub之影像處理器件100b接收之排程項目。
以此方式，可根據使用者對由日曆偵測單元140偵測之日曆所做的示意動作而在複數個影像處理器件100之間傳輸及接收排程資料，因此能夠容易地共用排程。此外，影像處理器件100之各者將關於待共用之排程的資訊元素疊加於一實體日曆上，此允許使用者容易地協調排程而無需在實際上將字母寫入一日曆中。
<3.影像處理流程>
隨後，將參考圖13及圖14描述根據本發明實施例之由影像處理器件100執行之一影像處理流程。圖13係圖解闡釋由影像處理器件100執行之影像處理流程之一實例的一流程圖。
參考圖13，輸入影像獲得單元130首先獲得由成像器件102成像之一輸入影像(步驟S102)。隨後，日曆偵測單元140在由輸入影像獲得單元130獲得之輸入影像中設定複數個特徵點並且判定輸入影像之特徵量(步驟S104)。隨後，日曆偵測單元140核對輸入影像之特徵量與日曆所共有之特徵量(步驟S106)。若此處之核對尚未在輸入影像中偵測到一日曆，則將跳過後續處理。另一方面，若已在輸入影像中偵測到一日曆，則處理將前進至步驟S110(步驟S108)。
若日曆偵測單元140已在輸入影像中偵測到一日曆，則分析單元150分析所偵測日曆之一日期定位於輸入影像中之何處(步驟S110)。隨後，輸出影像產生單元160自儲存單元110獲得排程資料116(步驟S112)。隨後，輸出影像產生單元160基於由於分析單元150所作之分析得到的一日期在日曆上之位置而判定將排程資料中所包含之每一排程項目顯示於何處(步驟S114)。接著，輸出影像產生單元160產生藉由將每一排程項目疊加於經判定之顯示位置處而獲得之一輸出影像並且致使顯示單元170顯示所產生的輸出影像(步驟S116)。
此後，示意動作辨識單元180將進一步執行一示意動作辨識處理(步驟S118)。將參考圖14進一步描述由示意動作辨識單元180執行之示意動作辨識處理流程。
將針對由輸入影像獲得單元130獲得之一系列輸入影像之各者重複圖13中圖解闡釋之影像處理。若可重新利用先前圖框中之影像處理結果，則(例如)在輸入影像尚未自先前圖框中之輸入影像改變時，可省略圖13中圖解闡釋之影像處理之部分。
圖14係圖解闡釋由影像處理器件100執行之影像處理中之示意動作辨識處理之詳細流程一實例的一流程圖。
參考圖14，示意動作辨識單元180首先自輸入影像偵測一手指區域(步驟S202)。接著，該示意動作辨識單元180根據所偵測到的手指區域之位置而判定使用者的手指是否指向日曆之任何日期(步驟S204)。若此處使用者的手指並不指向日曆之任何日期或尚未偵測到具有大於一預定臨限值之大小的手指區域，則將跳過後續處理。另一方面，若使用者的手指指向日曆之任何日期，則處理將前進至步驟S206。
接著，示意動作辨識單元180基於跨複數個輸入影像之手指區域之變動而辨識使用者的示意動作(步驟S206)。此處所辨識之示意動作可為上文例示之一輕拍示意動作等。隨後，示意動作辨識單元180判定所辨識之示意動作是否係對應於一排程傳輸命令之一示意動作(步驟S208)。若此處所辨識之示意動作係對應於一排程傳輸命令之一示意動作，則通信單元190可在對應於由示意動作指定之一日期之排程項目中獲得可揭示之排程項目。可揭示之排程項目係在排程資料116中之「類別」中被指定為「揭示」之一項目。若此處不存在可揭示之排程項目，則將跳過後續處理(步驟S210)。另一方面，若存在對應於由示意動作指定之日期之可揭示的排程項目，則通信單元190將排程項目傳輸至其他影像處理器件100(步驟S212)。
若在步驟S206中辨識之示意動作並非對應於排程傳輸命令之一示意動作，則示意動作辨識單元180判定所辨識之示意動作是否為對應於詳細顯示命令之一示意動作(步驟S214)。若此處所辨識之示意動作係對應於詳細顯示命令之一示意動作，則輸出影像產生單元160及顯示單元170顯示由該示意動作指定之排程項目的細節(步驟S216)。另一方面，若所辨識之示意動作並非對應於詳細顯示命令之一示意動作，則終止示意動作辨識處理。
另外，儘管已參考圖14展示其中藉由使用者的示意動作指示排程項目之傳輸及其細節之顯示之一實例，然可藉由一示意動作指示影像處理器件100之除上述操作以外之操作。影像處理器件100可根據除輸入影像中之手指以外之物件之運動而進一步辨識來自使用者之指令。影像處理器件100可經由在影像處理器件100中另外提供之輸入構件(諸如，鍵盤或十鍵鍵盤)進一步自使用者接受指令。
<4.總結>
至此，已參考圖1至圖14描述根據一實施例之影像處理系統1及影像處理器件100。根據本發明實施例，輸入影像中展示之一日曆係使用日曆所共有之指示複數個日曆所共有之外觀特徵之特徵量加以偵測。另外，分析所偵測之日曆之每一日期定位於影像中之何處且排程資料中所包含之資訊元素係以與日曆上之一日期(其對應於資訊元素)相關聯之一狀態加以顯示。因此，一使用者可在不對電子設備強加任何限制之情況下使用一實體日曆容易地確認排程。甚至當複數個使用者參考一實體日曆時，該等使用者仍可在實際上無需將字母寫入日曆中之情況下容易地協調排程(因為對每一使用者顯示個人排程)。
此外，在本發明實施例中，影像處理器件100可僅將指示未在該器件本身之使用者之排程之間揭示之排程之排程項目傳輸至其他影像處理器件100。因此，當使用者共用排程時，將不對其他使用者揭示一個別使用者的私人排程，此不同於其中使用者打開其中書寫其等之排程的記事簿之情況。
此外，在本發明實施例中，日曆所共有之特徵量係包含在一抽象日曆之外觀上設定之複數個特徵點之一座標的特徵量。許多常用日曆在外觀上類似。因此，甚至在不預先判定一個別日曆之特徵量而預先判定日曆所共有之特徵量，影像處理器件100仍可藉由核對日曆所共有之特徵量與輸入影像之特徵量而靈活地偵測許多真實世界的各種日曆。因此，使用者可在各種日曆(例如，他/她的家中日曆、他/她的辦公室日曆及待參觀之公司之日曆)上確認排程，從而享受所揭示實施例之優點。
此外，在本發明實施例中，影像處理器件100使用分別對應於複數個眼睛方向之複數個特徵量集合而在輸入影像中偵測日曆。因此，甚至在使用者並不定位於日曆前面時，該影像處理器件100仍可在一定程度上適當地偵測日曆。
另外，本說明書主要描述其中示意動作辨識單元180辨識輸入影像中展示之一使用者的示意動作，使得影像處理器件100可自使用者接受指令之一實例。然而，影像處理器件100可經由提供於影像處理器件100中之輸入構件(諸如，代替使用者之示意動作的指向器件或觸控面板)自使用者接受指令。
此外，通常可使用一軟體實現由本說明書中描述之影像處理器件100所執行之一系列處理。將組態實現一系列處理之一軟體之一程式預先儲存於(例如)在影像處理器件100內部或外部提供之一經有形體現之非暫時性儲存媒體。接著在執行期間將每一程式讀入(例如)影像處理器件100之RAM(隨機存取記憶體)中並且由一處理器(諸如，CPU(中央處理單元))執行該等程式。
熟習此項技術者應瞭解，各種修改、組合、子組合及變更可取決於設計要求及其它因素而發生，只要該等修改、組合、子組合及變更處在隨附申請專利範圍或其等效物之範疇內。
1．．．影像處理系統
3．．．日曆
100．．．影像處理器件
100a．．．影像處理器件
100b．．．影像處理器件
102．．．成像器件
102a．．．成像器件
102b．．．成像器件
104．．．頭戴式顯示器(HMD)
104a．．．頭戴式顯示器
104b．．．頭戴式顯示器
110．．．儲存單元
112．．．日曆所共有之特徵量
116．．．排程資料
120．．．學習器件
122．．．學習記憶體
124．．．教師資料
124a．．．日曆影像
124b．．．非日曆影像
126a．．．每一日曆影像之特徵量
126b．．．每一非日曆影像之特徵量
128．．．學習單元
130．．．輸入影像獲得單元
140．．．日曆偵測單元
150．．．分析單元
160．．．輸出影像產生單元
170．．．顯示單元
180．．．示意動作辨識單元
190．．．通信單元
Ua．．．使用者
Ub．．．使用者
圖1係圖解闡釋根據一實施例之一影像處理系統之概要的一示意圖。
圖2係圖解闡釋根據一實施例之一影像處理器件之組態之一實例的一方塊圖。
圖3係圖解闡釋根據一實施例之一學習器件之組態之一實例的一方塊圖。
圖4係展示根據一實施例之學習處理之一圖解闡釋性視圖。
圖5係展示日曆所共有的特徵量之一實例之一圖解闡釋性視圖。
圖6係展示輸入影像之一實例之一圖解闡釋性視圖。
圖7係展示對應於眼睛方向之特徵量之集合的一實例之一圖解闡釋性視圖。
圖8係展示日曆偵測之結果的一實例之一圖解闡釋性視圖。
圖9係展示排程資料之一實例之一圖解闡釋性視圖。
圖10係展示根據一實施例之一輸出影像之第一實例的一圖解闡釋性視圖。
圖11係展示根據一實施例之一輸出影像之第二實例的一圖解闡釋性視圖。
圖12係展示根據一實施例之一示意動作辨識處理之一圖解闡釋性視圖。
圖13係圖解闡釋根據一實施例之影像處理流程之一實例的一流程圖。
圖14係圖解闡釋根據一實施例之示意動作辨識處理流程之一實例的一流程圖。
1．．．影像處理系統
3．．．日曆
100a至100b．．．影像處理器件
102a至102b．．．成像器件
104a至104b．．．頭戴式顯示器
Ua．．．使用者
Ub．．．使用者

Claims (12)

  1. 一種裝置，其包括：一接收單元，其係用於接收表示一輸入影像之影像資料；一偵測單元，其係用於基於在該影像資料中所偵測之一時間量測物件之特徵而在該輸入影像中偵測該時間量測物件之存在；及一輸出器件，其係用於回應於在該輸入影像中偵測到該時間量測物件之存在而輸出用於疊加於該時間量測物件之一使用者視野上的排程資料。
  2. 如請求項1之裝置，其中該時間量測物件係一日曆物件，且該排程資料包括與一使用者相關聯之排程資料。
  3. 如請求項2之裝置，其包括：一分析單元，其係用於分析該影像資料以偵測對應於儲存於一儲存單元中之日曆物件之日曆特徵。
  4. 如請求項3之裝置，其中該等日曆特徵包括對應於該使用者之複數個視角之日曆特徵。
  5. 如請求項4之裝置，其中對應於該日曆物件之該使用者視野之一角度而選擇該經疊加之排程資料之一透視。
  6. 如請求項5之裝置，其中該日曆物件之該使用者視野係根據該等經偵測之日曆特徵之位置加以判定。
  7. 如請求項2之裝置，其中該使用者係一第一使用者且該裝置包括：一通信單元，其係用於藉由將該排程資料傳遞至與一第二使用者相關聯之一接收裝置而與該第二使用者共用該資料。
  8. 如請求項7之裝置，其中該通信單元回應於偵測該第一使用者或該第二使用者之至少一者對該日曆物件作出之一示意動作而將該排程資料傳遞至該接收裝置。
  9. 一種方法，其包括：接收表示一輸入影像之影像資料；基於在該影像資料中所偵測之一時間量測物件之特徵而在該輸入影像中偵測該時間量測物件之存在；及回應於在該輸入影像中偵測到該時間量測物件之存在而提供用於疊加於該時間量測物件之一使用者視野上的排程資料。
  10. 一種儲存指令之經有形體現之非暫時性電腦可讀儲存媒體，當一處理器執行該等指令時，該等指令致使一電腦執行一方法，該方法包括：接收表示一輸入影像之影像資料；基於在該影像資料中所偵測之一時間量測物件之特徵而在該輸入影像中偵測該時間量測物件之存在；及回應於在該輸入影像中偵測到該時間量測物件之存在而提供用於疊加於該時間量測物件之一使用者視野上的排程資料。
  11. 一種裝置，其包括：一第一接收單元，其係用於接收表示一輸入影像之影像資料，該輸入影像包含一時間量測物件；一第二接收單元，其係用於接收用於疊加於該時間量測物件之一使用者視野上的排程資料；及一產生單元，其係用於產生顯示疊加於該時間量測物件之該使用者視野上的該經接收排程資料之顯示資訊。
  12. 一種系統，其包括：一影像處理單元，其係經組態以獲得表示一輸入影像之影像資料並且產生疊加於一時間量測物件之一使用者視野上的排程資料之顯示資訊；及一偵測單元，其係經組態以基於該影像資料中之一時間量測物件之特徵而在該輸入影像中偵測該時間量測物件之存在，並且回應於在該輸入影像中偵測到該時間量測物件之存在而將排程資料提供至該影像處理單元以疊加於該時間量測物件之該使用者視野上。
TW100112668A 2010-04-19 2011-04-12 影像處理器件，影像處理方法及程式 TWI448958B (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2010095845A JP5418386B2 (ja) 2010-04-19 2010-04-19 画像処理装置、画像処理方法及びプログラム

Publications (2)

Publication Number Publication Date
TW201207717A TW201207717A (en) 2012-02-16
TWI448958B true TWI448958B (zh) 2014-08-11

Family

ID=44833918

Family Applications (1)

Application Number Title Priority Date Filing Date
TW100112668A TWI448958B (zh) 2010-04-19 2011-04-12 影像處理器件，影像處理方法及程式

Country Status (9)

Country Link
US (1) US20130027430A1 (zh)
EP (1) EP2561483A1 (zh)
JP (1) JP5418386B2 (zh)
KR (1) KR20130073871A (zh)
CN (1) CN102844795A (zh)
BR (1) BR112012026250A2 (zh)
RU (1) RU2012143718A (zh)
TW (1) TWI448958B (zh)
WO (1) WO2011132373A1 (zh)

Families Citing this family (28)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5499994B2 (ja) * 2010-08-23 2014-05-21 大日本印刷株式会社 紙カレンダーのメモスペースを電子的に拡張する機能を備えたカレンダー装置及びコンピュータプログラム
KR20130136566A (ko) 2011-03-29 2013-12-12 퀄컴 인코포레이티드 로컬 멀티-사용자 협업을 위한 모듈식 모바일 접속된 피코 프로젝터들
JP6040564B2 (ja) * 2012-05-08 2016-12-07 ソニー株式会社 画像処理装置、投影制御方法及びプログラム
EP2706508B1 (en) * 2012-09-10 2019-08-28 BlackBerry Limited Reducing latency in an augmented-reality display
US9576397B2 (en) 2012-09-10 2017-02-21 Blackberry Limited Reducing latency in an augmented-reality display
JP6256339B2 (ja) * 2012-09-21 2018-01-10 ソニー株式会社 制御装置および記憶媒体
TW201413628A (zh) * 2012-09-28 2014-04-01 Kun-Li Zhou 謄本解析系統
KR20140072651A (ko) * 2012-12-05 2014-06-13 엘지전자 주식회사 글래스타입 휴대용 단말기
JP5751430B2 (ja) * 2012-12-19 2015-07-22 コニカミノルタ株式会社 画像処理端末、画像処理システム、および画像処理端末の制御プログラム
WO2014106823A2 (en) 2013-01-03 2014-07-10 Meta Company Extramissive spatial imaging digital eye glass apparatuses, methods and systems for virtual or augmediated vision, manipulation, creation, or interaction with objects, materials, or other entities
CN104995663B (zh) * 2013-03-06 2018-12-04 英特尔公司 用于使用光学字符识别来提供增强现实的方法和装置
JP6133673B2 (ja) * 2013-04-26 2017-05-24 京セラ株式会社 電子機器及びシステム
US20150123966A1 (en) * 2013-10-03 2015-05-07 Compedia - Software And Hardware Development Limited Interactive augmented virtual reality and perceptual computing platform
WO2015095507A1 (en) * 2013-12-18 2015-06-25 Joseph Schuman Location-based system for sharing augmented reality content
JP2015135645A (ja) * 2014-01-20 2015-07-27 ヤフー株式会社 情報表示制御装置、情報表示制御方法及びプログラム
WO2015155841A1 (ja) * 2014-04-08 2015-10-15 日立マクセル株式会社 情報表示方法および情報表示端末
JP2016014978A (ja) * 2014-07-01 2016-01-28 コニカミノルタ株式会社 エアタグ登録管理システム、エアタグ登録管理方法、エアタグ登録プログラム、エアタグ管理プログラム、エアタグ提供装置、エアタグ提供方法及びエアタグ提供プログラム
JP2016138908A (ja) 2015-01-26 2016-08-04 セイコーエプソン株式会社 表示システム、可搬型表示装置、表示制御装置、表示方法
JP2016139168A (ja) 2015-01-26 2016-08-04 セイコーエプソン株式会社 表示システム、可搬型表示装置、表示制御装置、表示方法
CN108351289B (zh) 2015-10-28 2021-11-26 国立大学法人东京大学 分析装置
US10665020B2 (en) 2016-02-15 2020-05-26 Meta View, Inc. Apparatuses, methods and systems for tethering 3-D virtual elements to digital content
CN106296116A (zh) * 2016-08-03 2017-01-04 北京小米移动软件有限公司 生成提示信息的方法及装置
JP6401806B2 (ja) * 2017-02-14 2018-10-10 株式会社Pfu 日付識別装置、日付識別方法及び日付識別プログラム
JP7013757B2 (ja) * 2017-09-20 2022-02-01 富士フイルムビジネスイノベーション株式会社 情報処理装置、情報処理システム及びプログラム
JP7209474B2 (ja) * 2018-03-30 2023-01-20 株式会社スクウェア・エニックス 情報処理プログラム、情報処理方法及び情報処理システム
JP7225016B2 (ja) * 2019-04-19 2023-02-20 株式会社スクウェア・エニックス Ａｒ空間画像投影システム、ａｒ空間画像投影方法及びユーザ端末
US11967148B2 (en) 2019-11-15 2024-04-23 Maxell, Ltd. Display device and display method
US11995291B2 (en) * 2022-06-17 2024-05-28 Micro Focus Llc Systems and methods of automatically identifying a date in a graphical user interface

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TW342487B (en) * 1996-10-03 1998-10-11 Winbond Electronics Corp Fully overlay function device and method
US6020891A (en) * 1996-08-05 2000-02-01 Sony Corporation Apparatus for displaying three-dimensional virtual object and method of displaying the same
US20020084974A1 (en) * 1997-09-01 2002-07-04 Toshikazu Ohshima Apparatus for presenting mixed reality shared among operators
TWI248308B (en) * 2004-06-30 2006-01-21 Mustek System Inc Method of programming recording schedule for time-shifting
JP2006267604A (ja) * 2005-03-24 2006-10-05 Canon Inc 複合情報表示装置
TW200915859A (en) * 2007-09-05 2009-04-01 Creative Tech Ltd Methods for processing a composite video image with feature indication

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3549035B2 (ja) * 1995-11-24 2004-08-04 シャープ株式会社 情報管理装置
JP3486536B2 (ja) * 1997-09-01 2004-01-13 キヤノン株式会社 複合現実感提示装置および方法
US8015494B1 (en) * 2000-03-22 2011-09-06 Ricoh Co., Ltd. Melded user interfaces
US7738706B2 (en) * 2000-09-22 2010-06-15 Sri International Method and apparatus for recognition of symbols in images of three-dimensional scenes
US6820096B1 (en) * 2000-11-07 2004-11-16 International Business Machines Corporation Smart calendar
JP2003141571A (ja) * 2001-10-30 2003-05-16 Canon Inc 複合現実感装置及び複合現実感ゲーム装置
JP4148671B2 (ja) * 2001-11-06 2008-09-10 ソニー株式会社 表示画像制御処理装置、動画像情報送受信システム、および表示画像制御処理方法、動画像情報送受信方法、並びにコンピュータ・プログラム
JP2005004307A (ja) * 2003-06-10 2005-01-06 Kokuyo Co Ltd スケジュール管理支援システム及びアポイントメント調整支援システム
JP2005196493A (ja) * 2004-01-07 2005-07-21 Mitsubishi Electric Corp スケジュール管理システム
JP2008165459A (ja) * 2006-12-28 2008-07-17 Sony Corp コンテンツ表示方法、コンテンツ表示装置、及びコンテンツ表示プログラム
US8943018B2 (en) * 2007-03-23 2015-01-27 At&T Mobility Ii Llc Advanced contact management in communications networks
KR20090025936A (ko) * 2007-09-07 2009-03-11 삼성전자주식회사 단말기 및 그의 일정 관리방법
US8180396B2 (en) * 2007-10-18 2012-05-15 Yahoo! Inc. User augmented reality for camera-enabled mobile devices
JP5690473B2 (ja) * 2009-01-28 2015-03-25 任天堂株式会社 プログラムおよび情報処理装置
US8799826B2 (en) * 2009-09-25 2014-08-05 Apple Inc. Device, method, and graphical user interface for moving a calendar entry in a calendar application
US20110205370A1 (en) * 2010-02-19 2011-08-25 Research In Motion Limited Method, device and system for image capture, processing and storage

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6020891A (en) * 1996-08-05 2000-02-01 Sony Corporation Apparatus for displaying three-dimensional virtual object and method of displaying the same
TW342487B (en) * 1996-10-03 1998-10-11 Winbond Electronics Corp Fully overlay function device and method
US20020084974A1 (en) * 1997-09-01 2002-07-04 Toshikazu Ohshima Apparatus for presenting mixed reality shared among operators
TWI248308B (en) * 2004-06-30 2006-01-21 Mustek System Inc Method of programming recording schedule for time-shifting
JP2006267604A (ja) * 2005-03-24 2006-10-05 Canon Inc 複合情報表示装置
TW200915859A (en) * 2007-09-05 2009-04-01 Creative Tech Ltd Methods for processing a composite video image with feature indication

Also Published As

Publication number Publication date
JP5418386B2 (ja) 2014-02-19
US20130027430A1 (en) 2013-01-31
BR112012026250A2 (pt) 2016-07-12
RU2012143718A (ru) 2014-04-20
WO2011132373A1 (en) 2011-10-27
KR20130073871A (ko) 2013-07-03
CN102844795A (zh) 2012-12-26
EP2561483A1 (en) 2013-02-27
JP2011227644A (ja) 2011-11-10
TW201207717A (en) 2012-02-16

Similar Documents

Publication Publication Date Title
TWI448958B (zh) 影像處理器件，影像處理方法及程式
US11287956B2 (en) Systems and methods for representing data, media, and time using spatial levels of detail in 2D and 3D digital applications
US20210149480A1 (en) Display orientation adjustment using facial landmark information
Mulfari et al. Using Google Cloud Vision in assistive technology scenarios
US11093748B2 (en) Visual feedback of process state
US9160993B1 (en) Using projection for visual recognition
CN105579946B (zh) 对由应用产生的共享状态信息进行管理
US20210312523A1 (en) Analyzing facial features for augmented reality experiences of physical products in a messaging system
US11521334B2 (en) Augmented reality experiences of color palettes in a messaging system
CN109074164A (zh) 使用视线追踪技术标识场景中的对象
US20210312678A1 (en) Generating augmented reality experiences with physical products using profile information
US10248652B1 (en) Visual writing aid tool for a mobile writing device
CA3083486A1 (en) Method, medium, and system for live preview via machine learning models
US11651019B2 (en) Contextual media filter search
WO2021203118A1 (en) Identification of physical products for augmented reality experiences in a messaging system
US20230215118A1 (en) Api to provide product cards generated by augmented reality content generators
US20230214913A1 (en) Product cards provided by augmented reality content generators
US20230214912A1 (en) Dynamically presenting augmented reality content generators based on domains
US10891768B2 (en) Annotating an image with a texture fill
So Measuring aesthetic preferences of neural style transfer: More precision with the two-alternative-forced-choice task
US20220101355A1 (en) Determining lifetime values of users in a messaging system
US11514082B1 (en) Dynamic content selection
CN113554557A (zh) 以增强现实方式显示皮肤细节的方法及电子设备
CN115798057A (zh) 一种图像处理方法、装置、存储介质及电子设备
CN117036548A (zh) 图形处理方法、装置、计算机设备和认知能力评估装置

Legal Events

Date Code Title Description
MM4A Annulment or lapse of patent due to non-payment of fees