TW201708881A - 擴增實境互動系統及其動態資訊互動顯示方法 - Google Patents

擴增實境互動系統及其動態資訊互動顯示方法 Download PDF

Info

Publication number
TW201708881A
TW201708881A TW104127060A TW104127060A TW201708881A TW 201708881 A TW201708881 A TW 201708881A TW 104127060 A TW104127060 A TW 104127060A TW 104127060 A TW104127060 A TW 104127060A TW 201708881 A TW201708881 A TW 201708881A
Authority
TW
Taiwan
Prior art keywords
processing unit
display
action
display panel
augmented reality
Prior art date
Application number
TW104127060A
Other languages
English (en)
Other versions
TWI578021B (zh
Inventor
黃士嘉
陳柏豪
周聖凱
正能 黃
Original Assignee
國立臺北科技大學
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 國立臺北科技大學 filed Critical 國立臺北科技大學
Priority to TW104127060A priority Critical patent/TWI578021B/zh
Priority to US14/864,789 priority patent/US20170053444A1/en
Priority to CN201510678781.4A priority patent/CN106468947A/zh
Publication of TW201708881A publication Critical patent/TW201708881A/zh
Application granted granted Critical
Publication of TWI578021B publication Critical patent/TWI578021B/zh

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/006Mixed reality
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/10Input arrangements, i.e. from user to vehicle, associated with vehicle functions or specially adapted therefor
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/21Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor using visual output, e.g. blinking lights or matrix displays
    • B60K35/213Virtual instruments
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/21Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor using visual output, e.g. blinking lights or matrix displays
    • B60K35/23Head-up displays [HUD]
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/28Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor characterised by the type of the output information, e.g. video entertainment or vehicle dynamics information; characterised by the purpose of the output information, e.g. for attracting the attention of the driver
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/29Instruments characterised by the way in which information is handled, e.g. showing information on plural displays or prioritising information according to driving conditions
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013Eye tracking input arrangements
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/015Input arrangements based on nervous system activity detection, e.g. brain waves [EEG] detection, electromyograms [EMG] detection, electrodermal response detection
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017Gesture based interaction, e.g. based on a set of recognized hand gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04842Selection of displayed objects or displayed text elements
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/0485Scrolling or panning
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/146Instrument input by gesture
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/146Instrument input by gesture
    • B60K2360/14643D-gesture
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/148Instrument input by voice
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/16Type of output information
    • B60K2360/177Augmented reality
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/18Information management
    • B60K2360/186Displaying information according to relevancy

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Chemical & Material Sciences (AREA)
  • Combustion & Propulsion (AREA)
  • Transportation (AREA)
  • Mechanical Engineering (AREA)
  • Computer Graphics (AREA)
  • Computer Hardware Design (AREA)
  • Software Systems (AREA)
  • Health & Medical Sciences (AREA)
  • Biomedical Technology (AREA)
  • Dermatology (AREA)
  • General Health & Medical Sciences (AREA)
  • Neurology (AREA)
  • Neurosurgery (AREA)
  • User Interface Of Digital Computer (AREA)
  • Instrument Panels (AREA)

Abstract

一種擴增實境互動系統及其動態資訊互動顯示方法。所述擴增實境互動系統適於配置在運輸載具中,並且至少包括透明顯示器、動作偵測單元以及處理單元。透明顯示器具有可透光之顯示面板,顯示面板適於作為運輸載具之擋風玻璃,其中透明顯示器依據顯示訊號控制顯示面板上之影像顯示,藉以在顯示面板上顯示互動訊息。動作偵測單元用以偵測使用者的操控動作,並且據以產生控制指令。處理單元耦接透明顯示器與動作偵測單元,用以接收控制指令,藉以基於操控動作產生對應的訊息。

Description

擴增實境互動系統及其動態資訊互動顯示方法
本發明是有關於系統及其控制方法, 且特別是有關於一種擴增實境互動系統及其動態資訊互動顯示方法。
隨著科技進展, 生活富裕, 運輸載具日益普及至一般家庭。但是隨著運輸載具( 例如車輛、船、飛機) 使用越加頻繁,隨之而來的交通事故也顯著增加。以車輛為例, 為了提高車輛行駛的安全性, 抬頭顯示系統已是許多車輛的基本配備。抬頭顯示系統可將例如車速、油量、里程、與前後車距離等行車資訊投影在車輛的前擋風玻璃上, 使得駕駛者可透過前擋風玻璃注意路況時, 同時觀察到被投影在擋風玻璃上的行車資訊。因此, 駕駛者在行駛中可不需分心低頭觀看車內儀表板, 藉以避免意外發生。
然而,為了能在車內有限的空間安裝抬頭顯示系統,抬頭顯示系統通常會做小型化設計,使其僅能侷限於固定的小區域內投影顯示畫面。因此,對於駕駛者而言,一般抬頭顯示系統的所顯示出的資訊仍無法較為直接的指示出與行駛方向上的景物或車輛之間的資訊,使得駕駛者仍難以單就投影顯示資訊而直覺性的判斷出實際路況。
此外,對於一般抬頭顯示系統的應用而言,駕駛者僅能透過手動控制電腦輸入介面的方式來調整抬頭顯示系統的設定與功能。換言之,駕駛者難以在駕駛車輛的期間直接對抬頭顯示系統做控制,如此便侷限了抬頭顯示系統的應用範圍。
本發明提供一種擴增實境互動系統及其動態資訊互動顯示方法, 其可解決先前技術所述及之問題。
本發明的擴增實境互動系統,適於配置在運輸載具中,擴增實境互動系統包括透明顯示器、動作偵測單元以及處理單元。透明顯示器具有可透光之顯示面板,顯示面板適於作為運輸載具之擋風玻璃,其中透明顯示器依據顯示訊號控制顯示面板上之影像顯示,藉以在顯示面板上顯示互動訊息。動作偵測單元用以偵測使用者的操控動作,並且據以產生控制指令。處理單元耦接透明顯示器與動作偵測單元,用以接收控制指令,藉以基於操控動作產生對應的顯示訊號來控制透明顯示器的運作。
本發明的應用於運輸載具的動態資訊互動顯示方法包括以下步驟:藉可透光之顯示面板顯示互動訊息,其中顯示面板適於作為運輸載具之擋風玻璃,並且顯示面板上之影像顯示係受控於顯示訊號;藉動作偵測單元偵測使用者的操控動作,並且據以產生控制指令;以及藉處理單元接收控制指令,藉以基於操控動作產生對應的顯示訊息來控制顯示面板。
本發明的擴增實境互動系統,適於配置在運輸載具中,擴增實境互動系統包括透明基板、動作偵測單元以及處理單元。透明基板具有透光性且具有顯示功能,其中透明基板適於作為運輸載具之擋風玻璃。動作偵測單元用以偵測操控動作,並且據以產生控制指令。處理單元耦接透明基板與動作偵測單元,用以接收控制指令,藉以基於操控動作控制透明基板的運作。
基於上述,本發明實施例提出一種擴增實境互動系統及其動態資訊互動顯示方法,其可在擋風玻璃上顯示出互動訊息,所述互動訊息可在駕駛者不低頭的視線前提下與運輸載具前方景物整合成擴增實境影像。搭配可擴充的應用程式,駕駛者可與擴增實境影像進行互動操控,藉以獲得更完善的駕駛資訊以及行車輔助,從而提高行車的安全性與操控性。
為讓本發明的上述特徵和優點能更明顯易懂,下文特舉實施例,並配合所附圖式作詳細說明如下。
為了使本揭露之內容可以被更容易明瞭, 以下特舉實施例做為本揭露確實能夠據以實施的範例。另外, 凡可能之處, 在圖式及實施方式中使用相同標號的元件/構件/步驟,係代表相同或類似部件。
圖1為本發明一實施例的擴增實境互動系統的功能方塊示意圖。圖2為本發明一實施例的擴增實境互動系統的實體配置示意圖。請同時參照圖1與圖2,本實施例的擴增實境系統100適於配置在一般運輸載具(例如為車輛、船、飛機等)中,其包括透明顯示器(transparent display)110、動作偵測單元120、載具動態偵測單元130以及處理單元140。
透明顯示器110具有可透光之顯示面板DP與用以驅動顯示面板DP的驅動部分(未繪示),其中所述可透光之顯示面板DP係配置在運輸載具中以作為運輸載具的擋風玻璃,如圖2所示(於此為便於區分實體景物與顯示面板DP上之影像顯示,實體景物皆以虛線繪示之,而顯示面板DP上之影像則以實線繪示之)。透明顯示器110的驅動部分可例如由時序控制器(timing controller)、閘極驅動器(gate driver)及源極驅動器(source driver)等電路所組成,其可用以控制顯示面板DP的影像顯示。
在本實施例中,顯示面板DP可例如為利用場色序法(field-sequential-color)驅動之側邊入光式液晶顯示面板、採用透明材料所構成之自發光主動陣列式有機發光二極體(active matrix organic light emitting diode,AMOLED)面板、應用透光性油墨與疏水層材料之電濕潤式(electrowetting)顯示面板、或者任何類型之透明基板,本發明不對此加以限制。換言之,只要是可令使用者從顯示面板DP一側通過顯示面板DP觀察到顯示面板DP另一側之物體(亦即,顯示面板DP為可透光的),並且顯示面板DP本身具備顯示影像之功能的顯示器架構,皆屬於本案之透明顯示器110之範疇。
另外應注意的是,在圖2中雖係將顯示面板DP作為前擋風玻璃為例,但在其他實施例中,顯示面板DP亦可應用在側邊車窗、天窗或後擋風玻璃上,本發明不對此加以限制。換言之,本案所定義之“擋風玻璃”,並不僅限於前擋風玻璃,而是運輸載具中任何可透光之物件皆可利用本案所述的顯示面板DP來實施。
動作偵測單元120用以偵測駕駛者的操控動作,並且根據操控動作而產生一對應的控制指令CMD。所述操控動作可依設計需求而選用手勢動作、聲控動作、眼控動作及腦波控制動作至少其中之一。其中,所述動作偵測單元120可依據所選用的操控類型而對應的設計硬體配置方式。舉例來說,若所述操控動作為手勢動作或眼控動作,則動作偵測單元120可例如利用影像擷取裝置及對應的影像處理電路來實現;若所述操控動作為聲控動作,則動作偵測單元120可例如利用音訊擷取裝置及對應的音訊處理電路來實現;若所述操控動作為腦波控制動作,則動作偵測單元120可例如為腦波偵測裝置及對應的訊號處理電路。此外,動作偵測單元120在硬體配置上可設置在運輸載具的駕駛座附近(如圖2所示,其可例如是設置在儀表板上,但不僅限於此),藉以擷取駕駛者所做出的操控動作。
載具動態偵測單元130用以偵測運輸載具的行駛資訊DINF(例如車速、車輛偏移量或方向盤轉向等)以及運輸載具周遭的環境資訊EINF(例如行駛方向上的障礙物位置、距離、環境光強度及環境溫度等),並且將偵測到的行駛資訊DINF與環境資訊EINF提供給處理單元140。在本實施例中,動態偵測單元130的實際硬體可視所需之行駛資訊DINF與環境資訊EINF種類而對應設置。舉例來說,若行駛資訊DINF包含有車速、車輛偏移量及方向盤轉向,則動態偵測單元130的硬體即包含有運輸載具本身原有之行車電腦。若環境資訊EINF包含有行駛方向上的障礙物位置、距離、環境光強度及環境溫度,則動態偵測單元130的硬體更包括有物體感測器(例如紅外線感測器、超音波感測器等)、光感測器以及溫度感測器。其端視設計者之設計需求而定,本案不對此加以限制。
處理單元140係整體擴增實境系統100的控制核心,其可用以控制擴增實境系統100內的各單元的運作,並且依據從各單元所接收到的控制指令CMD、行駛資訊DINF及環境資訊EINF進行訊號處理,藉以產生對應的顯示訊號VDATA來控制透明基板110的運作。其中,處理單元140可依據控制指令CMD來進行駕駛者與顯示面板DP所顯示之影像間的互動控制,並且可依據行駛資訊DINF及環境資訊EINF進行應用程式的運算處理,或令顯示面板DP顯示關聯於行駛資訊DINF及環境資訊EINF的輔助資訊。
在一範例實施例中,處理單元140的硬體配置可利用運輸載具原有的行車電腦的處理器來實現,並且所述依據控制指令CMD、行駛資訊DINF及環境資訊EINF進行訊號處理,產生對應的顯示訊號VDATA的功能則可藉由軟體來實現。在另一範例實施例中,處理單元140亦可利用獨立的硬體來實現,本發明不對此加以限制。
圖3為本發明一實施例的應用於運輸載具的動態資訊互動顯示方法的步驟流程圖。請同時參照圖1至圖3,在本實施例的動態資訊互動顯示方法中,首先,一驅動部分會接收處理單元140所提供的顯示訊號VDATA,藉以驅動作為擋風玻璃的顯示面板DP,使得顯示面板DP顯示一互動訊息(步驟S310)。
接著,動作偵測單元120會偵測駕駛者的操控動作,並據以產生控制指令CMD(步驟S320)。更具體地說,在步驟S320中,動作偵測單元120會在偵測到駕駛者所做出的操控動作後,判斷偵測到的操控動作與預設的指令動作是否符合。若符合,則產生對應的控制指令CMD;反之,則動作偵測單元120會再繼續偵測駕駛者的操控動作。
接著,處理單元140會接收動作偵測單元120所產生的控制指令CMD,藉以基於駕駛者所做出的操控動作來產生對應的顯示訊號VDATA來控制顯示面板DP的影像顯示(步驟S330)。
詳細而言,在本案的擴增實境系統100的系統架構下,其可在運輸載具的擋風玻璃上顯示資訊,進而整合運輸載具前方景物而實現擴增實境(augmented reality)的顯示應用。透過搭配各種不同類型的應用程式,例如GPS導航、倒車顯示、行車視覺增強技術等,駕駛者可利用體感操控的方式來實現與擴增實境影像(即,互動訊息結合運輸載具前方景物)之間的互動控制。因此,在本案的系統架構下可擴充許多便於載具駕駛的互動功能。
舉例來說,所述互動訊息可設計為如圖4之IMG。請參照圖4,在本實施例中,互動訊息IMG包含有常駐功能列PFC,並且依駕駛者的操作,互動訊息IMG還可選擇性的呈現有功能選單FL、應用程式視窗EP、輔助資訊AINF(於此應用程式EPW與輔助資訊AINF是以同一圖示示意,但不以此為限)以及背景程式視窗BPW。顯示面板DP大致可區分為上邊緣區域Re1、主畫面區域Rm以及下邊緣區域Re2。常駐功能列PFC可被設定顯示在互動訊息IMG的上邊緣區域Re1。常駐功能列PFC可包含有一些基本資訊(例如時間、車內溫度、當前執行的應用程式的圖示等)。
主畫面區域Rm可用來顯示執行中的應用程式視窗EPW、用以開啟應用程式或資料夾的功能選單FL及其他關連於行車資訊或環境資訊的輔助資訊AINF。在本實施例中,執行中的應用程式視窗EPW與輔助資訊AINF在主畫面區域Rm中的視窗位置與視窗尺寸是可由駕駛者通過操控動作來進行調整。換言之,以系統的觀點來看,處理單元140可依據駕駛者的操控動作來產生對應的顯示訊號VDATA,藉以令透明顯示器110調整執行中的應用程式於顯示面板上之視窗位置與視窗尺寸。舉例來說,駕駛者透過做出操控動作,可將應用程式視窗EPW最大化至佔滿主畫面區域Rm、將應用程式視窗EPW設定至置中位置、或將應用程式視窗EPW最小化為背景程式BPW。
背景程式視窗BPW可被設定顯示在互動訊息IMG的下邊緣區域Re2。在本實施例中,被設定為背景程式的應用程式會持續地處於運行的狀態。以圖4所繪示之導航地圖應用程式為例,其可被縮小為較小的背景程式視窗BPW,並且持續執行GPS導航功能。換言之,以系統的觀點來看,當駕駛者做出特定的操控動作以進行最小化操作時,動作偵測單元120會依據駕駛者的操控動作產生一最小化指令,使得處理單元140依據接收到的最小化指令將執行中的應用程式視窗縮小至顯示面板DP的下邊緣區域Re2,並且作為背景程式持續運行。
另外,在本實施例的一應用中,系統可基於類似單工操作的方式運作,使得同一時間下只能有單一應用程式視窗EPW顯示於主畫面區域Rm中。亦即,在一個應用程式已經被執行的狀態下,不能再執行另一應用程式。但是,在所述單工操作的應用範例中,若將當前執行的應用程式最小化為背景程式,則可在主畫面區域Rm中開啟另外的應用程式。其中,同一時間下可以有多個背景程式視窗BPW顯示於下邊緣區域Re2中。換言之,當應用程式被執行並且未被設定為背景程式時,處理單元140會禁止另一應用程式被執行。相反地,當執行中的應用程式被設定為背景程式時,處理單元140則可再允許另一應用程式被執行。但本發明不僅限於此。在本實施例的另一應用中,系統亦可基於類似多工操作的方式運作,藉以令處理單元140可同時開啟多個應用程式,並且將各應用程式的應用程式視窗EPW顯示於主畫面區域Rm中。
另外附帶一提的是,於此所述的互動訊息IMG中的各顯示部分(常駐功能列PFC、功能選單FL、應用程式視窗EPW、輔助資訊AINF及背景程式視窗BPW)皆是以半透明視窗或線條狀圖示的顯示方式呈現。因此,駕駛者在查看顯示面板DP上之互動訊息IMG時,駕駛者亦可同時看到顯示面板DP另一側的景物,而不會被互動訊息IMG上的視窗或功能選單所遮蔽。
一般動力車輛應用本案的擴增實境系統100的駕駛視角可如圖5所示。請參照圖5,在本實施例中,擴增實境系統100是以執行一安全警示應用程式作為範例。在此應用程式之功能下,其可應用動態偵測單元130的功能來偵測本車與前車之間距,並且將間距做為輔助資訊AINF顯示於顯示面板/擋風玻璃DP上。此外,此應用程式還可偵測出前方道路上的行人位置,並且針對行人位置呈現警示圖示,藉以提醒駕駛注意行人。
在此應用下,駕駛者可基於顯示面板/擋風玻璃DP上所顯示的資訊搭配前方景物所整合成的擴增實境影像,在不妨礙駕駛視線的前提下,獲得更完善的駕駛資訊,從而提高行車的安全性。
於此應注意的是,此部分所述者僅係應用本案的擴增實境系統100的一實施範例,本發明不僅限於此。實際上應用程式可提供的功能可根據設計者需求,基於本案的系統架構底下自行擴充研發。舉例來說,在另一實施例中,應用程式亦可為基本的GPS導航地圖,或是在夜間提供視覺增強功能的應用程式。
此外,由於本案是直接利用可透光之顯示面板DP來作為擋風玻璃,因此影像是可以呈現在顯示面板DP上的任意位置。換言之,在本案的系統架構下,搭配運輸載具前方景物位置來對應調整擋風玻璃上的影像顯示,進而達成更加緊密結合的擴增實境應用是相較於一般投射式的抬頭顯示系統而言,更為容易實現的。
底下以圖6至圖9實施例來針對本案的互動操控部分做進一步說明。於此是以利用手勢動作來控制互動訊息IMG的顯示做為範例。在此列舉了四種不同手勢來分別對應四種不同的功能操作,其分別為開啟、位移、點選及關閉。於本領域具有通常知識者參酌下述說明後,應可瞭解設計者可藉由設定不同的手勢動作來對應至不同的控制指令CMD,因此控制指令CMD的種類並不限於下述四種。
請同時參照圖1與圖6,本實施例是繪示利用一開啟手勢來開啟互動訊息IMG中的功能選單FL。在本實施例中,動作偵測單元120預設的開啟手勢為左右揮動手勢。當駕駛者在動作偵測單元120的偵測範圍內將手左右揮動時,動作偵測單元120會判定駕駛者的手勢符合預設的開啟手勢,並且據以產生一開啟指令。處理單元140接收到開啟指令後,其會依據開啟指令開啟功能選單FL。所述功能選單FL包括多個功能選項圖示FICN,而每一功能選項圖示FICN會分別對應至不同的應用程式或資料夾。此外,互動訊息IMG中的虛線框選處為一當前選取區域CSR,位於當前選取區域CSR內的功能選項圖示FICN即表示當前選取的功能選項圖示FICN。
在互動訊息IMG顯示出功能選單FL後,駕駛者可進一步透過位移手勢來移動功能選單FL裡的功能選項圖示FICN,如圖7A與圖7B所示。在本實施例中,動作偵測單元120預設的向右位移手勢為將手掌往右移動/揮動的手勢,並且預設的向左位移手勢為將手掌往左移動/揮動的手勢。
請參照圖7A與圖7B,當駕駛者在動作偵測單元120的偵測範圍內將手向左揮動或向右揮動時,動作偵測單元120會判定駕駛者的手勢符合預設的向左位移手勢或向右位移手勢,並且據以產生一向左位移指令或一向右位移指令。當處理單元140接收到向左位移指令時,其會依據向左位移指令將功能選項圖示FICN於顯示面板DP上的顯示位置向左位移一格。舉例來說,位於當前選取區域CSR內的功能選項圖示FICN會被位移至當前選取區域CSR的左側,而原先位於當前選取區域CSR右側的功能選項圖示FICN則會被位移至當前選取區域CSR中。
類似地,當處理單元140接收到向右位移指令時,其會依據向右位移指令將功能選項圖示FICN於顯示面板DP上的顯示位置向右位移一格。舉例來說,位於當前選取區域CSR內的功能選項圖示FICN會被位移至當前選取區域CSR的右側,而原先位於當前選取區域CSR左側的功能選項圖示FICN則會被位移至當前選取區域CSR中。
在選擇好所欲執行的應用程式後,駕駛者可進一步透過點選手勢來執行功能選項圖示FICN所對應的應用程式或資料夾,如圖8所示。在本實施例中,動作偵測單元120預設的點選手勢為握拳手勢。
請參照圖8,當駕駛者在動作偵測單元120的偵測範圍內將手從張開轉換為握拳時,動作偵測單元120會判定駕駛者的手勢符合預設點選手勢,並且據以產生點選指令。當處理單元140接收到點選指令時,其會依據點選指令執行位於當前選取區域CSR內的功能選項圖示FICN所對應的應用程式或資料夾。
於此應注意的是,上述實施例所述及之手勢應用僅係舉例說明,並非用以限定本案的應用範圍。在其他實施例中,本案的開啟手勢、位移手勢、點選手勢等手勢設定皆可依據設計者需求而自行定義為任一手勢動作,本發明不以此為限。
在駕駛者已使用完應用程式之功能,並且欲將應用程式關閉時,駕駛者可進一步透過關閉手勢來執行功能選項圖示FICN所對應的應用程式或資料夾,如圖9所示。在本實施例中,動作偵測單元120預設的關閉手勢為手掌向下移動的手勢。
請參照圖9,當駕駛者在動作偵測單元120的偵測範圍內將手向下揮動時,動作偵測單元120會判定駕駛者的手勢符合預設關閉手勢,並且據以產生關閉指令。當處理單元140接收到關閉指令時,其會依據關閉指令將當前執行的應用程式或資料夾的視窗EPW關閉。
於此值得一提的是,本案的關閉手勢/關閉指令不僅限於上述之應用。在一實施範例中,處理單元140也可依據關閉指令將運行中的背景程式全部關閉,藉以釋放記憶體空間。換言之,在本案中,處理單元140會依據關閉指令將當前執行的應用程式或資料夾關閉,或將所有背景程式關閉。
綜上所述,本發明實施例提出一種擴增實境互動系統及其動態資訊互動顯示方法,其可在擋風玻璃上顯示出互動訊息,所述互動訊息可在不遮蔽駕駛者視線的前提下與運輸載具前方景物整合成擴增實境影像。搭配可擴充的應用程式,駕駛者可與擴增實境影像進行互動操控,藉以獲得更完善的駕駛資訊以及行車輔助,從而提高行車的安全性與操控性。
雖然本發明已以實施例揭露如上,然其並非用以限定本發明,任何所屬技術領域中具有通常知識者,在不脫離本發明的精神和範圍內,當可作些許的更動與潤飾,故本發明的保護範圍當視後附的申請專利範圍所界定者為準。
100‧‧‧擴增實境系統 110‧‧‧透明顯示器 120‧‧‧動作偵測單元 130‧‧‧動態偵測單元 140‧‧‧處理單元 AINF‧‧‧輔助資訊 BP‧‧‧背景程式視窗 CMD‧‧‧控制指令 CSR‧‧‧當前選取區域 DP‧‧‧顯示面板 DINF‧‧‧行駛資訊 EINF‧‧‧環境資訊 EPW‧‧‧應用程式視窗 FICN‧‧‧功能選項圖示 FL‧‧‧功能選單 IMG‧‧‧互動訊息 PFC‧‧‧常駐功能列 Re1‧‧‧上邊緣區域 Re2‧‧‧下邊緣區域 Rm‧‧‧主畫面區域 S310~S330‧‧‧步驟 VDATA‧‧‧顯示訊號
圖1 為本發明一實施例的擴增實境互動系統的功能方塊示意 圖。 圖2 為本發明一實施例的擴增實境互動系統的實體配置示意 圖。 圖3 為本發明一實施例的應用於運輸載具的動態資訊互動顯 示方法的步驟流程圖。 圖4 為本發明一實施例的擴增實境互動系統的互動訊息示意 圖。 圖5 為本發明一實施例的應用擴增實境互動系統之運輸載具 的駕駛視角示意圖。 圖6 至圖9 為本發明不同實施例的擴增實境互動系統的操作 示意圖。
100‧‧‧擴增實境系統
110‧‧‧透明顯示器
120‧‧‧動作偵測單元
130‧‧‧動態偵測單元
140‧‧‧處理單元
CMD‧‧‧控制指令
DP‧‧‧顯示面板
DINF‧‧‧行駛資訊
EINF‧‧‧環境資訊
VDATA‧‧‧顯示訊號

Claims (16)

  1. 一種擴增實境互動系統,適於配置在一運輸載具中,該擴增實境互動系統包括: 一透明顯示器,具有一可透光之顯示面板,該顯示面板適於作為該運輸載具之擋風玻璃,其中該透明顯示器依據一顯示訊號控制該顯示面板上之影像顯示,藉以在該顯示面板上顯示一互動訊息; 一動作偵測單元,用以偵測任一使用者的一操控動作,並且據以產生一控制指令;以及 一處理單元,耦接該透明顯示器與該動作偵測單元,用以接收該控制指令,藉以基於該操控動作產生對應的顯示訊號來控制該透明顯示器的運作。
  2. 如申請專利範圍第1項所述的擴增實境互動系統,更包括: 一動態偵測單元,耦接該處理單元,用以偵測該運輸載具的一行駛資訊以及該運輸載具週遭的一環境資訊,其中該處理單元更依據該行駛資訊與該環境資訊控制該顯示面板之影像顯示。
  3. 如申請專利範圍第1項所述的擴增實境互動系統,其中該操控動作包括一手勢動作、一聲控動作、一眼控動作以及一腦波控制動作至少其中之一,並且該控制指令包括一開啟指令、一位移指令、一點選指令以及一關閉指令至少其中之一。
  4. 如申請專利範圍第3項所述的擴增實境互動系統,其中該處理單元依據該開啟指令開啟一功能選單,該功能選單包括多個功能選項圖示,且該些功能選項圖示分別對應至不同的應用程式或資料夾。
  5. 如申請專利範圍第4項所述的擴增實境互動系統,其中該處理單元依據該位移指令位移該些功能選項圖示於該顯示面板上的顯示位置。
  6. 如申請專利範圍第4項所述的擴增實境互動系統,其中該處理單元依據該點選指令執行位於該顯示面板中的一當前選取區域內的功能選項圖示所對應的應用程式或資料夾。
  7. 如申請專利範圍第4項所述的車用擴增實境互動系統,其中該處理單元依據該關閉指令將當前執行的應用程式或資料夾關閉或將所有背景程式關閉。
  8. 如申請專利範圍第4項所述的擴增實境互動系統,其中該處理單元更依據該操控動作調整執行中的應用程式於該顯示面板上之視窗位置與視窗尺寸。
  9. 如申請專利範圍第4項所述的擴增實境互動系統,其中該處理單元更依據一最小化指令將執行中的應用程式之視窗縮小至該顯示面板的邊緣,並且作為一背景程式持續運行。
  10. 如申請專利範圍第9項所述的擴增實境互動系統,其中當一應用程式被執行並且未被設定為該背景程式時,該處理單元禁止另一應用程式被執行,以及當執行中的應用程式被設定為該背景程式時,該處理單元允許該另一應用程式被執行。
  11. 一種應用於運輸載具的動態資訊互動顯示方法,包括: 藉一可透光之顯示面板顯示一互動訊息,其中該顯示面板適於作為該運輸載具之擋風玻璃,並且該顯示面板上之影像顯示係受控於一顯示訊號; 藉一動作偵測單元偵測任一使用者的一操控動作,並且據以產生一控制指令;以及 藉一處理單元接收該控制指令,藉以基於該操控動作產生對應的顯示訊號來控制該顯示面板。
  12. 如申請專利範圍第11項所述的應用於運輸載具的動態資訊互動顯示方法,其中藉該動作偵測單元偵測該使用者的操控動作,並且據以產生該控制指令的步驟包括: 偵測該使用者的一手勢動作、一聲控動作、一眼控動作以及一腦波控制動作至少其中之一; 判斷偵測到的操控動作是否符合一開啟動作、一位移動作、一點選動作以及一關閉動作其中之一; 當該動作偵測單元判定偵測到的操控動作符合該開啟動作時,產生一開啟指令; 當該動作偵測單元判定偵測到的操控動作符合該位移動作時,產生一位移指令; 當該動作偵測單元判定偵測到的操控動作符合該點選動作時,產生一點選指令。以及 當該動作偵測單元判定偵測到的操控動作符合該關閉動作時,產生一關閉指令。
  13. 如申請專利範圍第12項所述的應用於運輸載具的動態資訊互動顯示方法,其中藉該處理單元接收該控制指令,藉以基於該操控動作產生對應的顯示訊號來控制該顯示面板的步驟包括: 當該處理單元接收到該開啟指令時,該處理單元開啟一功能選單並且顯示於該顯示面板上,其中該功能選單包括多個功能選項圖示,且該些功能選項圖示分別對應至不同的應用程式或資料夾; 當該處理單元接收到該位移指令時,該處理單元位移該些功能選項圖示於該顯示面板上的顯示位置;以及 當該處理單元接收到該點選指令時,該處理單元執行位於該顯示面板中的一當前選取區域內的功能選項圖示所對應的應用程式或資料夾。 當該處理單元接收到該關閉指令時,該處理單元將當前執行的應用程式或資料夾關閉或將所有背景程式關閉。
  14. 如申請專利範圍第13項所述的應用於運輸載具的動態資訊互動顯示方法,其中藉該處理單元接收該控制指令,藉以基於該操控動作產生對應的顯示訊號來控制該顯示面板的步驟更包括: 當該處理單元接收到一最小化指令時,該處理單元將執行中的應用程式之視窗縮小至該顯示面板的邊緣,並且作為一背景程式持續運行。
  15. 如申請專利範圍第14項所述的應用於運輸載具的動態資訊互動顯示方法,其中藉該處理單元接收該控制指令,藉以基於該操控動作產生對應的顯示訊號來控制該顯示面板的步驟更包括: 當一應用程式被執行並且未被設定為該背景程式時,該處理單元禁止另一應用程式被執行;以及 當執行中的應用程式被設定為該背景程式時,該處理單元允許該另一應用程式被執行。
  16. 一種擴增實境互動系統,適於配置在一載具中,該擴增實境互動系統包括: 一透明基板,具有透光性且具有顯示功能,其中該透明基板適於作為該運輸載具之擋風玻璃; 一動作偵測單元,用以偵測一操控動作,並且據以產生一控制指令;以及 一處理單元,耦接該透明基板與該動作偵測單元,用以接收該控制指令,藉以基於該操控動作控制該透明基板的運作。
TW104127060A 2015-08-19 2015-08-19 擴增實境互動系統及其動態資訊互動顯示方法 TWI578021B (zh)

Priority Applications (3)

Application Number Priority Date Filing Date Title
TW104127060A TWI578021B (zh) 2015-08-19 2015-08-19 擴增實境互動系統及其動態資訊互動顯示方法
US14/864,789 US20170053444A1 (en) 2015-08-19 2015-09-24 Augmented reality interactive system and dynamic information interactive display method thereof
CN201510678781.4A CN106468947A (zh) 2015-08-19 2015-10-19 扩增实境互动系统及其动态信息互动显示方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
TW104127060A TWI578021B (zh) 2015-08-19 2015-08-19 擴增實境互動系統及其動態資訊互動顯示方法

Publications (2)

Publication Number Publication Date
TW201708881A true TW201708881A (zh) 2017-03-01
TWI578021B TWI578021B (zh) 2017-04-11

Family

ID=58158475

Family Applications (1)

Application Number Title Priority Date Filing Date
TW104127060A TWI578021B (zh) 2015-08-19 2015-08-19 擴增實境互動系統及其動態資訊互動顯示方法

Country Status (3)

Country Link
US (1) US20170053444A1 (zh)
CN (1) CN106468947A (zh)
TW (1) TWI578021B (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI633500B (zh) * 2017-12-27 2018-08-21 中華電信股份有限公司 擴增實境應用產生系統及方法
TWI691870B (zh) * 2018-09-17 2020-04-21 財團法人工業技術研究院 虛實影像的互動方法及裝置
US10895741B2 (en) 2017-10-03 2021-01-19 Industrial Technology Research Institute Ultra-wide head-up display system and display method thereof

Families Citing this family (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108349503B (zh) * 2015-10-30 2022-08-02 三菱电机株式会社 驾驶辅助装置
US20180059773A1 (en) * 2016-08-29 2018-03-01 Korea Automotive Technology Institute System and method for providing head-up display information according to driver and driving condition
CN109789783B (zh) * 2016-10-06 2021-11-12 富士胶片株式会社 投影型显示装置、显示控制方法及计算机可读取存储介质
AU2018257999B2 (en) 2017-04-25 2022-08-25 Bae Systems Plc Watercraft
GB2561852A (en) * 2017-04-25 2018-10-31 Bae Systems Plc Watercraft
EP3470908B1 (en) * 2017-10-16 2021-03-24 Volvo Car Corporation Vehicle with overhead vehicle state indication
CN108375958B (zh) * 2018-01-15 2020-06-19 珠海格力电器股份有限公司 一种电器系统
US10982968B2 (en) 2018-03-29 2021-04-20 Nio Usa, Inc. Sensor fusion methods for augmented reality navigation
JP7144721B2 (ja) * 2018-05-25 2022-09-30 株式会社デンソー 車両用表示制御システム、車両用表示制御プログラム及び記憶媒体
US11087538B2 (en) * 2018-06-26 2021-08-10 Lenovo (Singapore) Pte. Ltd. Presentation of augmented reality images at display locations that do not obstruct user's view
US11393170B2 (en) 2018-08-21 2022-07-19 Lenovo (Singapore) Pte. Ltd. Presentation of content based on attention center of user
US10991139B2 (en) 2018-08-30 2021-04-27 Lenovo (Singapore) Pte. Ltd. Presentation of graphical object(s) on display to avoid overlay on another item
DE102020211301A1 (de) * 2020-09-09 2022-03-10 Volkswagen Aktiengesellschaft Verfahren zur Darstellung eines virtuellen Elements
DE102020214843A1 (de) * 2020-11-26 2022-06-02 Volkswagen Aktiengesellschaft Verfahren zur Darstellung eines virtuellen Elements
US11815679B2 (en) 2021-04-16 2023-11-14 Industrial Technology Research Institute Method, processing device, and display system for information display
US11556175B2 (en) 2021-04-19 2023-01-17 Toyota Motor Engineering & Manufacturing North America, Inc. Hands-free vehicle sensing and applications as well as supervised driving system using brainwave activity
JP2022184350A (ja) * 2021-06-01 2022-12-13 マツダ株式会社 ヘッドアップディスプレイ装置

Family Cites Families (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8686922B2 (en) * 1999-12-15 2014-04-01 American Vehicular Sciences Llc Eye-location dependent vehicular heads-up display system
US7764247B2 (en) * 2006-02-17 2010-07-27 Microsoft Corporation Adaptive heads-up user interface for automobiles
JP5228305B2 (ja) * 2006-09-08 2013-07-03 ソニー株式会社 表示装置、表示方法
JP2010019708A (ja) * 2008-07-11 2010-01-28 Hitachi Ltd 車載装置
US8350724B2 (en) * 2009-04-02 2013-01-08 GM Global Technology Operations LLC Rear parking assist on full rear-window head-up display
KR101334107B1 (ko) * 2010-04-22 2013-12-16 주식회사 굿소프트웨어랩 차량용 멀티미디어 제어를 위한 사용자 인터페이스 장치 및 방법
US20120224060A1 (en) * 2011-02-10 2012-09-06 Integrated Night Vision Systems Inc. Reducing Driver Distraction Using a Heads-Up Display
US9493130B2 (en) * 2011-04-22 2016-11-15 Angel A. Penilla Methods and systems for communicating content to connected vehicle users based detected tone/mood in voice input
KR101314570B1 (ko) * 2011-10-12 2013-10-07 서울대학교산학협력단 정밀한 제어를 위한 뇌-기계 인터페이스 장치 및 방법
US8942881B2 (en) * 2012-04-02 2015-01-27 Google Inc. Gesture-based automotive controls
TWI576771B (zh) * 2012-05-28 2017-04-01 宏碁股份有限公司 透明顯示裝置及其透明度調整方法
WO2014019533A1 (en) * 2012-08-02 2014-02-06 Ronald Pong Headphones with interactive display
DE112012006892T5 (de) * 2012-09-12 2015-06-11 Toyota Jidosha Kabushiki Kaisha Mobiles Endgerät, Fahrzeugvorrichtung und Fahrzeugsystem
US10339711B2 (en) * 2013-03-15 2019-07-02 Honda Motor Co., Ltd. System and method for providing augmented reality based directions based on verbal and gestural cues
US20150321606A1 (en) * 2014-05-09 2015-11-12 HJ Laboratories, LLC Adaptive conveyance operating system
JP3194297U (ja) * 2014-08-15 2014-11-13 リープ モーション, インコーポレーテッドLeap Motion, Inc. 自動車用及び産業用のモーション感知制御装置
US9168869B1 (en) * 2014-12-29 2015-10-27 Sami Yaseen Kamal Vehicle with a multi-function auxiliary control system and heads-up display
CN104627078B (zh) * 2015-02-04 2017-03-08 上海咔酷咔新能源科技有限公司 基于柔性透明oled的汽车驾驶虚拟系统及其控制方法
KR101656802B1 (ko) * 2015-05-12 2016-09-12 현대자동차주식회사 제스처 입력 장치 및 이를 포함하는 차량
US20160357262A1 (en) * 2015-06-05 2016-12-08 Arafat M.A. ANSARI Smart vehicle

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10895741B2 (en) 2017-10-03 2021-01-19 Industrial Technology Research Institute Ultra-wide head-up display system and display method thereof
TWI633500B (zh) * 2017-12-27 2018-08-21 中華電信股份有限公司 擴增實境應用產生系統及方法
TWI691870B (zh) * 2018-09-17 2020-04-21 財團法人工業技術研究院 虛實影像的互動方法及裝置
US10936079B2 (en) 2018-09-17 2021-03-02 Industrial Technology Research Institute Method and apparatus for interaction with virtual and real images

Also Published As

Publication number Publication date
TWI578021B (zh) 2017-04-11
CN106468947A (zh) 2017-03-01
US20170053444A1 (en) 2017-02-23

Similar Documents

Publication Publication Date Title
TWI578021B (zh) 擴增實境互動系統及其動態資訊互動顯示方法
KR101806892B1 (ko) 차량용 제어장치
KR101730315B1 (ko) 영상을 공유하는 전자 기기 및 방법
JP6413207B2 (ja) 車両用表示装置
KR20170141484A (ko) 차량용 제어장치 및 그것의 제어방법
JP5136950B2 (ja) 車載機器の操作装置
JP6521081B2 (ja) 車両用表示装置
CN109649276B (zh) 一种基于透明液晶显示屏的车辆挡风玻璃及其交互方法
US9256325B2 (en) Curved display apparatus for vehicle
US20170277323A1 (en) Display device and vehicle having the same
WO2020003914A1 (ja) 電子機器、移動体、プログラムおよび制御方法
KR20180053290A (ko) 차량용 제어장치 및 그것의 제어방법
WO2018116565A1 (ja) 車両用情報表示装置及び車両用情報表示プログラム
WO2018230526A1 (ja) 入力システム、および入力方法
KR102375240B1 (ko) 차량용 투명 디스플레이 장치
US11828947B2 (en) Vehicle and control method thereof
EP3748476B1 (en) Electronic device, control method, and program
KR101610169B1 (ko) 헤드업 디스플레이 및 헤드업 디스플레이의 제어방법
JP2016149094A (ja) 車両用情報処理装置
KR20210129575A (ko) 위젯을 이용한 차량용 인포테인먼트 장치와 그의 동작 방법
JP2022148856A (ja) 車両用表示装置、表示制御方法、及びプログラム
WO2014002167A1 (ja) 情報表示装置、情報表示方法、情報表示プログラム及び記録媒体
JP6400352B2 (ja) 車両周辺表示装置
US20230146403A1 (en) Display control device
WO2022210172A1 (ja) 車両用表示システム、車両用表示方法、及び車両用表示プログラム