TWI736039B - 擴充控制裝置及影像控制方法 - Google Patents

擴充控制裝置及影像控制方法 Download PDF

Info

Publication number
TWI736039B
TWI736039B TW108143028A TW108143028A TWI736039B TW I736039 B TWI736039 B TW I736039B TW 108143028 A TW108143028 A TW 108143028A TW 108143028 A TW108143028 A TW 108143028A TW I736039 B TWI736039 B TW I736039B
Authority
TW
Taiwan
Prior art keywords
input
control device
display
image
electronic device
Prior art date
Application number
TW108143028A
Other languages
English (en)
Other versions
TW202121153A (zh
Inventor
李國玄
Original Assignee
和碩聯合科技股份有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 和碩聯合科技股份有限公司 filed Critical 和碩聯合科技股份有限公司
Priority to TW108143028A priority Critical patent/TWI736039B/zh
Priority to CN202010751381.2A priority patent/CN112843672A/zh
Priority to US17/088,716 priority patent/US20210157479A1/en
Publication of TW202121153A publication Critical patent/TW202121153A/zh
Application granted granted Critical
Publication of TWI736039B publication Critical patent/TWI736039B/zh

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04886Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures by partitioning the display area of the touch-screen or the surface of the digitising tablet into independently controllable areas, e.g. virtual keyboards or menus
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/20Input arrangements for video game devices
    • A63F13/21Input arrangements for video game devices characterised by their sensors, purposes or types
    • A63F13/213Input arrangements for video game devices characterised by their sensors, purposes or types comprising photodetecting means, e.g. cameras, photodiodes or infrared cells
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/20Input arrangements for video game devices
    • A63F13/21Input arrangements for video game devices characterised by their sensors, purposes or types
    • A63F13/214Input arrangements for video game devices characterised by their sensors, purposes or types for locating contacts on a surface, e.g. floor mats or touch pads
    • A63F13/2145Input arrangements for video game devices characterised by their sensors, purposes or types for locating contacts on a surface, e.g. floor mats or touch pads the surface being also a display device, e.g. touch screens
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/20Input arrangements for video game devices
    • A63F13/22Setup operations, e.g. calibration, key configuration or button assignment
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/20Input arrangements for video game devices
    • A63F13/23Input arrangements for video game devices for interfacing with the game device, e.g. specific interfaces between game controller and console
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/25Output arrangements for video game devices
    • A63F13/26Output arrangements for video game devices having at least one additional display device, e.g. on the game controller or outside a game booth
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/40Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment
    • A63F13/42Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment by mapping the input signals into game commands, e.g. mapping the displacement of a stylus on a touch screen to the steering angle of a virtual vehicle
    • A63F13/428Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment by mapping the input signals into game commands, e.g. mapping the displacement of a stylus on a touch screen to the steering angle of a virtual vehicle involving motion or position input signals, e.g. signals representing the rotation of an input controller or a player's arm motions sensed by accelerometers or gyroscopes
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/50Controlling the output signals based on the game progress
    • A63F13/52Controlling the output signals based on the game progress involving aspects of the displayed game scene
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S15/00Systems using the reflection or reradiation of acoustic waves, e.g. sonar systems
    • G01S15/02Systems using the reflection or reradiation of acoustic waves, e.g. sonar systems using reflection of acoustic waves
    • G01S15/06Systems determining the position data of a target
    • G01S15/08Systems for measuring distance only
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/016Input arrangements with force or tactile feedback as computer generated output to the user
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017Gesture based interaction, e.g. based on a set of recognized hand gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/02Input arrangements using manually operated switches, e.g. using keyboards or dials
    • G06F3/023Arrangements for converting discrete items of information into a coded form, e.g. arrangements for interpreting keyboard generated codes as alphanumeric codes, operand codes or instruction codes
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/0304Detection arrangements using opto-electronic means
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04842Selection of displayed objects or displayed text elements
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1423Digital output to display device ; Cooperation and interconnection of the display device with other functional units controlling a plurality of local displays, e.g. CRT and flat panel display
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/20Analysis of motion
    • G06T7/246Analysis of motion using feature-based methods, e.g. the tracking of corners or segments
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/12Synchronisation between the display unit and other units, e.g. other display units, video-disc players
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/50Controlling the output signals based on the game progress
    • A63F13/53Controlling the output signals based on the game progress involving additional visual information provided to the game scene, e.g. by overlay to simulate a head-up display [HUD] or displaying a laser sight in a shooting game
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/10Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by input arrangements for converting player-generated signals into game device control signals
    • A63F2300/1025Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by input arrangements for converting player-generated signals into game device control signals details of the interface with the game device, e.g. USB version detection
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/30Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by output arrangements for receiving control signals generated by the game device
    • A63F2300/303Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by output arrangements for receiving control signals generated by the game device for displaying additional data, e.g. simulating a Head Up Display
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/30Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by output arrangements for receiving control signals generated by the game device
    • A63F2300/308Details of the user interface
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S15/00Systems using the reflection or reradiation of acoustic waves, e.g. sonar systems
    • G01S15/88Sonar systems specially adapted for specific applications
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2354/00Aspects of interface with display user
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2356/00Detection of the display position w.r.t. other display screens
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2360/00Aspects of the architecture of display systems
    • G09G2360/14Detecting light within display terminals, e.g. using a single or a plurality of photosensors
    • G09G2360/144Detecting light within display terminals, e.g. using a single or a plurality of photosensors the light being ambient light

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Acoustics & Sound (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Computer Hardware Design (AREA)
  • Position Input By Displaying (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

一種擴充控制裝置,適於配合一電子設備,電子設備顯示有圖形化使用者介面。擴充控制裝置包括供接收影像訊號並發送輸入訊號的通訊模組以及複數輸入顯示模組。輸入顯示模組包括響應輸入操作產生輸入訊號的輸入單元及根據影像訊號顯示的顯示單元。電子設備依圖形化使用者介面的操作區域中的影像產生第一影像訊號,使操作區域中的影像分別映射至輸入顯示模組的顯示單元上顯示。圖形化使用者介面中對應的操作區域根據該些輸入訊號執行對應的操作指令。

Description

擴充控制裝置及影像控制方法
本發明關於一種擴充設備,特別是指一種擴充控制裝置及影像控制方法。
現有電子遊戲通常是利用搖桿、按鍵、鍵盤、滑鼠等輸入介面來供使用者控制。此等輸入介面並不直覺,需要使用者練習熟悉,甚至必須記憶每一個按鍵的功能,才能正常遊玩。
有鑑於此,本發明一實施例提出一種擴充控制裝置,適於配合一電子設備。電子設備顯示有圖形化使用者介面,圖形化使用者介面具有複數操作區域。
擴充控制裝置包括通訊模組以及複數輸入顯示模組。通訊模組通訊連接電子設備,以自電子設備接收依據圖形化使用者介面中的操作區域中的影像產生的複數第一影像訊號。各輸入顯示模組包括輸入單元及顯示單元,輸入顯示模組中的輸入單元分別響應一輸入操作產生複數第一輸入訊號,經由通訊模組發送第一輸入訊號至電子設備,圖形化使用者介面中對應的操作區域根據第一輸入訊號執行對應的操作指令,輸入顯示模組中的顯示單元分別根據第一影像訊號,使得操作區域中的影像分別映射至複數輸入顯示模組的顯示單元上顯示。藉此,能夠讓使用者直接在擴充控制裝置上的輸入顯示模組進行操作與互動。
本發明一實施例還提出一種影像控制方法包括:電子設備的一圖形化使用者介面的複數操作區域分別顯示一影像;電子設備依據該些影像產生複數第一影像訊號;電子設備輸出該些第一影像訊號至一擴充控制裝置,使該些操作區域中的影像分別映射至擴充控制裝置的複數顯示單元上顯示,擴充控制裝置分別響應一輸入操作產生複數第一輸入訊號,電子設備自擴充控制裝置接收該些第一輸入訊號;以使圖形化使用者介面中對應的操作區域執行對應的一操作指令。
在一些實施例中,輸入單元包括觸控面板,對應於顯示單元的顯示面設置,所述輸入操作為一觸控操作。
在一些實施例中,輸入單元為開關,所述輸入操作為一擊鍵操作。
在一些實施例中,圖形化使用者介面更包含複數互動區域,電子設備依據複數互動區域中的影像產生第二影像訊號。擴充控制裝置更包括一觸控螢幕,觸控螢幕劃分複數映射區域,並響應分別對應於映射區域的觸控操作而產生複數第二輸入訊號。電子設備輸出該些第二影像訊號至擴充控制裝置,使得擴充控制裝置依據該些第二影像訊號將該些互動區域中的影像分別映射至擴充控制裝置的該些映射區域上顯示;電子設備接收該些第二輸入訊號,以使圖形化使用者介面中對應的該些互動區域執行對應的一互動指令。
在一些實施例中,擴充控制裝置更包括處理器,處理器連接通訊模組與觸控螢幕之間。
在一些實施例中,擴充控制裝置更包括複數處理器,該些處理器一端連接通訊模組,而該些處理器的另一端適於以一對一地連接輸入顯示模組而控制所連接的輸入顯示模組的輸入單元及顯示單元。
在一些實施例中,擴充控制裝置更包括三維動作偵測模組及處理器。三維動作偵測模組包括平面感測單元以及距離感測單元。平面感測單元用以感測動態物件的平面座標位移量。距離感測單元用以感測相對於動態物件的垂直距離。處理器根據垂直距離及平面座標位移量計算動態物件的平面移動距離,並配合動態物件的垂直距離的變化,取得動態物件的三維移動資訊。
在一些實施例中,平面感測單元包括紅外線感測器以及影像感測器。紅外線感測器用以偵測動態物件的存在。影像感測器用以擷取動態物件的複數時序影像。處理器識別時序影像中對應於動態物件的特徵,依據特徵的位移取得平面座標位移量。
在一些實施例中,距離感測單元包括聲納感測器以及近接感測器。聲納感測器用以感測相對於動態物件的間隔距離。近接感測器具有一有效偵測區間,供判斷動態物件存在於有效偵測區間內。處理器於動態物件存在於有效偵測區間內時,依據間隔距離取得垂直距離。
在一些實施例中,擴充控制裝置更包括一周邊裝置,該周邊裝置為麥克風、搖桿、按鍵、觸控板、震動馬達或燈光。
綜上所述,根據本發明之實施例,相較於原有的電子設備,可提供多元與直覺的操作,能增加使用者的使用體驗,降低使用者的操作難度,並且透過多個處理器分別管理一部分的硬體,能選用較低階的處理器,而可節省成本與耗能。
請參照圖1,圖1為本發明第一實施例之擴充控制裝置300之架構示意圖。擴充控制裝置300適於與電子設備100相配合,以提供使用者用於控制電子設備100之操作介面。電子設備100可例如為桌上型電腦、筆記型電腦、平板電腦、手機等具有軟體執行能力的計算裝置,其具備處理器、記憶體、儲存媒體等硬體,亦不排除可能包括其他需要的硬體,例如在需要網路資源的情形下,將包括網路介面。電子設備100執行有例如但不限於遊戲軟體的應用程式,並顯示有一圖形化使用者介面110,圖形化使用者介面110具有複數操作區域120,在此以四個操作區域120a~120d為例。
請合併參照圖1及圖2,圖2為本發明第一實施例之擴充控制裝置300之電路方塊圖。擴充控制裝置300包括通訊模組310以及複數輸入顯示模組320在此以四個輸入顯示模組320a~320d為例。通訊模組310通訊連接電子設備100,以與電子設備100之間進行訊號傳遞。通訊模組310支援例如為通用序列匯流排(Universal Serial Bus,USB)之有線傳輸介面,或者是支援如藍芽(Bluetooth)或無線熱點(Wi-Fi)等無線傳輸介面。
在一些實施例中,擴充控制裝置300更包括複數處理器330,連接於通訊模組310與複數輸入顯示模組320之間,以控制輸入顯示模組320。並且,此些處理器330一端連接通訊模組310,而此些處理器330的另一端適於以一對一地連接於輸入顯示模組320。藉此,相較於僅用單一運算單元,由多個處理器330分擔運算資源,可採用低運算資源與連接介面較精簡的硬體。
在一些實施例中,處理器330的數量可以是少於輸入顯示模組320的數量。意即,部分或全部的處理器330可連接多個輸入顯示模組320。
單一輸入顯示模組320包括輸入單元321及顯示單元322。輸入單元321供使用者執行輸入操作,並響應輸入操作而產生輸入訊號(後稱「第一輸入訊號」)。在一些實施例中,輸入顯示模組320是呈一按鍵形態,能接收使用者為擊鍵操作的輸入操作,輸入單元321包括開關3211,以偵測此擊鍵操作。在一些實施例中,輸入單元321包括觸控面板3212,能接收使用者為觸控操作的輸入操作。在此,觸控面板3212是對應於顯示單元322的顯示面設置,意即觸控面板3212的觸控區域與顯示單元322顯示面的範圍實質重疊。
顯示單元322經由通訊模組310接收電子設備100發送的影像訊號(後稱「第一影像訊號」),以根據第一影像訊號顯示畫面。顯示單元322可以是有機發光二極體(Organic Light-Emitting Diode,OLED)或液晶顯示器(Liquid-Crystal Display)等顯示面板。
在此,將說明第一影像訊號如何產生。參照圖3,係為本發明第一實施例之影像控制方法流程圖。首先,電子設備100的一圖形化使用者介面110的複數操作區域120a~120d分別顯示一影像(步驟S401)。接著,在步驟S402中,電子設備100依據該些影像產生複數第一影像訊號。而後,電子設備100輸出該些第一影像訊號至擴充控制裝置300,使該些操作區域120a~120d中的影像分別映射至擴充控制裝置300的複數顯示單元322上顯示(步驟S403)。
詳言之,電子設備100可供使用者設定圖形化使用者介面110上的操作區域120和輸入顯示模組320之間的配對關係。例如,操作區域120a中的影像映射至輸入顯示模組320a的顯示單元322上顯示;操作區域120b中的影像映射至輸入顯示模組320b的顯示單元322上顯示。電子設備100能對每一個操作區域120中的影像進行影像擷取,將所取得的擷取影像編碼為第一影像訊號,並依據設定好的配對關係分別將第一影像訊號發送至擴充控制裝置300中對應的處理器330。所述影像擷取可以是單次、多次、或連續進行。處理器330在收到第一影像訊號後,對第一影像訊號進行解碼,而控制顯示單元322顯示影像。因此,圖形化使用者介面110上的操作區域120a~120d中的影像將分別對應於輸入顯示模組320a~320d的顯示單元322上顯示。
在一些實施例中,由於操作區域120的像素尺寸與形狀可能和顯示單元322的解析度與形狀不同,因此需要對操作區域120的影像進行影像處理,例如放大、縮小、裁切等,以符合顯示單元322的解析度與形狀。此影像處理可以由電子設備100執行,也可以由處理器330執行,本發明並未限制。
在一些實施例中,顯示單元322是經由行動產業處理器介面(Mobile Industry Processor Interface,MIPI)連接至處理器330。
接下來,將說明電子設備100如何依據輸入單元321所產生的第一輸入訊號進行動作。首先,自擴充控制裝置300響應一輸入操作產生一第一輸入訊號(步驟S404)。電子設備100自擴充控制裝置300接收第一輸入訊號,以使圖形化使用者介面110中對應的操作區域120執行對應的一操作指令(步驟S405)。意即,透過前述操作區域120和輸入顯示模組320之間的配對關係,輸入顯示模組320a的輸入單元321的輸入操作產生第一輸入訊號,操作區域120a根據第一輸入訊號執行對應的操作指令;輸入顯示模組320b的輸入單元321的輸入操作產生第一輸入訊號,操作區域120b根據第一輸入訊號執行對應的操作指令。詳言之,當輸入操作為開關3211的擊鍵操作時,處理器330會把代表開關3211被擊鍵的輸入訊號經由通訊模組310傳送至電子設備100。根據操作區域120和輸入顯示模組320之間的配對關係,電子設備100把第一輸入訊號轉換成對應操作區域120中的點擊操作指令。舉例來說,圖形化使用者介面110具有位於操作區域120的虛擬按鈕,則應用程式將依據點擊操作指令執行點擊此虛擬按鈕的反饋動作(例如使遊戲中人物執行跳躍動作)。從而,使用者對於不同的輸入顯示模組320進行擊鍵操作,便形同對於圖形化使用者介面110中的對應操作區域120進行點擊操作。相似的,當輸入操作為觸控面板3212的觸控操作時,處理器330會把包含觸控資訊的輸入訊號經由通訊模組310傳送至電子設備100。根據操作區域120和輸入顯示模組320之間的配對關係,電子設備100把第一輸入訊號轉換成對應操作區域120中的觸控操作指令。因此,使用者對於輸入顯示模組320的觸控面板3212的觸控軌跡,將轉換為在對應操作區域120的觸控軌跡,應用程式便可執行對應的反饋動作,例如執行調整音量的滑桿操作。此外,若觸控操作是點擊操作,應用程式也能執行如前述點擊虛擬按鈕的動作,當視應用程式對於操作區域120中的觸控操作所定義的反饋動作而定。
由於觸控面板3212的觸控座標與映射到操作區域120內的觸控座標不一致,因此需要對觸控資訊進行座標轉換。此座標轉換可以由電子設備100執行,也可以由處理器330執行,本發明並未限制。
在一些實施例中,觸控面板3212是經由積體電路匯流排(Inter-Integrated Circuit,
Figure 02_image001
)連接至處理器330。
在一些實施例中,開關3211是經由通用輸入輸出介面(General-Purpose Input/Output,GPIO)連接至處理器330。
在一些實施例中,步驟S404~S405可在步驟S402~S404之前執行,或以多執行緒的方式同時執行。
依據上述,使用者可以在各個輸入顯示模組320的顯示單元322上看到對應的操作區域120的影像,據以對輸入顯示模組320進行輸入操作,使用上相當直覺,能減輕使用者負擔。
請合併參照圖4至圖6,圖4為本發明第二實施例之擴充控制裝置300之架構示意圖,圖5為本發明第二實施例之擴充控制裝置300之電路方塊圖,圖6為本發明第二實施例之影像控制方法流程圖。與前述第一實施例的差異在於,本發明第二實施例之擴充控制裝置300還可包括觸控螢幕340及處理器350。處理器350連接於通訊模組310與觸控螢幕340之間。有別於前述操作區域120和輸入顯示模組320之間的一對一配對關係,觸控螢幕340可供使用者自定義而與圖形化使用者介面110中的多個互動區域141相配對。觸控螢幕340劃分有多個映射區域341(於此以二個為例,分別為341a、341b),經由使用者操作而可設定此些映射區域341與圖形化使用者介面110中的多個互動區域141(於此以二個為例,分別為141a、141b)一一對應的配對關係。如同前述第一實施例,依據配對關係,使得映射區域341與對應的互動區域141兩者的顯示影像及輸入操作為相對應。本實施例之影像控制方法更包括步驟S601至步驟S605。首先,圖形化使用者介面110的複數互動區域141分別顯示一影像(步驟S601)。接著,電子設備100依據互動區域141中的影像產生第二影像訊號(步驟S602)。在步驟S603中,電子設備100輸出第二影像訊號至擴充控制裝置300,使得擴充控制裝置300依據第二影像訊號將互動區域141中的影像分別映射至擴充控制裝置300的觸控螢幕340中對應的映射區域341上顯示。在步驟S604中,擴充控制裝置300根據分別對應於該些映射區域341的一觸控操作產生複數第二輸入訊號。電子設備100接收該些第二輸入訊號,以使圖形化使用者介面110中對應的該些互動區域141執行對應的一互動指令(步驟S605)。詳細請參照前述第一實施例之說明,於此不重複贅述。
在一些實施例中,步驟S604~S605可在步驟S602~S604之前執行,或以多執行緒的方式同時執行。
在一些實施例中,觸控螢幕340是經由行動產業處理器介面(Mobile Industry Processor Interface,MIPI)連接至處理器350。在一些實施例中,觸控螢幕340還經由積體電路匯流排連接至處理器350。
請合併參照圖7及圖8,圖7為本發明第三實施例之擴充控制裝置300之架構示意圖,圖8為本發明第三實施例之擴充控制裝置300之電路方塊圖。與前述實施例的差異在於,本發明第三實施例之擴充控制裝置300還可包括三維動作偵測模組360及處理器370。處理器370連接於通訊模組310與三維動作偵測模組360之間。三維動作偵測模組360包括平面感測單元361及距離感測單元362。
參照圖9,係為本發明第三實施例之三維動作偵測模組360之量測示意圖。以三維座標系而言,平面感測單元361用以感測動態物件700(在此以手掌為例)在X軸Y軸平面上的平面座標位移量,距離感測單元362用以感測動態物件700在Z軸上的垂直距離。處理器370可根據垂直距離H及平面座標位移量d計算出動態物件700的平面移動距離D。具體是根據式1來計算出平面移動距離D,焦距
Figure 02_image003
為平面感測單元361的焦距。處理器370並可將計算出的平面移動距離D配合動態物件700的垂直距離H的變化(即垂直移動距離),取得動態物件700的三維移動資訊。據此,應用程式可根據三維移動資訊執行對應的反饋動作。
Figure 02_image005
(式1)
詳言之,平面感測單元361包括紅外線感測器363及影像感測器365。前述焦距
Figure 02_image003
是指影像感測器365的焦距。紅外線感測器363用以偵測動態物件700的存在。紅外線感測器363可以是熱電型感測器或是量子型感測器,透過感熱或感光的方式偵測動態物件700的存在。影像感測器365用以擷取動態物件700在時序上的複數影像(或稱時序影像)。處理器370可識別此些時序影像中對應於動態物件700的特徵,依據特徵的位移取得平面座標位移量d,具體流程容後說明。距離感測單元362包括聲納感測器364及近接感測器366。聲納感測器364用以感測相對於動態物件700的間隔距離。近接感測器366具有一有效偵測區間,意即在Z軸上具有一偵測範圍最小值及最大值,此最大值與最小值之間即為有效偵測區間,供判斷動態物件700存在於有效偵測區間內。處理器370透過近接感測器366偵測到動態物件700存在於有效偵測區間內時,便可依據透過聲納感測器364取得的間隔距離取得作為垂直距離H。從而,藉由聲納感測器364及近接感測器366雙重確認偵測結果為正確。在一些實施例中,可同步使用聲納感測器364及近接感測器366。在一些實施例中,為了節能,可先使用近接感測器366,在偵測到動態物件700存在於有效偵測區間內時,才啟用聲納感測器364。
參照圖10,圖10為本發明第三實施例之三維動作偵測流程圖,系由處理器370執行。首先,取得前述時序影像(步驟S801)。接著,對此些時序影像進行預處理(如將時序影像切分為多個方格(grid)),以利後續特徵偵測(步驟S802)。在步驟S803中,對時序影像中的動態物件700進行特徵識別,所述特徵可以例如是邊角(corner)特徵。對每一張時序影像執行前述步驟S801至S803之後,可比對先後時序影像中的對應特徵的位移(步驟S804),於是可取得平面座標位移量d(步驟S805)。並且,從聲納感測器364取得垂直距離H(步驟S806)。續而,可根據式1計算得計算出動態物件700的平面移動距離D(步驟S807)。
在一些實施例中,步驟S806不必然在步驟S805之後,亦可在步驟S805之前執行。
在一些實施例中,紅外線感測器363是熱影像儀,處理器370可將取得的熱影像作為前述時序影像,並執行前述步驟S801至步驟S805,而取得另一平面座標位移量d,並與前述依據影像感測器365的時序影像的取得的平面座標位移量d進行雙重確認。
如圖8所示,擴充控制裝置300還可包括一個或多個周邊裝置380,與處理器370連接。周邊裝置380可包括麥克風381、搖桿382、按鍵383、觸控板384、震動馬達385、燈光386。麥克風381用以接收使用者的聲音,以供進行語音輸入。搖桿382、按鍵383、觸控板384作為其他管道的輸入介面。震動馬達385可提供震動的體感功能。燈光386可例如為燈條,供與應用程式配合變化發光的強度、明滅、顏色。
綜上所述,相較於現有的電子遊戲,根據本發明之擴充控制裝置及影像控制方法可提供多元與直覺的操作,能增加使用者的使用體驗,降低使用者的操作難度,並且透過多個處理器分別管理一部分的硬體,能選用較低階的處理器,而可節省成本與耗能。
100:電子設備                       110:圖形化使用者介面         120、120a~120d:操作區域                       141、141a、141b:互動區域                       300:擴充控制裝置                310:通訊模組                       320、320a~320d:輸入顯示模組                321:輸入單元                       3211:開關                   3212:觸控面板                       322:顯示單元                       330、350、370:處理器                          340:觸控螢幕                       341、341a、341b:映射區域                       360:三維動作偵測模組         361:平面感測單元                362:距離感測單元                363:紅外線感測器                364:聲納感測器                   365:影像感測器                   366:近接感測器                   380:周邊裝置                       381:麥克風                          382:搖桿                             383:按鍵                             384:觸控板                          385:震動馬達                       386:燈光                             700:動態物件                       X、Y、Z:軸                                 H:垂直距離                       D:平面移動距離                d:平面座標位移量            
Figure 02_image003
:焦距 S401~S405:步驟 S601~S605:步驟 S801~S807:步驟
[圖1]為本發明第一實施例之擴充控制裝置之架構示意圖。 [圖2]為本發明第一實施例之擴充控制裝置之電路方塊圖。 [圖3]為本發明第一實施例之影像控制方法流程圖。 [圖4]為本發明第二實施例之擴充控制裝置之架構示意圖。 [圖5]為本發明第二實施例之擴充控制裝置之電路方塊圖。 [圖6]為本發明第二實施例之影像控制方法流程圖。 [圖7]為本發明第三實施例之擴充控制裝置之架構示意圖。 [圖8]為本發明第三實施例之擴充控制裝置之電路方塊圖。 [圖9]為本發明第三實施例之三維動作偵測模組之量測示意圖。 [圖10]為本發明第三實施例之三維動作偵測流程圖。
100:電子設備
110:圖形化使用者介面
120、120a~120d:操作區域
300:擴充控制裝置
310:通訊模組
320、320a~320d:輸入顯示模組

Claims (13)

  1. 一種擴充控制裝置,適於配合一電子設備,該電子設備顯示有一圖形化使用者介面,該圖形化使用者介面具有複數操作區域,該擴充控制裝置包括:一通訊模組,通訊連接該電子設備,以自該電子設備接收依據該圖形化使用者介面中的該些操作區域中的影像產生的複數第一影像訊號;複數輸入顯示模組,各該些輸入顯示模組包括一輸入單元及一顯示單元,該些輸入顯示模組中的該些輸入單元分別響應一輸入操作產生複數第一輸入訊號,經由該通訊模組發送該些第一輸入訊號至該電子設備,該圖形化使用者介面中對應的該些操作區域根據該些第一輸入訊號執行對應的一操作指令,該些輸入顯示模組中的該些顯示單元分別根據該些第一影像訊號,將該些操作區域中的影像分別映射至該複數輸入顯示模組的該些顯示單元上顯示;以及複數處理器,該些處理器一端連接該通訊模組,而該些處理器的另一端適於以一對一地連接該些輸入顯示模組而控制所連接的該輸入顯示模組的該輸入單元及該顯示單元。
  2. 如請求項1所述之擴充控制裝置,其中該輸入單元包括一觸控面板,對應於該顯示單元的顯示面設置,該輸入操作為一觸控操作。
  3. 如請求項1所述之擴充控制裝置,其中該輸入單元包括一開關,該輸入操作為一擊鍵操作。
  4. 如請求項1所述之擴充控制裝置,其中該圖形化使用者介面更包含複數互動區域,該電子設備還依據該些互動區域中的影像產生第二 影像訊號,該擴充控制裝置更包括一觸控螢幕,該觸控螢幕劃分複數映射區域,並響應分別對應於該些映射區域的一觸控操作而產生複數第二輸入訊號,該電子設備的該圖形化使用者介面中對應的該些互動區域依據該些第二輸入訊號執行對應的一互動指令,且該擴充控制裝置根據該些第二影像訊號使得該些互動區域中的影像分別映射至該些映射區域上顯示。
  5. 如請求項4所述之擴充控制裝置,更包括一處理器,該處理器連接該通訊模組與該觸控螢幕之間。
  6. 如請求項1所述之擴充控制裝置,更包括一三維動作偵測模組及一處理器,該三維動作偵測模組包括:一平面感測單元,用以感測一動態物件的一平面座標位移量;以及一距離感測單元,用以感測相對於該動態物件的一垂直距離;其中,該處理器根據該垂直距離及該平面座標位移量計算該動態物件的一平面移動距離,並配合該動態物件的該垂直距離的變化,取得該動態物件的一三維移動資訊。
  7. 如請求項6所述之擴充控制裝置,其中該平面感測單元包括:一紅外線感測器,用以偵測該動態物件的存在;以及一影像感測器,用以擷取該動態物件的複數時序影像;其中,該處理器識別該些時序影像中對應於該動態物件的特徵,依據該特徵的位移取得該平面座標位移量。
  8. 如請求項6所述之擴充控制裝置,其中該距離感測單元包括: 一聲納感測器,用以感測相對於該動態物件的一間隔距離;以及一近接感測器,具有一有效偵測區間,供判斷該動態物件存在於該有效偵測區間內;其中,該處理器於該動態物件存在於該有效偵測區間內時,依據該間隔距離取得該垂直距離。
  9. 如請求項1所述之擴充控制裝置,更包括一周邊裝置,該周邊裝置為一麥克風、一搖桿、一按鍵、一觸控板、一震動馬達或一燈光。
  10. 一種影像控制方法,包括:該電子設備的一圖形化使用者介面的複數操作區域分別顯示一影像;該電子設備依據該些影像產生複數第一影像訊號;該電子設備輸出該些第一影像訊號至一擴充控制裝置,該擴充控制裝置包括一通訊模組、複數輸入顯示模組及複數處理器,各該些輸入顯示模組包括一輸入單元及一顯示單元,該些處理器一端連接該通訊模組,而該些處理器的另一端適於以一對一地連接該些輸入顯示模組而控制所連接的該輸入顯示模組的該輸入單元及該顯示單元,使該些操作區域中的影像分別映射至該擴充控制裝置的該些顯示單元上顯示;該擴充控制裝置響應一輸入操作產生一第一輸入訊號;以及該電子設備自該擴充控制裝置接收該第一輸入訊號,以使該圖形化使用者介面中對應的該操作區域執行對應的一操作指令。
  11. 如請求項10所述之影像控制方法,其中該輸入單元包括一觸控面板,對應於該顯示單元的顯示面設置,該輸入操作為一觸控操作。
  12. 如請求項10所述之影像控制方法,其中該輸入單元包括一開關,該輸入操作為一擊鍵操作。
  13. 如請求項10所述之影像控制方法,更包括:該電子設備依據複數互動區域中的影像產生複數第二影像訊號;該電子設備輸出該些第二影像訊號至該擴充控制裝置,使得該擴充控制裝置依據該些第二影像訊號將該些互動區域中的影像分別映射至該擴充控制裝置的一觸控螢幕中的複數映射區域上顯示;該擴充控制裝置根據分別對應於該些映射區域的一觸控操作產生複數第二輸入訊號;以及該電子設備接收該些第二輸入訊號,以使該圖形化使用者介面中對應的該些互動區域執行對應的一互動指令。
TW108143028A 2019-11-26 2019-11-26 擴充控制裝置及影像控制方法 TWI736039B (zh)

Priority Applications (3)

Application Number Priority Date Filing Date Title
TW108143028A TWI736039B (zh) 2019-11-26 2019-11-26 擴充控制裝置及影像控制方法
CN202010751381.2A CN112843672A (zh) 2019-11-26 2020-07-30 扩充控制装置及影像控制方法
US17/088,716 US20210157479A1 (en) 2019-11-26 2020-11-04 Extended control device and image control method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
TW108143028A TWI736039B (zh) 2019-11-26 2019-11-26 擴充控制裝置及影像控制方法

Publications (2)

Publication Number Publication Date
TW202121153A TW202121153A (zh) 2021-06-01
TWI736039B true TWI736039B (zh) 2021-08-11

Family

ID=75974117

Family Applications (1)

Application Number Title Priority Date Filing Date
TW108143028A TWI736039B (zh) 2019-11-26 2019-11-26 擴充控制裝置及影像控制方法

Country Status (3)

Country Link
US (1) US20210157479A1 (zh)
CN (1) CN112843672A (zh)
TW (1) TWI736039B (zh)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TW201334514A (zh) * 2012-02-15 2013-08-16 Li Tv Taiwan Inc 遠端觸控操作的電視系統
CN103809898A (zh) * 2012-11-14 2014-05-21 宇瞻科技股份有限公司 智能型输入方法
US8751962B2 (en) * 2011-01-07 2014-06-10 Sharp Kabushiki Kaisha Remote control, display device, television receiver device, and program for remote control
US9972279B2 (en) * 2008-01-07 2018-05-15 Samsung Electronics Co., Ltd. Method for providing area of image displayed on display apparatus in GUI form using electronic apparatus, and electronic apparatus applying the same

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6297838B1 (en) * 1997-08-29 2001-10-02 Xerox Corporation Spinning as a morpheme for a physical manipulatory grammar
US20040021681A1 (en) * 2002-07-30 2004-02-05 Liao Chin-Hua Arthur Dual-touch-screen mobile computer
US20060013462A1 (en) * 2004-07-15 2006-01-19 Navid Sadikali Image display system and method
JP2006053629A (ja) * 2004-08-10 2006-02-23 Toshiba Corp 電子機器、制御方法及び制御プログラム
TW200820068A (en) * 2006-10-23 2008-05-01 Avermedia Tech Inc Multimedia system and operating method of multimedia program applied to the same
CN100592765C (zh) * 2007-05-30 2010-02-24 图诚科技股份有限公司 具备电视影音输入及输出功能的扩充装置
JP5801656B2 (ja) * 2011-09-01 2015-10-28 株式会社ソニー・コンピュータエンタテインメント 情報処理装置および情報処理方法
CN103051747A (zh) * 2011-10-13 2013-04-17 亚旭电子科技(江苏)有限公司 整合型扩充装置
US9462210B2 (en) * 2011-11-04 2016-10-04 Remote TelePointer, LLC Method and system for user interface for interactive devices using a mobile device
US20140075377A1 (en) * 2012-09-10 2014-03-13 Samsung Electronics Co. Ltd. Method for connecting mobile terminal and external display and apparatus implementing the same
US20150212647A1 (en) * 2012-10-10 2015-07-30 Samsung Electronics Co., Ltd. Head mounted display apparatus and method for displaying a content
CN105988764A (zh) * 2015-02-26 2016-10-05 鸿富锦精密工业(武汉)有限公司 显示控制系统及方法
KR102689503B1 (ko) * 2017-01-03 2024-07-31 삼성전자주식회사 전자 장치 및 그의 표시 방법
CN106707666A (zh) * 2017-02-03 2017-05-24 苏州佳世达光电有限公司 投影显示装置

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9972279B2 (en) * 2008-01-07 2018-05-15 Samsung Electronics Co., Ltd. Method for providing area of image displayed on display apparatus in GUI form using electronic apparatus, and electronic apparatus applying the same
US8751962B2 (en) * 2011-01-07 2014-06-10 Sharp Kabushiki Kaisha Remote control, display device, television receiver device, and program for remote control
TW201334514A (zh) * 2012-02-15 2013-08-16 Li Tv Taiwan Inc 遠端觸控操作的電視系統
CN103809898A (zh) * 2012-11-14 2014-05-21 宇瞻科技股份有限公司 智能型输入方法

Also Published As

Publication number Publication date
TW202121153A (zh) 2021-06-01
CN112843672A (zh) 2021-05-28
US20210157479A1 (en) 2021-05-27

Similar Documents

Publication Publication Date Title
US20140247216A1 (en) Trigger and control method and system of human-computer interaction operation command and laser emission device
US20130257736A1 (en) Gesture sensing apparatus, electronic system having gesture input function, and gesture determining method
US9753547B2 (en) Interactive displaying method, control method and system for achieving displaying of a holographic image
CN102033702A (zh) 影像显示装置及其显示控制方法
JP2015166890A (ja) 情報処理装置、情報処理システム、情報処理方法及びプログラム
JP2015503162A (ja) 3次元で表示されるオブジェクトのユーザの選択ジェスチャに応答する方法およびシステム
JP2010079834A (ja) 座標検出装置の取り付け位置判断装置及び電子ボードシステム
US20130257813A1 (en) Projection system and automatic calibration method thereof
JP2012027515A (ja) 入力方法及び入力装置
US11294452B2 (en) Electronic device and method for providing content based on the motion of the user
WO2021225044A1 (ja) 情報処理装置及びユーザの入力操作に基づく情報処理方法並びに該方法を実行するためのコンピュータプログラム
TWI736039B (zh) 擴充控制裝置及影像控制方法
KR102248741B1 (ko) 디스플레이 장치 및 그 제어 방법
KR20180036205A (ko) 시뮬레이션용 스마트 테이블 장치
JP5956481B2 (ja) 入力装置、入力方法、及びコンピュータが実行可能なプログラム
CN106325613B (zh) 触控显示装置及其方法
KR102569170B1 (ko) 사용자 입력이 유지되는 시간에 기반하여 사용자 입력을 처리하는 방법 및 장치
JP6008904B2 (ja) 表示制御装置、表示制御方法、及び、プログラム
TW201913298A (zh) 可顯示實體輸入裝置即時影像之虛擬實境系統及其控制方法
KR101394604B1 (ko) 모션 감지를 통한 사용자 인터페이스 구현 방법 및 그 장치
US20120182231A1 (en) Virtual Multi-Touch Control Apparatus and Method Thereof
KR20210019748A (ko) 멀티터치를 지원하지 않는 앱사용에 따른 터치스크린 시스템의 싱글터치 변환장치
CN105630136A (zh) 输入系统
KR102378476B1 (ko) 디스플레이 장치에 대한 펜 입력 신호를 제공하는 시스템 및 그 동작 방법
Vuyyuru et al. Performing Basic Tasks on Computer using Hand Gestures & Ultrasonic Sensors