TW202121153A - 擴充控制裝置及影像控制方法 - Google Patents

擴充控制裝置及影像控制方法 Download PDF

Info

Publication number
TW202121153A
TW202121153A TW108143028A TW108143028A TW202121153A TW 202121153 A TW202121153 A TW 202121153A TW 108143028 A TW108143028 A TW 108143028A TW 108143028 A TW108143028 A TW 108143028A TW 202121153 A TW202121153 A TW 202121153A
Authority
TW
Taiwan
Prior art keywords
input
control device
display
image
electronic device
Prior art date
Application number
TW108143028A
Other languages
English (en)
Other versions
TWI736039B (zh
Inventor
李國玄
Original Assignee
和碩聯合科技股份有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 和碩聯合科技股份有限公司 filed Critical 和碩聯合科技股份有限公司
Priority to TW108143028A priority Critical patent/TWI736039B/zh
Priority to CN202010751381.2A priority patent/CN112843672A/zh
Priority to US17/088,716 priority patent/US20210157479A1/en
Publication of TW202121153A publication Critical patent/TW202121153A/zh
Application granted granted Critical
Publication of TWI736039B publication Critical patent/TWI736039B/zh

Links

Images

Classifications

    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/20—Input arrangements for video game devices
    • A63F13/21—Input arrangements for video game devices characterised by their sensors, purposes or types
    • A63F13/214—Input arrangements for video game devices characterised by their sensors, purposes or types for locating contacts on a surface, e.g. floor mats or touch pads
    • A63F13/2145—Input arrangements for video game devices characterised by their sensors, purposes or types for locating contacts on a surface, e.g. floor mats or touch pads the surface being also a display device, e.g. touch screens
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/25—Output arrangements for video game devices
    • A63F13/26—Output arrangements for video game devices having at least one additional display device, e.g. on the game controller or outside a game booth
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/20—Input arrangements for video game devices
    • A63F13/21—Input arrangements for video game devices characterised by their sensors, purposes or types
    • A63F13/213—Input arrangements for video game devices characterised by their sensors, purposes or types comprising photodetecting means, e.g. cameras, photodiodes or infrared cells
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/20—Input arrangements for video game devices
    • A63F13/22—Setup operations, e.g. calibration, key configuration or button assignment
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/20—Input arrangements for video game devices
    • A63F13/23—Input arrangements for video game devices for interfacing with the game device, e.g. specific interfaces between game controller and console
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/40—Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment
    • A63F13/42—Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment by mapping the input signals into game commands, e.g. mapping the displacement of a stylus on a touch screen to the steering angle of a virtual vehicle
    • A63F13/428—Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment by mapping the input signals into game commands, e.g. mapping the displacement of a stylus on a touch screen to the steering angle of a virtual vehicle involving motion or position input signals, e.g. signals representing the rotation of an input controller or a player's arm motions sensed by accelerometers or gyroscopes
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/50—Controlling the output signals based on the game progress
    • A63F13/52—Controlling the output signals based on the game progress involving aspects of the displayed game scene
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S15/00—Systems using the reflection or reradiation of acoustic waves, e.g. sonar systems
    • G01S15/02—Systems using the reflection or reradiation of acoustic waves, e.g. sonar systems using reflection of acoustic waves
    • G01S15/06—Systems determining the position data of a target
    • G01S15/08—Systems for measuring distance only
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/016—Input arrangements with force or tactile feedback as computer generated output to the user
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/02—Input arrangements using manually operated switches, e.g. using keyboards or dials
    • G06F3/023—Arrangements for converting discrete items of information into a coded form, e.g. arrangements for interpreting keyboard generated codes as alphanumeric codes, operand codes or instruction codes
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/0304—Detection arrangements using opto-electronic means
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04842—Selection of displayed objects or displayed text elements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04886—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures by partitioning the display area of the touch-screen or the surface of the digitising tablet into independently controllable areas, e.g. virtual keyboards or menus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1423—Digital output to display device ; Cooperation and interconnection of the display device with other functional units controlling a plurality of local displays, e.g. CRT and flat panel display
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/20—Analysis of motion
    • G06T7/246—Analysis of motion using feature-based methods, e.g. the tracking of corners or segments
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/12—Synchronisation between the display unit and other units, e.g. other display units, video-disc players
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/50—Controlling the output signals based on the game progress
    • A63F13/53—Controlling the output signals based on the game progress involving additional visual information provided to the game scene, e.g. by overlay to simulate a head-up display [HUD] or displaying a laser sight in a shooting game
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/10—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by input arrangements for converting player-generated signals into game device control signals
    • A63F2300/1025—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by input arrangements for converting player-generated signals into game device control signals details of the interface with the game device, e.g. USB version detection
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/30—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by output arrangements for receiving control signals generated by the game device
    • A63F2300/303—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by output arrangements for receiving control signals generated by the game device for displaying additional data, e.g. simulating a Head Up Display
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/30—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by output arrangements for receiving control signals generated by the game device
    • A63F2300/308—Details of the user interface
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S15/00—Systems using the reflection or reradiation of acoustic waves, e.g. sonar systems
    • G01S15/88—Sonar systems specially adapted for specific applications
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2354/00—Aspects of interface with display user
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2356/00—Detection of the display position w.r.t. other display screens
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2360/00—Aspects of the architecture of display systems
    • G09G2360/14—Detecting light within display terminals, e.g. using a single or a plurality of photosensors
    • G09G2360/144—Detecting light within display terminals, e.g. using a single or a plurality of photosensors the light being ambient light

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Acoustics & Sound (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Computer Hardware Design (AREA)
  • Position Input By Displaying (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

一種擴充控制裝置，適於配合一電子設備，電子設備顯示有圖形化使用者介面。擴充控制裝置包括供接收影像訊號並發送輸入訊號的通訊模組以及複數輸入顯示模組。輸入顯示模組包括響應輸入操作產生輸入訊號的輸入單元及根據影像訊號顯示的顯示單元。電子設備依圖形化使用者介面的操作區域中的影像產生第一影像訊號，使操作區域中的影像分別映射至輸入顯示模組的顯示單元上顯示。圖形化使用者介面中對應的操作區域根據該些輸入訊號執行對應的操作指令。

Description

擴充控制裝置及影像控制方法
本發明關於一種擴充設備，特別是指一種擴充控制裝置及影像控制方法。
現有電子遊戲通常是利用搖桿、按鍵、鍵盤、滑鼠等輸入介面來供使用者控制。此等輸入介面並不直覺，需要使用者練習熟悉，甚至必須記憶每一個按鍵的功能，才能正常遊玩。
有鑑於此，本發明一實施例提出一種擴充控制裝置，適於配合一電子設備。電子設備顯示有圖形化使用者介面，圖形化使用者介面具有複數操作區域。
擴充控制裝置包括通訊模組以及複數輸入顯示模組。通訊模組通訊連接電子設備，以自電子設備接收依據圖形化使用者介面中的操作區域中的影像產生的複數第一影像訊號。各輸入顯示模組包括輸入單元及顯示單元，輸入顯示模組中的輸入單元分別響應一輸入操作產生複數第一輸入訊號，經由通訊模組發送第一輸入訊號至電子設備，圖形化使用者介面中對應的操作區域根據第一輸入訊號執行對應的操作指令，輸入顯示模組中的顯示單元分別根據第一影像訊號，使得操作區域中的影像分別映射至複數輸入顯示模組的顯示單元上顯示。藉此，能夠讓使用者直接在擴充控制裝置上的輸入顯示模組進行操作與互動。
本發明一實施例還提出一種影像控制方法包括：電子設備的一圖形化使用者介面的複數操作區域分別顯示一影像；電子設備依據該些影像產生複數第一影像訊號；電子設備輸出該些第一影像訊號至一擴充控制裝置，使該些操作區域中的影像分別映射至擴充控制裝置的複數顯示單元上顯示，擴充控制裝置分別響應一輸入操作產生複數第一輸入訊號，電子設備自擴充控制裝置接收該些第一輸入訊號；以使圖形化使用者介面中對應的操作區域執行對應的一操作指令。
在一些實施例中，輸入單元包括觸控面板，對應於顯示單元的顯示面設置，所述輸入操作為一觸控操作。
在一些實施例中，輸入單元為開關，所述輸入操作為一擊鍵操作。
在一些實施例中，圖形化使用者介面更包含複數互動區域，電子設備依據複數互動區域中的影像產生第二影像訊號。擴充控制裝置更包括一觸控螢幕，觸控螢幕劃分複數映射區域，並響應分別對應於映射區域的觸控操作而產生複數第二輸入訊號。電子設備輸出該些第二影像訊號至擴充控制裝置，使得擴充控制裝置依據該些第二影像訊號將該些互動區域中的影像分別映射至擴充控制裝置的該些映射區域上顯示；電子設備接收該些第二輸入訊號，以使圖形化使用者介面中對應的該些互動區域執行對應的一互動指令。
在一些實施例中，擴充控制裝置更包括處理器，處理器連接通訊模組與觸控螢幕之間。
在一些實施例中，擴充控制裝置更包括複數處理器，該些處理器一端連接通訊模組，而該些處理器的另一端適於以一對一地連接輸入顯示模組而控制所連接的輸入顯示模組的輸入單元及顯示單元。
在一些實施例中，擴充控制裝置更包括三維動作偵測模組及處理器。三維動作偵測模組包括平面感測單元以及距離感測單元。平面感測單元用以感測動態物件的平面座標位移量。距離感測單元用以感測相對於動態物件的垂直距離。處理器根據垂直距離及平面座標位移量計算動態物件的平面移動距離，並配合動態物件的垂直距離的變化，取得動態物件的三維移動資訊。
在一些實施例中，平面感測單元包括紅外線感測器以及影像感測器。紅外線感測器用以偵測動態物件的存在。影像感測器用以擷取動態物件的複數時序影像。處理器識別時序影像中對應於動態物件的特徵，依據特徵的位移取得平面座標位移量。
在一些實施例中，距離感測單元包括聲納感測器以及近接感測器。聲納感測器用以感測相對於動態物件的間隔距離。近接感測器具有一有效偵測區間，供判斷動態物件存在於有效偵測區間內。處理器於動態物件存在於有效偵測區間內時，依據間隔距離取得垂直距離。
在一些實施例中，擴充控制裝置更包括一周邊裝置，該周邊裝置為麥克風、搖桿、按鍵、觸控板、震動馬達或燈光。
綜上所述，根據本發明之實施例，相較於原有的電子設備，可提供多元與直覺的操作，能增加使用者的使用體驗，降低使用者的操作難度，並且透過多個處理器分別管理一部分的硬體，能選用較低階的處理器，而可節省成本與耗能。
請參照圖1，圖1為本發明第一實施例之擴充控制裝置300之架構示意圖。擴充控制裝置300適於與電子設備100相配合，以提供使用者用於控制電子設備100之操作介面。電子設備100可例如為桌上型電腦、筆記型電腦、平板電腦、手機等具有軟體執行能力的計算裝置，其具備處理器、記憶體、儲存媒體等硬體，亦不排除可能包括其他需要的硬體，例如在需要網路資源的情形下，將包括網路介面。電子設備100執行有例如但不限於遊戲軟體的應用程式，並顯示有一圖形化使用者介面110，圖形化使用者介面110具有複數操作區域120，在此以四個操作區域120a~120d為例。
請合併參照圖1及圖2，圖2為本發明第一實施例之擴充控制裝置300之電路方塊圖。擴充控制裝置300包括通訊模組310以及複數輸入顯示模組320在此以四個輸入顯示模組320a~320d為例。通訊模組310通訊連接電子設備100，以與電子設備100之間進行訊號傳遞。通訊模組310支援例如為通用序列匯流排（Universal Serial Bus，USB）之有線傳輸介面，或者是支援如藍芽（Bluetooth）或無線熱點（Wi-Fi）等無線傳輸介面。
在一些實施例中，擴充控制裝置300更包括複數處理器330，連接於通訊模組310與複數輸入顯示模組320之間，以控制輸入顯示模組320。並且，此些處理器330一端連接通訊模組310，而此些處理器330的另一端適於以一對一地連接於輸入顯示模組320。藉此，相較於僅用單一運算單元，由多個處理器330分擔運算資源，可採用低運算資源與連接介面較精簡的硬體。
在一些實施例中，處理器330的數量可以是少於輸入顯示模組320的數量。意即，部分或全部的處理器330可連接多個輸入顯示模組320。
單一輸入顯示模組320包括輸入單元321及顯示單元322。輸入單元321供使用者執行輸入操作，並響應輸入操作而產生輸入訊號（後稱「第一輸入訊號」）。在一些實施例中，輸入顯示模組320是呈一按鍵形態，能接收使用者為擊鍵操作的輸入操作，輸入單元321包括開關3211，以偵測此擊鍵操作。在一些實施例中，輸入單元321包括觸控面板3212，能接收使用者為觸控操作的輸入操作。在此，觸控面板3212是對應於顯示單元322的顯示面設置，意即觸控面板3212的觸控區域與顯示單元322顯示面的範圍實質重疊。
顯示單元322經由通訊模組310接收電子設備100發送的影像訊號（後稱「第一影像訊號」），以根據第一影像訊號顯示畫面。顯示單元322可以是有機發光二極體（Organic Light-Emitting Diode，OLED）或液晶顯示器（Liquid-Crystal Display）等顯示面板。
在此，將說明第一影像訊號如何產生。參照圖3，係為本發明第一實施例之影像控制方法流程圖。首先，電子設備100的一圖形化使用者介面110的複數操作區域120a~120d分別顯示一影像（步驟S401）。接著，在步驟S402中，電子設備100依據該些影像產生複數第一影像訊號。而後，電子設備100輸出該些第一影像訊號至擴充控制裝置300，使該些操作區域120a~120d中的影像分別映射至擴充控制裝置300的複數顯示單元322上顯示（步驟S403）。
詳言之，電子設備100可供使用者設定圖形化使用者介面110上的操作區域120和輸入顯示模組320之間的配對關係。例如，操作區域120a中的影像映射至輸入顯示模組320a的顯示單元322上顯示；操作區域120b中的影像映射至輸入顯示模組320b的顯示單元322上顯示。電子設備100能對每一個操作區域120中的影像進行影像擷取，將所取得的擷取影像編碼為第一影像訊號，並依據設定好的配對關係分別將第一影像訊號發送至擴充控制裝置300中對應的處理器330。所述影像擷取可以是單次、多次、或連續進行。處理器330在收到第一影像訊號後，對第一影像訊號進行解碼，而控制顯示單元322顯示影像。因此，圖形化使用者介面110上的操作區域120a~120d中的影像將分別對應於輸入顯示模組320a~320d的顯示單元322上顯示。
在一些實施例中，由於操作區域120的像素尺寸與形狀可能和顯示單元322的解析度與形狀不同，因此需要對操作區域120的影像進行影像處理，例如放大、縮小、裁切等，以符合顯示單元322的解析度與形狀。此影像處理可以由電子設備100執行，也可以由處理器330執行，本發明並未限制。
在一些實施例中，顯示單元322是經由行動產業處理器介面（Mobile Industry Processor Interface，MIPI）連接至處理器330。
接下來，將說明電子設備100如何依據輸入單元321所產生的第一輸入訊號進行動作。首先，自擴充控制裝置300響應一輸入操作產生一第一輸入訊號（步驟S404）。電子設備100自擴充控制裝置300接收第一輸入訊號，以使圖形化使用者介面110中對應的操作區域120執行對應的一操作指令（步驟S405）。意即，透過前述操作區域120和輸入顯示模組320之間的配對關係，輸入顯示模組320a的輸入單元321的輸入操作產生第一輸入訊號，操作區域120a根據第一輸入訊號執行對應的操作指令；輸入顯示模組320b的輸入單元321的輸入操作產生第一輸入訊號，操作區域120b根據第一輸入訊號執行對應的操作指令。詳言之，當輸入操作為開關3211的擊鍵操作時，處理器330會把代表開關3211被擊鍵的輸入訊號經由通訊模組310傳送至電子設備100。根據操作區域120和輸入顯示模組320之間的配對關係，電子設備100把第一輸入訊號轉換成對應操作區域120中的點擊操作指令。舉例來說，圖形化使用者介面110具有位於操作區域120的虛擬按鈕，則應用程式將依據點擊操作指令執行點擊此虛擬按鈕的反饋動作（例如使遊戲中人物執行跳躍動作）。從而，使用者對於不同的輸入顯示模組320進行擊鍵操作，便形同對於圖形化使用者介面110中的對應操作區域120進行點擊操作。相似的，當輸入操作為觸控面板3212的觸控操作時，處理器330會把包含觸控資訊的輸入訊號經由通訊模組310傳送至電子設備100。根據操作區域120和輸入顯示模組320之間的配對關係，電子設備100把第一輸入訊號轉換成對應操作區域120中的觸控操作指令。因此，使用者對於輸入顯示模組320的觸控面板3212的觸控軌跡，將轉換為在對應操作區域120的觸控軌跡，應用程式便可執行對應的反饋動作，例如執行調整音量的滑桿操作。此外，若觸控操作是點擊操作，應用程式也能執行如前述點擊虛擬按鈕的動作，當視應用程式對於操作區域120中的觸控操作所定義的反饋動作而定。
由於觸控面板3212的觸控座標與映射到操作區域120內的觸控座標不一致，因此需要對觸控資訊進行座標轉換。此座標轉換可以由電子設備100執行，也可以由處理器330執行，本發明並未限制。
在一些實施例中，觸控面板3212是經由積體電路匯流排（Inter-Integrated Circuit，
Figure 02_image001
）連接至處理器330。
在一些實施例中，開關3211是經由通用輸入輸出介面（General-Purpose Input/Output，GPIO）連接至處理器330。
在一些實施例中，步驟S404~S405可在步驟S402~S404之前執行，或以多執行緒的方式同時執行。
依據上述，使用者可以在各個輸入顯示模組320的顯示單元322上看到對應的操作區域120的影像，據以對輸入顯示模組320進行輸入操作，使用上相當直覺，能減輕使用者負擔。
請合併參照圖4至圖6，圖4為本發明第二實施例之擴充控制裝置300之架構示意圖，圖5為本發明第二實施例之擴充控制裝置300之電路方塊圖，圖6為本發明第二實施例之影像控制方法流程圖。與前述第一實施例的差異在於，本發明第二實施例之擴充控制裝置300還可包括觸控螢幕340及處理器350。處理器350連接於通訊模組310與觸控螢幕340之間。有別於前述操作區域120和輸入顯示模組320之間的一對一配對關係，觸控螢幕340可供使用者自定義而與圖形化使用者介面110中的多個互動區域141相配對。觸控螢幕340劃分有多個映射區域341（於此以二個為例，分別為341a、341b），經由使用者操作而可設定此些映射區域341與圖形化使用者介面110中的多個互動區域141（於此以二個為例，分別為141a、141b）一一對應的配對關係。如同前述第一實施例，依據配對關係，使得映射區域341與對應的互動區域141兩者的顯示影像及輸入操作為相對應。本實施例之影像控制方法更包括步驟S601至步驟S605。首先，圖形化使用者介面110的複數互動區域141分別顯示一影像（步驟S601）。接著，電子設備100依據互動區域141中的影像產生第二影像訊號（步驟S602）。在步驟S603中，電子設備100輸出第二影像訊號至擴充控制裝置300，使得擴充控制裝置300依據第二影像訊號將互動區域141中的影像分別映射至擴充控制裝置300的觸控螢幕340中對應的映射區域341上顯示。在步驟S604中，擴充控制裝置300根據分別對應於該些映射區域341的一觸控操作產生複數第二輸入訊號。電子設備100接收該些第二輸入訊號，以使圖形化使用者介面110中對應的該些互動區域141執行對應的一互動指令（步驟S605）。詳細請參照前述第一實施例之說明，於此不重複贅述。
在一些實施例中，步驟S604~S605可在步驟S602~S604之前執行，或以多執行緒的方式同時執行。
在一些實施例中，觸控螢幕340是經由行動產業處理器介面(Mobile Industry Processor Interface，MIPI)連接至處理器350。在一些實施例中，觸控螢幕340還經由積體電路匯流排連接至處理器350。
請合併參照圖7及圖8，圖7為本發明第三實施例之擴充控制裝置300之架構示意圖，圖8為本發明第三實施例之擴充控制裝置300之電路方塊圖。與前述實施例的差異在於，本發明第三實施例之擴充控制裝置300還可包括三維動作偵測模組360及處理器370。處理器370連接於通訊模組310與三維動作偵測模組360之間。三維動作偵測模組360包括平面感測單元361及距離感測單元362。
參照圖9，係為本發明第三實施例之三維動作偵測模組360之量測示意圖。以三維座標系而言，平面感測單元361用以感測動態物件700（在此以手掌為例）在X軸Y軸平面上的平面座標位移量，距離感測單元362用以感測動態物件700在Z軸上的垂直距離。處理器370可根據垂直距離H及平面座標位移量d計算出動態物件700的平面移動距離D。具體是根據式1來計算出平面移動距離D，焦距
Figure 02_image003
為平面感測單元361的焦距。處理器370並可將計算出的平面移動距離D配合動態物件700的垂直距離H的變化（即垂直移動距離），取得動態物件700的三維移動資訊。據此，應用程式可根據三維移動資訊執行對應的反饋動作。
Figure 02_image005
(式1)
詳言之，平面感測單元361包括紅外線感測器363及影像感測器365。前述焦距
Figure 02_image003
是指影像感測器365的焦距。紅外線感測器363用以偵測動態物件700的存在。紅外線感測器363可以是熱電型感測器或是量子型感測器，透過感熱或感光的方式偵測動態物件700的存在。影像感測器365用以擷取動態物件700在時序上的複數影像（或稱時序影像）。處理器370可識別此些時序影像中對應於動態物件700的特徵，依據特徵的位移取得平面座標位移量d，具體流程容後說明。距離感測單元362包括聲納感測器364及近接感測器366。聲納感測器364用以感測相對於動態物件700的間隔距離。近接感測器366具有一有效偵測區間，意即在Z軸上具有一偵測範圍最小值及最大值，此最大值與最小值之間即為有效偵測區間，供判斷動態物件700存在於有效偵測區間內。處理器370透過近接感測器366偵測到動態物件700存在於有效偵測區間內時，便可依據透過聲納感測器364取得的間隔距離取得作為垂直距離H。從而，藉由聲納感測器364及近接感測器366雙重確認偵測結果為正確。在一些實施例中，可同步使用聲納感測器364及近接感測器366。在一些實施例中，為了節能，可先使用近接感測器366，在偵測到動態物件700存在於有效偵測區間內時，才啟用聲納感測器364。
參照圖10，圖10為本發明第三實施例之三維動作偵測流程圖，系由處理器370執行。首先，取得前述時序影像（步驟S801）。接著，對此些時序影像進行預處理（如將時序影像切分為多個方格（grid）），以利後續特徵偵測（步驟S802）。在步驟S803中，對時序影像中的動態物件700進行特徵識別，所述特徵可以例如是邊角（corner）特徵。對每一張時序影像執行前述步驟S801至S803之後，可比對先後時序影像中的對應特徵的位移（步驟S804），於是可取得平面座標位移量d（步驟S805）。並且，從聲納感測器364取得垂直距離H（步驟S806）。續而，可根據式1計算得計算出動態物件700的平面移動距離D（步驟S807）。
在一些實施例中，步驟S806不必然在步驟S805之後，亦可在步驟S805之前執行。
在一些實施例中，紅外線感測器363是熱影像儀，處理器370可將取得的熱影像作為前述時序影像，並執行前述步驟S801至步驟S805，而取得另一平面座標位移量d，並與前述依據影像感測器365的時序影像的取得的平面座標位移量d進行雙重確認。
如圖8所示，擴充控制裝置300還可包括一個或多個周邊裝置380，與處理器370連接。周邊裝置380可包括麥克風381、搖桿382、按鍵383、觸控板384、震動馬達385、燈光386。麥克風381用以接收使用者的聲音，以供進行語音輸入。搖桿382、按鍵383、觸控板384作為其他管道的輸入介面。震動馬達385可提供震動的體感功能。燈光386可例如為燈條，供與應用程式配合變化發光的強度、明滅、顏色。
綜上所述，相較於現有的電子遊戲，根據本發明之擴充控制裝置及影像控制方法可提供多元與直覺的操作，能增加使用者的使用體驗，降低使用者的操作難度，並且透過多個處理器分別管理一部分的硬體，能選用較低階的處理器，而可節省成本與耗能。
100:電子設備                       110:圖形化使用者介面         120、120a~120d:操作區域                       141、141a、141b:互動區域                       300:擴充控制裝置                310:通訊模組                       320、320a~320d:輸入顯示模組                321:輸入單元                       3211:開關                   3212:觸控面板                       322:顯示單元                       330、350、370:處理器                          340:觸控螢幕                       341、341a、341b:映射區域                       360:三維動作偵測模組         361:平面感測單元                362:距離感測單元                363:紅外線感測器                364:聲納感測器                   365:影像感測器                   366:近接感測器                   380:周邊裝置                       381:麥克風                          382:搖桿                             383:按鍵                             384:觸控板                          385:震動馬達                       386:燈光                             700:動態物件                       X、Y、Z:軸                                 H:垂直距離                       D:平面移動距離                d:平面座標位移量            
Figure 02_image003
:焦距 S401~S405:步驟 S601~S605:步驟 S801~S807:步驟
[圖1]為本發明第一實施例之擴充控制裝置之架構示意圖。 [圖2]為本發明第一實施例之擴充控制裝置之電路方塊圖。 [圖3]為本發明第一實施例之影像控制方法流程圖。 [圖4]為本發明第二實施例之擴充控制裝置之架構示意圖。 [圖5]為本發明第二實施例之擴充控制裝置之電路方塊圖。 [圖6]為本發明第二實施例之影像控制方法流程圖。 [圖7]為本發明第三實施例之擴充控制裝置之架構示意圖。 [圖8]為本發明第三實施例之擴充控制裝置之電路方塊圖。 [圖9]為本發明第三實施例之三維動作偵測模組之量測示意圖。 [圖10]為本發明第三實施例之三維動作偵測流程圖。
100:電子設備
110:圖形化使用者介面
120、120a~120d:操作區域
300:擴充控制裝置
310:通訊模組
320、320a~320d:輸入顯示模組

Claims (14)

  1. 一種擴充控制裝置，適於配合一電子設備，該電子設備顯示有一圖形化使用者介面，該圖形化使用者介面具有複數操作區域，該擴充控制裝置包括： 一通訊模組，通訊連接該電子設備，以自該電子設備接收依據該圖形化使用者介面中的該些操作區域中的影像產生的複數第一影像訊號；以及 複數輸入顯示模組，各該些輸入顯示模組包括一輸入單元及一顯示單元，該些輸入顯示模組中的該些輸入單元分別響應一輸入操作產生複數第一輸入訊號，經由該通訊模組發送該些第一輸入訊號至該電子設備，該圖形化使用者介面中對應的該些操作區域根據該些第一輸入訊號執行對應的一操作指令，該些輸入顯示模組中的該些顯示單元分別根據該些第一影像訊號，將該些操作區域中的影像分別映射至該複數輸入顯示模組的該些顯示單元上顯示。
  2. 如請求項1所述之擴充控制裝置，其中該輸入單元包括一觸控面板，對應於該顯示單元的顯示面設置，該輸入操作為一觸控操作。
  3. 如請求項1所述之擴充控制裝置，其中該輸入單元包括一開關，該輸入操作為一擊鍵操作。
  4. 如請求項1所述之擴充控制裝置，其中該圖形化使用者介面更包含複數互動區域，該電子設備還依據該些互動區域中的影像產生第二影像訊號，該擴充控制裝置更包括一觸控螢幕，該觸控螢幕劃分複數映射區域，並響應分別對應於該些映射區域的一觸控操作而產生複數第二輸入訊號，該電子設備的該圖形化使用者介面中對應的該些互動區域依據該些第二輸入訊號執行對應的一互動指令，且該擴充控制裝置根據該些第二影像訊號使得該些互動區域中的影像分別映射至該些映射區域上顯示。
  5. 如請求項4所述之擴充控制裝置，更包括一處理器，該處理器連接該通訊模組與該觸控螢幕之間。
  6. 如請求項1所述之擴充控制裝置，更包括複數處理器，該些處理器一端連接該通訊模組，而該些處理器的另一端適於以一對一地連接該些輸入顯示模組而控制所連接的該輸入顯示模組的該輸入單元及該顯示單元。
  7. 如請求項1所述之擴充控制裝置，更包括一三維動作偵測模組及一處理器，該三維動作偵測模組包括： 一平面感測單元，用以感測一動態物件的一平面座標位移量；以及 一距離感測單元，用以感測相對於該動態物件的一垂直距離； 其中，該處理器根據該垂直距離及該平面座標位移量計算該動態物件的一平面移動距離，並配合該動態物件的該垂直距離的變化，取得該動態物件的一三維移動資訊。
  8. 如請求項7所述之擴充控制裝置，其中該平面感測單元包括： 一紅外線感測器，用以偵測該動態物件的存在；以及 一影像感測器，用以擷取該動態物件的複數時序影像； 其中，該處理器識別該些時序影像中對應於該動態物件的特徵，依據該特徵的位移取得該平面座標位移量。
  9. 如請求項7所述之擴充控制裝置，其中該距離感測單元包括： 一聲納感測器，用以感測相對於該動態物件的一間隔距離；以及 一近接感測器，具有一有效偵測區間，供判斷該動態物件存在於該有效偵測區間內； 其中，該處理器於該動態物件存在於該有效偵測區間內時，依據該間隔距離取得該垂直距離。
  10. 如請求項1所述之擴充控制裝置，更包括一周邊裝置，該周邊裝置為一麥克風、一搖桿、一按鍵、一觸控板、一震動馬達或一燈光。
  11. 一種影像控制方法，包括： 該電子設備的一圖形化使用者介面的複數操作區域分別顯示一影像； 該電子設備依據該些影像產生複數第一影像訊號； 該電子設備輸出該些第一影像訊號至一擴充控制裝置，使該些操作區域中的影像分別映射至該擴充控制裝置的複數顯示單元上顯示； 該擴充控制裝置響應一輸入操作產生一第一輸入訊號；以及 該電子設備自該擴充控制裝置接收該第一輸入訊號，以使該圖形化使用者介面中對應的該操作區域執行對應的一操作指令。
  12. 如請求項11所述之影像控制方法，其中該輸入單元包括一觸控面板，對應於該顯示單元的顯示面設置，該輸入操作為一觸控操作。
  13. 如請求項11所述之影像控制方法，其中該輸入單元包括一開關，該輸入操作為一擊鍵操作。
  14. 如請求項11所述之影像控制方法，更包括： 該電子設備依據複數互動區域中的影像產生複數第二影像訊號； 該電子設備輸出該些第二影像訊號至該擴充控制裝置，使得該擴充控制裝置依據該些第二影像訊號將該些互動區域中的影像分別映射至該擴充控制裝置的一觸控螢幕中的複數映射區域上顯示； 該擴充控制裝置根據分別對應於該些映射區域的一觸控操作產生複數第二輸入訊號；以及 該電子設備接收該些第二輸入訊號，以使該圖形化使用者介面中對應的該些互動區域執行對應的一互動指令。
TW108143028A 2019-11-26 2019-11-26 擴充控制裝置及影像控制方法 TWI736039B (zh)

Priority Applications (3)

Application Number Priority Date Filing Date Title
TW108143028A TWI736039B (zh) 2019-11-26 2019-11-26 擴充控制裝置及影像控制方法
CN202010751381.2A CN112843672A (zh) 2019-11-26 2020-07-30 扩充控制装置及影像控制方法
US17/088,716 US20210157479A1 (en) 2019-11-26 2020-11-04 Extended control device and image control method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
TW108143028A TWI736039B (zh) 2019-11-26 2019-11-26 擴充控制裝置及影像控制方法

Publications (2)

Publication Number Publication Date
TW202121153A true TW202121153A (zh) 2021-06-01
TWI736039B TWI736039B (zh) 2021-08-11

Family

ID=75974117

Family Applications (1)

Application Number Title Priority Date Filing Date
TW108143028A TWI736039B (zh) 2019-11-26 2019-11-26 擴充控制裝置及影像控制方法

Country Status (3)

Country Link
US (1) US20210157479A1 (zh)
CN (1) CN112843672A (zh)
TW (1) TWI736039B (zh)

Family Cites Families (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6297838B1 (en) * 1997-08-29 2001-10-02 Xerox Corporation Spinning as a morpheme for a physical manipulatory grammar
US20040021681A1 (en) * 2002-07-30 2004-02-05 Liao Chin-Hua Arthur Dual-touch-screen mobile computer
US20060013462A1 (en) * 2004-07-15 2006-01-19 Navid Sadikali Image display system and method
JP2006053629A (ja) * 2004-08-10 2006-02-23 Toshiba Corp 電子機器、制御方法及び制御プログラム
TW200820068A (en) * 2006-10-23 2008-05-01 Avermedia Tech Inc Multimedia system and operating method of multimedia program applied to the same
CN100592765C (zh) * 2007-05-30 2010-02-24 图诚科技股份有限公司 具备电视影音输入及输出功能的扩充装置
KR101434295B1 (ko) * 2008-01-07 2014-09-25 삼성전자주식회사 디스플레이 장치에 표시된 화면의 일부분을 전자장치를통해 ｇｕｉ로 제공하는 방법 및 이를 적용한 전자장치
JP5191070B2 (ja) * 2011-01-07 2013-04-24 シャープ株式会社 リモコン、表示装置、テレビ受像機、およびリモコン用プログラム
JP5801656B2 (ja) * 2011-09-01 2015-10-28 株式会社ソニー・コンピュータエンタテインメント 情報処理装置および情報処理方法
CN103051747A (zh) * 2011-10-13 2013-04-17 亚旭电子科技(江苏)有限公司 整合型扩充装置
US9462210B2 (en) * 2011-11-04 2016-10-04 Remote TelePointer, LLC Method and system for user interface for interactive devices using a mobile device
TWI702843B (zh) * 2012-02-15 2020-08-21 立視科技股份有限公司 遠端觸控操作的電視系統
US20140075377A1 (en) * 2012-09-10 2014-03-13 Samsung Electronics Co. Ltd. Method for connecting mobile terminal and external display and apparatus implementing the same
US20150212647A1 (en) * 2012-10-10 2015-07-30 Samsung Electronics Co., Ltd. Head mounted display apparatus and method for displaying a content
CN103809898A (zh) * 2012-11-14 2014-05-21 宇瞻科技股份有限公司 智能型输入方法
CN105988764A (zh) * 2015-02-26 2016-10-05 鸿富锦精密工业(武汉)有限公司 显示控制系统及方法
KR20180079904A (ko) * 2017-01-03 2018-07-11 삼성전자주식회사 전자 장치 및 그의 표시 방법
CN106707666A (zh) * 2017-02-03 2017-05-24 苏州佳世达光电有限公司 投影显示装置

Also Published As

Publication number Publication date
TWI736039B (zh) 2021-08-11
CN112843672A (zh) 2021-05-28
US20210157479A1 (en) 2021-05-27

Similar Documents

Publication Publication Date Title
US20140247216A1 (en) Trigger and control method and system of human-computer interaction operation command and laser emission device
US9753547B2 (en) Interactive displaying method, control method and system for achieving displaying of a holographic image
JP5846662B2 (ja) ３次元で表示されるオブジェクトのユーザの選択ジェスチャに応答する方法およびシステム
US20130257736A1 (en) Gesture sensing apparatus, electronic system having gesture input function, and gesture determining method
CN102033702A (zh) 影像显示装置及其显示控制方法
JP2015166890A (ja) 情報処理装置、情報処理システム、情報処理方法及びプログラム
JP2012027515A (ja) 入力方法及び入力装置
TWI736039B (zh) 擴充控制裝置及影像控制方法
US11294452B2 (en) Electronic device and method for providing content based on the motion of the user
KR102248741B1 (ko) 디스플레이 장치 및 그 제어 방법
TWM485448U (zh) 影像式虛擬互動裝置
KR20180036205A (ko) 시뮬레이션용 스마트 테이블 장치
CN106325613B (zh) 触控显示装置及其方法
KR102569170B1 (ko) 사용자 입력이 유지되는 시간에 기반하여 사용자 입력을 처리하는 방법 및 장치
JP6008904B2 (ja) 表示制御装置、表示制御方法、及び、プログラム
KR101394604B1 (ko) 모션 감지를 통한 사용자 인터페이스 구현 방법 및 그 장치
KR20130078496A (ko) 다양한 손모양 검출 및 추적을 기반으로 한 원격 전자칠판 제어 장치 및 그 방법
US20120182231A1 (en) Virtual Multi-Touch Control Apparatus and Method Thereof
JP2021177313A (ja) 情報処理装置及びユーザの入力操作に基づく情報処理方法並びに該方法を実行するためのコンピュータプログラム
KR102378476B1 (ko) 디스플레이 장치에 대한 펜 입력 신호를 제공하는 시스템 및 그 동작 방법
US9189146B2 (en) Information processing system, information processing method, information processing program, and computer-readable recording medium on which information processing program is stored
JP6523509B1 (ja) ゲームプログラム、方法、および情報処理装置
US20150323999A1 (en) Information input device and information input method
US20230177862A1 (en) Method of tracking input sign for extended reality and system using the same
Vuyyuru et al. Performing Basic Tasks on Computer using Hand Gestures & Ultrasonic Sensors