CN113117320A - 电子装置及利用外部输入信号的按键巨集的触发方法 - Google Patents

电子装置及利用外部输入信号的按键巨集的触发方法 Download PDF

Info

Publication number
CN113117320A
CN113117320A CN202010566041.2A CN202010566041A CN113117320A CN 113117320 A CN113117320 A CN 113117320A CN 202010566041 A CN202010566041 A CN 202010566041A CN 113117320 A CN113117320 A CN 113117320A
Authority
CN
China
Prior art keywords
display
input signal
specific
host
display device
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202010566041.2A
Other languages
English (en)
Other versions
CN113117320B (zh
Inventor
黄浩铠
林成龙
张世滨
黄芝成
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Giga Byte Technology Co Ltd
Original Assignee
Giga Byte Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Giga Byte Technology Co Ltd filed Critical Giga Byte Technology Co Ltd
Publication of CN113117320A publication Critical patent/CN113117320A/zh
Application granted granted Critical
Publication of CN113117320B publication Critical patent/CN113117320B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/40Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment
    • A63F13/42Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment by mapping the input signals into game commands, e.g. mapping the displacement of a stylus on a touch screen to the steering angle of a virtual vehicle
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/20Input arrangements for video game devices
    • A63F13/21Input arrangements for video game devices characterised by their sensors, purposes or types
    • A63F13/213Input arrangements for video game devices characterised by their sensors, purposes or types comprising photodetecting means, e.g. cameras, photodiodes or infrared cells
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/02Input arrangements using manually operated switches, e.g. using keyboards or dials
    • G06F3/023Arrangements for converting discrete items of information into a coded form, e.g. arrangements for interpreting keyboard generated codes as alphanumeric codes, operand codes or instruction codes
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/20Input arrangements for video game devices
    • A63F13/21Input arrangements for video game devices characterised by their sensors, purposes or types
    • A63F13/215Input arrangements for video game devices characterised by their sensors, purposes or types comprising means for detecting acoustic signals, e.g. using a microphone
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/20Input arrangements for video game devices
    • A63F13/22Setup operations, e.g. calibration, key configuration or button assignment
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/40Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment
    • A63F13/42Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment by mapping the input signals into game commands, e.g. mapping the displacement of a stylus on a touch screen to the steering angle of a virtual vehicle
    • A63F13/422Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment by mapping the input signals into game commands, e.g. mapping the displacement of a stylus on a touch screen to the steering angle of a virtual vehicle automatically for the purpose of assisting the player, e.g. automatic braking in a driving game
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/40Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment
    • A63F13/42Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment by mapping the input signals into game commands, e.g. mapping the displacement of a stylus on a touch screen to the steering angle of a virtual vehicle
    • A63F13/424Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment by mapping the input signals into game commands, e.g. mapping the displacement of a stylus on a touch screen to the steering angle of a virtual vehicle involving acoustic input signals, e.g. by using the results of pitch or rhythm extraction or voice recognition
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/50Controlling the output signals based on the game progress
    • A63F13/52Controlling the output signals based on the game progress involving aspects of the displayed game scene
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/55Controlling game characters or game objects based on the game progress
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/80Special adaptations for executing a specific game genre or game mode
    • A63F13/822Strategy games; Role-playing games
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F13/00Interconnection of, or transfer of information or other signals between, memories, input/output devices or central processing units
    • G06F13/38Information transfer, e.g. on bus
    • G06F13/42Bus transfer protocol, e.g. handshake; Synchronisation
    • G06F13/4282Bus transfer protocol, e.g. handshake; Synchronisation on a serial bus, e.g. I2C bus, SPI bus
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017Gesture based interaction, e.g. based on a set of recognized hand gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16Sound input; Sound output
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/20Movements or behaviour, e.g. gesture recognition
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/22Procedures used during a speech recognition process, e.g. man-machine dialogue
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/60Methods for processing data by generating or executing the game program
    • A63F2300/6045Methods for processing data by generating or executing the game program for mapping control signals received from the input arrangement into game commands
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/60Methods for processing data by generating or executing the game program
    • A63F2300/65Methods for processing data by generating or executing the game program for computing the condition of a game character
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/80Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game specially adapted for executing a specific type of game
    • A63F2300/807Role playing or strategy games
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2213/00Indexing scheme relating to interconnection of, or transfer of information or other signals between, memories, input/output devices or central processing units
    • G06F2213/0042Universal serial bus [USB]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/02Input arrangements using manually operated switches, e.g. using keyboards or dials
    • G06F3/0202Constructional details or processes of manufacture of the input device
    • G06F3/0219Special purpose keyboards
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/02Input arrangements using manually operated switches, e.g. using keyboards or dials
    • G06F3/023Arrangements for converting discrete items of information into a coded form, e.g. arrangements for interpreting keyboard generated codes as alphanumeric codes, operand codes or instruction codes
    • G06F3/0238Programmable keyboards

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Human Computer Interaction (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • General Health & Medical Sciences (AREA)
  • Acoustics & Sound (AREA)
  • Computational Linguistics (AREA)
  • Psychiatry (AREA)
  • Social Psychology (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • User Interface Of Digital Computer (AREA)
  • Transforming Electric Information Into Light Information (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Input From Keyboards Or The Like (AREA)

Abstract

本发明提供一种电子装置,包括:一显示装置,包括一显示控制器及一显示面板;以及一主机,电性连接至该显示装置。该主机执行一应用程序以绘制一显示画面,并通过该主机与该显示装置之间的一影像传输通道将该显示画面传送至该显示控制器,并由该显示控制器在该显示面板播放该显示画面。该显示装置判断来自一使用者的外部输入信号是否满足一预定条件。因应于该外部输入信号满足该预定条件,该显示装置产生对应于一特定按键巨集的虚拟输入信号,并通过该主机与该显示控制器之间的一数据传输通道将该虚拟输入信号传送至该主机,以使该主机在该应用程序执行对应于该特定按键巨集中的按键序列。

Description

电子装置及利用外部输入信号的按键巨集的触发方法
技术领域
本发明有关于电子装置,特别是有关于一种电子装置及利用外部输入信号的按键巨集的触发方法。
背景技术
目前市面上的显示装置(例如电视或电脑屏幕)的功能愈来愈多,且有许多功能是针对游戏玩家而设计,例如高帧数、低反应时间等等。然而,游戏玩家在进行游戏时,往往游戏角色需要通过使用者手动操作按下补血功能相应的热键才能进行补血,或是手动操作按下与技能相应的按键或指令集才能施展技能。然而,在游戏战况紧急时,使用者往往无法手动按下相应的热键以手动进行补血或施展技能,或是容易按错热键而造成失误的情况产生。
发明内容
有鉴于此,本发明提供一种电子装置及利用外部输入信号的按键巨集的触发方法以解决上述问题。
本发明提供一种电子装置,包括:一显示装置,包括一显示控制器及一显示面板;以及一主机,电性连接至该显示装置。该主机执行一应用程序以绘制一显示画面,并通过该主机与该显示装置之间的一影像传输通道将该显示画面传送至该显示控制器,并由该显示控制器在该显示面板播放该显示画面。该显示装置判断来自一使用者的外部输入信号是否满足一预定条件。因应于该外部输入信号满足该预定条件,该显示装置产生对应于一特定按键巨集的虚拟输入信号,并通过该主机与该显示控制器之间的一数据传输通道将该虚拟输入信号传送至该主机,以使该主机在该应用程序执行对应于该特定按键巨集中的按键序列。
在一些实施例中,该显示装置包括一影像撷取单元,且来自该使用者的外部输入信号为该影像撷取单元所撷取的多张使用者影像,其中该预定条件为该等使用者影像包括一特定手势动作。此外,该显示装置更包括一视频处理电路,用以判断该影像撷取单元所撷取的该等使用者影像是否包括该特定手势动作,其中,因应于判断该影像撷取单元所撷取的该等使用者影像包括该特定手势动作,该视频处理电路发送一通知信号至该显示控制器,其中该显示控制器依据该通知信号以产生对应于该特定手势动作的该特定按键巨集的该虚拟输入信号。
在一些实施例中,该显示装置更包括一麦克风,且来自该使用者的外部输入信号为该麦克风所撷取的一声音信号,其中该预定条件为该声音信号包括相应于该特定按键巨集的一特定名称。此外,该显示装置更包括一音频处理电路,用以识别该麦克风所撷取的该声音信号是否包括该特定名称,其中,因应于识别出该麦克风所撷取的该声音信号包括该特定名称,该音频处理电路发送一通知信号至该显示控制器,且该显示控制器依据该通知信号以产生对应于该特定名称的该特定按键巨集的该虚拟输入信号。
在一些实施例中,该显示控制器依据该通知信号以产生对应于该特定名称的该特定按键巨集的该虚拟输入信号。在另一些实施例中,该显示控制器依据该通知信号以产生对应于该特定名称的一控制信号,并将该控制信号传送至该键盘控制器,其中该键盘控制器依据该控制信号以产生对应于该特定名称的该特定按键巨集的该虚拟输入信号,且该虚拟输入信号为支援通用序列总线(USB)协定的键盘扫瞄码序列。
在一些实施例中,该显示装置更包括一键盘控制器及一集线器,且该键盘控制器设置于该集线器的外部,并且该键盘控制器提供制造商识别符及产品识别符以供该主机识别。该显示控制器依据该通知信号以产生对应于该特定名称的一控制信号,并将该控制信号传送至该键盘控制器,其中该键盘控制器依据该控制信号以产生对应于该特定名称的该特定按键巨集的该虚拟输入信号,且该虚拟输入信号为支援通用序列总线(USB)协定的键盘扫瞄码序列。
在另一些实施例中,该显示装置更包括一集线器,且该集线器包括一微控制器及一键盘控制器,其中该键盘控制器提供制造商识别符及产品识别符以供该主机识别。该显示控制器依据该通知信号以产生对应于该特定名称的一控制信号,并将该控制信号传送至该微控制器,其中该微控制器依据该控制信号以通知该键盘控制器以产生对应于该特定名称的该特定按键巨集的该虚拟输入信号,且该虚拟输入信号为支援通用序列总线(USB)协定的键盘扫瞄码序列。
在一些实施例中,该虚拟输入信号为支援通用序列总线(USB)协定的键盘扫瞄码序列或由多个描述元组成的描述元序列。当该虚拟输入信号为该等描述元组成该描述元序列,该主机所执行的相应于该数据传输通道的一驱动程序解析该描述元序列以得到该特定按键巨集的该按键序列。
本发明更提供一种利用外部输入信号的按键巨集的触发方法,用于一电子装置,其中该电子装置包括一显示装置及一主机,且该显示装置包括一显示面板及一显示控制器,该方法包括:利用该主机执行一应用程序以绘制一显示画面,并通过该主机与该显示控制器之间的一影像传输通道将该显示画面传送至该显示控制器,以及利用该显示控制器在该显示面板播放该显示画面;利用该显示装置判断来自一使用者的外部输入信号是否满足一预定条件;以及因应于该外部输入信号满足该预定条件,利用该显示装置产生对应于一特定按键巨集的虚拟输入信号,并通过该主机与该显示控制器之间的一数据传输通道将该虚拟输入信号传送至该主机,以使该主机在该应用程序执行对应于该特定按键巨集中的按键序列。
以下结合附图和具体实施例对本发明进行详细描述,但不作为对本发明的限定。
附图说明
图1A为依据本发明一实施例中的电子装置的方块图。
图1B为依据本发明另一实施例中的电子装置的方块图。
图1C为依据本发明又一实施例中的电子装置的方块图。
图2A及图2B为依据本发明一实施例中电子装置的主机及显示装置的连接方式的示意图。
图3为依据本发明一实施例中的电脑游戏的示意图。
图4为依据本发明一实施例中的利用外部输入信号的按键巨集的触发方法的流程图。
其中,附图标记:
10~电子装置;
100~主机;
200~显示装置;
110~处理单元
111~系统总线;
120~图形处理单元;
130~存储器单元;
140~储存装置;
141~应用程序;
142~作业系统;
143~USB驱动程序;
150、150A-150C~传输接口
160~周边装置;
210~显示控制器;
211~影像缩放器;
212~时序控制器;
220~显示模块;
230~储存单元;
231、232~固件;
233~屏幕上显示界面;
240~影像缓冲器;
250、250A-250C~传输接口;
260~输入接口;
261~实体按钮;
262~五向控制杆;
270~集线器;
271~键盘控制器;
272~影像撷取单元;
273~视频处理电路;
274~麦克风;
275~音频处理电路;
276~微控制器;
300~游戏界面;
310~游戏人物;
320~招式;
S410-S430~步骤。
具体实施方式
下面结合附图对本发明的结构原理和工作原理作具体的描述:
为使本发明的上述目的、特征和优点能更明显易懂,下文特举一较佳实施例,并配合附图,作详细说明如下。
图1A为依据本发明一实施例中的电子装置的方块图。电子装置10例如可为配备有显示装置的个人电脑、笔记型电脑或服务器。如图1A所示,电子装置10包括一主机100及一显示装置200,其中主机100信号连接至显示装置200。主机100例如包括一处理单元110、一图形处理单元120、一存储器单元130、一储存装置140、一或多个传输接口150、及一或多个周边装置160。处理单元110、图形处理单元120、存储器单元130、储存装置140、传输接口150、及周边装置160通过系统总线111而互相耦接。处理单元110例如可为中央处理器(CPU)、一般用途处理器(general-purpose processor)等等,但本发明并不限于此。图形处理单元120例如可为一显示卡上的图形处理单元或是整合至处理器110中的图形处理单元。
存储器单元130为一随机存取存储器,例如是动态随机存取存储器(DRAM)或静态随机存取存储器(SRAM),但本发明并不限于此。储存装置140为一非易失性存储器(non-volatile memory),例如可为一硬盘驱动器(hard disk drive)、一固态硬盘(solid-statedisk)、一快闪存储器(flash memory)、或一唯读存储器(read-only memory),但本发明并不限于此。
传输接口150可包括有线传输接口和/或无线传输接口,其中有线传输接口可包括:高解析度多媒体接口(High Definition Multimedia Interface,HDMI)、显示端口(DisplayPort,DP)接口、嵌入式显示端口(embedded DisplayPort,eDP)、介面通用序列总线(Universal Serial Bus,USB)接口、USB Type-C接口、雷雳(Thunderbolt)接口、数字视频接口(DVI)、视频图形阵列(VGA)接口、一般用途输入输出(GPIO)接口、通用非同步收发传输器(UART)接口、串行外设接口(SPI)、集成电路总线(I2C)接口、或其组合,且无线传输接口可包括:蓝芽(Bluetooth)、WiFi、近场通讯(NFC)接口等等,但本发明并不限于此。周边装置160例如包括:键盘、鼠标、触控板等输入装置,但本发明并不限于此。
举例来说,储存装置140可储存一或多个应用程序141、一作业系统142(例如可为Windows、Linux、MacOS等等)、及一通用序列总线(USB)驱动程序143,且处理单元110将一或多个应用程序141、作业系统142及USB驱动程序143读取至存储器单元130并执行。USB驱动程序143用以让主机100控制连接至主机100的不同USB装置,且可解析来自显示装置200的描述元序列,其细节将详述于后。
图形处理单元120例如可进行处理单元110所执行的应用程序的绘图处理以产生包括一或多张影像的一影像信号,并通过传输接口150的其中一者(例如HDMI接口或DisplayPort接口)将影像信号传送至显示装置200。
显示装置200例如可为平面显示器、电视、投影机、电脑屏幕等装置,但本发明并不限于此。显示装置200包括一显示控制器210、一显示模块220、一储存单元230、一影像缓冲器240、一或多个传输接口250、一输入接口260、及一集线器(HUB)270。传输接口250可包括有线传输接口和/或无线传输接口,其中有线传输接口可包括:高解析度多媒体接口(HighDefinition Multimedia Interface,HDMI)、显示端口(DisplayPort,DP)接口、嵌入式显示端口(embedded DisplayPort,eDP)、低电压差动信号传输(low voltage differentialsignaling,LVDS)接口、通用序列总线(Universal Serial Bus,USB)接口、USB Type-C介面、雷雳(Thunderbolt)接口、数字视频接口(DVI)、视频图形阵列(VGA)接口、一般用途输入输出(GPIO)接口、通用非同步收发传输器(UART)接口、串行外设接口(SPI)、集成电路总线(I2C)接口、或其组合,且无线传输接口可包括:蓝芽(Bluetooth)、Wi-Fi、近场通讯(NFC)接口等等,但本发明并不限于此。
显示控制器210例如可为一应用导向集成电路(application-specificintegrated circuit)、一芯片系统(System-on-chip)、一处理器、或一微控制器(microcontroller),但本发明并不限于此。
显示模块220例如可为一液晶(liquid crystal)面板、一发光二极管(light-emitting diode)面板、一有机发光二极管(organic light-emitting diode)面板、一阴极射线管(cathode ray tube)、电子墨水(E-Ink)显示模块、电致发光(electroluminescent)显示模块、等离子体(Plasma)显示模块、投影(projection)显示模块、量子点(QuantumDot)显示模块、但本发明并不限于此。
储存单元230例如可为一非易失性存储器,例如只读存储器(ROM)、可抹除可编程只读存储器(EPROM)、电子抹除式可编程只读存储器(EEPROM)。储存单元230用以储存显示装置200相关的固件231。储存单元230例如可在显示控制器210的外部、或是可整合至显示控制器210中。
固件231例如包括显示装置200的屏幕上显示界面的显示设定及延伸显示能力识别数据(Extended Display Identification Data,EDID)、显示设定、及一或多个屏幕上显示界面(on-screen-display(OSD)interface)233。延伸显示能力识别数据例如包括显示装置200的制造厂商、产品名称、解析度、每秒显示帧数等等。显示设定例如包括显示装置200的亮度、对比、锐利度、色温等设定。固件232用以控制显示装置200之屏幕上显示界面233。
在一实施例中,显示控制器210可通过一总线(例如I2C总线)以读取储存于储存单元230中之固件231-232及OSD接口233的程序码,并据以设定相关的显示参数。此外,显示控制器210亦可通过传输接口250的其中一者(例如可为影像传输通道或数据传输通道)以将显示装置200的延伸显示能力识别数据传送至主机100,以供主机100中的处理单元110及图形处理单元120设定所要输出的影像信号的解析度及相关的同步信号。屏幕上显示界面233例如包括屏幕上显示选单(OSD Menu)及选项、信息显示界面(informationdashboard)、计时器、计数器、准星(crosshair)、特定符号、特定颜色、特定文字、或其组合,但本发明并不限于此。
影像缓冲器240例如可为一易失性存储器(例如动态随机存取存储器)或一非易失性存储器(例如快闪存储器),其用以储存欲在显示模块220上播放的输出影像,其中主机100或显示控制器210可依据主机100所产生的一屏幕上显示致能信号以将一或多个屏幕上显示界面233覆盖储存于影像缓冲器240中的影像信号的一特定区域以产生输出影像。
输入接口260用以控制显示装置200的屏幕上显示选单。输入接口260可由例如可由一五向控制杆262或是由五个实体按钮261所实现,借以实现上、下、左、右、及确认等指令。集线器270例如可为一USB集线器,且传输接口250的其中一者例如为USB接口,且主机100可通过传输接口150及250中的USB接口经由集线器270以传送数据至显示控制器210,且显示控制器210同样可通过传输接口150及250中的USB接口经由集线器270以传送数据至主机100。
在一实施例中,当使用者进行五向控制杆262的其中一个方向的操作(或是按下其中一个实体按钮261时,显示控制器210可从储存单元230读取固件232以及屏幕上显示界面233中的屏幕上显示选单及相关选项的程序码,并在显示模块220上显示屏幕上显示选单及相关选项。在一实施例中,使用者可在输入接口260上进行操作以控制显示装置200的屏幕上显示选单,进而调整显示模块220的亮度、对比、锐利度、色温、或开启或关闭屏幕上显示界面233中的其他界面。举例来说,固件231例如可视为显示装置200的预设固件,且使用者可经由五向控制杆262(或实体按钮261)以控制显示装置200所显示的屏幕上显示界面233的选项设定。
在一实施例中,显示控制器210包括一影像缩放器(image scaler)211及一时序控制器(timing controller)212。显示控制器210通过传输接口250的其中一者以接收来自主机100的影像信号和/或来自其他主机的影像信号,且影像缩放器211可将所接收的影像信号中的影像进行影像缩放处理和/或影像迭合处理以符合显示模块220的解析度,并将经过影像缩放处理后的影像(例如称为输出影像)储存至影像缓冲器240。时序控制器212则控制显示模块220从影像缓冲器240读取输出影像并播放。
在另一实施例中,显示控制器210可包括时序控制器212,且来自主机100的影像信号的解析度符合显示模块220的解析度,故显示控制器210接收到来自主机100的影像信号后可不必经过影像缩放处理就将影像信号储存于影像缓冲器240中。时序控制器210可由从影像缓冲器240读取输出影像,并控制显示模块220以播放输出影像。
在一些实施例中,显示装置200例如可包含手势(gesture)识别和/或语音识别的功能,用以让显示控制器210触发热键控制信号,且不同配置的显示装置200可依据热键控制信号以不同方式产生相应的按键巨集的按键动作序列(keystroke sequence),并将上述按键动作序列通过数据传输通道传送至主机100,进而让主机100执行上述按键巨集的输入操作。其中上述按键动作序列例如为多个键盘扫瞄码所组成的键盘扫瞄码序列,或是多个描述元所组成的描述元序列。
举例来说,显示装置200可包括:影像撷取单元272与视频处理电路273、和/或麦克风274与一音频处理电路275,其中手势识别功能例如需要影像撷取单元272及视频处理电路273,且语音识别功能例如需要麦克风274及音频处理电路275。
影像撷取单元272例如可用电荷耦合装置(charge-coupled device,CCD)感测器或互补式金属氧化物半导体(complementary metal-oxide semiconductor)感测器所实现,但本发明并不限于此。影像撷取单元272例如可设置于显示装置200的外壳上的特定位置(例如上缘或下缘的中间位置),且其拍摄范围对准使用者,并且可撷取包含使用者的手势动作的使用者影像。视频处理电路273例如可用应用导向集成电路、数字信号处理器或现场可程序化逻辑栅阵列所实现,但本发明并不限于此。
视频处理电路273用以从使用者影像中识别出使用者所进行的任一个特定手势动作,其中显示装置200例如可包含一手势数据库(图1A未示出),其储存一或多个上述特定手势动作的影像。当视频处理电路273判断使用者影像中出现在手势数据库中的其中一个特定手势动作,则视频处理电路273发送一通知信号至显示控制器210以通知显示控制器210使用者已进行该特定手势动作。当显示控制器210接收到该通知信号,显示控制器210产生对应于该特定手势动作相应的一按键巨集的键盘扫瞄码(keyboard scan code)序列,并且将上述键盘扫瞄码序列经由集线器270及传输接口250及150传送至主机100,使得处理单元110执行上述键盘扫瞄码序列以进行特定操作。此外,上述键盘扫瞄码序列例如为支援USB协定的一或多个键盘扫瞄码。当主机100设置有实体的USB键盘时,主机100会将实体USB键盘的键盘扫瞄码与来自显示装置200的键盘扫瞄码视为来自不同的USB装置,例如来自实体USB键盘及显示装置200的模拟键盘(emulated keyboard),故不会彼此产生冲突。
举例来说,主机100可执行一电脑游戏(例如格斗游戏:快打旋风),且游戏主角例如需要施放操作繁复的大绝招(例如:波动拳),例如需要在预定时间内连续按下:下、右下、右及拳击(punch)钮。此时,使用者只需简单利用其手部或头部进行特定招式相应的手势动作,且当视频处理电路273判断影像撷取单元272所撷取的使用者影像中出现上述特定招式相应的特定手势动作时,视频处理电路273发送一通知信号至显示控制器210以通知显示控制器210使用者已进行特定招式相应的特定手势动作,故显示控制器210会产生对应于该特定手势动作相应的按键巨集的键盘扫瞄码序列并传将其传送至主机100,使得主机100可在电脑游戏中输入特定招式相应的按键巨集以让游戏主角施放特定招式,或是使用道具等游戏内的指令。需说明的是,本发明的手势(gesture)可包括但不限于手部或头部,或是其他肢体上的姿势。
麦克风274例如可为一指向性麦克风,用以对准使用者的方向以撷取使用者所发出的声音信号。音频处理电路275例如可用应用导向集成电路、数字信号处理器或现场可程序化逻辑栅阵列所实现,但本发明并不限于此。音频处理电路275用以对上述声音信号进行语音识别(speech recognition),借以判断使用者所发出的声音信号中是否包含预先定义好的某特定招式名称(例如可储存于一语音数据库,图1A未示出)。当音频处理电路275判断使用者所发出的声音信号中包含某特定招式名称,则音频处理电路275发送一通知信号至显示控制器210以通知显示控制器210使用者已发出包含该特定招式名称的声音信号。当显示控制器210接收到该通知信号,显示控制器210产生对应于该特定招式名称相应的一按键巨集的键盘扫瞄码序列,并且将上述键盘扫瞄码序列经由集线器270及传输接口250及150传送至主机100,使得处理单元110执行上述键盘扫瞄码序列以进行特定操作,例如让游戏主角施放特定招式,或是使用道具等游戏内的指令。因此,使用者无需手动按下按键即可发出语音以施放对应的招式,故更易在游戏中获胜,进而增加使用者体验。
在某些情况下,主机100所执行的电脑游戏或游戏平台可能会包含检测程序,用以检测并防止不当程序所发出的指令来干扰游戏的公平性。在本发明中的电子装置可通过显示装置进行手势识别及语音识别,且可传送相应的键盘扫瞄码序列或描述元序列至主机100,使得主机100执行对应的特定操作,其可避免被检测程序判断为不当程序。
需注意的是,本发明并不限定仅能应用于电脑游戏,亦可应用于其他一般的应用程序。一般来说,进行语音识别或手势识别的运算量相当大。若显示控制器210是用一般的微控制器所实现,则显示控制器210需要搭配视频处理电路273及音频处理电路275以分别进行手势识别及语音识别。若显示控制器210是用运算能力强大的中央处理器所实现,则手势识别和/或语音识别可完全由显示控制器210所处理,意即可在图1A中省略视频处理电路273和/或音频处理电路275。
在一些实施例中,主机100及显示装置200例如可支援「动态装置映射(dynamicdevice mapping)」的技术。当显示控制器210从视频处理电路273或音频处理电路275接收到通知信号时,显示控制器210可产生特定招式之按键巨集相应的描述元(descriptor)序列,其中各描述元即表示不同按键按下/放开的时间点。因此,在此实施例中,显示控制器210可不必产生按键巨集对应的键盘扫瞄码序列,并可直接将上述描述元序列通过集线器270及传输接口250及150传送到主机100。因此,在主机100所执行的USB驱动程序143可在解析上述描述元序列后即执行所得到的按键序列,借以让游戏主角施放特定招式,或是使用道具等游戏内的指令。
图1B为依据本发明另一实施例中的电子装置的方块图。
图1B与图1A类似,其差别在于在图1B中的显示装置200更包括一键盘控制器271,电性连接至显示控制器210及集线器270。键盘控制器271例如可用一嵌入式微控制器(embedded microcontroller)或是一键盘集成电路(IC)所实现,用以提供实体的制造商识别符(vendor ID)及产品识别符(product ID)以供主机100识别。
在此实施例中,当显示控制器210从视频处理电路273或音频处理电路275接收到通知信号时,显示控制器210可产生特定招式的控制信号(例如表示按键巨集的编号)以通知键盘控制器271,且键盘控制器271产生上述特定招式相应的按键巨集的键盘扫瞄码序列,其中上述键盘扫瞄码序列例如为支持USB协议的一或多个键盘扫瞄码。因此,键盘控制器271可通过集线器270及传输接口250及150将上述特定招式相应的按键巨集的键盘扫瞄码传送至主机100,使得处理单元110执行上述键盘扫瞄码以进行特定操作,例如让游戏主角施放特定招式,或是使用道具等游戏内的指令。
图1C为依据本发明又一实施例中的电子装置的方块图。
图1C与图1A类似,其差别在于在图1B中的显示装置200中的集线器270更包括一键盘控制器271及微控制器276。键盘控制器271例如可用一嵌入式微控制器(embeddedmicrocontroller)或是一键盘积体电路(IC)所实现,用以提供实体的制造商识别符(vendor ID)及产品识别符(product ID)以供主机100识别。在一些实施例中,集线器270中的微控制器276与键盘控制器271是不同的实体元件。在另一些实施例中,键盘控制器271的功能可整合至微控制器276,且微控制器276所执行的固件包括键盘控制器271的相关功能。
当显示控制器210从视频处理电路273或音频处理电路275接收到通知信号时,显示控制器210可产生特定招式的控制信号(例如表示按键巨集的编号)并将其传送至集线器270。集线器270的微控制器276可识别上述控制信号,并将上述控制信号由键盘控制器271所处理。键盘控制器271依据上述控制信号以产生上述特定招式相应的按键巨集的键盘扫瞄码序列,其中键盘扫瞄码序列例如为支持USB协议的一或多个键盘扫瞄码。
图2A及图2B为依据本发明一实施例中电子装置的主机及显示装置的连接方式的示意图。
在本实施例中,如图2A所示,主机100的图形处理单元120所产生的影像信号通过主机100的传输接口150A(例如为HDMI接口)及显示装置200的相应的传输接口250A(例如为HDMI接口)传送至显示装置200的显示控制器210。其中,传输接口150A及传输接口250A之间的传输通道例如可称为影像传输通道。传输接口150B及传输接口250B之间的传输通道例如可称为数据传输通道或控制信号传输通道。在图1A~1C中,显示控制器210、键盘控制器271或集线器270传送键盘扫瞄码或描述元序列至主机100即是通过主机100及显示装置200之间的数据传输通道。在一些实施例中,若电子装置10为笔记型电脑,则传输接口150A及250A例如可为嵌入式显示端口(eDP)接口或低电压差动信号传输(LVDS)接口,且传输接口150B及250B例如可为一内部总线接口、I2C接口或SPI接口,但本发明并不限于此。
在其他实施例中,如图2B所示,主机100的图形处理单元120所产生的影像信号通过主机100的传输接口150C(例如为USB Type-C接口)及显示装置200的相应的传输接口250C(例如为USB Type-C接口)传送至显示装置200的显示控制器210。
需注意的是,因为USB Type-C的通讯协议可支持影音传输(例如支持DisplayPort或HDMI)之外,亦提供高速(Hi-Speed)及极速(SuperSpeed)数据传输的功能,意即可结合影像传输通道及数据传输通道。因此,主机100可同样通过主机100的传输接口150C(例如为USB Type-C接口)及显示装置200之相应的传输接口250C(例如为USB Type-C接口)以将屏幕上显示致能信号传送至显示装置200。
需注意的是,视显示装置200的硬件配置(例如是否配置实体的键盘控制器)及显示控制器210的运算能力而定可选用在图1A~1C中的其中一种电子装置10,且图2A或图2B的连接方式均适用。
图3为依据本发明一实施例中的电脑游戏的示意图。
举例来说,在一实施例中,主机100执行一特定电脑游戏(例如快打旋风),其游戏界面300如图3所示。使用者可通过显示装置200的手势识别功能或语音识别功能以让游戏主角310施放特定招式,或是使用道具等游戏内的指令。举例来说,使用者可进行特定招式(例如波动拳320)的特定手势,当显示装置200撷取使用者影像并从中识别出上述特定手势时,显示装置200即可利用图1A~1C的实施例的其中一种方式产生相应于特定招式的按键巨集的键盘扫瞄码序列或描述元序列。显示装置200并将键盘扫瞄码序列或描述元序列传送至主机100,使得主机100可解析上述键盘扫瞄码序列或描述元序列,并执行对应的按键序列以让游戏主角310施放特定招式320,或是使用道具等游戏内的指令。
此外,使用者亦可对着显示装置200下达特定招式的语音指令,当显示装置200撷取到使用者的声音信号并从中识别出上述特定招式的招式名称时,显示装置200即可利用图1A~1C的实施例的其中一种方式产生相应于特定招式的按键巨集的键盘扫瞄码序列或描述元序列。显示装置200并将键盘扫瞄码序列或描述元序列传送至主机100,使得主机100可解析上述键盘扫瞄码序列或描述元序列,并执行对应的按键序列以让游戏主角310施放特定招式320,或是使用道具等游戏内的指令。
图4为依据本发明一实施例中的利用外部输入信号的按键巨集的触发方法的流程图。
在步骤S410,利用主机100执行一应用程序以绘制一显示画面,并通过主机100与显示控制器210之间的一影像传输通道将显示画面传送至显示控制器210。举例来说,主机100可分利用影像传输通道将显示画面的影像信号传送至显示装置200,且当显示装置200判断需触发虚拟输入信号时,显示装置200会通过数据传输通道将虚拟输入信号传送至主机100,其中数据传输通道及影像传输通道的连接方式可参考图2A~2B的实施例。
在步骤S420,利用显示装置200判断来自一使用者的外部输入信号是否满足一预定条件。举例来说,显示装置200可包含手势识别和/或语音识别的功能,用以让显示控制器210触发热键控制信号,且不同配置的显示装置200可依据热键控制信号以不同方式产生相应的按键巨集的按键动作序列(keystroke sequence),并将上述按键动作序列通过数据传输通道传送至主机100,进而让主机100执行上述按键巨集的输入操作。其中上述按键动作序列例如为多个键盘扫瞄码所组成的键盘扫瞄码序列,或是多个描述元所组成的描述元序列。此外,上述外部输入信号例如可为使用者的手势动作或是使用者所发出的声音信号。
在步骤S430,因应于该外部输入信号满足该预定条件,利用显示装置200产生对应于一特定按键巨集的虚拟输入信号,并通过主机100与显示控制器210之间的一数据传输通道将该虚拟输入信号传送至主机100,以使主机100在该应用程序执行对应于该特定按键巨集中的按键序列。上述虚拟输入信号例如可为支持通用序列总线(USB)协议的键盘扫瞄码序列或由多个描述元组成的描述元序列。当虚拟输入信号为键盘扫瞄码序列,则主机100可直接执行键盘扫瞄码序列的按键序列。当虚拟输入信号为描述元序列,主机100所执USB驱动程序143可解析描述元序列以得到特定按键巨集的按键序列。
综上所述,本发明提供一种电子装置及利用显示画面的热键自动触发方法,其可利用显示装置来自一使用者的外部输入信号是否满足一预定条件。因应于该外部输入信号满足该预定条件,显示装置产生对应于一特定按键巨集的虚拟输入信号,并将该虚拟输入信号传送至主机,以使主机在该应用程序执行对应于特定按键巨集中的按键序列。因此,经由使用者进行特定手势动作或是发出特定的声音信号可自动触发特定按键巨集的功能,使得主机可在游戏中即时执行上述特定按键巨集的按键序列以发出对应的招式,借以避免使用者在进行游戏时无法手动按下相应的热键以手动进行补血,或是容易按错热键而造成失误的情况产生,进而增加使用者体验。
于权利要求中使用如”第一”、"第二"、"第三"等词用来修饰权利要求中的元件,并非用来表示之间具有优先权顺序,先行关系,或者是一个元件先于另一个元件,或者是执行方法步骤时的时间先后顺序,仅用来区别具有相同名字的元件。
当然,本发明还可有其它多种实施例,在不背离本发明精神及其实质的情况下,熟悉本领域的技术人员当可根据本发明作出各种相应的改变和变形,但这些相应的改变和变形都应属于本发明所附的权利要求的保护范围。

Claims (20)

1.一种电子装置,其特征在于,包括:
一显示装置,包括一显示控制器及一显示面板;以及
一主机,电性连接至该显示装置;
其中该主机执行一应用程序以绘制一显示画面,并通过该主机与该显示装置之间的一影像传输通道将该显示画面传送至该显示控制器,并由该显示控制器在该显示面板播放该显示画面,
其中该显示装置判断来自一使用者的外部输入信号是否满足一预定条件,
因应于该外部输入信号满足该预定条件,该显示装置产生对应于一特定按键巨集的虚拟输入信号,并通过该主机与该显示控制器之间的一数据传输通道将该虚拟输入信号传送至该主机,以使该主机在该应用程序执行对应于该特定按键巨集中的按键序列。
2.如权利要求1所述的电子装置,其特征在于,该显示装置包括一影像撷取单元,且来自该使用者的外部输入信号为该影像撷取单元所撷取的多张使用者影像,其中该预定条件为该等使用者影像包括一特定手势动作。
3.如权利要求2所述的电子装置,其特征在于,该显示装置更包括一视频处理电路,用以判断该影像撷取单元所撷取的该等使用者影像是否包括该特定手势动作,
其中,因应于判断该影像撷取单元所撷取的该等使用者影像包括该特定手势动作,该视频处理电路发送一通知信号至该显示控制器,
其中该显示控制器依据该通知信号以产生对应于该特定手势动作的该特定按键巨集的该虚拟输入信号。
4.如权利要求1所述的电子装置,其特征在于,该显示装置更包括一麦克风,且来自该使用者的外部输入信号为该麦克风所撷取的一声音信号,其中该预定条件为该声音信号包括相应于该特定按键巨集的一特定名称。
5.如权利要求4所述的电子装置,其特征在于,该显示装置更包括一音频处理电路,用以识别该麦克风所撷取的该声音信号是否包括该特定名称,
其中,因应于识别出该麦克风所撷取的该声音信号包括该特定名称,该音频处理电路发送一通知信号至该显示控制器,且该显示控制器依据该通知信号以产生对应于该特定名称的该特定按键巨集的该虚拟输入信号。
6.如权利要求5所述的电子装置,其特征在于,该显示控制器依据该通知信号以产生对应于该特定名称的该特定按键巨集的该虚拟输入信号。
7.如权利要求5所述的电子装置,其特征在于,该显示装置更包括一键盘控制器及一集线器,且该键盘控制器设置于该集线器的外部,并且该键盘控制器提供制造商识别符及产品识别符以供该主机识别,
其中,该显示控制器依据该通知信号以产生对应于该特定名称的一控制信号,并将该控制信号传送至该键盘控制器,
其中该键盘控制器依据该控制信号以产生对应于该特定名称的该特定按键巨集的该虚拟输入信号,且该虚拟输入信号为支持通用序列总线(USB)协议的键盘扫瞄码序列。
8.如权利要求5所述的电子装置,其特征在于,该显示装置更包括一集线器,且该集线器包括一微控制器及一键盘控制器,其中该键盘控制器提供制造商识别符及产品识别符以供该主机识别,
其中,该显示控制器依据该通知信号以产生对应于该特定名称的一控制信号,并将该控制信号传送至该微控制器,
其中该微控制器依据该控制信号以通知该键盘控制器以产生对应于该特定名称的该特定按键巨集的该虚拟输入信号,且该虚拟输入信号为支持通用序列总线(USB)协议的键盘扫瞄码序列。
9.如权利要求1所述的电子装置,其特征在于,该虚拟输入信号为支持通用序列总线(USB)协议的键盘扫瞄码序列或由多个描述元组成的描述元序列。
10.如权利要求9所述的电子装置,其特征在于,当该虚拟输入信号为该等描述元组成该描述元序列,该主机所执行的相应于该数据传输通道的一驱动程序解析该描述元序列以得到该特定按键巨集的该按键序列。
11.一种利用外部输入信号的按键巨集的触发方法,用于一电子装置,其特征在于,该电子装置包括一显示装置及一主机,且该显示装置包括一显示面板及一显示控制器,该方法包括:
利用该主机执行一应用程序以绘制一显示画面,并通过该主机与该显示控制器之间的一影像传输通道将该显示画面传送至该显示控制器,以及利用该显示控制器在该显示面板播放该显示画面;
利用该显示装置判断来自一使用者的外部输入信号是否满足一预定条件;以及
因应于该外部输入信号满足该预定条件,利用该显示装置产生对应于一特定按键巨集的虚拟输入信号,并通过该主机与该显示控制器之间的一数据传输通道将该虚拟输入信号传送至该主机,以使该主机在该应用程序执行对应于该特定按键巨集中的按键序列。
12.如权利要求11所述的方法,其特征在于,该显示装置包括一影像撷取单元,且来自该使用者的外部输入信号为该影像撷取单元所撷取的多张使用者影像,其中该预定条件为该等使用者影像包括一特定手势动作。
13.如权利要求12所述的方法,其特征在于,该显示装置更包括一视频处理电路,用以判断该影像撷取单元所撷取的该等使用者影像是否包括该特定手势动作,且该方法更包括:
因应于判断该影像撷取单元所撷取的该等使用者影像包括该特定手势动作,利用该视频处理电路发送一通知信号至该显示控制器;以及
利用该显示控制器依据该通知信号以产生对应于该特定手势动作的该特定按键巨集的该虚拟输入信号。
14.如权利要求11所述的方法,其特征在于,该显示装置更包括一麦克风,且来自该使用者之外部输入信号为该麦克风所撷取的一声音信号,其中该预定条件为该声音信号包括相应于该特定按键巨集的一特定名称。
15.如权利要求14的所述的方法,其特征在于,该显示装置更包括一音频处理电路,用以识别该麦克风所撷取的该声音信号是否包括该特定名称,且该方法更包括:
因应于识别出该麦克风所撷取的该声音信号包括该特定名称,利用该音频处理电路发送一通知信号至该显示控制器,且该显示控制器依据该通知信号以产生对应于该特定名称的该特定按键巨集的该虚拟输入信号。
16.如权利要求15所述的方法,其特征在于,更包括:
利用该显示控制器依据该通知信号以产生对应于该特定名称的该特定按键巨集的该虚拟输入信号。
17.如权利要求15所述的方法,其特征在于,该显示装置更包括一键盘控制器及一集线器,且该键盘控制器设置于该集线器的外部,并且该键盘控制器提供制造商识别符及产品识别符以供该主机识别,且该方法更包括:
利用该显示控制器依据该通知信号以产生对应于该特定名称的一控制信号,并将该控制信号传送至该键盘控制器;以及
利用该键盘控制器依据该控制信号以产生对应于该特定名称的该特定按键巨集的该虚拟输入信号,其中该虚拟输入信号为支持通用序列总线(USB)协议的键盘扫瞄码序列。
18.如权利要求15所述的方法,其特征在于,该显示装置更包括一集线器,且该集线器包括一微控制器及一键盘控制器,其中该键盘控制器提供制造商识别符及产品识别符以供该主机识别,且该方法更包括:
利用该显示控制器依据该通知信号以产生对应于该特定名称的一控制信号,并将该控制信号传送至该微控制器;以及
利用该微控制器依据该控制信号以通知该键盘控制器以产生对应于该特定名称的该特定按键巨集的该虚拟输入信号,且该虚拟输入信号为支援通用序列总线(USB)协定的键盘扫瞄码序列。
19.如权利要求11所述的方法,其特征在于,该虚拟输入信号为支持通用序列总线(USB)协议的键盘扫瞄码序列或由多个描述元组成的描述元序列。
20.如权利要求19所述的方法,其特征在于,更包括:
当该虚拟输入信号为该等描述元组成该描述元序列,利用该主机所执行的相应于该数据传输通道的一驱动程序解析该描述元序列以得到该特定按键巨集的该按键序列。
CN202010566041.2A 2019-12-31 2020-06-19 电子装置及利用外部输入信号的按键巨集的触发方法 Active CN113117320B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
TW108148481A TWI734329B (zh) 2019-12-31 2019-12-31 電子裝置及利用外部輸入信號的按鍵巨集之觸發方法
TW108148481 2019-12-31

Publications (2)

Publication Number Publication Date
CN113117320A true CN113117320A (zh) 2021-07-16
CN113117320B CN113117320B (zh) 2024-09-10

Family

ID=73544093

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010566041.2A Active CN113117320B (zh) 2019-12-31 2020-06-19 电子装置及利用外部输入信号的按键巨集的触发方法

Country Status (5)

Country Link
US (1) US11269424B2 (zh)
EP (1) EP3845281B1 (zh)
JP (1) JP7178397B2 (zh)
CN (1) CN113117320B (zh)
TW (1) TWI734329B (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113117319A (zh) * 2019-12-31 2021-07-16 技嘉科技股份有限公司 电子装置及利用显示画面的热键自动触发方法

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11806610B2 (en) * 2021-11-29 2023-11-07 Pixart Imaging Inc. Computer system and gaming mouse

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20120027374A1 (en) * 2010-01-25 2012-02-02 Harry Ira Lipkind Methods and systems for control of multiple multimedia tuners
TW201227309A (en) * 2010-12-24 2012-07-01 Mstar Semiconductor Inc Display apparatus, remote controller and associated display system
KR101263706B1 (ko) * 2012-12-28 2013-05-13 서울과학기술대학교 산학협력단 제로 클라이언트를 지원하는 가상 데스크탑 화면 전송 시스템
CN103246443A (zh) * 2012-02-06 2013-08-14 冠捷投资有限公司 可使用控件操作主机的显示器
US20140232865A1 (en) * 2013-02-18 2014-08-21 Samsung Electronics Co., Ltd. Display apparatus
US20150278624A1 (en) * 2014-03-27 2015-10-01 Wistron Corporation Image processing system for generating information by image recognition and related method
US20170052760A1 (en) * 2015-08-17 2017-02-23 Microsoft Technology Licensing, Llc Voice-triggered macros
CN108600211A (zh) * 2018-04-18 2018-09-28 惠州市德赛西威汽车电子股份有限公司 一种汽车虚拟仪表获取升级文件的方法
US20190096316A1 (en) * 2017-09-22 2019-03-28 Samsung Display Co., Ltd. Display device and method of driving the same

Family Cites Families (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4935870A (en) * 1986-12-15 1990-06-19 Keycom Electronic Publishing Apparatus for downloading macro programs and executing a downloaded macro program responding to activation of a single key
US6209034B1 (en) * 1994-09-02 2001-03-27 Nec Corporation Remote keyboard macros activated by hot icons
US8734339B2 (en) * 1996-12-16 2014-05-27 Ip Holdings, Inc. Electronic skin patch for real time monitoring of cardiac activity and personal health management
TW456112B (en) * 1999-12-10 2001-09-21 Sun Wave Technology Corp Multi-function remote control with touch screen display
US8684839B2 (en) 2004-06-18 2014-04-01 Igt Control of wager-based game using gesture recognition
US20080088590A1 (en) * 2006-04-18 2008-04-17 Ronald Brown Display Input Equipped Data Entry Device and Methods
TW200811682A (en) * 2006-08-28 2008-03-01 Seco Technology Co Ltd Centralized transmission restriction management device and method of a computer via remote cipher handling
US20090160779A1 (en) 2007-12-19 2009-06-25 International Business Machines Corporation Emulating A Keyboard On A Touch Screen Monitor Of A Computer System
US10281893B2 (en) * 2009-06-25 2019-05-07 Universal Electronics Inc. System and method for configuration of macro commands in a controlling device
US20120159567A1 (en) * 2010-12-21 2012-06-21 Enterproid Hk Ltd Contextual role awareness
US8845431B2 (en) * 2011-05-31 2014-09-30 Microsoft Corporation Shape trace gesturing
US9557818B2 (en) * 2012-10-16 2017-01-31 Google Inc. Contextually-specific automatic separators
US20140123049A1 (en) 2012-10-30 2014-05-01 Microsoft Corporation Keyboard with gesture-redundant keys removed
US20140267933A1 (en) 2013-03-15 2014-09-18 Toshiba America Information Systems, Inc. Electronic Device with Embedded Macro-Command Functionality
WO2016084649A1 (ja) * 2014-11-28 2016-06-02 ソニー株式会社 情報処理装置、情報処理方法およびプログラム
KR20180024927A (ko) * 2016-08-31 2018-03-08 삼성전자주식회사 디스플레이 장치 및 디스플레이 장치의 제어 방법
JP7256742B2 (ja) * 2016-12-07 2023-04-12 ノースラップ,チャールズ シングマシンシステム及び方法
US10754414B2 (en) * 2017-09-12 2020-08-25 Ambiq Micro, Inc. Very low power microcontroller system
US10970897B2 (en) * 2017-10-31 2021-04-06 Paypal, Inc. Using augmented reality for accessing legacy transaction terminals
CN109157834A (zh) * 2018-08-21 2019-01-08 苏州蜗牛数字科技股份有限公司 一种触发有序触摸屏宏操作事件的方法
TWI673645B (zh) * 2018-11-27 2019-10-01 技嘉科技股份有限公司 電腦系統、顯示裝置、及螢幕上顯示介面的顯示方法

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20120027374A1 (en) * 2010-01-25 2012-02-02 Harry Ira Lipkind Methods and systems for control of multiple multimedia tuners
TW201227309A (en) * 2010-12-24 2012-07-01 Mstar Semiconductor Inc Display apparatus, remote controller and associated display system
CN103246443A (zh) * 2012-02-06 2013-08-14 冠捷投资有限公司 可使用控件操作主机的显示器
KR101263706B1 (ko) * 2012-12-28 2013-05-13 서울과학기술대학교 산학협력단 제로 클라이언트를 지원하는 가상 데스크탑 화면 전송 시스템
US20140232865A1 (en) * 2013-02-18 2014-08-21 Samsung Electronics Co., Ltd. Display apparatus
US20150278624A1 (en) * 2014-03-27 2015-10-01 Wistron Corporation Image processing system for generating information by image recognition and related method
US20170052760A1 (en) * 2015-08-17 2017-02-23 Microsoft Technology Licensing, Llc Voice-triggered macros
US20190096316A1 (en) * 2017-09-22 2019-03-28 Samsung Display Co., Ltd. Display device and method of driving the same
CN108600211A (zh) * 2018-04-18 2018-09-28 惠州市德赛西威汽车电子股份有限公司 一种汽车虚拟仪表获取升级文件的方法

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113117319A (zh) * 2019-12-31 2021-07-16 技嘉科技股份有限公司 电子装置及利用显示画面的热键自动触发方法

Also Published As

Publication number Publication date
US11269424B2 (en) 2022-03-08
EP3845281A1 (en) 2021-07-07
TWI734329B (zh) 2021-07-21
JP7178397B2 (ja) 2022-11-25
EP3845281B1 (en) 2023-10-11
CN113117320B (zh) 2024-09-10
JP2021110944A (ja) 2021-08-02
US20210200326A1 (en) 2021-07-01
TW202127228A (zh) 2021-07-16

Similar Documents

Publication Publication Date Title
TWI673645B (zh) 電腦系統、顯示裝置、及螢幕上顯示介面的顯示方法
CN108737888B (zh) 显示设备、显示系统以及用于控制显示设备的方法
JP7178397B2 (ja) 電子装置、および、外部入力信号を用いたマクロキーのトリガー方法
CN113126860B (zh) 电子装置及屏幕上显示界面的显示方法
CN111782169A (zh) 电脑系统、显示装置及屏幕上显示界面的操作方法
CN113117319B (zh) 电子装置及利用显示画面的热键自动触发方法
US11968481B2 (en) Video playback method and terminal device
TW202038080A (zh) 電腦系統、顯示裝置及螢幕上顯示介面的操作方法
US20230419920A1 (en) Control device and related display system
TWI804116B (zh) 顯示裝置及其畫面回溯方法
CN114697622A (zh) 显示装置及投影式屏幕上显示界面的控制方法
CN109479161B (zh) 显示装置及其分离地显示用户界面的方法
TW202427216A (zh) 電腦裝置及顯示裝置
CN118210391A (zh) 电脑装置及显示装置
TW202225936A (zh) 顯示裝置及投影式螢幕上顯示介面的控制方法
CN114690917A (zh) 显示装置及鼠标灵敏度同步方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant