WO2020063214A1 - 一种基于虚拟输入装置远程操控pc的方法及系统 - Google Patents

一种基于虚拟输入装置远程操控pc的方法及系统 Download PDF

Info

Publication number
WO2020063214A1
WO2020063214A1 PCT/CN2019/101984 CN2019101984W WO2020063214A1 WO 2020063214 A1 WO2020063214 A1 WO 2020063214A1 CN 2019101984 W CN2019101984 W CN 2019101984W WO 2020063214 A1 WO2020063214 A1 WO 2020063214A1
Authority
WO
WIPO (PCT)
Prior art keywords
input interface
virtual
custom
input device
keys
Prior art date
Application number
PCT/CN2019/101984
Other languages
English (en)
French (fr)
Inventor
王政
杨冰雁
刘淑英
柴义磊
姚美龙
Original Assignee
上海达龙信息科技有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 上海达龙信息科技有限公司 filed Critical 上海达龙信息科技有限公司
Priority to US16/764,034 priority Critical patent/US20200364066A1/en
Priority to JP2020568020A priority patent/JP2021517328A/ja
Publication of WO2020063214A1 publication Critical patent/WO2020063214A1/zh
Priority to US17/537,436 priority patent/US11907741B2/en

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44—Arrangements for executing specific programs
    • G06F9/451—Execution arrangements for user interfaces
    • G06F9/452—Remote windowing, e.g. X-Window System, desktop virtualisation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482—Interaction with lists of selectable items, e.g. menus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04845—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04847—Interaction techniques to control parameter settings, e.g. interaction with sliders or dials
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04886—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures by partitioning the display area of the touch-screen or the surface of the digitising tablet into independently controllable areas, e.g. virtual keyboards or menus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44—Arrangements for executing specific programs
    • G06F9/455—Emulation; Interpretation; Software simulation, e.g. virtualisation or emulation of application or operating system execution engines
    • G06F9/45533—Hypervisors; Virtual machine monitors
    • G06F9/45558—Hypervisor-specific management and integration aspects
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/02—Protocols based on web technology, e.g. hypertext transfer protocol [HTTP]
    • H04L67/025—Protocols based on web technology, e.g. hypertext transfer protocol [HTTP] for remote control or remote monitoring of applications
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44—Arrangements for executing specific programs
    • G06F9/455—Emulation; Interpretation; Software simulation, e.g. virtualisation or emulation of application or operating system execution engines
    • G06F9/45533—Hypervisors; Virtual machine monitors
    • G06F9/45558—Hypervisor-specific management and integration aspects
    • G06F2009/45595—Network integration; Enabling network access in virtual machine instances
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/12—Protocols specially adapted for proprietary or special-purpose networking environments, e.g. medical networks, sensor networks, networks in vehicles or remote metering networks
    • H04L67/125—Protocols specially adapted for proprietary or special-purpose networking environments, e.g. medical networks, sensor networks, networks in vehicles or remote metering networks involving control of end-device applications over a network

Definitions

  • the invention relates to a method for controlling a PC, in particular to a method and system for remotely controlling a PC based on a virtual input device.
  • peripherals for input operations such as physical keyboards and mouses, and gamepads.
  • no manufacturer has made an innovative measure on this, that is, when a mobile terminal device is remotely accessing and controlling a PC remote desktop, a PC can be controlled through a virtual input device, so that it can be used at any time without peripherals. Seamlessly switch between mobile terminal equipment and PC.
  • the present invention provides a method that enables a user to remotely access a PC desktop through a mobile terminal device and perform related operations without requiring the user to purchase peripherals.
  • a method and system for remotely controlling a PC based on a virtual input device is provided.
  • the present invention provides a method for remotely controlling a PC based on a virtual input device, including the following steps:
  • Step 1 After the mobile terminal device logs in to the PC remotely, start a virtual input device in the mobile terminal device;
  • Step 2 After selecting an initial input interface or a custom input interface in the virtual input device, click a button in the input interface and call a virtual key code corresponding to the button according to the input request to complete the corresponding control.
  • step 2 the selection between an initial input interface and a custom input interface is implemented through the following steps:
  • Step 2a After logging into the virtual input device, enter the input interface selection page;
  • Step 2b After entering the input interface selection page, you need to select the initial input interface or the current custom input interface. If you choose to use the initial input interface, go to step 2c, otherwise go to step 2d;
  • Step 2c After selecting the initial input interface, use the keys in the initial input interface to directly go to step 2h;
  • Step 2d If you are not satisfied with the initial input interface or the current custom input interface, you can reset the new custom input interface.
  • Step 2e After setting the new custom input interface, you can choose to abandon the current operation and go directly to step 2g. If you choose to save the current setting, go to step 2f;
  • Step 2f The user saves the custom input interface that has been edited and set a name, and proceeds to step 2h.
  • Step 2g Exit the virtual input device
  • Step 2h Use a virtual input device.
  • step 2d a new custom input interface is newly set through the following steps:
  • a custom input interface of the virtual input device is generated.
  • step 2e after setting a new custom input interface, the new custom input interface may be sent to the custom interface server for other users. Users choose to download and use, and comment, share and edit.
  • the layout of the required keys includes setting the position of the required keys in the input interface, the size of the required keys, and the required The color of the keys and the shape of the required keys;
  • Layout of the display effect of the input interface includes setting the style of the input interface.
  • the custom input interface includes at least one of a physical keyboard, a physical mouse, or a physical handle;
  • the physical keyboard includes at least one of alphabet keys, function keys, direction keys, and number keys;
  • the physical mouse includes a button and / or a scroll wheel
  • the physical handle includes a button and / or a joystick.
  • the invention also provides a system for remotely controlling a PC based on a virtual input device, including a mobile terminal device and a virtual input device;
  • a virtual key code corresponding to the key is called to complete the corresponding manipulation by clicking a button in the input interface and according to the input request.
  • the custom input interface includes at least one of a physical keyboard, a physical mouse, or a physical handle;
  • the physical keyboard includes at least one of alphabet keys, function keys, direction keys, and number keys;
  • the physical mouse includes a button and / or a scroll wheel
  • the physical handle includes a button and / or a joystick.
  • the mobile terminal device includes a smart phone, a tablet computer, and other touch smart mobile devices.
  • the above system further includes a custom interface server. After the new custom input interface is set, the new custom input interface is sent to the custom interface server through the virtual input device for other users to select and download. And comment, share and edit.
  • the present invention has the following advantages:
  • the invention aims at the short board of the existing virtual input device, and solves the user's use requirements. From the aspects of input devices and user personality required by each application on the PC, the user can remotely access the PC desktop through a mobile terminal device and perform related Control, and does not require users to purchase peripherals, has the characteristics of saving time, money, available anytime, anywhere, and can also meet the personalized needs of users.
  • FIG. 1 is a flowchart of a method part of the present invention
  • FIG. 4 is a structural block diagram of a system part of the present invention.
  • the present invention provides a method for remotely controlling a PC based on a virtual input device, including the following steps:
  • Step 1 After the mobile terminal device logs in to the PC remotely, start a virtual input device in the mobile terminal device;
  • Step 2 After selecting an initial input interface or a custom input interface in the virtual input device, click a button in the input interface and call a virtual key code corresponding to the button according to the input request to complete the corresponding control.
  • step 2 the selection between the initialization input interface and the custom input interface is implemented through the following steps:
  • Step 2a After logging into the virtual input device, enter the input interface selection page;
  • Step 2b After entering the input interface selection page, you need to select the initial input interface or the current custom input interface. If you choose to use the initial input interface, go to step 2c, otherwise go to step 2d;
  • Step 2c After selecting the initial input interface, use the keys in the initial input interface to directly go to step 2h;
  • Step 2d If you are not satisfied with the initial input interface or the current custom input interface, you can reset the new custom input interface.
  • Step 2e After setting the new custom input interface, you can choose to abandon the current operation and go directly to step 2g. If you choose to save the current setting, go to step 2f;
  • Step 2f The user saves the custom input interface that has been edited and set a name, and proceeds to step 2h.
  • Step 2g Exit the virtual input device
  • Step 2h Use a virtual input device.
  • step 2b and step 2d the current custom input interface and the new custom input interface are generated through the following steps:
  • a custom input interface of the virtual input device is generated.
  • the new custom input interface may be sent to the custom interface server.
  • the layout of the required keys includes setting the position of the required keys in the input interface, the size of the required keys, the color of the required keys, and the shape of the required keys.
  • Laying out the display effect of the input interface includes setting the style of the input interface.
  • the style of the input interface includes the color, size, and shape of the input interface.
  • the custom input interface includes at least one of a physical keyboard, a physical mouse, or a physical handle;
  • the physical keyboard includes at least one of alphabet keys, function keys, direction keys, and number keys;
  • the physical mouse includes buttons and / or a scroll wheel
  • the physical handle includes buttons and / or a joystick.
  • the present invention also provides a system for remotely controlling a PC based on a virtual input device, including a mobile terminal device 1 and a virtual input device 2;
  • the virtual input device 2 is started in the mobile terminal device 1;
  • the selection between the initial input interface and the custom input interface is implemented through the following steps:
  • Both the current custom input interface and the new custom input interface are generated by the following steps:
  • a custom input interface of the virtual input device is generated.
  • the layout of the required keys includes setting the position of the required keys in the input interface, the size of the required keys, the color of the required keys, and the shape of the required keys.
  • Laying out the display effect of the input interface includes setting the style of the input interface.
  • the style of the input interface includes the color, size, and shape of the input interface.
  • the custom input interface includes at least one of a physical keyboard, a physical mouse, or a physical handle;
  • the physical keyboard includes at least one of alphabet keys, function keys, direction keys, and number keys;
  • the physical mouse includes buttons and / or a scroll wheel
  • the physical handle includes buttons and / or a joystick.
  • the invention enables the mobile terminal device to remotely control various applications of the PC under the condition of no peripherals.
  • mobile terminal devices include, but are not limited to, smart phones, tablet computers, and other touch smart devices.
  • the virtual input device in the present invention provides an initial input interface composed of a preset soft keyboard, various game universal key positions, and a single game dedicated key position, and a self-formed interface formed by a user according to actual needs for laying out the required keys Define the input interface to meet the various needs of users.
  • the virtual input device can perform information interaction with the custom interface server, the user can upload the custom input interface that he has created and is satisfied with the use effect to the custom interface server through the virtual input device, and other users can download directly from the device Use or edit and save it before using it, and like and comment on the original uploaded work.
  • the user-defined virtual input device keys include setting the required key content, number, position (can be dragged to any position on the screen without limitation), size, layout, and key mode, etc., and the color skin of the keys Wait for personalized settings to be saved. If you want to modify the settings after saving, you can continue to edit based on the original save.
  • the purpose of the present invention is to develop for users who use a mobile terminal device to remotely access a PC desktop but lack peripherals.
  • a small number of mobile custom virtual keyboards are only suitable for mobile applications, such as social chat, network access, and various mobile games are equipped with game operating devices developed by their game manufacturers, so it is currently known
  • the customizable keyboard of the mobile terminal is not widely used and has strong limitations.
  • the implementation of the present invention provides a user with a custom input interface for remotely accessing a PC end without a peripheral, including a virtual keyboard (including function keys, letter keys, direction keys, symbol keys, number keys, etc.), a virtual mouse, and a virtual handle.
  • a virtual keyboard including function keys, letter keys, direction keys, symbol keys, number keys, etc.
  • a virtual mouse including a virtual mouse, and a virtual handle.

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • User Interface Of Digital Computer (AREA)
  • Input From Keyboards Or The Like (AREA)

Abstract

本发明提供一种基于虚拟输入装置远程操控PC的方法，包括：移动终端设备远程登录PC端后，在移动终端设备中启动虚拟输入装置；在虚拟输入装置中选择初始化输入界面或自定义输入界面后，通过点击输入界面中的按键，并根据输入请求调用与该按键对应的虚拟键码以完成相应的操控。实施上述方法的系统，包括移动终端设备与虚拟输入装置；所述移动终端设备远程登录PC端后，在移动终端设备中启动虚拟输入装置；所述虚拟输入装置中选择初始化输入界面或自定义输入界面后，通过点击输入界面中的按键，并根据输入请求调用与该按键对应的虚拟键码以完成相应的操控。本发明使得用户可以通过移动终端设备远程访问PC桌面，并进行相关操控，且无需用户购买外设。

Description

一种基于虚拟输入装置远程操控PC的方法及系统 技术领域
本发明涉及一种操控PC的方法，尤其是一种基于虚拟输入装置远程操控PC的方法及系统。
背景技术
随着科技与技术的不断进步，智能移动终端设备的不断普及，各种厂商生产的手机、平板、穿戴式智能设备层出不穷，但无一例外的都采用的软键盘实现用户对于终端应用的信息输入。用户通过智能移动终端设备的软键盘来进行按键操作，但各类软键盘的布局及设计大同小异，也有个别软件实现了软键盘的自定义，但凡此种种技术的实现都针对于移动端应用；目前随着云计算的发展，现已有个别厂商实现了使用移动终端设备远程访问PC桌面，可实现像操作本地PC一样使用移动终端设备对PC桌面应用进行操作，例如PC游戏、社交软件以及办公软件等等，但目前对于此项新业务板块的发展，各厂商都采用使用外设来进行输入操作，例如实体键鼠、游戏手柄。目前尚无一厂商对此做出创新性举措，即开发一款当移动终端设备在远程访问操控PC远程桌面时，可通过虚拟输入装置对PC端进行操控，以实现无需外设、便可以随时随地实现移动终端设备与PC端的无缝切换。
发明内容
针对上述问题中存在的不足之处，本发明提供一种使得用户可以通过移动终端设备远程访问PC桌面，并进行相关操控，且无需用户购买外设，具有省时、省钱、随时随地可用特点的一种基于虚拟输入装置远程操控PC的方法及系统。
为实现上述目的，本发明提供一种基于虚拟输入装置远程操控PC的方法，包括以下步骤：
步骤1、移动终端设备远程登录PC端后，在移动终端设备中启动虚拟输入装置；
步骤2、在虚拟输入装置中选择初始化输入界面或自定义输入界面后，通过点击输入界面中的按键，并根据输入请求调用与该按键对应的虚拟键码以完成相应的操控。
上述的一种基于虚拟输入装置远程操控PC的方法，其中，在步骤2中，通过以下步骤实现初始化输入界面与自定义输入界面之间的选择：
步骤2a、登录虚拟输入装置后，进入输入界面选择页面；
步骤2b、进入输入界面选择页面后，需要选择初始化输入界面或当前的自定义输入界面，若选择使用初始化输入界面，则进入步骤2c，否则进入步骤2d；
步骤2c，选择使用初始化输入界面后，使用初始化输入界面中的按键，直接进入步骤2h；
步骤2d，若对初始化输入界面不满意或对当前的自定义输入界面不满意，则可以重新设置新的自定义输入界面；
步骤2e，在设置完毕新的自定义输入界面后，可以选择放弃当前操作直接进入步骤2g，若选择保存当前设置则进入步骤2f；
步骤2f、用户将已编辑设置好的自定义输入界面进行命名保存，进入步骤2h；
步骤2g、退出虚拟输入装置；
步骤2h、使用虚拟输入装置。
上述的一种基于虚拟输入装置远程操控PC的方法，其中，在步骤2d中，通过以下步骤重新设置新的自定义输入界面：
在虚拟输入装置的编辑页面中选择多个所需按键；
在编辑页面中，根据自身需求设置所需按键的名称、对多个所需按键、以及对输入界面的显示效果进行布局；
对编辑好的多个所需按键与输入界面的显示效果进行保存后，以生成虚拟输入装置的自定义输入界面。
上述的一种基于虚拟输入装置远程操控PC的方法，其中，在步骤2e中，在设置完毕新的自定义输入界面后，可以将新的自定义输入界面发送至自定义界面服务器，以供其他用户进行选择下载使用并评论、分享及编辑。
上述的一种基于虚拟输入装置远程操控PC的方法，其中，在自定义输入界面中，对所需按键进行的布局包括设置所需按键在输入界面中的位置、所需按键的大小、所需按键的颜色、及所需按键的形状；对输入界面的显示效果进行布局包括设置输入界面的样式。
上述的一种基于虚拟输入装置远程操控PC的方法，其中，所述自定义输 入界面包括实体键盘、实体鼠标或实体手柄中的至少一种；
所述实体键盘包括字母按键、功能按键、方向键及数字键等按键中的至少一种；
所述实体鼠标包括按键和/或滚轮；
所述实体手柄包括按键和/或摇杆。
本发明还提供一种基于虚拟输入装置远程操控PC的系统，包括移动终端设备与虚拟输入装置；
所述移动终端设备远程登录PC端后，在移动终端设备中启动虚拟输入装置；
所述虚拟输入装置中选择初始化输入界面或自定义输入界面后，通过点击输入界面中的按键，并根据输入请求调用与该按键对应的虚拟键码以完成相应的操控。
上述的系统，其中，所述自定义输入界面包括实体键盘、实体鼠标或实体手柄中的至少一种；
所述实体键盘包括字母按键、功能按键、方向键及数字键等按键中的至少一种；
所述实体鼠标包括按键和/或滚轮；
所述实体手柄包括按键和/或摇杆。上述的系统，其中，所述移动终端设备包括智能手机、平板电脑、以及其他触摸式智能移动设备。
上述的系统，其中，还包括自定义界面服务器，在设置完毕新的自定义输入界面后，通过虚拟输入装置将新的自定义输入界面发送至自定义界面服务器，以供其他用户进行选择下载使用并评论、分享及编辑。
与现有技术相比，本发明具有以下优点：
本发明针对现有虚拟输入装置的短板，解决了用户的使用需求，从PC端各应用所需输入设备、用户个性等方面考虑，使得用户可以通过移动终端设备远程访问PC桌面，并进行相关操控，且无需用户购买外设，具有省时、省钱、随时随地可用特点，还可达到用户个性化需求。
附图说明
图1为本发明的方法部分的流程图；
图2为本发明中对两种输入界面进行选择的流程图；
图3为本发明中重新设置新的自定义输入界面的流程图；
图4为本发明的系统部分的结构框图。
主要附图标记说明如下：
1-移动终端设备；2-虚拟输入装置；3-PC端；4-自定义界面服务器
具体实施方式
如图1至图3所示，本发明提供一种基于虚拟输入装置远程操控PC的方法，包括以下步骤：
步骤1、移动终端设备远程登录PC端后，在移动终端设备中启动虚拟输入装置；
步骤2、在虚拟输入装置中选择初始化输入界面或自定义输入界面后，通过点击输入界面中的按键，并根据输入请求调用与该按键对应的虚拟键码以完成相应的操控。
其中，在步骤2中，通过以下步骤实现初始化输入界面与自定义输入界面之间的选择：
步骤2a、登录虚拟输入装置后，进入输入界面选择页面；
步骤2b、进入输入界面选择页面后，需要选择初始化输入界面或当前的自定义输入界面，若选择使用初始化输入界面，则进入步骤2c，否则进入步骤2d；
步骤2c，选择使用初始化输入界面后，使用初始化输入界面中的按键，直接进入步骤2h；
步骤2d，若对初始化输入界面不满意或对当前的自定义输入界面不满意，则可以重新设置新的自定义输入界面；
步骤2e，在设置完毕新的自定义输入界面后，可以选择放弃当前操作直接进入步骤2g，若选择保存当前设置则进入步骤2f；
步骤2f、用户将已编辑设置好的自定义输入界面进行命名保存，进入步骤2h；
步骤2g、退出虚拟输入装置；
步骤2h、使用虚拟输入装置。
另外，在步骤2b和步骤2d中，当前的自定义输入界面与新的自定义输入界面都是通过以下步骤生成：
在虚拟输入装置的编辑页面中选择多个所需按键；
在编辑页面中，根据自身需求设置所需按键的名称、对多个所需按键、以及对输入界面的显示效果进行布局；
对编辑好的多个所需按键与输入界面的显示效果进行保存后，以生成虚拟输入装置的自定义输入界面。
另外，在步骤2e中，在设置完毕新的自定义输入界面后，可以将新的自定义输入界面发送至自定义界面服务器。
在自定义输入界面中，对所需按键进行的布局包括设置所需按键在输入界面中的位置、所需按键的大小、所需按键的颜色、及所需按键的形状。
对输入界面的显示效果进行布局包括设置输入界面的样式。
输入界面的样式包括输入界面的颜色、尺寸、形状等。
另外，自定义输入界面包括实体键盘、实体鼠标或实体手柄中的至少一种；
实体键盘包括字母按键、功能按键、方向键及数字键等按键中的至少一种；
实体鼠标包括按键和/或滚轮；
实体手柄包括按键和/或摇杆。
如图4所示，本发明还提供一种基于虚拟输入装置远程操控PC的系统，包括移动终端设备1与虚拟输入装置2；
移动终端设备1在远程登录PC端3后，在移动终端设备1中启动虚拟输入装置2；
虚拟输入装置中选择初始化输入界面或自定义输入界面后，通过点击输入界面中的按键，并根据输入请求调用与该按键对应的虚拟键码以完成相应的操控。
在虚拟输入装置中，通过以下步骤实现初始化输入界面与自定义输入界面之间的选择：
登录虚拟输入装置后，进入输入界面选择页面；
进入输入界面选择页面后，需要选择初始化输入界面或当前的自定义输入界面，若选择使用初始化输入界面，则在点击输入界面选择页面中的初始化输入界面选择按键，从而进入初始化输入界面；
若对初始化输入界面不满意或对当前的自定义输入界面不满意，则可以 重新设置新的自定义输入界面；
在设置完毕新的自定义输入界面后，可以选择放弃当前操作直接退出虚拟输入装置；
若选择保存当前设置则用户将已编辑设置好的自定义输入界面进行命名保存，在保存后，可直接选择进入自定义输入界面的使用状态、或在下次进入虚拟输入装置时选择直接使用自定义输入界面或编辑自定义输入界面。
当前的自定义输入界面与新的自定义输入界面都是通过以下步骤生成：
在虚拟输入装置的编辑页面中选择多个所需按键；
在编辑页面中，根据自身需求设置所需按键的名称、对多个所需按键、以及对输入界面的显示效果进行布局；
对编辑好的多个所需按键与输入界面的显示效果进行保存后，以生成虚拟输入装置的自定义输入界面。
在自定义输入界面中，对所需按键进行的布局包括设置所需按键在输入界面中的位置、所需按键的大小、所需按键的颜色、及所需按键的形状。
对输入界面的显示效果进行布局包括设置输入界面的样式。输入界面的样式包括输入界面的颜色、尺寸、形状等。
另外，自定义输入界面包括实体键盘、实体鼠标或实体手柄中的至少一种；
实体键盘包括字母按键、功能按键、方向键及数字键等按键中的至少一种；
实体鼠标包括按键和/或滚轮；
实体手柄包括按键和/或摇杆。
通过本发明使得移动终端设备可以在无外设条件下远程操控PC各类应用。其中，移动终端设备包括但不限于智能手机、平板电脑以及其他触摸式智能设备。
本发明中的虚拟输入装置提供由预设的软键盘、各类游戏通用键位及单一游戏专用键位所构成的初始化输入界面，以及用户根据实际需求对所需按键进行布局后而形成的自定义输入界面，以满足用户各类需求。
还包括自定义界面服务器4，在设置完毕新的自定义输入界面后，通过虚拟输入装置2将新的自定义输入界面发送至自定义界面服务器4。
由于虚拟输入装置可以与自定义界面服务器进行信息交互，因此，用户 可将自己创建并对使用效果满意的自定义输入界面通过虚拟输入装置上传至自定义界面服务器，其他用户可从装置上直接下载使用或进行编辑操作保存后再使用，并对原上传作品进行点赞、评价等操作。
用户通过自定义创建的虚拟输入装置按键包含对所需按键内容、个数、位置(可以拖动到屏幕任意位置不限定)、大小、布局和按键方式等进行设置，还可对按键的颜色皮肤等进行个性化设置保存，保存后若想修改设置还可在原有保存基础上继续编辑操作。
本发明的目的在于为使用移动终端设备远程访问PC桌面却缺少外设的用户而开发。在目前现有技术中，少数的移动端自定义虚拟键盘只适用于移动端应用，例如社交聊天，网络访问，且各类手游都配备其游戏厂商自行开发的游戏操作装置，故目前已知的移动端自定义键盘应用范围不广，具有很强的局限性。本发明的实现为用户提供了在无外设情况下远程访问PC端的自定义输入界面，包含虚拟键盘(包含功能键、字母键、方向键、符号键、数字键等)、虚拟鼠标、虚拟手柄，实现社交、网络访问、PC游戏的无障碍使用，且还能根据用户使用PC的习惯，特定任务，手感等进行自定义设置，达到用户个性化需求，使得用户更加方便灵活的进行操作。
以上所述仅为本发明的较佳实施例，对发明而言仅仅是说明性的，而非限制性的。本专业技术人员理解，在发明权利要求所限定的精神和范围内可对其进行许多改变，修改，甚至等效，但都将落入本发明的保护范围内。

Claims (10)

  1. 一种基于虚拟输入装置远程操控PC的方法，包括以下步骤：
    步骤1、移动终端设备远程登录PC端后，在移动终端设备中启动虚拟输入装置；
    步骤2、在虚拟输入装置中选择初始化输入界面或自定义输入界面后，通过点击输入界面中的按键，并根据输入请求调用与该按键对应的虚拟键码以完成相应的操控。
  2. 根据权利要求1所述的一种基于虚拟输入装置远程操控PC的方法，其特征在于，在步骤2中，通过以下步骤实现初始化输入界面与自定义输入界面之间的选择：
    步骤2a、登录虚拟输入装置后，进入输入界面选择页面；
    步骤2b、进入输入界面选择页面后，需要选择初始化输入界面或当前的自定义输入界面，若选择使用初始化输入界面，则进入步骤2c，否则进入步骤2d；
    步骤2c，选择使用初始化输入界面后，使用初始化输入界面中的按键，直接进入步骤2h；
    步骤2d，若对初始化输入界面不满意或对当前的自定义输入界面不满意，则可以重新设置新的自定义输入界面；
    步骤2e，在设置完毕新的自定义输入界面后，可以选择放弃当前操作直接进入步骤2g，若选择保存当前设置则进入步骤2f；
    步骤2f、用户将已编辑设置好的自定义输入界面进行命名保存，进入步骤2h；
    步骤2g、退出虚拟输入装置；
    步骤2h、使用虚拟输入装置。
  3. 根据权利要求2所述的一种基于虚拟输入装置远程操控PC的方法，其特征在于，在步骤2b和步骤2d中，当前的自定义输入界面与新的自定义输入界面都是通过以下步骤生成：
    在虚拟输入装置的编辑页面中选择多个所需按键；
    在编辑页面中，根据自身需求设置所需按键的名称、对多个所需按键、以及对输入界面的显示效果进行布局；
    对编辑好的多个所需按键与输入界面的显示效果进行保存后，以生成虚拟输入装置的自定义输入界面。
  4. 根据权利要求3所述的一种基于虚拟输入装置远程操控PC的方法，其特征在于，在步骤2e中，在设置完毕新的自定义输入界面后，可以将新的自定义输入界面发送至自定义界面服务器，以供其他用户进行选择下载使用并评论、分享及编辑。
  5. 根据权利要求4所述的一种基于虚拟输入装置远程操控PC的方法，其特征在于，在自定义输入界面中，对所需按键进行的布局包括设置所需按键在输入界面中的位置、所需按键的大小、所需按键的颜色、及所需按键的形状等；
    对输入界面的显示效果进行布局包括设置输入界面的样式。
  6. 根据权利要求1至5中的任一所述的一种基于虚拟输入装置远程操控PC的方法，其特征在于，所述自定义输入界面包括实体键盘、实体鼠标或实体手柄中的至少一种；
    所述实体键盘包括字母按键、功能按键、方向键及数字键等按键中的至少一种；
    所述实体鼠标包括按键和/或滚轮；
    所述实体手柄包括按键和/或摇杆。
  7. 一种实施权利要求1所述的基于虚拟输入装置远程操控PC的方法的系统，其特征在于，包括移动终端设备与虚拟输入装置；
    所述移动终端设备远程登录PC端后，在所述移动终端设备中启动虚拟输入装置；
    所述虚拟输入装置中选择初始化输入界面或自定义输入界面后，通过点击输入界面中的按键，并根据输入请求调用与该按键对应的虚拟键码以完成相应的操控。
  8. 根据权利要求7中所述的系统，其特征在于，所述自定义输入界面包括实体键盘、实体鼠标或实体手柄中的至少一种；
    所述实体键盘包括字母按键、功能按键、方向键及数字键等按键中的至少一种；
    所述实体鼠标包括按键和/或滚轮；
    所述实体手柄包括按键和/或摇杆。
  9. 根据权利要求7中所述的系统，其特征在于，所述移动终端设备包括智能手机、平板电脑、以及其他触摸式智能移动设备。
  10. 根据权利要求7中所述的系统，其特征在于，还包括自定义界面服务器，在设置完毕新的自定义输入界面后，通过虚拟输入装置将新的自定义输入界面发送至自定义界面服务器以供其他用户进行选择下载使用并评论、分享及编辑。
PCT/CN2019/101984 2018-09-30 2019-08-22 一种基于虚拟输入装置远程操控pc的方法及系统 WO2020063214A1 (zh)

Priority Applications (3)

Application Number Priority Date Filing Date Title
US16/764,034 US20200364066A1 (en) 2018-09-30 2019-08-22 Method and system for remotely controlling personal computer based on virtual input device
JP2020568020A JP2021517328A (ja) 2018-09-30 2019-08-22 仮想入力装置によりｐｃをリモートコントロールする方法及びシステム
US17/537,436 US11907741B2 (en) 2018-09-30 2021-11-29 Virtual input device-based method and system for remotely controlling PC

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
CN201811154833.8A CN109358937A (zh) 2018-09-30 2018-09-30 一种基于虚拟输入装置远程操控pc的方法及系统
CN201811154833.8 2018-09-30

Related Child Applications (2)

Application Number Title Priority Date Filing Date
US16/764,034 A-371-Of-International US20200364066A1 (en) 2018-09-30 2019-08-22 Method and system for remotely controlling personal computer based on virtual input device
US17/537,436 Continuation-In-Part US11907741B2 (en) 2018-09-30 2021-11-29 Virtual input device-based method and system for remotely controlling PC

Publications (1)

Publication Number Publication Date
WO2020063214A1 true WO2020063214A1 (zh) 2020-04-02

Family

ID=65348609

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/CN2019/101984 WO2020063214A1 (zh) 2018-09-30 2019-08-22 一种基于虚拟输入装置远程操控pc的方法及系统

Country Status (4)

Country Link
US (2) US20200364066A1 (zh)
JP (1) JP2021517328A (zh)
CN (1) CN109358937A (zh)
WO (1) WO2020063214A1 (zh)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109358937A (zh) 2018-09-30 2019-02-19 上海达龙信息科技有限公司 一种基于虚拟输入装置远程操控pc的方法及系统
CN110175059A (zh) * 2019-04-16 2019-08-27 上海达龙信息科技有限公司 基于陀螺仪的远程桌面操控方法及系统、存储介质、服务器
CN111103532A (zh) * 2019-12-13 2020-05-05 青岛海信智慧家居系统股份有限公司 一种智能按键面板检测触点的方法及装置
CN113918080B (zh) * 2021-09-09 2024-03-29 西安震有信通科技有限公司 一种虚拟键盘的控制方法、系统及计算机可读存储介质

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2011123840A2 (en) * 2010-04-01 2011-10-06 Citrix Systems, Inc. Interacting with remote applications displayed within a virtual desktop of a tablet computing device
CN103513896A (zh) * 2012-06-20 2014-01-15 Tcl集团股份有限公司 一种自定义电子终端的虚拟键盘的方法及系统
CN103607618A (zh) * 2013-11-21 2014-02-26 乐视致新电子科技（天津）有限公司 智能电视中游戏控制方法和装置
CN109358937A (zh) * 2018-09-30 2019-02-19 上海达龙信息科技有限公司 一种基于虚拟输入装置远程操控pc的方法及系统

Family Cites Families (33)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3546337B2 (ja) * 1993-12-21 2004-07-28 ゼロックス コーポレイション 計算システム用ユーザ・インタフェース装置及びグラフィック・キーボード使用方法
US7814439B2 (en) * 2002-10-18 2010-10-12 Autodesk, Inc. Pan-zoom tool
JP2004341813A (ja) * 2003-05-15 2004-12-02 Casio Comput Co Ltd 入力装置表示制御方法及び入力装置
CN1786887A (zh) * 2004-12-08 2006-06-14 上海环达计算机科技有限公司 在个人数字助理上实现个人计算机远程操作的方法
FR2891928B1 (fr) * 2005-10-11 2008-12-19 Abderrahim Ennadi Clavier a ecran tactile universel multilingue et multifonction
US8413075B2 (en) * 2008-01-04 2013-04-02 Apple Inc. Gesture movies
US8140593B2 (en) * 2008-05-15 2012-03-20 Microsoft Corporation Data viewer management
US20100192102A1 (en) * 2009-01-29 2010-07-29 International Business Machines Corporation Displaying radial menus near edges of a display area
US20140055400A1 (en) * 2011-05-23 2014-02-27 Haworth, Inc. Digital workspace ergonomics apparatuses, methods and systems
US9582187B2 (en) * 2011-07-14 2017-02-28 Microsoft Technology Licensing, Llc Dynamic context based menus
KR101811755B1 (ko) * 2011-07-15 2018-01-26 엘지전자 주식회사 이동 단말기
US9116611B2 (en) * 2011-12-29 2015-08-25 Apple Inc. Devices, methods, and graphical user interfaces for providing multitouch inputs and hardware-based features using a single touch input
KR20130109389A (ko) * 2012-03-27 2013-10-08 박승배 개인화 가상키보드 제공방법
JP2013219610A (ja) * 2012-04-10 2013-10-24 Asuko:Kk 情報処理装置、情報処理方法およびキーボード作成システム
JP6478181B2 (ja) * 2012-09-10 2019-03-06 三星電子株式会社Ｓａｍｓｕｎｇ Ｅｌｅｃｔｒｏｎｉｃｓ Ｃｏ．，Ｌｔｄ． 携帯端末と外部表示装置の連結運用方法及びこれを支援する装置
CN102866848B (zh) * 2012-09-13 2015-01-21 电子科技大学 基于wifi的云教室智能教鞭的控制方法
US9195368B2 (en) * 2012-09-13 2015-11-24 Google Inc. Providing radial menus with touchscreens
JP6205568B2 (ja) * 2013-01-16 2017-10-04 株式会社日本デジタル研究所 リモートアクセス制御システム、方法、およびプログラム
KR20140132917A (ko) * 2013-05-09 2014-11-19 삼성전자주식회사 휴대 전자기기와 연결 가능한 부가 장치를 통한 표시 방법 및 장치
CN103345303B (zh) * 2013-06-19 2016-10-05 华南理工大学 一种用智能移动设备全替代鼠标键盘的系统及实现方法
KR101558354B1 (ko) * 2013-11-13 2015-10-20 현대자동차 주식회사 차량용 블라인드 콘트롤 시스템
US20150138089A1 (en) * 2013-11-15 2015-05-21 TabiTop, LLC Input devices and methods
US9197697B2 (en) * 2014-03-10 2015-11-24 Gazoo, Inc. Cloud computing system and method
CN104281385B (zh) * 2014-09-17 2017-03-15 北京搜狗科技发展有限公司 输入法虚拟键盘的调整方法和输入法装置
US20160371048A1 (en) * 2015-06-16 2016-12-22 T1V, Inc. Remote gesture control, input monitor, systems including the same, and associated methods
CN106802762B (zh) * 2015-11-26 2020-09-11 思杰系统有限公司 在虚拟会话中同步服务器侧键盘布局与客户端侧布局
CN105653189A (zh) * 2015-12-28 2016-06-08 网宿科技股份有限公司 基于智能终端的虚拟主机手柄的方法及系统
CN106227416A (zh) * 2016-08-05 2016-12-14 上海贝锐信息科技有限公司 一种远程桌面虚拟鼠标控制方法及系统
US11169831B1 (en) * 2017-11-27 2021-11-09 Parallels International Gmbh System and method for providing a customized graphical user interface based on user inputs
US11579830B2 (en) * 2018-10-31 2023-02-14 International Business Machines Corporation Displaying a window of a remote desktop computer on a mobile device with a native layout
US11093046B2 (en) * 2019-12-16 2021-08-17 Microsoft Technology Licensing, Llc Sub-display designation for remote content source device
AU2021211470A1 (en) * 2020-01-22 2022-09-15 Methodical Mind, Llc. Graphical user interface system
US11860766B2 (en) * 2021-10-08 2024-01-02 Microsoft Technology Licensing, Llc What-if analysis for notebooks

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2011123840A2 (en) * 2010-04-01 2011-10-06 Citrix Systems, Inc. Interacting with remote applications displayed within a virtual desktop of a tablet computing device
CN103513896A (zh) * 2012-06-20 2014-01-15 Tcl集团股份有限公司 一种自定义电子终端的虚拟键盘的方法及系统
CN103607618A (zh) * 2013-11-21 2014-02-26 乐视致新电子科技（天津）有限公司 智能电视中游戏控制方法和装置
CN109358937A (zh) * 2018-09-30 2019-02-19 上海达龙信息科技有限公司 一种基于虚拟输入装置远程操控pc的方法及系统

Also Published As

Publication number Publication date
US20200364066A1 (en) 2020-11-19
CN109358937A (zh) 2019-02-19
US20220188054A1 (en) 2022-06-16
US11907741B2 (en) 2024-02-20
JP2021517328A (ja) 2021-07-15

Similar Documents

Publication Publication Date Title
WO2020063214A1 (zh) 一种基于虚拟输入装置远程操控pc的方法及系统
US10673691B2 (en) User interaction platform
US20070013665A1 (en) Method for shifting a shortcut in an electronic device, a display unit of the device, and an electronic device
US20140329593A1 (en) Text entry using game controller
JP2008503007A (ja) ポインティング装置を備えた移動端末のユーザインタフェース駆動方法及び装置
TW201337711A (zh) 呈現視覺介面內容的系統及其方法
CN105630375A (zh) 基于图形界面的信息输入的辅助实现方法和系统
WO1998043202A1 (en) Button wheel pointing device for notebook pcs
US20080211698A1 (en) Keyboard with Variable Markings and Layouts
US8327294B2 (en) Method and system to reduce workload and skills required in usage of mouse or other pointing devices
WO2013149421A1 (zh) 一种处理键盘输入的方法及设备
CN113805753A (zh) 文字编辑方法、装置和电子设备
CN209015125U (zh) 一种触控显示屏键盘
CN112764618A (zh) 界面操作方法、装置、设备及存储介质
WO2020034602A1 (zh) 模拟触控方法以及装置、系统
KR20200069703A (ko) 가상키보드에 입력창을 동적으로 변화시키는 입력시스템 및 입력방법
CA2363978A1 (en) Emoticon keyboard and input device
US20080218479A1 (en) Device Having a Joystick Keypad
KR20110020053A (ko) 개인용 컴퓨터 무선 제어 시스템 및 무선 입력 장치
CN113680051A (zh) 游戏的控制方法、装置、设备及存储介质
JP6344355B2 (ja) 電子端末、及びその制御方法とプログラム
KR20050015235A (ko) 진동 장갑형 게임 컨트롤러
JP6341171B2 (ja) 電子端末、及びその制御方法とプログラム
CN112783373A (zh) 屏幕式多功能键盘
WO2020034603A1 (zh) 模拟触控方法以及触控装置组件、系统

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 19865895

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2020568020

Country of ref document: JP

Kind code of ref document: A

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 19865895

Country of ref document: EP

Kind code of ref document: A1