CN112534390A - 用于提供虚拟输入工具的电子装置及其方法 - Google Patents
用于提供虚拟输入工具的电子装置及其方法 Download PDFInfo
- Publication number
- CN112534390A CN112534390A CN201980051477.3A CN201980051477A CN112534390A CN 112534390 A CN112534390 A CN 112534390A CN 201980051477 A CN201980051477 A CN 201980051477A CN 112534390 A CN112534390 A CN 112534390A
- Authority
- CN
- China
- Prior art keywords
- electronic device
- input
- processor
- virtual
- display
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title description 27
- 230000004044 response Effects 0.000 claims abstract description 90
- 238000004891 communication Methods 0.000 claims abstract description 71
- 230000015654 memory Effects 0.000 claims abstract description 28
- 230000008859 change Effects 0.000 claims description 61
- 238000010586 diagram Methods 0.000 description 46
- 230000000007 visual effect Effects 0.000 description 16
- 230000006870 function Effects 0.000 description 9
- 230000003993 interaction Effects 0.000 description 9
- 230000008569 process Effects 0.000 description 8
- 241000699666 Mus <mouse, genus> Species 0.000 description 7
- 230000014509 gene expression Effects 0.000 description 7
- 230000009471 action Effects 0.000 description 5
- 238000012545 processing Methods 0.000 description 4
- 241001422033 Thestylus Species 0.000 description 2
- 238000002583 angiography Methods 0.000 description 2
- 238000002591 computed tomography Methods 0.000 description 2
- 238000011161 development Methods 0.000 description 2
- 230000005611 electricity Effects 0.000 description 2
- 238000007667 floating Methods 0.000 description 2
- 238000002595 magnetic resonance imaging Methods 0.000 description 2
- 238000012806 monitoring device Methods 0.000 description 2
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 description 2
- WQZGKKKJIJFFOK-GASJEMHNSA-N Glucose Natural products OC[C@H]1OC(O)[C@H](O)[C@@H](O)[C@@H]1O WQZGKKKJIJFFOK-GASJEMHNSA-N 0.000 description 1
- 241000699670 Mus sp. Species 0.000 description 1
- 230000001133 acceleration Effects 0.000 description 1
- 238000013473 artificial intelligence Methods 0.000 description 1
- 230000003190 augmentative effect Effects 0.000 description 1
- 239000008280 blood Substances 0.000 description 1
- 210000004369 blood Anatomy 0.000 description 1
- 230000036772 blood pressure Effects 0.000 description 1
- 230000036760 body temperature Effects 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 230000010267 cellular communication Effects 0.000 description 1
- 230000001413 cellular effect Effects 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 230000009977 dual effect Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 239000004744 fabric Substances 0.000 description 1
- 239000011521 glass Substances 0.000 description 1
- 239000008103 glucose Substances 0.000 description 1
- 238000003780 insertion Methods 0.000 description 1
- 230000037431 insertion Effects 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000011017 operating method Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 230000001360 synchronised effect Effects 0.000 description 1
- 238000002604 ultrasonography Methods 0.000 description 1
- 238000005406 washing Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/02—Input arrangements using manually operated switches, e.g. using keyboards or dials
- G06F3/023—Arrangements for converting discrete items of information into a coded form, e.g. arrangements for interpreting keyboard generated codes as alphanumeric codes, operand codes or instruction codes
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
- G06F3/0354—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of 2D relative movements between the device, or an operating part thereof, and a plane or surface, e.g. 2D mice, trackballs, pens or pucks
- G06F3/03547—Touch pads, in which fingers can move on a surface
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
- G06F3/038—Control and interface arrangements therefor, e.g. drivers or device-embedded control circuitry
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
- G06F3/04845—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
- G06F3/0486—Drag-and-drop
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
- G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
- G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
- G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
- G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
- G06F3/04886—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures by partitioning the display area of the touch-screen or the surface of the digitising tablet into independently controllable areas, e.g. virtual keyboards or menus
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
- G06F3/1423—Digital output to display device ; Cooperation and interconnection of the display device with other functional units controlling a plurality of local displays, e.g. CRT and flat panel display
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
- G06F3/1454—Digital output to display device ; Cooperation and interconnection of the display device with other functional units involving copying of the display data of a local workstation or window to a remote workstation or window so that an actual copy of the data is displayed simultaneously on two or more displays, e.g. teledisplay
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
- G09G5/12—Synchronisation between the display unit and other units, e.g. other display units, video-disc players
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
- G06F2203/038—Indexing scheme relating to G06F3/038
- G06F2203/0384—Wireless input, i.e. hardware and software details of wireless interface arrangements for pointing devices
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
- G06F2203/048—Indexing scheme relating to G06F3/048
- G06F2203/04803—Split screen, i.e. subdividing the display area or the window area into separate subareas
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
- G06F2203/048—Indexing scheme relating to G06F3/048
- G06F2203/04804—Transparency, e.g. transparent or translucent windows
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2354/00—Aspects of interface with display user
Abstract
提供了一种电子装置。电子装置包括:通信电路;至少一个存储器,存储指令;显示器;和至少一个处理器。所述至少一个处理器在执行指令时被配置为:使用通信电路在外部装置的显示器上显示在电子装置中正在执行的应用的第一用户界面;在外部装置的显示器上显示第一用户界面时,接收指定输入;并且响应于接收到指定输入,在电子装置的显示器上在第一区域中显示虚拟触摸板并且在与第一区域不同的第二区域中显示虚拟键盘。
Description
技术领域
本公开涉及一种用于提供虚拟输入工具的电子装置及其操作方法。
背景技术
随着技术的发展,便携式终端(诸如平板电脑、平板手机、智能电话等)的使用已经增加。为了提供直观的交互,便携式终端可以包括触摸屏。
以上信息仅作为背景信息呈现,以帮助理解本公开。关于以上内容中的任何一个是否可以作为关于本公开的现有技术适用,没有做出任何确定,也没有做出断言。
发明内容
问题的解决方案
为了提供与电子装置的交互,各种类型的便携式输入工具(或辅助输入装置)(诸如无线键盘、无线鼠标等)已经得到广泛使用。然而,用户通常携带便携式终端(诸如智能电话、平板电脑、平板手机等),并且用户携带独立的便携式输入工具是不方便的。
本公开的各方面是为了至少解决上述问题和/或缺点,并且至少提供下面描述的优点。因此,本公开的一方面是提供一种用于使得用户能够使用用户通常携带的便携式终端作为便携式输入工具的解决方案的设备和方法。
另外的方面将部分地在下面的描述中阐述,并且将部分地从描述中显而易见,或者可以通过实践所呈现的实施例被学习。
本公开中追求的技术主题可以不限于上述技术主题,并且本公开领域的技术人员可以通过以下描述清楚地理解未提及的其他技术主题。
根据本公开的一方面,提供了一种电子装置。电子装置包括:通信电路;至少一个存储器,存储指令;显示器;和至少一个处理器。当执行指令时,所述至少一个处理器被配置为:使用通信电路在外部装置的显示器上显示当前在电子装置中执行的应用的第一用户界面;当第一用户界面在外部装置的显示器上被显示时,接收指定输入;并且响应于接收到指定输入,在电子装置的显示器上在第一区域中显示虚拟触摸板并在与第一区域不同的第二区域中显示虚拟键盘。
根据本公开的另一方面,提供了一种操作电子装置的方法。所述方法包括:在外部装置的显示器上显示当前在电子装置中执行的应用的第一用户界面;当第一用户界面在外部装置的显示器上被显示时,接收指定输入;并且响应于接收到指定输入,在电子装置的显示器上在第一区域中显示虚拟触摸板并在与第一区域不同的第二区域中显示虚拟键盘。
根据本公开的另一方面,提供了一种存储程序的非暂时性计算机可读存储介质。所述程序在由电子装置的处理器执行时使得电子装置执行以下操作:在与电子装置不同的另一电子装置的显示器上显示当前在电子装置中执行的应用的第一用户界面;响应于当第一用户界面在另一装置的显示器上被显示时接收到指定输入,在电子装置的显示器上在第一区域中显示虚拟触摸板并在与第一区域不同的第二区域中显示虚拟键盘。
根据各种实施例的电子装置及其操作方法可以提供虚拟触摸板,从而提供增强的便携性。
根据以下结合附图公开的本公开的各种实施例的详细描述,本公开的其他方面、优点和显著特征对于本领域技术人员将变得显而易见。
附图说明
通过以下结合附图进行的描述,本公开的特定实施例的以上和其他方面、特征和优点将更加明显,其中:
图1是示出根据本公开的各种实施例的包括电子装置的环境的示例的示图;
图2是示出根据本公开的各种实施例的电子装置的功能配置的示例的示图;
图3A是示出根据本公开的各种实施例的在电子装置中显示的虚拟输入工具的示例的示图;
图3B是示出根据本公开的各种实施例的在电子装置中显示的虚拟输入工具的另一示例的示图;
图3C是示出根据本公开的各种实施例的在电子装置中显示的虚拟输入工具的另一示例的示图;
图3D是示出根据本公开的各种实施例的在电子装置中显示的虚拟输入工具的另一示例的示图;
图4A是示出根据本公开的各种实施例的用于显示虚拟输入工具的指定输入的示例的示图;
图4B是示出根据本公开的各种实施例的用于显示虚拟输入工具的指定输入的另一示例的示图;
图4C是示出根据本公开的各种实施例的用于显示虚拟输入工具的指定输入的另一示例的示图;
图4D是示出根据本公开的各种实施例的用于显示虚拟输入工具的指定输入的另一示例的示图;
图4E是示出根据本公开的各种实施例的用于显示虚拟输入工具的指定输入的另一示例的示图;
图5A是示出根据本公开的各种实施例的表示发生变化的虚拟输入工具的示例的示图;
图5B是示出根据本公开的各种实施例的表示发生变化的虚拟输入工具的另一示例的示图;
图5C是示出根据本公开的各种实施例的表示发生变化的虚拟输入工具的另一示例的示图;
图5D是示出根据本公开的各种实施例的表示发生变化的虚拟输入工具的另一示例的示图;
图5E是示出根据本公开的各种实施例的表示发生变化的虚拟输入工具的另一示例的示图;
图6是图示了根据本公开的各种实施例的表示发生变化的虚拟输入工具的另一示例的示图;
图7A是示出根据本公开的各种实施例的表示发生变化的虚拟输入工具的另一示例的示图;
图7B是示出根据本公开的各种实施例的表示发生变化的虚拟输入工具的另一示例的示图;
图7C是示出根据本公开的各种实施例的表示发生变化的虚拟输入工具的另一示例的示图;
图8是示出根据本公开的各种实施例的电子装置的操作的示例的示图;
图9是示出根据本公开的各种实施例的由电子装置确定虚拟触摸板和虚拟键盘的布置的操作的示例的示图;以及
图10是示出根据本公开的各种实施例的由电子装置禁用虚拟触摸板和虚拟键盘的操作的示例的示图。
在整个附图中,相同的附图标号将被理解为指代相同的部分、组件和结构。
具体实施方式
提供参照附图的以下描述以帮助全面理解由权利要求及其等同物限定的本公开的各种实施例。它包括各种具体细节以帮助理解,但是这些细节仅被认为是示例性的。因此,本领域普通技术人员将认识到,在不脱离本公开的范围和精神的情况下,可以对本文描述的各种实施例进行各种改变和修改。另外,为了清楚和简明,可以省略对公知的功能和结构的描述。
在以下描述和权利要求中使用的术语和词语不限于书面含义,而是仅由发明人使用以使得能够清楚且一致地理解本公开。因此,对于本领域技术人员显而易见的是,提供本公开的各种实施例的以下描述仅用于说明目的,而不是为了限制由所附权利要求及其等同物限定的本公开的目的。
应当理解,除非上下文另有明确规定,否则单数形式“一”、“一个”和“该”包括复数指示物。因此,例如,对“组件表面”的引用包括对一个或更多个这样的表面的引用。
在本公开中,表述“具有”、“可以具有”、“包括”或“可以包括”是指存在相应的特征(例如,数值、功能、操作或诸如元件的组件),并且不排除存在附加特征。
在本公开中,表述“A或B”、“A或/和B中的至少一个”或“A或/和B中的一个或更多个”可以包括所列项目的所有可能组合。例如,表述“A或B”、“A和B中的至少一个”或“A或B中的至少一个”是指以下全部:(1)包括至少一个A,(2)包括至少一个B,或(3)包括至少一个A和至少一个B中的全部。
在本公开的各种实施例中使用的表述“第一”、“第二”、“第一”或“第二”可以修饰各种组件,而不管顺序和/或重要性如何,但不限制相应的组件。例如,尽管它们都是用户装置,但是第一用户装置和第二用户装置指示不同的用户装置。例如,在不脱离本公开的范围的情况下,第一元件可以被称为第二元件,并且类似地,第二元件可以被称为第一元件。
应当理解,当元件(例如,第一元件)被称为(可操作地或通信地)“连接”或“结合”到另一元件(例如,第二元件)时,它可以直接连接或直接结合到另一元件,或者任何其他元件(例如,第三元件)可以插入在它们之间。相反,可以理解,当元件(例如,第一元件)被称为“直接连接”或“直接结合”到另一元件(第二元件)时,没有元件(例如,第三元件)插入在它们之间。
如本文所使用的,表述“被配置为…”可以与表述“适合于…”、“具有…的能力”、“被设计为…”、“适于…”、“被制造为…”或“能够…”互换使用。术语“被配置为…”可能不一定表示在硬件中“专门被设计为…”。可选地,在一些情况下,表述“装置被配置为…”可能表示该装置以及其他装置或组件“能够…”。例如,短语“适于(或被配置为)执行A、B和C的处理器”可以表示仅用于执行相应操作的专用处理器(例如,嵌入式处理器)或可以通过执行存储在存储器装置中的一个或更多个软件程序来执行相应操作的通用处理器(例如,中央处理器(CPU)或应用处理器(AP))。
本公开中使用的术语仅用于描述具体实施例,并且不旨在限制本公开。除非它们在上下文中明确不同,否则单数表示可以包括复数表示。除非另有定义,否则本文使用的所有术语(包括技术和科学术语)具有与本公开所属领域的技术人员通常理解的含义相同的含义。除非在本公开中明确定义,否则如在通用字典中定义的那些术语可以被解释为具有与相关领域中的上下文含义相等的含义,并且不应被解释为具有理想或过于正式的含义。在一些情况下,即使本公开中定义的术语也不应被解释为排除本公开的实施例。
根据本公开的各种实施例的电子装置可以包括例如智能电话、平板个人计算机(PC)、移动电话、视频电话、电子书阅读器(e-bookreader)、台式PC、膝上型PC、上网本计算机、工作站、服务器、个人数字助理(PDA)、便携式多媒体播放器(PMP)、MPEG-1音频层-3(MP3)播放器、移动医疗装置、相机和可穿戴装置中的至少一个。根据各种实施例,可穿戴装置可以包括配件类型(例如,手表、戒指、手镯、脚链、项链、眼镜、隐形眼镜或头戴式装置(HMD))、织物或服装集成类型(例如,电子服装)、身体安装类型(例如,皮肤垫或纹身)和生物可植入类型(例如,可植入电路)中的至少一种。
根据一些实施例,电子装置可以是家用电器。家用电器可以包括例如电视(TV)、数字视频盘(DVD)播放器、音响、冰箱、空调、真空吸尘器、烤箱、微波炉、洗衣机、空气净化器、机顶盒、家庭自动化控制面板、安全控制面板、TV盒(例如,Samsung HomeSyncTM、Apple TVTM或Google TVTM)、游戏机(例如,XboxTM和PlayStationTM)、电子词典、电子钥匙、摄像机和电子相框中的至少一个。
根据另一实施例,电子装置可以包括以下至少一种:各种医疗装置(例如,各种便携式医疗测量装置(血糖监测装置、心率监测装置、血压测量装置、体温测量装置等)、磁共振血管造影(MRA)、磁共振成像(MRI)、计算机断层扫描(CT)机和超声机)、导航装置、全球定位系统(GPS)接收器、事件数据记录器(EDR)、飞行数据记录器(FDR)、车辆信息娱乐装置、用于船舶的电子装置(用于船舶的导航装置和陀螺罗盘)、航空电子装置、安全装置、汽车头部单元、家用或工业用机器人、银行中的自动柜员机(ATM)、商店中的销售点(POS)或物联网装置(例如,灯泡、各种传感器、电表或煤气表、喷淋装置、火灾报警器、恒温器、路灯、烤面包机、体育用品、热水箱、加热器、锅炉等)。
根据一些实施例,电子装置可以包括以下至少一个:家具或建筑物/结构的一部分、电子板、电子签名接收装置、投影仪和各种测量仪器(例如,水表、电表、煤气表和无线电波表)。根据本公开的各种实施例的电子装置可以是上述各种装置中的一个或更多个的组合。根据实施例的电子装置可以是柔性电子装置或可折叠电子装置。此外,根据本公开实施例的电子装置不限于上述装置,并且可以包括根据技术发展的新电子装置。
在本公开中,术语“用户”可以指示使用电子装置的人或使用电子装置的装置(例如,人工智能电子装置)。
在下文中,将参照附图详细描述各种实施例。为了便于描述,元件的尺寸可以在附图中按比例放大或缩小。例如,附图中的每个元件的尺寸和厚度仅仅是为了便于描述而被示出的,并且本公开并且不总是受示图的限制。
图1是示出根据本公开的各种实施例的包括电子装置的环境的示例的示图。
参照图1,环境100可以包括电子装置101和电子装置102。
根据各种实施例,电子装置101可以是具有触摸屏和通信电路的便携式终端。例如,电子装置101可以是平板电脑、平板手机或智能电话。
根据各种实施例,电子装置101可以通过有线或无线与电子装置102通信。根据各种实施例,电子装置101可使用各种通信路径以便与电子装置102通信。例如,电子装置101可以经由间接通信路径与电子装置102通信,其中,间接通信路径被配置有电子装置101与中继实体(例如,基站、接入点(AP)等)之间的通信路径以及中继实体与电子装置102之间的通信路径。根据另一实施例,电子装置101可经由电子装置101与电子装置102之间的直接通信路径与电子装置102通信。然而,本公开不限于此。
根据各种实施例,电子装置101可以经由与电子装置102的通信在电子装置102的显示器上显示屏幕。根据各种实施例,在电子装置102的显示器上显示的屏幕可以与在电子装置101的显示器上显示的屏幕相同或不同。例如,在电子装置102的显示器上显示的屏幕可以以与在电子装置101的显示器上显示的屏幕的配置不同的配置来提供与由在电子装置101的显示器上显示的屏幕提供的内容相应的内容。作为另一示例,在电子装置102的显示器上显示的屏幕可以提供与由在电子装置101的显示器上显示的屏幕提供的内容不同的内容。作为另一示例,在电子装置102的显示器上显示的屏幕可以以与在电子装置101的显示器上显示的屏幕的配置相应的配置来提供与由在电子装置101的显示器上显示的屏幕提供的内容相应的内容。然而,本公开不限于此。
根据各种实施例,电子装置101可以接收与电子装置102的显示器上显示的屏幕相关联的输入。根据各种实施例,响应于输入,电子装置101可以经由与电子装置102的通信来改变在电子装置102的显示器上显示的屏幕的表示。
根据各种实施例,电子装置102可以是能够显示屏幕或能够使用外部装置显示屏幕的装置。根据各种实施例,电子装置102可以是能够在不与另一电子装置(例如,电子装置101)通信的情况下显示屏幕的装置。例如,电子装置102可以是TV、数字标牌、台式计算机、膝上型计算机、平板计算机、平板手机或智能电话。根据各种实施例,电子装置102可以是能够仅通过使用与另一电子装置(例如,电子装置101)的通信来显示屏幕的装置。例如,电子装置102可以是监视器或光束投影仪。
根据各种实施例,电子装置102可以是能够提供尺寸比电子装置101的屏幕更大的屏幕的装置。然而,本公开不限于此。
图2是示出根据本公开的各种实施例的电子装置的功能配置的示例的示图。功能配置可以包括在图1的电子装置101中。
参照图2,电子装置101可以包括处理器210、存储器220、显示器230、通信电路240和传感器电路250。
处理器210可以控制电子装置101的整体操作。例如,处理器210可以执行提供广告、互联网、游戏、视频等的应用。根据各种实施例,处理器210可以包括单个处理器核(单核),或者可以包括多个处理器核。例如,处理器210可以包括多核(诸如双核、四核、六核等)。根据实施例,处理器210还可以包括位于处理器210内部或外部的高速缓存存储器。
处理器210可以从电子装置101的其他元件接收命令,可以解译接收的命令,并且可以基于解译的命令来执行计算或处理数据。
处理器210可以处理由应用产生的数据或信号。例如,处理器210可以向存储器220请求指令、数据或信号,以便执行或控制应用。处理器210可以记录(或存储)或更新存储器220中的指令、数据或信号,以便执行或控制应用。
处理器210可以对从存储器220、显示器230、通信电路240或传感器电路250接收的消息、数据、指令或信号进行解译或处理。此外,处理器210可以基于接收到的消息、数据、指令或信号来产生新的消息、数据、指令或信号。处理器210可以将处理的或产生的消息、数据、指令或信号提供给存储器220、显示器230、通信电路240或传感器电路250。
处理器210的一部分或全部可以与电子装置101的其他元件(例如,存储器220、显示器230、通信电路240或传感器电路250)电结合或可操作地(或可操作地)结合或连接到电子装置101的其他元件。
根据实施例,处理器210可以配置有一个或更多个处理器。例如,处理器210可以包括用于控制较高层中的程序(诸如应用等)的AP、用于控制显示器230的图形处理单元(GPU)或用于控制通信电路240的通信处理器(CP)中的一个或更多个处理器。
存储器220可以存储用于控制电子装置101的指令、控制指令代码、控制数据或用户数据。例如,存储器220可以包括应用、操作系统(OS)、中间件和装置驱动器。
存储器220可以包括易失性存储器和非易失性存储器中的一个或更多个。易失性存储器可以包括动态随机存取存储器(DRAM)、静态RAM(SRAM)、同步DRAM(SDRAM)、相变RAM(PRAM)、磁性RAM(MRAM)、电阻式RAM(RRAM)、铁电RAM(FeRAM)等。非易失性存储器可以包括只读存储器(ROM)、可编程ROM(PROM)、电可编程ROM(EPROM)、电可擦除ROM(EEPROM)、闪存。
存储器220可以包括非易失性介质(诸如硬盘驱动器(HDD)、固态盘(SSD)、嵌入式多媒体卡(eMMC)和通用闪存存储(UFS))。
显示器230可以输出内容、数据或信号。根据各种实施例,显示器230可以显示由处理器210处理的图像数据。
根据各种实施例,显示器230可以通过与能够接收触摸输入等的多个触摸传感器(未示出)结合而配置有集成触摸屏。如果显示器230配置有触摸屏,则多个触摸传感器可以布置在显示器230上方或显示器230下方。
根据各种实施例,显示器230可以被配置为至少一部分是可折叠的显示器(例如,可折叠显示器)。如果显示器230被配置为可折叠显示器,则电子装置101可以具有允许显示器230可折叠的结构。
通信电路240可以在电子装置101和外部电子装置(例如,电子装置102)之间建立有线或无线通信信道,并且可以支持经由建立的通信信道的通信。根据实施例,通信电路240可包括无线通信电路(例如,蜂窝通信电路、短程无线通信电路或全球导航卫星系统(GNSS)通信电路)或有线通信电路(例如,局域网(LAN)通信电路或电力线通信电路),并且可使用描述的通信电路中的相应通信电路经由第一网络(例如,短距离通信网络(诸如蓝牙、Wi-Fi直连或红外数据协会(IrDA)))或第二网络(例如,远距离通信网络(诸如蜂窝网络、互联网或计算机网络(例如,LAN或广域网(WAN))))与外部电子装置通信。上述各种类型的通信电路240可以由一个芯片或由分离的多个芯片实现。
根据实施例,无线通信电路可使用存储在用户识别模块中的用户信息来识别和认证通信网络内的电子装置101。
传感器电路250可以包括用于获得与电子装置101的姿态相关联的信息的传感器。
根据各种实施例,传感器电路250可以包括以下传感器中的一个或更多个传感器:用于获得与电子装置101的线性运动的变化相关联的数据的传感器、用于获得与电子装置101的旋转运动的变化相关联的数据的传感器、用于识别电子装置101是否被用户抓握的传感器或用于获得与电子装置101的地理位置相关联的数据的传感器。例如,传感器电路250可以包括地磁传感器、陀螺仪传感器、接近传感器、加速度传感器、照度传感器和红外线传感器中的一个或更多个。
根据各种实施例,处理器210可以使用通信电路240在电子装置102的显示器上显示在电子装置101中执行的应用的第一用户界面。例如,处理器210可以使用通信电路240将与应用的第一用户界面相关联的帧数据或用于显示应用的第一用户界面的控制信息发送到电子装置102。
根据各种实施例,当在电子装置101中执行的应用的第一用户界面经由通信电路240显示在电子装置102的显示器上时,处理器210可以在显示器230上显示能够接收对第一用户界面的输入的至少一个虚拟输入工具。根据各种实施例,可以在显示器上显示至少一个虚拟输入工具,以便提供与第一用户界面的交互。
根据各种实施例,至少一个虚拟输入工具可以以各种布置或形状显示在显示器上。
图3A是示出根据本公开的各种实施例的在电子装置中显示的虚拟输入工具的示例的示图。
参照图3A,如状态300所示,当使用通信电路240在电子装置102的显示器上显示应用的第一用户界面时,处理器210可以使用显示器230,并且可以在第一区域301中显示虚拟触摸板并且在第二区域302中显示虚拟键盘。根据各种实施例,虚拟触摸板可提供鼠标的功能。例如,基于在显示虚拟触摸板的区域上的输入(例如,拖动输入、单击输入、多次敲击输入、按压输入(例如,用力触摸输入)等),虚拟触摸板可以在第一用户界面上移动指针(诸如光标),可以执行滚动,或者可以执行或移动包括在第一用户界面中的可执行对象。作为另一示例,虚拟触摸板可用于基于在显示虚拟触摸板的区域上的拖动输入的路径来执行绘图或输入手写字符。根据各种实施例,虚拟键盘可提供键盘的功能。例如,虚拟键盘可以用于基于对虚拟键盘中包括的多个键中的至少一个的输入(例如,拖动输入、单击输入、多次敲击输入、按压输入(例如,用力触摸输入)等)向第一用户界面输入由至少一个键指示的至少一个字符。然而,本公开不限于此。
根据各种实施例,第一区域301可以与第二区域302分离或不同。根据各种实施例,第一区域301可被显示为与第二区域302间隔开。例如,第一区域301可以布置在第二区域302上方。作为另一示例,与图3A不同,第一区域301可以布置在第二区域302下方。然而,本公开不限于此。
图3B是示出根据本公开的各种实施例的在电子装置中显示的虚拟输入工具的另一示例的示图。
参照图3B,如状态310中所示,当使用通信电路240在电子装置102的显示器上显示应用的第一用户界面时,处理器210可以使用显示器230在第一区域311中显示虚拟触摸板,并且可以在漂浮或叠加在第一区域311上的第二区域312中显示虚拟键盘。根据各种实施例,处理器210可以响应于接收到在第一区域311中显示的虚拟触摸板上的输入,禁用在第二区域312中显示的虚拟键盘。虚拟键盘被禁用的事实指示即使输入跨虚拟键盘中包括的多个键中的任何一个键移动,该输入也不被识别为对虚拟键盘的输入。根据各种实施例,处理器210可以响应于识别出输入被释放或者识别出在输入被释放之后经过了指定的时间段而启用禁用的虚拟键盘。根据各种实施例,处理器210可以响应于接收到在第二区域312中显示的虚拟键盘上的输入而禁用在第一区域311中显示的虚拟触摸板。即使输入跨虚拟触摸板的任何区域移动,虚拟触摸板被禁用的事实可指示虚拟触摸板上的输入未被识别。根据各种实施例,处理器210可响应于识别出输入被释放或者识别出在输入被释放之后经过了指定时间段而启用禁用的虚拟触摸板。
图3C是示出根据本公开的各种实施例的在电子装置中显示的虚拟输入工具的另一示例的示图。
参照图3C,如状态320所示,当使用通信电路240在电子装置102的显示器上显示应用的第一用户界面时,处理器210可以使用显示器230,以便在第一区域321中显示虚拟操纵柄的第一部分,在第二区域322中显示虚拟操纵柄的第二部分,并且在位于第一区域321和第二区域322之间的第三区域323中显示虚拟操纵柄的剩余部分。根据各种实施例,基于识别出正在电子装置101中运行游戏应用并且使用通信电路240在电子装置102的显示器上显示游戏应用的用户界面,处理器210可以使用显示器230在第一区域321中显示虚拟操纵柄的第一部分,可以在第二区域322中显示虚拟操纵柄的第二部分,并且可以在第三区域323中显示虚拟操纵柄的剩余部分。根据各种实施例,虚拟操纵柄的第一部分可包括用于方向控制的可执行对象。例如,用于方向控制的可执行对象中的第一对象用于在第一方向上移动由游戏应用提供的游戏角色。用于方向控制的可执行对象中的第二对象用于在与第一方向相反的第二方向上移动游戏角色。用于方向控制的可执行对象中的第三对象用于在第三方向上移动游戏角色。用于方向控制的可执行对象中的第四对象用于在第四方向上移动游戏角色。根据各种实施例,虚拟操纵柄的第二部分可包括用于控制游戏角色的动作的可执行对象。例如,包括在第二部分中的可执行对象中的第一对象可以用于执行游戏角色的第一动作。包括在第二部分中的可执行对象中的第二对象可以用于执行游戏角色的第二动作。包括在第二部分中的可执行对象的第三对象可以用于执行游戏角色的第三动作。包括在第二部分中的可执行对象的第四对象可以用于执行游戏角色的第四动作。根据各种实施例,虚拟操纵柄的剩余部分可包括用于控制游戏的各种设置的可执行对象。例如,包括在剩余部分中的可执行对象中的第一对象可以用于将虚拟操纵柄改变为图3A或图3B所示的虚拟键盘或虚拟小键盘。包括在剩余部分中的可执行对象中的第二对象可以用于在电子装置102的显示器上显示的游戏应用的用户界面中显示从游戏提供的菜单。包括在剩余部分中的可执行对象中的第三对象可以用于暂停游戏。可以使用包括在剩余部分中的可执行对象中的第四对象来确定游戏的模式。然而,本公开不限于此。
图3D是示出根据本公开的各种实施例的在电子装置中显示的虚拟输入工具的另一示例的示图。
参照图3D,如状态330所示,当使用通信电路240在电子装置102的显示器上显示应用的第一用户界面时,处理器210可以使用显示器230显示分别与鼠标中包括的功能相应的可执行对象。例如,可执行对象中的第一对象331可以与鼠标的左键的功能相应,可执行对象中的第二对象332可以与鼠标的右键的功能相应,并且可执行对象中的第三对象333可以与鼠标的可旋转结构(例如,滚轮)相应。根据各种实施例,处理器210可以基于与使用传感器电路250获得的电子装置101的位置的变化相关联的信息来改变指针在电子装置102的显示器上显示的应用的第一用户界面中的位置。根据各种实施例,在使用通信电路240在电子装置102的显示器上显示应用的第一用户界面时,处理器210可以基于使用传感器电路250识别出电子装置101处于纵向状态,使用显示器230显示分别与鼠标中包括的功能相应的可执行对象。根据各种实施例,在显示分别与鼠标中包括的功能相应的可执行对象时,处理器210可以启用布置在显示器230上方或下方的多个触摸传感器中的布置在显示可执行对象的区域上方或下方的触摸传感器,并且可以禁用多个触摸传感器中的剩余触摸传感器。根据各种实施例,在使用通信电路240在电子装置102的显示器上显示应用的第一用户界面时,处理器210可以使用传感器电路250基于识别出电子装置101已经从纵向状态改变为横向状态而将状态330改变为状态335。根据各种实施例,状态335可以指示显示虚拟键盘的状态。在状态335下,基于接收到对虚拟键盘中包括的多个键中的至少一个键的输入,处理器210可以使用通信电路240执行与电子装置102的显示器上显示的应用的第一用户界面中的至少一个键相应的功能。然而,本公开不限于此。
根据各种实施例,在使用通信电路240在电子装置102的显示器上显示应用的第一用户界面时,处理器210可以响应于经由电子装置101或电子装置102接收到指定输入而在显示器230上显示图3A、图3B、图3C和图3D所示的虚拟输入工具。根据各种实施例,可以从在接收到指定输入之前已经使用显示器230显示的另一屏幕改变为虚拟输入工具。根据各种实施例,所述另一屏幕可以与在电子装置102的显示器上显示的屏幕(例如,第一用户界面)相同或不同。例如,所述另一屏幕可以提供与由在电子装置102的显示器上显示的屏幕提供的内容相应的内容,并且可以具有与在电子装置102的显示器上显示的屏幕的配置(例如,对象的布置)相应的配置。例如,所述另一屏幕可以是显示在电子装置102的显示器上的屏幕的缩小屏幕。作为另一示例,所述另一屏幕可以提供与由在电子装置102的显示器上显示的屏幕提供的内容相应的内容,并且可以具有与在电子装置102的显示器上显示的屏幕的配置不同的配置。作为另一示例,所述另一屏幕可以提供与由在电子装置102的显示器上显示的屏幕提供的内容不同的内容。例如,所述另一屏幕可以是与该应用不同的另一应用的用户界面。然而,本公开不限于此。
根据各种实施例,可以以各种格式中的任何一种提供指定输入。
图4A是示出根据本公开的各种实施例的用于显示虚拟输入工具的指定输入的示例的示图。
参照图4A,如状态400所示,在电子装置102的显示器上显示应用的第一用户界面时,处理器210可以使用显示器230显示应用的第二用户界面。根据各种实施例,第二用户界面的配置可以与第一用户界面的配置不同。
根据各种实施例,在状态400下,处理器210可以使用通信电路240识别出关于在电子装置102的显示器上显示的第一用户界面中包括的指定对象401的指定输入被接收到。根据各种实施例,指定对象401可以被包括在第一用户界面中,以便在显示器230中调用虚拟输入工具。根据各种实施例,处理器210可以响应于所述识别将状态400切换或改变为状态410。根据各种实施例,状态410可以指示显示从第二用户界面改变的虚拟输入工具的状态。例如,在状态410下,处理器210可以在显示器230上显示从第二用户界面改变的虚拟触摸板和虚拟键盘。根据各种实施例,在状态410下,处理器210可以独立于识别指定输入或者不考虑指定输入而保持将第一用户界面显示在电子装置102的显示器上。
根据各种实施例,在状态400下,处理器210可以使用通信电路240识别在电子装置102的显示器上显示的第一用户界面中包括的文本输入部分402上的指定输入被接收到。根据各种实施例,文本输入部分402可以指示能够接收用于输入字符的用户输入的区域。根据各种实施例,处理器210可以响应于所述识别将状态400切换或改变为状态410。例如,在状态410下,处理器210可以在显示器230上显示从第二用户界面改变的虚拟触摸板和虚拟键盘。根据各种实施例,在状态410下,处理器210可以独立于识别指定输入或者不考虑指定输入而保持将第一用户界面显示在电子装置102的显示器上。
根据各种实施例,在状态400下,处理器210可以接收关于在显示器上显示的第二用户界面中包括的指定对象403的指定输入。根据各种实施例,指定对象403可以包括在第二用户界面中,以便在显示器230中调用虚拟输入工具。根据各种实施例,处理器210可以响应于接收到关于指定对象403的指定输入而将状态400改变为状态410。例如,在状态410下,处理器210可以在显示器230上显示从第二用户界面改变的虚拟触摸板和虚拟键盘。根据各种实施例,在状态410下,处理器210可以独立于接收到指定输入而保持将第一用户界面显示在电子装置102的显示器上。
根据各种实施例,在状态400下,处理器210可以在显示器上显示的第二用户界面中包括的文本输入部分404上接收指定输入。根据各种实施例,文本输入部分404可以指示能够接收用于输入字符的用户输入的区域。根据各种实施例,处理器210可以响应于在文本输入部分404上接收到指定输入而将状态400改变为状态410。例如,在状态410下,处理器210可以在显示器230上显示从第二用户界面改变的虚拟触摸板和虚拟键盘。根据各种实施例,在状态410下,处理器210可以独立于接收到指定输入而保持将第一用户界面显示在电子装置102的显示器上。
根据各种实施例,在状态410下,处理器210还可以在第一用户界面中显示用于使用通信电路240在电子装置101中执行至少一个应用的至少一个对象(例如,对象B或对象C),其中,所述至少一个应用与提供第一用户界面的应用不同。根据各种实施例,在状态410下,处理器210还可以在第二用户界面中显示用于使用显示器230在电子装置101中执行至少一个应用的至少一个对象(例如,对象B或对象C)。根据各种实施例,处理器210可以响应于接收到对包括在第一用户界面中的至少一个对象的输入或对包括在第二用户界面中的至少一个对象的输入,运行由电子装置101中的至少一个对象指示的另一应用。响应于所述运行,处理器210可以使用通信电路240在电子装置102的显示器上显示从第一应用改变的所述另一应用的用户界面。然而,本公开不限于此。
图4B是示出根据本公开的各种实施例的用于显示虚拟输入工具的指定输入的另一示例的示图。
参照图4B,如状态411所示,在应用的第一用户界面被显示在电子装置102的显示器上时,处理器210可以使用传感器电路250识别出电子装置101被用户抓握。根据各种实施例,基于所述识别,处理器210可以在状态411下使用显示器230显示应用的第二用户界面。根据各种实施例,处理器210可以使用传感器电路250识别出电子装置101从状态411改变为状态412。根据各种实施例,状态412可以是处理器210使用传感器电路250识别出用户对电子装置101的抓握被释放的状态。例如,状态412可以指示电子装置101被放在桌子上。根据各种实施例,处理器210可以响应于改变到状态412而在显示器230上显示从第二用户界面改变的虚拟触摸板和虚拟键盘。根据各种实施例,处理器210可以独立于改变到状态412而保持第一用户界面显示在电子装置102的显示器上。
图4C是示出根据本公开的各种实施例的用于显示虚拟输入工具的指定输入的另一示例的示图。
参照图4C,在应用的第一用户界面显示在电子装置102的显示器上时,如状态413所示,处理器210可以经由使用显示器230显示的第二用户界面接收具有指定属性(或指定类型)的指定输入。根据各种实施例,处理器210可以响应于在第二用户界面上接收到具有指定属性的指定输入,将状态413改变为状态414。根据各种实施例,状态414可以指示显示从第二用户界面改变的虚拟输入工具的状态。例如,在状态413下,处理器210可以响应于接收到从第二用户界面的边缘区域朝向第二用户界面的另一区域(例如,中心区域)的拖动输入415作为具有指定属性的指定输入,将状态413改变为状态414。作为另一示例,在状态413下,处理器210可以响应于在第二用户界面上接收到具有指定模式的拖动输入416作为具有指定属性的指定输入,将状态413改变为状态414。作为另一示例,在状态413下,处理器210可以响应于在第二用户界面上接收到作为具有指定属性的指定输入的指节输入417,将状态413改变为状态414。然而,本公开不限于此。根据各种实施例,在状态414下,处理器210可以独立于接收到指定输入而保持在电子装置102的显示器上显示的第一用户界面。
图4D是示出根据本公开的各种实施例的用于显示虚拟输入工具的指定输入的另一示例的示图。
参照图4D,在应用的第一用户界面显示在电子装置102的显示器上时,电子装置101可以处于手写笔419与电子装置101分离的状态418,手写笔419可附接到电子装置101或可插入到电子装置101中。根据各种实施例,在状态418下,处理器210可以使用显示器230显示第二用户界面。根据各种实施例,在状态418下,如果与电子装置101分离的手写笔419被附接到电子装置101或被插入到电子装置101中,则处理器210可以将附接或插入识别为指定输入。根据各种实施例,处理器210可以响应于所述识别将状态418改变为状态420。根据各种实施例,状态420可指示显示从第二用户界面改变的虚拟输入工具(例如,虚拟触摸板和虚拟键盘)的状态。根据各种实施例,处理器210可以独立于改变到状态420而保持将第一用户界面显示在电子装置102的显示器上。
图4E是示出根据本公开的各种实施例的用于显示虚拟输入工具的指定输入的另一示例的示图。
参照图4E,如状态421所示,在应用的第一用户界面显示在电子装置102的显示器上时,处理器210可以使用显示器230显示第二用户界面。根据各种实施例,在状态421下,处理器210可以识别出接收到与电子装置101相关的手写笔422的物理按钮上的输入423作为指定输入。根据各种实施例,处理器210可以响应于所述识别将状态421改变为状态424。根据各种实施例,状态424可指示显示从第二用户界面改变的虚拟输入工具(例如,虚拟触摸板和虚拟键盘)的状态。根据各种实施例,处理器210可以独立于识别而保持第一用户界面显示在电子装置102的显示器上。
根据各种实施例,处理器210可以在使用显示器230显示虚拟输入工具时接收虚拟输入工具上的用户输入。根据各种实施例,处理器210可以响应于接收到用户输入而改变或切换虚拟输入工具的至少一部分的状态。
图5A是示出根据本公开的各种实施例变化的表示虚拟输入工具的示例的示图。
参照图5A,在状态500下,处理器210可以使用显示器230在第一区域中显示虚拟触摸板,并且可以在第二区域中显示虚拟键盘。尽管未在图5A中示出,但是根据各种实施例,在状态500下,处理器210可以使用通信电路240在电子装置102的显示器上显示第一用户界面。根据各种实施例,在状态500下,处理器210可以接收从第一区域朝向第二区域的输入501。根据各种实施例,在状态500下,处理器210可以基于识别出输入501是从第一区域发起的,禁用在与第一区域不同的第二区域中显示的虚拟键盘。例如,在显示器上保持输入501的接触时,处理器210可以将跨虚拟键盘中包括的多个键中的任何一个移动的输入501的路径识别为虚拟触摸板上的输入的一部分而不是虚拟键盘上的输入的一部分。处理器210可以基于所述识别使用通信电路240改变正在电子装置102的显示器上显示的第一用户界面的表示。
根据各种实施例,在状态500下,处理器210可以在输入501被保持在显示器上时,将虚拟键盘保持在禁用状态。根据各种实施例,处理器210可以识别是否经由第一区域接收到输入501之后的另一输入,直到从识别出输入501的释放的时刻起经过指定的时间段。根据各种实施例,处理器210可以基于识别出直到从输入501的释放被确定的时间起经过指定的时间段之后才经由第一区域接收到另一输入,来启用禁用的虚拟键盘。
根据各种实施例,当在状态500下禁用虚拟键盘时,处理器210可以使用显示器230以便显示用于指示虚拟键盘被禁用的表示。例如,当在状态500下禁用虚拟键盘时,处理器210可以将虚拟键盘调暗或模糊为用于指示虚拟键盘被禁用的表示,或者可以在虚拟键盘上显示半透明层作为指示虚拟键盘被禁用的表示。
作为另一示例,参照图5A,在状态502下,处理器210可以使用显示器230在第一区域中显示虚拟触摸板并且在第二区域中显示虚拟键盘。尽管未在图5A中示出,但是根据各种实施例,在状态502下,处理器210可以使用通信电路240在电子装置102的显示器上显示第一用户界面。根据各种实施例,在状态502下,处理器210可以接收从第二区域朝向第一区域的输入503。根据各种实施例,在状态502下,处理器210可基于识别出输入503是从第二区域发起的来禁用在与第二区域不同的第一区域中显示的虚拟触摸板。例如,在显示器上保持输入503的接触时,处理器210可以忽略或丢弃跨显示虚拟触摸板的第一区域的至少一部分移动的输入503的路径,而不是将输入503的路径处理为虚拟触摸板上的输入。在忽略的基础上,处理器210可以仅使用由输入503引起的在虚拟键盘中包括的多个键的至少一部分上的键输入来改变在电子装置102的显示器上显示的第一用户界面的表示。
根据各种实施例,在状态502下,处理器210可以在输入503保持在显示器上时,将虚拟触摸板保持在禁用状态。根据各种实施例,处理器210可响应于识别出输入503被释放而启用禁用的虚拟触摸板。根据各种实施例,处理器210可以识别是否直到从输入503的释放被确定的时间起经过指定的时间段之后才经由第二区域接收到输入503之后的另一输入。根据各种实施例,处理器210可以基于识别出直到从输入503的释放被确定的时间起经过指定的时间段之后才经由第二区域接收到另一输入,来启用禁用的虚拟触摸板。
根据各种实施例,在状态502下,在禁用虚拟触摸板时,处理器210可使用显示器230显示用于指示虚拟触摸板被禁用的表示。例如,在状态502下,在禁用虚拟触摸板时,处理器210可将虚拟触摸板模糊为指示虚拟触摸板被禁用的表示,或者可在虚拟触摸板上方显示半透明层作为指示虚拟触摸板被禁用的表示。
图5B是示出根据本公开的各种实施例的表示变化的虚拟输入工具的另一示例的示图。
参照图5B,在状态504下,处理器210可以使用显示器230在第一区域中显示虚拟触摸板,并且可以在第二区域中显示虚拟键盘。尽管未在图5B中示出,但是根据各种实施例,在状态504下,处理器210可以使用通信电路240在电子装置102的显示器上显示第一用户界面。根据各种实施例,在状态504下,处理器210可以接收从第一区域发起的拖动输入505。根据各种实施例,如从状态504改变的状态506所示,响应于识别出拖动输入505从第一区域朝向显示虚拟键盘的第二区域,处理器210可以改变虚拟键盘的表示,以便避免拖动输入505与虚拟键盘之间的接触。例如,在状态506下,处理器210可以使用显示器230将虚拟键盘移动到拖动输入505下方,以便避免拖动输入505与虚拟键盘之间的接触。根据各种实施例,如从状态506改变的状态507所示,处理器210可以响应于识别出拖动输入505被释放而恢复虚拟键盘的先前表示。
图5C是示出根据本公开的各种实施例的表示变化的虚拟输入工具的另一示例的示图。
参照图5C,在状态508下,处理器210可以使用显示器230在第一区域中显示虚拟触摸板,并且可以在第二区域中显示虚拟键盘。尽管未在图5C中示出,但是根据各种实施例,在状态508下,处理器210可以使用通信电路240在电子装置102的显示器上显示第一用户界面。根据各种实施例,在状态508下,处理器210可以接收用于进入用于输入手写字符的模式的输入。例如,在状态508下,处理器210可以接收用于将虚拟键盘模式改变为用于输入手写字符的模式的输入。根据各种实施例,可以经由语音信号接收输入。根据各种实施例,可以经由电子装置101的物理按钮上的按压输入来接收输入。根据各种实施例,可以经由虚拟键盘中包括的多个键中的指定键上的触摸输入来接收输入。然而,本公开不限于此。根据各种实施例,处理器210可以响应于接收到输入而将状态508改变为状态509。根据各种实施例,状态509可指示在第二区域中显示从虚拟键盘改变的识别结果区域510的状态。根据各种实施例,识别结果区域510可指示用于提供与基于在虚拟触摸板上接收的绘图输入或手写输入的路径识别的字符相关联的信息的区域。例如,处理器210可以基于在虚拟触摸板上接收的手写输入的路径来执行字符识别,并且可以在识别结果区域510中显示与字符识别的结果相关联的信息。根据各种实施例,在状态509下,处理器210可接收从显示虚拟触摸板的第一区域发起的输入511。根据各种实施例,在输入511保持在显示器上时,处理器210可以识别出输入511从显示识别结果区域510的第一区域朝向第二区域。根据各种实施例,处理器210可以响应于所述识别将状态509改变为状态512。根据各种实施例,状态512可以指示改变识别结果区域510的表示以便避免输入511和识别结果区域510之间的接触的状态。例如,在状态512下,处理器210可以使用显示器230将识别结果区域510移动到输入511下方,以避免输入511和识别结果区域510之间的接触。根据各种实施例,处理器210可以响应于识别出输入511被释放而恢复识别结果区域510的先前表示。
图5D是示出根据本公开的各种实施例的表示变化的虚拟输入工具的另一示例的示图。
参照图5D,在状态513下,处理器210可以使用显示器230在第一区域中显示虚拟触摸板,并且可以在第二区域中显示虚拟键盘。尽管未在图5D中示出,但是根据各种实施例,在状态513下,处理器210可以使用通信电路240在电子装置102的显示器上显示第一用户界面。根据各种实施例,在状态513下,处理器210可以接收用于进入与电子装置101中当前提供的模式不同的至少一种其他模式(另一模式)的输入。例如,当在电子装置101中接收到针对第一用户界面的交互时,至少一个其他模式可以指示用于接收另一类型的交互的模式,其中,所述另一类型的交互至少与当前在电子装置101中提供的交互的类型不同。例如,至少一个其他模式可以包括用于输入手写字符的模式、用于输入表情符号或颜文字的模式、用于输入增强现实(AR)贴纸的模式、用于输入动态图像(例如,图形交换格式(GIF)格式的图像)的模式、用于输入实时消息的模式或用于输入语音信号的模式中的至少一个。根据各种实施例,可以经由语音信号接收用于进入另一模式的输入。根据各种实施例,可以经由电子装置101的物理按钮上的按压输入来接收用于进入另一模式的输入。根据各种实施例,可以经由虚拟键盘中包括的多个键中的指定键上的触摸输入来接收用于进入另一模式的输入。
根据各种实施例,处理器210可基于提供至少一种其他模式所需的显示区域的尺寸来改变显示虚拟触摸板的区域的尺寸。
例如,处理器210可以响应于接收到用于进入另一模式的输入而将状态513改变为状态514。根据各种实施例,状态514可以指示在电子装置101中接收语音输入的状态。根据各种实施例,状态514可以指示显示用于指示语音输入可用的至少一个视觉对象515的状态。根据各种实施例,状态514可以指示显示从虚拟键盘改变的至少一个视觉对象515的状态。显示至少一个视觉对象515所需的区域的尺寸可以小于显示虚拟键盘所需的区域的尺寸。因此,在状态514下,处理器210可放大虚拟触摸板并且显示该虚拟触摸板。根据各种实施例,处理器210可响应于状态513到状态514的改变而改变对虚拟触摸板上的输入进行处理的方案。例如,由于用于在状态514下显示虚拟触摸板的区域大于用于在状态513下显示虚拟触摸板的区域,因此处理器210可在状态514下根据绝对坐标方案来处理虚拟触摸板上的输入,而处理器210可在状态513下根据相对坐标方案来处理虚拟触摸板上的输入。换句话说,处理器210可以在状态513下基于输入的起点和终点之间的距离来处理虚拟触摸板上的输入,而处理器210可以在状态514下基于与输入相关联的坐标来处理触摸板上的输入。
作为另一示例,处理器210可以响应于接收到用于进入另一模式的输入而将状态513改变为状态516。根据各种实施例,状态516可以指示需要显示数量大于虚拟键盘中包括的所有键的数量的视觉对象或者需要显示尺寸大于虚拟键盘中包括的每个键的视觉对象的状态。根据各种实施例,状态516可以指示显示从虚拟键盘改变并且包括多个虚拟对象的区域517的状态。对区域517进行显示所需的区域的尺寸可以大于显示虚拟键盘所需的区域的尺寸。因此,处理器210可在状态516下缩小虚拟触摸板并且显示虚拟触摸板。根据各种实施例,处理器210可独立于从状态513到状态516的改变而维持对虚拟触摸板上的输入进行处理的方案。然而,本公开不限于此。
图5E是示出根据本公开的各种实施例变化的虚拟输入工具的表示的另一示例的示图。
参照图5E,在状态518下,处理器210可以使用显示器230在第一区域中显示虚拟触摸板,并且可以在第二区域中显示虚拟键盘。尽管未在图5E中示出,但是根据各种实施例,在状态518下,处理器210可以使用通信电路240在电子装置102的显示器上显示第一用户界面。根据各种实施例,在状态518下,处理器210可以接收用于进入显示需要比显示虚拟键盘中包括的多个键所需的区域更大的区域的视觉对象的模式的输入。例如,可以经由语音信号接收输入。作为另一示例,可以经由电子装置101的物理按钮上的按压输入来接收输入。作为另一示例,可以经由虚拟键盘中包括的多个键中的指定键上的触摸输入来接收输入。然而,本公开不限于此。
根据各种实施例,处理器210可以响应于接收到输入而将状态518改变为状态519。根据各种实施例,状态519可以指示显示从虚拟键盘改变并且包括多个虚拟对象中的一些的区域520的状态。根据各种实施例,状态519指示放大和显示虚拟触摸板的状态。根据各种实施例,在状态519下,处理器210可以接收用于以小于指定速度的速度来滚动包括多个视觉对象中的一些视觉对象的区域520或者用于利用单个手指来滚动区域520的输入521。根据各种实施例,在状态519下,处理器210可以响应于接收到输入521来滚动包括在区域520中的视觉对象。例如,响应于接收到输入521,处理器210可以去除在接收到输入521之前包括在区域520中的至少一些视觉对象,并且可以在区域520中显示一些剩余的视觉对象。根据各种实施例,可以独立于输入521或者独立于滚动视觉对象来保持区域520的尺寸。根据各种实施例,在状态519下,处理器210可以接收用于以指定速度或更高速度来滚动包括多个视觉对象中的一些视觉对象的区域520或者用于利用多个手指来滚动区域520的输入522。根据各种实施例,处理器210可以响应于接收到输入522而将状态519改变为状态523。根据各种实施例,状态523可以指示区域520被放大和显示的状态。根据各种实施例,状态523可以指示显示数量大于在状态519下显示的视觉对象的数量的视觉对象的状态。根据各种实施例,处理器210可以响应于接收到具有与输入522的朝向相反的方向的输入而从状态523恢复到状态519。根据各种实施例,处理器210可以响应于接收到用于选择在状态523下显示的视觉对象中的至少一个视觉对象的输入,从状态523恢复到状态519。根据各种实施例,处理器210可以响应于在状态523下在指定时间段期间未接收到用户输入的事实,从状态523恢复到状态519。然而,本公开不限于此。
根据各种实施例,在显示虚拟输入工具时,处理器210可以基于使用传感器电路250获得的与电子装置101的姿态相关联的信息来改变虚拟输入工具的表示。
图6是示出根据本公开的各种实施例的表示变化的虚拟输入工具的另一示例的示图。
参照图6,处理器210可以在第一区域中显示虚拟触摸板,并且可以在第二区域中显示虚拟键盘,同时使用传感器电路250识别电子装置101处于如状态601所示的纵向状态(或纵向模式)。
处理器210可以响应于在状态601下使用传感器电路250识别出电子装置101从纵向状态改变为横向状态(或横向模式)而将状态601改变为状态602。根据各种实施例,状态602可指示以与状态601的宽高比不同的宽高比来显示虚拟触摸板和虚拟键盘的状态。在状态602下显示的虚拟键盘可以如状态601所示显示在虚拟触摸板下方。
处理器210可以响应于使用传感器电路250识别出电子装置101在状态601下从纵向状态改变为横向状态(或横向模式)而将状态601改变为状态603。根据各种实施例,状态603可指示以与状态601的布置不同的布置来显示虚拟触摸板和虚拟键盘的状态。例如,与状态601不同,在状态603下显示的虚拟键盘可以显示在虚拟触摸板旁边。根据各种实施例,在状态603下显示的虚拟触摸板或虚拟键盘中的至少一个的宽高比可与在状态601下显示的虚拟触摸板或虚拟键盘中的至少一个的宽高比相应,或者可与在状态601下显示的虚拟触摸板或虚拟键盘中的至少一个的宽高比不同。然而,本公开不限于此。
根据各种实施例,处理器210可以基于在显示虚拟输入工具时接收到的用户输入来改变虚拟输入工具的表示。
图7A是示出根据本公开的各种实施例的表示变化的虚拟输入工具的另一示例的示图。
参照图7A,在状态701下,处理器210可以在第一区域中显示虚拟触摸板,并且可以在叠加在第一区域的至少一部分上的第二区域中显示虚拟键盘。在状态701下,在第一区域中显示虚拟触摸板并且在叠加在第一区域的至少一部分上的第二区域中显示虚拟键盘时,处理器210可以接收用于移动虚拟键盘的输入702。根据各种实施例,可以经由被配置为移动虚拟键盘的对象703来接收输入702。根据各种实施例,可以经由虚拟键盘的多个侧边中的指定侧边接收输入702。然而,本公开不限于此。如状态704所示,响应于接收到输入702,处理器210可以在虚拟键盘通过输入702移动到的区域中显示虚拟键盘。
图7B是示出根据本公开的各种实施例的表示变化的虚拟输入工具的另一示例的示图。
参照图7B,在状态710下,处理器210可以在第一区域中显示虚拟触摸板,并且可以在叠加在第一区域的至少一部分上的第二区域中显示虚拟键盘。在状态710下,在第一区域中显示虚拟触摸板并且在叠加在第一区域的至少一部分上的第二区域中显示虚拟键盘时,处理器210可以接收用于调整虚拟键盘的尺寸的输入711。根据各种实施例,输入711可以从虚拟键盘的多个侧边中的任何一个侧边发起。如状态712所示,响应于接收到输入711,处理器210可以显示尺寸已经通过输入711被调整(例如,放大或缩小)的虚拟键盘。
图7C是示出根据本公开的各种实施例的表示变化的虚拟输入工具的另一示例的示图。
参照图7C,在状态720下,处理器210可以在第一区域中显示虚拟触摸板,并且可以在叠加在第一区域的至少一部分上的第二区域中显示虚拟键盘。在状态720下,在第一区域中显示虚拟触摸板并且在叠加在第一区域的至少一部分上的第二区域中显示虚拟键盘时,处理器210可以接收在与虚拟键盘相关的区域中显示的对象721上的输入。根据各种实施例,在状态720下,处理器210可以响应于接收到关于对象721的输入而将状态720改变为状态725。根据各种实施例,状态725可以指示悬浮显示虚拟键盘的状态。根据各种实施例,在状态725下,处理器210可显示将被叠加在虚拟触摸板上的用于恢复虚拟键盘的图标726。根据各种实施例,图标726可以包括用于指示虚拟键盘的视觉对象。根据各种实施例,图标726可在虚拟触摸板上移动。例如,可以基于图标726上的拖动输入在虚拟触摸板上移动图标726。根据各种实施例,处理器210可以响应于在状态725下接收到图标726上的输入而从状态725恢复到状态720。例如,响应于接收到图标726上的输入,处理器210可以在显示虚拟键盘的位置显示虚拟键盘。然而,本公开不限于此。
如上所述,在电子装置101中执行的应用的用户界面显示在连接到电子装置101的电子装置102的显示器上时,根据各种实施例的电子装置101可以使用显示器230来显示用于提供关于用户界面的交互的虚拟输入工具。根据各种实施例的电子装置101可以基于由电子装置101或电子装置102接收的指定输入来显示虚拟输入工具,使得用户可以直观地使用虚拟输入工具。根据各种实施例的电子装置101可以禁用虚拟触摸板或虚拟键盘的至少一个功能,或者可以改变与虚拟触摸板或虚拟键盘中的至少一个相关的表示,以便在将虚拟触摸板和虚拟键盘同时显示为虚拟输入工具时防止输入错误。根据各种实施例的电子装置101可以改变虚拟输入工具的表示(例如,尺寸或显示位置),或者可以改变经由虚拟输入工具接收的输入的属性(例如,绝对坐标方案、相对坐标方案等),使得用户可以容易地使用虚拟输入工具。换句话说,电子装置101可以通过提供虚拟输入工具来提供增强的用户体验。
如上所述,根据各种实施例的电子装置(例如,电子装置101)可以包括:通信电路(例如,通信电路240);至少一个存储器(例如,存储器220),存储指令;显示器(例如,显示器230);以及至少一个处理器(例如,处理器210),其中,所述至少一个处理器在执行指令时被配置为:使用通信电路在外部装置的显示器上显示在电子装置中执行的应用的第一用户界面;在外部装置的显示器上显示第一用户界面时,接收指定输入;并且响应于所述接收,在电子装置的显示器上显示第一区域中的虚拟触摸板以及与第一区域不同的第二区域中的虚拟键盘。
根据各种实施例,所述至少一个处理器在执行指令时被配置为:在外部装置的显示器上显示应用的第一用户界面时,通过使用电子装置的显示器在包括第一区域和第二区域的区域中显示应用的第二用户界面;并且响应于所述接收,通过使用电子装置的显示器来显示从第二用户界面改变的虚拟触摸板和虚拟键盘。
根据各种实施例,所述至少一个处理器在执行指令时还被配置为:当在第一区域中显示虚拟触摸板并且在第二区域中显示虚拟键盘时,接收从第一区域朝向第二区域的拖动输入;在拖动输入的接触保持在电子装置的显示器上时,将跨包括在虚拟键盘中的多个键中的任何一个键移动的拖动输入的路径识别为虚拟触摸板上的输入的一部分而不是虚拟键盘上的输入的一部分;并且基于所述识别,通过使用通信电路改变正在外部装置的显示器上显示的第一用户界面的表示。根据各种实施例,所述至少一个处理器在执行指令时被配置为:当在电子装置的显示器上拖动输入的接触被保持时,通过响应于识别出拖动输入被发起而禁用虚拟键盘,将跨虚拟键盘中包括的多个键中的任何一个键移动的拖动输入的路径识别为虚拟触摸板上的输入的一部分而不是虚拟键盘上的输入的一部分。根据各种实施例,所述至少一个处理器在执行所述指令时还被配置为:在电子装置的显示器上拖动输入的接触被保持时,在虚拟键盘上方显示用于指示虚拟键盘被禁用的半透明层。
根据各种实施例,所述至少一个处理器在执行指令时还被配置为:当在第一区域中显示虚拟触摸板并且在第二区域中显示虚拟键盘时,从第一区域接收拖动输入;以及响应于识别出在电子装置的显示器上拖动输入的接触被保持时拖动输入从第一区域朝向第二区域,改变虚拟键盘的表示以避免拖动输入和虚拟键盘之间的接触。根据各种实施例,所述至少一个处理器在执行指令时还被配置为:响应于识别出在电子装置的显示器上拖动输入的接触被保持时拖动输入从第二区域朝向第一区域,恢复虚拟键盘的先前表示。
根据各种实施例,所述至少一个处理器在执行指令时还被配置为:在通过使用电子装置的显示器在第一区域中显示虚拟触摸板并且在第二区域中显示虚拟键盘时,响应于识别出电子装置的方向被改变,改变虚拟触摸板和虚拟键盘的布置。
根据各种实施例,所述至少一个处理器在执行指令时还被配置为:在通过使用电子装置的显示器在第一区域中显示虚拟触摸板并且在第二区域中显示虚拟键盘时,响应于接收到用于移动虚拟键盘的侧边中的指定侧边的触摸输入,从第二区域移动虚拟键盘。根据各种实施例,所述至少一个处理器在执行指令时还被配置为:在通过使用电子装置的显示器在第一区域中显示虚拟触摸板并且在第二区域中显示虚拟键盘时,响应于接收到用于移动虚拟键盘的剩余侧边中的侧边的触摸输入,对显示虚拟键盘的区域进行放大或缩小。
根据各种实施例,所述至少一个处理器在执行指令时还被配置为:当在外部装置的显示器上显示应用的第一用户界面时,通过使用电子装置的显示器在包括第一区域和第二区域的区域中显示应用的第二用户界面,并且其中,指定输入与包括在第二用户界面中的多个可执行对象中的指定对象上的触摸输入相应。
根据各种实施例,指定输入与识别出在外部装置的显示器上显示应用的第一用户界面时电子装置的姿态被改变为指定姿态相应。
根据各种实施例,所述至少一个处理器在执行指令时还被配置为:在外部装置的显示器上显示应用的第一用户界面时,通过使用电子装置的显示器在包括第一区域和第二区域的区域中显示应用的第二用户界面,并且其中,指定输入与包括在第一用户界面中的文本输入部分或包括在第二用户界面中的文本输入部分上的触摸输入相应。
根据各种实施例,第二区域布置在第一区域下方。
根据各种实施例,一种非暂时性计算机可读存储介质可以存储程序,其中,所述程序在由电子装置的处理器执行时使得电子装置执行以下操作:在与电子装置不同的另一电子装置的显示器上显示在电子装置中执行的应用的第一用户界面;响应于在另一电子装置的显示器上显示第一用户界面时接收到指定输入,通过使用电子装置的显示器在第一区域中显示虚拟触摸板并且在与第一区域不同的第二区域中显示虚拟键盘。
根据各种实施例,所述程序还使得电子装置执行以下操作:在另一电子装置的显示器上显示应用的第一用户界面时,通过使用电子装置的显示器在包括第一区域和第二区域的区域中显示应用的第二用户界面;并且响应于所述接收,通过使用电子装置的显示器来显示从第二用户界面改变的虚拟触摸板和虚拟键盘。
根据各种实施例,所述程序还使得电子装置执行以下操作:当在第一区域中显示虚拟触摸板并且在第二区域中显示虚拟键盘时,接收从第一区域朝向第二区域的拖动输入;在拖动输入的接触保持在电子装置的显示器上时,将跨虚拟键盘中包括的多个键中的任何一个键移动的拖动输入的路径识别为虚拟触摸板上的输入的一部分而不是虚拟键盘上的输入的一部分;并且基于所述识别,通过使用电子装置的通信电路来改变正在另一电子装置的显示器上显示的第一用户界面的表示。根据各种实施例,所述程序还使得电子装置执行以下操作:在电子装置的显示器上拖动输入的接触被保持时,在虚拟键盘上方显示用于指示虚拟键盘被禁用的半透明层。
根据各种实施例,所述程序还使得电子装置执行以下操作:当在第一区域中显示虚拟触摸板并且在第二区域中显示虚拟键盘时,从第一区域接收拖动输入;并且响应于识别出在电子装置的显示器上拖动输入的接触被保持时拖动输入为从第一区域朝向第二区域,改变虚拟键盘的表示以避免拖动输入和虚拟键盘之间的接触。根据各种实施例,所述程序还使得电子装置执行以下操作:响应于识别出在电子装置的显示器上拖动输入的接触被保持时拖动输入从第二区域朝向第一区域,恢复虚拟键盘的先前表示。
图8是示出根据本公开的各种实施例的电子装置的操作的示例的示图。操作可以由图1或图2所示的电子装置101执行,或者可以由电子装置101中包括的处理器210执行。
参照图8,在操作801,处理器210可以使用通信电路240在外部电子装置的显示器上显示在电子装置101中正在执行的应用的第一用户界面。根据各种实施例,在外部装置的显示器上显示应用的第一用户界面时,处理器210可以使用显示器230显示应用的第二用户界面。根据各种实施例,外部电子装置的显示器的显示区域的尺寸可以大于显示器230的显示区域的尺寸。根据各种实施例,第一用户界面可包括由第二用户界面提供的内容和未由第二用户界面提供的其他内容。
在操作802,处理器210可以在外部电子装置的显示器上显示第一用户界面时接收指定输入。例如,指定输入可以与在第二用户界面中包括的多个可执行对象中的指定对象上的触摸输入相应。作为另一示例,指定输入可以与识别出在外部装置的显示器上显示第一用户界面时电子装置101的姿态被改变为指定姿态相应。作为另一示例,指定输入可以与包括在第一用户界面中的文本输入部分上的输入相应或与包括在第二用户界面中的文本输入部分上的输入相应。然而,本公开不限于此。
在操作803,响应于接收到指定输入,处理器210可以使用显示器230在第一区域中显示虚拟触摸板,并且可以在与第一区域不同的第二区域中显示虚拟键盘。例如,第二区域可以布置在第一区域下方。根据各种实施例,处理器210可以响应于接收到指定输入而显示从第二用户界面改变的虚拟触摸板和虚拟键盘。根据各种实施例,在第一区域中显示虚拟触摸板并且在第二区域中显示虚拟键盘时,处理器210可以响应于识别出电子装置101的方向被改变,改变虚拟触摸板和虚拟键盘的布置或表示。根据各种实施例,在第一区域中显示虚拟触摸板并且在第二区域中显示虚拟键盘时,处理器210可以响应于接收到用于移动虚拟键盘的侧边中的指定侧边的触摸输入,将虚拟键盘从第二区域移动到另一区域。根据各种实施例,在第一区域中显示虚拟触摸板并且在第二区域中显示虚拟键盘时,处理器210可以响应于接收到用于移动虚拟键盘的剩余侧边中的一个的触摸输入,对用于显示虚拟键盘的区域进行放大或缩小。然而,本公开不限于此。
如上所述,根据各种实施例的电子装置101可以同时显示虚拟触摸板和虚拟键盘作为虚拟输入工具,使得用户容易地引起关于在外部装置的显示器上显示的应用的用户界面的交互。电子装置101可以通过显示虚拟触摸板和虚拟键盘来提供增强的用户体验。
图9是示出根据本公开的各种实施例的由电子装置确定虚拟触摸板和虚拟键盘的布置的操作的示例的示图。操作可以由图1或图2所示的电子装置101执行,或者可以由电子装置101中包括的处理器210执行。
图9的操作901至904可以与图8的操作802相关。
参照图9,在操作901,处理器210可以接收指定输入。
在操作902,响应于接收到指定输入,处理器210可以识别提供在外部装置的显示器上显示的用户界面的应用的类型。例如,处理器210可以识别应用是否是用于编辑文档的应用、用于玩游戏的应用、用于网络搜索的应用等。
在操作903,处理器210可以基于识别的应用类型来确定虚拟触摸板和虚拟键盘的配置。例如,当对正在外部装置的显示器上显示的用户界面进行提供的应用被识别为主要需要指针的移动的应用时,处理器210可以确定将虚拟触摸板显示为大于虚拟键盘。作为另一示例,当对正在外部装置的显示器上显示的用户界面进行提供的应用被识别为主要需要输入字符的应用时,处理器210可以确定将虚拟触摸板显示为小于虚拟键盘。然而,本公开不限于此。
在操作904,处理器210可以将基于确定的配置获得的帧数据提供给显示器230。例如,处理器210可以将帧数据记录在嵌入在显示器230中的存储器(例如,图形RAM(GRAM))中。帧数据可以用于在显示器上显示虚拟触摸板和虚拟键盘。
如上所述,根据各种实施例的电子装置101可根据应用类型自适应地改变虚拟触摸板和虚拟键盘的配置。根据各种实施例的电子装置101可以通过自适应地进行改变来提供增强的用户体验。
图10是示出根据本公开的各种实施例的由电子装置禁用虚拟触摸板和虚拟键盘的操作的示例的示图。操作可以由图1或图2所示的电子装置101执行,或者可以由电子装置101中包括的处理器210执行。
图10的操作1001至1010可以与图8的操作803相关。
参照图10,在操作1001,处理器210可以在第一区域中显示虚拟触摸板,并且可以在第二区域中显示虚拟键盘。
在操作1002,处理器210可以在第一区域中显示虚拟触摸板并且在第二区域中显示虚拟键盘时接收拖动输入。
在操作1003,处理器210可以识别拖动输入是否从第一区域开始。例如,处理器210可以识别拖动输入是否从第一区域开始,以便防止在虚拟键盘或虚拟触摸板上发生基于拖动输入的输入错误。处理器210可以响应于识别拖动输入从第一区域开始而执行操作1004。与以上内容不同,处理器210可以响应于识别出拖动输入从第二区域开始而执行操作1005。
在操作1004,响应于识别出拖动输入从第一区域开始,处理器210可以在显示器上的拖动输入的接触被保持时禁用虚拟键盘。处理器210可以禁用虚拟键盘,以便防止在虚拟键盘上发生基于拖动输入的输入错误。
在操作1005,响应于识别出拖动输入从第二区域开始,处理器210可以在显示器上的拖动输入的接触被保持时禁用虚拟触摸板。处理器210可以禁用虚拟触摸板,以便防止在虚拟触摸板上发生基于拖动输入的输入错误。
在操作1006,在禁用虚拟键盘或虚拟触摸板时,处理器210可以识别出拖动输入被释放。
在操作1007,处理器210可以在释放拖动输入之后接收另一拖动输入。
在操作1008,处理器210可以识别是否在指定的时间段内接收到所述另一拖动输入。例如,处理器210可以识别是否在指定的时间段内接收到所述另一拖动输入,以便识别所述另一拖动输入是否是所述拖动输入之后的输入。处理器210可以响应于识别出在指定的时间段内接收到所述另一拖动输入而执行操作1009。与以上内容不同,处理器210可以响应于识别出超出指定时间段之后接收到所述另一拖动输入而执行操作1010。
在操作1009,响应于识别出在指定时间段内接收到其他拖动输入,处理器210可以独立于所述另一拖动输入的开始点将虚拟触摸板或虚拟键盘保持在禁用状态。如果识别出在指定时间段内接收到所述另一拖动输入,则处理器210可以独立于其他拖动输入的开始点将虚拟触摸板或虚拟键盘保持在禁用状态,以便将所述另一拖动输入处理为拖动输入之后的输入。
在操作1010,响应于识别出超出指定时间段之后之外接收到所述另一拖动输入,处理器210可以基于所述另一拖动输入的开始点来确定虚拟触摸板或虚拟键盘的状态。例如,如果所述另一拖动输入从显示虚拟触摸板的第一区域开始,则处理器210可以将虚拟触摸板的状态确定为启用,并且可以将虚拟键盘的状态确定为禁用,并且可以基于所述确定来控制虚拟触摸板和虚拟键盘。作为另一示例,如果所述另一拖动输入从显示虚拟触摸板的第二区域开始,则处理器210可以将虚拟键盘的状态确定为启用,并且可以将虚拟触摸板的状态确定为禁用,并且可以基于所述确定来控制虚拟触摸板和虚拟键盘。
如上所述,根据各种实施例的电子装置101可以禁用虚拟触摸板或虚拟键盘,以便防止由在同时显示虚拟触摸板和虚拟键盘时接收到的用户输入意外地引起的输入错误。根据各种实施例的电子装置101可以通过禁用来提供增强的用户体验。
如上所述,根据各种实施例的操作电子装置的方法可以包括:在外部装置的显示器上显示在电子装置中执行的应用的第一用户界面;在外部装置的显示器上显示第一用户界面时,接收指定输入;并且响应于所述接收,使用电子装置的显示器在第一区域中显示虚拟触摸板并且在与第一区域不同的第二区域中显示虚拟键盘。
根据各种实施例,显示第一用户界面的操作可以包括:在外部装置的显示器中显示应用的第一用户界面时,使用电子装置的显示器在包括第一区域和第二区域的区域中显示应用的第二用户界面。显示虚拟触摸板和虚拟键盘的操作可包括:响应于所述接收,使用电子装置的显示器来显示从第二用户界面改变的虚拟触摸板和虚拟键盘。
根据各种实施例,所述方法还可以包括:在第一区域中显示虚拟触摸板并且在第二区域中显示虚拟键盘时,接收从第一区域朝向第二区域的拖动输入;在拖动输入的接触保持在显示器上时,将跨包括在虚拟键盘中的多个键中的任何一个键移动的拖动输入的路径识别为虚拟触摸板上的输入的一部分而不是虚拟键盘上的输入的一部分;并且基于所述识别,使用通信电路来改变正在外部装置的显示器上显示的第一用户界面的表示。根据各种实施例,识别操作可以包括:当在显示器上拖动输入的接触被保持时,通过响应于识别出拖动输入被发起而禁用虚拟键盘,将跨虚拟键盘中包括的多个键中的任何一个键移动的拖动输入的路径识别为虚拟触摸板上的输入的一部分而不是虚拟键盘上的输入的一部分。根据各种实施例,所述方法还可以包括:在显示器上拖动输入的接触被保持时,在虚拟键盘上方显示用于指示虚拟键盘被禁用的半透明层。
根据各种实施例,所述方法还可以包括:在第一区域中显示虚拟触摸板并且在第二区域中显示虚拟键盘时,从第一区域接收拖动输入;以及响应于识别出在显示器上拖动输入的接触被保持时拖动输入从第一区域朝向第二区域,改变虚拟键盘的表示以避免拖动输入和虚拟键盘之间的接触。根据各种实施例,所述方法还可以包括:响应于识别出在显示器上拖动输入的接触被保持时拖动输入从第二区域朝向第一区域,恢复虚拟键盘的先前表示。
根据各种实施例,所述方法还可以包括:当虚拟触摸板被显示在第一区域中并且虚拟键盘被显示在第二区域中时,响应于识别出电子装置的方向被改变,使用显示器来改变虚拟触摸板和虚拟键盘的布置。
根据各种实施例,所述方法还可以包括:当使用显示器在第一区域中显示虚拟触摸板并且在第二区域中显示虚拟键盘时,响应于接收到用于移动虚拟键盘的侧边中的指定侧边的触摸输入,从第二区域移动虚拟键盘。根据各种实施例,所述方法还可以包括:当使用显示器在第一区域中显示虚拟触摸板并且在第二区域中显示虚拟键盘时,响应于接收到用于移动虚拟键盘的剩余侧边中的单个侧边的触摸输入,对用于显示虚拟键盘的区域进行放大或缩小。
根据各种实施例,所述方法还可以包括:当在外部装置的显示器上显示应用的第一用户界面时,使用电子装置的显示器在包括第一区域和第二区域的区域中显示应用的第二用户界面,并且指定输入可以与包括在第二用户界面中的多个可执行对象中的指定对象上的触摸输入相应。
根据各种实施例,所述方法还可以包括:当在外部装置的显示器上显示应用的第一用户界面时,使用电子装置的显示器在包括第一区域和第二区域的区域中显示应用的第二用户界面,并且指定输入可以与包括在第一用户界面中的文本输入部分或包括在第二用户界面中的文本输入部分上的触摸输入相应。
根据各种实施例的权利要求和/或说明书中陈述的方法可以通过硬件、软件或硬件和软件的组合被实现。
当方法由软件实现时,可以提供用于存储一个或更多个程序(软件模块)的计算机可读存储介质。存储在计算机可读存储介质中的一个或更多个程序可以被配置为由电子装置内的一个或更多个处理器执行。至少一个程序可以包括使电子装置执行根据由所附权利要求限定和/或这里公开的本公开的各种实施例的方法的指令。
程序(软件模块或软件)可以存储在包括RAM和闪存、ROM、电可擦除可编程ROM(EEPROM)、磁盘存储装置、光盘-ROM(CD-ROM)、数字通用光盘(DVD)或其他类型的光学存储装置或磁带盒的非易失性存储器中。可选地,这些非易失性存储器中的一些或全部的任何组合可以形成存储程序的存储器。此外,电子装置中可以包括多个这样的存储器。
另外,程序可以存储在可通过通信网络(诸如互联网、内联网、LAN、WAN和存储区域网络(SAN)或其组合)访问的可附接的存储装置中。这样的存储装置可以经由外部端口访问电子装置。此外,通信网络上的单独的存储装置可以访问便携式电子装置。
在本公开的上述详细实施例中,根据所呈现的详细实施例,本公开中包括的组件以单数或复数被表示。然而,选择单数形式或复数形式是为了便于描述适合于所呈现的情况,并且本公开的各种实施例不限于其单个元件或多个元件。此外,说明书中表示的多个元件可以被配置为单个元件,或者说明书中的单个元件可以被配置为多个元件。
虽然已经参考本公开的各种实施例示出和描述了本公开,但是本领域技术人员将理解,在不脱离由所附权利要求及其等同物限定的本公开的精神和范围的情况下,可以在其中进行形式和细节上的各种改变。
Claims (15)
1.一种电子装置,包括:
通信电路;
至少一个存储器,存储指令;
显示器;以及
至少一个处理器,
其中,所述至少一个处理器在执行指令时被配置为:
执行应用,
使用通信电路将用户界面信息发送到外部装置,其中,外部装置基于用户界面信息显示应用的第一用户界面,
在第一用户界面被外部装置显示时,接收指定输入,以及
响应于接收到所述指定输入,在电子装置的显示器上在第一区域中显示虚拟触摸板并在与第一区域不同的第二区域中显示虚拟键盘。
2.如权利要求1所述的电子装置,其中,所述至少一个处理器在执行指令时还被配置为:
在第一用户界面被外部装置显示时,在第一区域和第二区域中显示应用的第二用户界面;以及
响应于接收到所述指定输入,显示由第二用户界面改变的虚拟触摸板和虚拟键盘。
3.如权利要求1所述的电子装置,其中,所述至少一个处理器在执行指令时还被配置为:
当在第一区域中显示虚拟触摸板并且在第二区域中显示虚拟键盘时,接收从第一区域朝向第二区域的拖动输入;
在拖动输入的接触被保持并且跨虚拟键盘的键移动时,将拖动输入的路径识别为虚拟触摸板上的输入而不是虚拟键盘上的输入;以及
通过使用通信电路发送信息,以基于路径来改变由外部装置显示的第一用户界面。
4.如权利要求3所述的电子装置,其中,所述至少一个处理器在执行指令时还被配置为:
响应于识别出拖动输入被发起而禁用虚拟键盘。
5.如权利要求4所述的电子装置,其中,所述至少一个处理器在执行指令时还被配置为:
在拖动输入的接触被保持时,将虚拟键盘显示为半透明层以指示虚拟键盘被禁用。
6.如权利要求1所述的电子装置,其中,所述至少一个处理器在执行指令时还被配置为:
当在第一区域中显示虚拟触摸板并且在第二区域中显示虚拟键盘时,接收在第一区域中开始的拖动输入;以及
响应于识别出在拖动输入的接触被保持时拖动输入从第一区域朝向第二区域,改变虚拟键盘的表示以阻止拖动输入与虚拟键盘之间的接触。
7.如权利要求6所述的电子装置,其中,所述至少一个处理器在执行指令时还被配置为:
响应于识别出在拖动输入的接触被保持时拖动输入从第二区域朝向第一区域,恢复虚拟键盘的表示。
8.如权利要求1所述的电子装置,其中,所述至少一个处理器在执行指令时还被配置为:
当在第一区域中显示虚拟触摸板并且在第二区域中显示虚拟键盘时,响应于识别出电子装置的朝向被改变,改变虚拟触摸板和虚拟键盘的布置。
9.如权利要求1所述的电子装置,其中,所述至少一个处理器在执行指令时还被配置为:
当在第一区域中显示虚拟触摸板并且在第二区域中显示虚拟键盘时,响应于接收到用于移动虚拟键盘的侧边的触摸输入,从第二区域移动虚拟键盘。
10.如权利要求9所述的电子装置,其中,所述至少一个处理器在执行指令时还被配置为:
当在第一区域中显示虚拟触摸板并且在第二区域中显示虚拟键盘时,响应于接收到用于移动虚拟键盘的不同侧边的触摸输入,对显示虚拟键盘的区域进行放大或缩小。
11.如权利要求1所述的电子装置,
其中,所述至少一个处理器在执行指令时还被配置为:
在应用的第一用户界面被外部装置显示时,在第一区域和第二区域中显示应用的第二用户界面,并且
其中,所述指定输入与第二用户界面中的指定对象上的触摸输入相应。
12.如权利要求1所述的电子装置,其中,所述指定输入与将电子装置的朝向改变为指定的朝向相应。
13.如权利要求1所述的电子装置,
其中,所述至少一个处理器在执行指令时还被配置为:
在第一用户界面被外部装置显示时,在第一区域和第二区域中显示应用的第二用户界面,并且
其中,所述指定输入与包括在第一用户界面中的文本输入部分或包括在第二用户界面中的文本输入部分上的触摸输入相应。
14.如权利要求1所述的电子装置,其中,第二区域布置在第一区域下方。
15.一种存储程序的非暂时性计算机可读存储介质,其中,所述程序在由电子装置的处理器执行时使得电子装置执行以下操作:
执行应用;
将用户界面信息发送到另一电子装置,其中,所述另一电子装置基于用户界面信息显示应用的第一用户界面;
响应于在第一用户界面被所述另一电子装置显示时接收到指定输入,在电子装置的显示器上在第一区域中显示虚拟触摸板并且在与第一区域不同的第二区域中显示虚拟键盘。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020180090321A KR102545598B1 (ko) | 2018-08-02 | 2018-08-02 | 가상 입력 툴을 제공하기 위한 전자 장치 및 방법 |
KR10-2018-0090321 | 2018-08-02 | ||
PCT/KR2019/006579 WO2020027417A1 (en) | 2018-08-02 | 2019-05-31 | Electronic device and method for providing virtual input tool |
Publications (1)
Publication Number | Publication Date |
---|---|
CN112534390A true CN112534390A (zh) | 2021-03-19 |
Family
ID=69229727
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201980051477.3A Pending CN112534390A (zh) | 2018-08-02 | 2019-05-31 | 用于提供虚拟输入工具的电子装置及其方法 |
Country Status (5)
Country | Link |
---|---|
US (1) | US11340776B2 (zh) |
EP (1) | EP3791253B1 (zh) |
KR (1) | KR102545598B1 (zh) |
CN (1) | CN112534390A (zh) |
WO (1) | WO2020027417A1 (zh) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112416238A (zh) * | 2020-11-30 | 2021-02-26 | 联想(北京)有限公司 | 信息处理方法、装置及电子设备和存储介质 |
US20220382374A1 (en) * | 2021-05-26 | 2022-12-01 | Da-Yuan Huang | Methods, devices, and computer-readable storage media for performing a function based on user input |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20100241985A1 (en) * | 2009-03-23 | 2010-09-23 | Core Logic, Inc. | Providing Virtual Keyboard |
US20130016040A1 (en) * | 2011-07-11 | 2013-01-17 | Samsung Electronics Co. Ltd. | Method and apparatus for displaying screen of portable terminal connected with external device |
US20150378599A1 (en) * | 2014-06-26 | 2015-12-31 | Samsung Electronics Co., Ltd. | Method and electronic device for displaying virtual keyboard |
CN105468182A (zh) * | 2014-09-09 | 2016-04-06 | 富泰华工业(深圳)有限公司 | 虚拟键盘显示系统及方法 |
Family Cites Families (17)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5681220A (en) | 1994-03-18 | 1997-10-28 | International Business Machines Corporation | Keyboard touchpad combination in a bivalve enclosure |
US20050114825A1 (en) * | 2003-11-24 | 2005-05-26 | International Business Machines Corporation | Laptop computer including a touch-sensitive display and method of driving the laptop computer |
US7661069B2 (en) * | 2005-03-31 | 2010-02-09 | Microsoft Corporation | System and method for visually expressing user interface elements |
KR20070079858A (ko) | 2006-02-03 | 2007-08-08 | 유주영 | 터치패드를 이용한 드래그 기능 구현 방법 |
US9015616B2 (en) * | 2008-10-22 | 2015-04-21 | Google Inc. | Search initiation |
US8527894B2 (en) * | 2008-12-29 | 2013-09-03 | International Business Machines Corporation | Keyboard based graphical user interface navigation |
US20110248822A1 (en) * | 2010-04-09 | 2011-10-13 | Jc Ip Llc | Systems and apparatuses and methods to adaptively control controllable systems |
US20130082840A1 (en) * | 2011-10-03 | 2013-04-04 | Research In Motion Limited | Method and Apparatus Pertaining to Automatically Moving a Component that Comprises a Part of a Portable Electronic Device |
WO2013061647A1 (ja) * | 2011-10-28 | 2013-05-02 | 本田技研工業株式会社 | 車両診断方法及び外部診断装置 |
KR101978687B1 (ko) * | 2011-11-15 | 2019-05-16 | 삼성전자주식회사 | 터치스크린 단말기에서 문자 입력 방법 및 장치 |
US9035883B2 (en) * | 2012-03-07 | 2015-05-19 | Google Technology Holdings LLC | Systems and methods for modifying virtual keyboards on a user interface |
US9378581B2 (en) * | 2012-03-13 | 2016-06-28 | Amazon Technologies, Inc. | Approaches for highlighting active interface elements |
KR102066040B1 (ko) | 2012-08-27 | 2020-01-15 | 삼성전자 주식회사 | 휴대 장치의 입력 처리 방법 및 그 휴대 장치 |
KR20140055327A (ko) | 2012-10-31 | 2014-05-09 | 김태혁 | 터치 방식 입력장치를 갖는 이동 단말기의 사용자 모니터와 연동을 위한 인터페이스 방법 |
JP5972827B2 (ja) * | 2013-05-17 | 2016-08-17 | 京セラ株式会社 | 携帯電子機器、制御方法及び制御プログラム |
US9176668B2 (en) * | 2013-10-24 | 2015-11-03 | Fleksy, Inc. | User interface for text input and virtual keyboard manipulation |
KR20170066916A (ko) | 2015-12-07 | 2017-06-15 | 삼성전자주식회사 | 전자 장치 및 그의 제어 방법 |
-
2018
- 2018-08-02 KR KR1020180090321A patent/KR102545598B1/ko active IP Right Grant
-
2019
- 2019-05-31 US US16/428,066 patent/US11340776B2/en active Active
- 2019-05-31 CN CN201980051477.3A patent/CN112534390A/zh active Pending
- 2019-05-31 WO PCT/KR2019/006579 patent/WO2020027417A1/en unknown
- 2019-05-31 EP EP19845545.3A patent/EP3791253B1/en active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20100241985A1 (en) * | 2009-03-23 | 2010-09-23 | Core Logic, Inc. | Providing Virtual Keyboard |
US20130016040A1 (en) * | 2011-07-11 | 2013-01-17 | Samsung Electronics Co. Ltd. | Method and apparatus for displaying screen of portable terminal connected with external device |
US20150378599A1 (en) * | 2014-06-26 | 2015-12-31 | Samsung Electronics Co., Ltd. | Method and electronic device for displaying virtual keyboard |
CN105468182A (zh) * | 2014-09-09 | 2016-04-06 | 富泰华工业(深圳)有限公司 | 虚拟键盘显示系统及方法 |
Also Published As
Publication number | Publication date |
---|---|
US11340776B2 (en) | 2022-05-24 |
KR102545598B1 (ko) | 2023-06-20 |
KR20200015045A (ko) | 2020-02-12 |
EP3791253B1 (en) | 2023-10-18 |
EP3791253A4 (en) | 2021-06-23 |
WO2020027417A1 (en) | 2020-02-06 |
US20200042167A1 (en) | 2020-02-06 |
EP3791253A1 (en) | 2021-03-17 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11599154B2 (en) | Adaptive enclosure for a mobile computing device | |
US11609681B2 (en) | Reduced size configuration interface | |
EP3164785B1 (en) | Wearable device user interface control | |
CN105335001B (zh) | 具有弯曲显示器的电子设备以及用于控制其的方法 | |
US10754546B2 (en) | Electronic device and method for executing function using input interface displayed via at least portion of content | |
KR20160050682A (ko) | 전자장치의 화면 표시 제어 방법 및 장치 | |
US10890982B2 (en) | System and method for multipurpose input device for two-dimensional and three-dimensional environments | |
US10481790B2 (en) | Method and apparatus for inputting information by using on-screen keyboard | |
US11137838B2 (en) | Electronic device for storing user data, and method therefor | |
KR20150039552A (ko) | 전자 장치의 디스플레이 조작 방법 및 그 전자 장치 | |
US11340776B2 (en) | Electronic device and method for providing virtual input tool | |
US9665232B2 (en) | Information-processing device, storage medium, information-processing method, and information-processing system for enlarging or reducing an image displayed on a display device | |
KR20180058097A (ko) | 이미지를 표시하는 전자 장치 및 그 제어 방법 | |
TWI681307B (zh) | 電子裝置、儲存媒體以及處理輸入電子裝置的字母的方法 | |
CN107924276B (zh) | 电子设备及其文本输入方法 | |
KR20160024505A (ko) | 전자 장치 및 이의 입력 방법 | |
KR20160002760U (ko) | 다이얼을 가지는 전자 장치 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |