CN113655927B - 一种界面交互方法与设备 - Google Patents
一种界面交互方法与设备 Download PDFInfo
- Publication number
- CN113655927B CN113655927B CN202110977113.7A CN202110977113A CN113655927B CN 113655927 B CN113655927 B CN 113655927B CN 202110977113 A CN202110977113 A CN 202110977113A CN 113655927 B CN113655927 B CN 113655927B
- Authority
- CN
- China
- Prior art keywords
- interface
- application
- trigger
- identifier
- interfaces
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 230000003993 interaction Effects 0.000 title claims abstract description 55
- 238000000034 method Methods 0.000 title claims abstract description 47
- 230000006870 function Effects 0.000 claims description 57
- 230000015654 memory Effects 0.000 claims description 37
- 238000004590 computer program Methods 0.000 claims description 15
- 230000004886 head movement Effects 0.000 claims description 13
- 238000012790 confirmation Methods 0.000 claims description 10
- 230000001960 triggered effect Effects 0.000 claims description 7
- 230000009191 jumping Effects 0.000 claims description 3
- 238000004891 communication Methods 0.000 description 9
- 230000002452 interceptive effect Effects 0.000 description 6
- 230000005291 magnetic effect Effects 0.000 description 6
- 238000005516 engineering process Methods 0.000 description 5
- 230000033001 locomotion Effects 0.000 description 5
- 238000012545 processing Methods 0.000 description 5
- 230000003287 optical effect Effects 0.000 description 4
- 230000003190 augmentative effect Effects 0.000 description 3
- 230000005540 biological transmission Effects 0.000 description 3
- 239000011521 glass Substances 0.000 description 3
- 239000004973 liquid crystal related substance Substances 0.000 description 2
- 238000005259 measurement Methods 0.000 description 2
- 230000000903 blocking effect Effects 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 230000001276 controlling effect Effects 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 230000005294 ferromagnetic effect Effects 0.000 description 1
- 230000010365 information processing Effects 0.000 description 1
- 238000009434 installation Methods 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 239000013307 optical fiber Substances 0.000 description 1
- 230000001105 regulatory effect Effects 0.000 description 1
- 238000001228 spectrum Methods 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 238000010408 sweeping Methods 0.000 description 1
- 230000001360 synchronised effect Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/44—Arrangements for executing specific programs
- G06F9/451—Execution arrangements for user interfaces
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Software Systems (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
本申请的目的是提供一种界面交互方法与设备，包括：通过头戴设备的显示装置呈现用户正在使用的当前应用的当前应用界面；获取所述用户关于所述当前应用界面的界面交互操作；基于所述界面交互操作呈现对应的应用操作界面，其中，所述应用操作界面包括多个界面，所述多个界面包括所述当前应用界面及所述当前应用界面的多个侧边界面，所述多个侧边界面包括对应的应用标识界面和功能界面，所述应用标识界面用于呈现多个应用标识，所述功能界面包括快捷功能界面，所述快捷功能界面包括至少一个快捷指令标识，每个快捷指令标识用于触发并生成对应快捷指令。本申请保证了交互极简化，提升用户操作体验。
Description
技术领域
本申请涉及通信领域，尤其涉及一种界面交互的技术。
背景技术
现有的头戴式显示设备(增强现实或虚拟现实设备)的交互界面不友好，交互步骤太繁琐，不便于使用者的操作，因而影响了使用体验。
发明内容
本申请的一个目的是提供一种界面交互方法与设备。
根据本申请的一个方面，提供了一种界面交互方法，该方法包括：
通过头戴设备的显示装置呈现用户正在使用的当前应用的当前应用界面；
获取所述用户关于所述当前应用界面的界面交互操作；
基于所述界面交互操作呈现对应的应用操作界面，其中，所述应用操作界面包括多个界面，所述多个界面包括所述当前应用界面及所述当前应用界面的多个侧边界面，所述多个侧边界面包括对应的应用标识界面和功能界面，所述应用标识界面用于呈现多个应用标识，所述功能界面包括快捷功能界面，所述快捷功能界面包括至少一个快捷指令标识，每个快捷指令标识用于触发并生成对应快捷指令。
根据本申请的一个方面，提供了一种界面交互设备，该设备包括：
一一模块，用于通过头戴设备的显示装置呈现用户正在使用的当前应用的当前应用界面；
一二模块，用于获取所述用户关于所述当前应用界面的界面交互操作；
一三模块，用于基于所述界面交互操作呈现对应的应用操作界面，其中，所述应用操作界面包括多个界面，所述多个界面包括所述当前应用界面及所述当前应用界面的多个侧边界面，所述多个侧边界面包括对应的应用标识界面和功能界面，所述应用标识界面用于呈现多个应用标识，所述功能界面包括快捷功能界面，所述快捷功能界面包括至少一个快捷指令标识，每个快捷指令标识用于触发并生成对应快捷指令。
根据本申请的一个方面，提供了一种计算机设备，其中，该设备包括：
处理器；以及
被安排成存储计算机可执行指令的存储器，所述可执行指令在被执行时使所述处理器执行如上任一所述方法的步骤。
根据本申请的一个方面，提供了一种计算机可读存储介质，其上存储有计算机程序/指令，其特征在于，该计算机程序/指令在被执行时使得系统进行执行如上任一所述方法的步骤。
根据本申请的一个方面，提供了一种计算机程序产品，包括计算机程序/指令，其特征在于，该计算机程序/指令被处理器执行时实现如上任一所述方法的步骤。
与现有技术相比，本申请通过所述用户关于所述当前应用界面的界面交互操作，在应用操作界面中呈现多个界面，从而方便用户在屏幕中实现相应操作，无需先从当前应用返回主界面，再找到对应的操作位置进行点击等繁琐动作来进行相应操作，保证了交互极简化，提升用户操作体验。
附图说明
通过阅读参照以下附图所作的对非限制性实施例所作的详细描述，本申请的其它特征、目的和优点将会变得更明显：
图1示出根据本申请一个实施例的一种界面交互方法流程图；
图2示出根据本申请另一个实施例的一种应用操作界面的示例图；
图3示出根据本申请一个实施例的一种头戴设备的功能模块；
图4示出可被用于实施本申请中所述的各个实施例的示例性系统。
附图中相同或相似的附图标记代表相同或相似的部件。
具体实施方式
下面结合附图对本申请作进一步详细描述。
在本申请一个典型的配置中，终端、服务网络的设备和可信方均包括一个或多个处理器(例如，中央处理器(Central Processing Unit，CPU))、输入/输出接口、网络接口和内存。
内存可能包括计算机可读介质中的非永久性存储器，随机存取存储器(RandomAccess Memory，RAM)和/或非易失性内存等形式，如只读存储器(Read Only Memory，ROM)或闪存(Flash Memory)。内存是计算机可读介质的示例。
计算机可读介质包括永久性和非永久性、可移动和非可移动媒体可以由任何方法或技术来实现信息存储。信息可以是计算机可读指令、数据结构、程序的模块或其他数据。计算机的存储介质的例子包括，但不限于相变内存(Phase-Change Memory，PCM)、可编程随机存取存储器(Programmable Random Access Memory，PRAM)、静态随机存取存储器(Static Random-Access Memory，SRAM)、动态随机存取存储器(Dynamic Random AccessMemory，DRAM)、其他类型的随机存取存储器(RAM)、只读存储器(ROM)、电可擦除可编程只读存储器(Electrically-Erasable Programmable Read-Only Memory，EEPROM)、快闪记忆体或其他内存技术、只读光盘只读存储器(Compact Disc Read-Only Memory，CD-ROM)、数字多功能光盘(Digital Versatile Disc,DVD)或其他光学存储、磁盒式磁带，磁带磁盘存储或其他磁性存储设备或任何其他非传输介质，可用于存储可以被计算设备访问的信息。
本申请所指设备包括但不限于用户设备、网络设备、或用户设备与网络设备通过网络相集成所构成的设备。所述用户设备包括但不限于任何一种可与用户进行人机交互的移动电子产品，例如智能手机、平板电脑、头戴设备等，所述移动电子产品可以采用任意操作系统，如Android操作系统、iOS操作系统等。其中，所述网络设备包括一种能够按照事先设定或存储的指令，自动进行数值计算和信息处理的电子设备，其硬件包括但不限于微处理器、专用集成电路(Application Specific Integrated Circuit，ASIC)、可编程逻辑器件(Programmable Logic Device，PLD)、现场可编程门阵列(Field Programmable GateArray，FPGA)、数字信号处理器(Digital Signal Processor，DSP)、嵌入式设备等。所述网络设备包括但不限于计算机、网络主机、单个网络服务器、多个网络服务器集或多个服务器构成的云；在此，云由基于云计算(Cloud Computing)的大量计算机或网络服务器构成，其中，云计算是分布式计算的一种，由一群松散耦合的计算机集组成的一个虚拟超级计算机。所述网络包括但不限于互联网、广域网、城域网、局域网、VPN网络、无线自组织网络(Ad Hoc网络)等。优选地，所述设备还可以是运行于所述用户设备、网络设备、或用户设备与网络设备、网络设备、触摸终端或网络设备与触摸终端通过网络相集成所构成的设备上的程序。
当然，本领域技术人员应能理解上述设备仅为举例，其他现有的或今后可能出现的设备如可适用于本申请，也应包含在本申请保护范围以内，并在此以引用方式包含于此。
在本申请的描述中，“多个”的含义是两个或者更多，除非另有明确具体的限定。
图1示出了根据本申请的一个方面的一种界面交互方法，其中，该方法应用于头戴设备，所述方法具体包括步骤S101、步骤S102以及步骤S103。在步骤S101中，通过头戴设备的显示装置呈现用户正在使用的当前应用的当前应用界面；在步骤S102中，获取所述用户关于所述当前应用界面的界面交互操作；在步骤S103中，基于所述界面交互操作呈现对应的应用操作界面，其中，所述应用操作界面包括多个界面，所述多个界面包括所述当前应用界面及所述当前应用界面的多个侧边界面，所述多个侧边界面包括对应的应用标识界面和功能界面，所述应用标识界面用于呈现多个应用标识，所述功能界面包括快捷功能界面，所述快捷功能界面包括至少一个快捷指令标识，每个快捷指令标识用于触发并生成对应快捷指令。在此，所述头戴设备包括但不限于增强现实眼镜、虚拟现实眼镜、混合现实眼镜、增强现实头盔、虚拟现实头盔、混合现实头盔等。头戴设备包括采集装置，用于获取用户的头部运动信息，包括但不限于三轴传感器、惯性测量单元、陀螺仪、6DOF等；头戴设备还包括数据处理装置，用于对数据进行加工、存储、传输、检索及数据处理等；头戴设备还包括显示装置，用于呈现应用的应用界面信息等，如液晶显示屏、光学显示器等。
具体而言，在步骤S101中，通过头戴设备的显示装置呈现用户正在使用的当前应用的当前应用界面。例如，用户持有并佩戴了头戴设备，头戴设备处于使用状态，头戴设备上安装了多个应用，如头戴设备自带的功能应用或者第三方应用等。头戴设备基于用户的应用启动操作(如直接选中操作，或者选中且确认操作等)启动对应应用，将用户当前正在使用的应用作为当前应用。头戴设备通过显示装置呈现当前应用的应用界面，该应用界面包括当前应用启动后的正在使用的当前应用界面。在此，头戴设备在启动时，确定头戴设备的界面的呈现位置信息在用户的正前方，如以用户视野的正前方作为屏幕中心，并在屏幕中呈现当前应用界面，在此，当前应用界面的呈现空间位置区域等不做限制。在一些实施例中，在屏幕中固定位置处设置一个凝视点，该凝视点在屏幕中的位置不变，如在屏幕中心设置一个凝视点。界面中的控件通过该凝视点获取焦点，如通过头部运动动态移动界面的位置，当界面中的控件移动到凝视点的时候，该控件获取焦点。
在步骤S102中，获取所述用户关于所述当前应用界面的界面交互操作。例如，所述界面交互操作包括用于启动对应应用操作界面的预设操作，具体预设操作包括但不限于语音信息(如“启动交互模式”等语音信息)、触控信息(如双击或者按照预定轨迹滑动等)、按键信息(如输入特定按键信息或按照预设顺序输入按键信息等)、手势信息(如用户手势的姿态信息等)、头部运动信息(如用户快速点头或者摇头等)或者导入数据信息(如通过预设接口导入对应指令)等形式，其中，头部运动信息包括头部运动角度、距离、速度以及方位等任一项。对应头戴设备包括采集装置，如语音输入装置(如麦克风等)、摄像装置或者姿态传感器(如三轴陀螺仪)等。头戴设备可以通过采集装置采集关于当前应用界面的界面交互操作。
在步骤S103中，基于所述界面交互操作呈现对应的应用操作界面，其中，所述应用操作界面包括多个界面，所述多个界面包括所述当前应用界面及所述当前应用界面的多个侧边界面，所述多个侧边界面包括对应的应用标识界面和功能界面，所述应用标识界面用于呈现多个应用标识，所述功能界面包括快捷功能界面，所述快捷功能界面包括至少一个快捷指令标识，每个快捷指令标识用于触发并生成对应快捷指令。
例如，头戴设备获取到对应界面交互操作后，将该界面交互操作与对应交互指令的预设操作进行匹配，若匹配，则确定该界面交互操作对应的交互指令。例如，将采集到的头部运动信息、语音信息、触控信息、按键信息、手势信息或者导入数据信息等与预设操作进行相似匹配确定对应的相似度，若该相似度大于或等于相似度阈值，则生成对应交互指令，其中，该交互指令用于启动并呈现对应的应用操作界面，应用操作界面用于进行相应操作，包括应用间的切换、调用或者功能设置等。头戴设备基于界面交互操作对应的交互指令启动对应界面交互模式，在该模式下，头戴设备呈现对应的应用操作界面，该应用操作界面包括包含当前应用界面在内的多个界面，该多个界面中除当前应用界面之外的其他界面分布于当前应用界面的侧边(如上、下、左、右侧边)。在一些情形下，我们可以直接将其他界面呈现于当前应用界面侧边，或者，我们将当前应用界面进行适应性调整(如按照一定比例缩小或者放大等)后，再将其他界面呈现于当前应用界面侧边，使得头戴设备的用户可以直观察觉到其他界面。在一些实施方式中，处于该模式下的当前应用界面中的界面元素处于不可交互状态，如当前应用界面中每个可交互元素等均无法通过触控、语音或者手势等交互方式进行交互，相对的，该模式下，当前应用界面侧面的其他界面中的部分或者全部交互元素处于可交互状态。进一步地，当前应用界面可以通过一定方式进行遮挡或者屏蔽显示等，如通过将当前应用的应用标识叠加呈现于当前应用界面的界面范围内以标识当前应用等。
所述多个界面除了当前应用界面之外，还包括应用标识界面和功能界面等侧边界面；侧边界面是指分布于当前应用界面侧面的界面，各个侧边界面与当前应用界面接界，例如，侧边界面的边界与当前应用界面的边界重合或者距离一定的距离阈值等，又如，侧边界面的界面边侧与当前应用界面有一部分像素重叠等。各个侧边界面的界面范围可以相同，也可以根据不同比例进行设置等。各个侧边界面可以是每个侧边界面分布于当前应用界面的不同侧，或者，多个侧边界面可以分布于当前应用界面的同一侧等。应用标识界面用于呈现多个应用标识，该多个应用标识可以是头戴设备上安装的所有应用的部分或者全部等，或者，该多个应用标识可以是从头戴设备上安装的所有应用中确定的与当前应用相关联的应用等。头戴设备若获取到用户关于多个应用标识中某应用标识相关的触发操作，则头戴设备确定执行对应触发指令，如启动并跳转至该应用标识对应的应用并退出当前界面交互模式，又如启动该应用标识对应的应用，并叠加显示(如以画中画的形式)在包括当前应用界面的应用操作界面上，再如后台调用该应用标识对应的应用等。侧边界面还包括功能界面，功能界面包括快捷功能界面，该快捷功能界面包括至少一个快捷指令标识，每个快捷指令标识用于触发对应的快捷指令，触发方式包括但不限于基于头部动作、语音、按键、触摸或者手势等交互方式。该快捷指令包括设备相关的快捷指令，如用户经常使用的设备相关的操作指令信息等，如打开设置、拍照、录像、扫一扫、打电话给xx、查看通话记录、打开相册等，该快捷指令信息还可以包括当前应用相关的应用指令，如当前应用中用户经常使用的、应用提供的默认的或者当前应用相关联的应用对应的操作指令信息等，如注销退出、切换账户、进入下一步、返回上一步、保存等，因而可以根据不同的当前应用配置对应的快捷指令。在一些实施例中，该快捷指令还可以包括其他应用的切换指令，如用于将当前界面切换至其他应用的操作指令，如通过触发“拍照”快捷指令，跳转进入相机应用对应的拍照界面，并关闭包括当前应用界面的应用操作界面；又如通过触发“拍照”快捷指令，启动相机应用对应的拍照界面，并叠加显示(如以画中画的形式)在包括当前应用界面的应用操作界面上。在一些情形下，该快捷指令还包括用于在当前应用界面中不切换应用界面的情况下实现调控其他后台应用的应用操作的操作指令等，如当前快捷指令是发问候邮件给某人，则在当前操作界面中即可完成问候邮件的发送，而不用切换到邮件应用界面。在此，上述快捷指令信息仅为举例，不做限定。
在一些情形下，侧边界面可以是显现地呈现于当前应用的当前应用界面的周围；在另一些实施方式中，侧边界面可以是隐现于当前应用的当前应用界面的周围，如根据不同需求以不同透明度(如0-100％)等在当前应用的当前应用界面的周围呈现侧边界面，当用户的凝视点处于某侧边界面的界面范围之内或者界面重叠区域时，根据当前凝视点的落点范围或者落点距离确定较近的侧边界面，从而将对应侧边界面显现地呈现于当前屏幕。在一些实施方式中，侧边界面可以是直接同时呈现于当前应用的当前应用界面的周围，且所有侧边界面与当前应用均分布于当前屏幕的不同空间位置中，使得用户可以同时查看呈现的侧边界面和当前应用界面；在另一些情形下，侧边界面还可以是部分呈现于当前应用的当前应用界面的周围，如根据屏幕大小将侧边界面接界边界附近一定比例的界面信息呈现于当前屏幕，或者将侧边界面与当前应用的重叠部分呈现于当前屏幕，使得用户可以同时查看呈现的当前应用界面和部分侧面界面，然后根据用户的操作依次查看侧边界面，如用户转动头部，屏幕依次呈现相应的侧边界面；在另一些实施例中，侧边界面并未直接呈现于当前屏幕，侧面界面可以根据用户操作依次呈现于屏幕中，如屏幕中当前呈现的是当前应用界面，用户转动头部，屏幕依次呈现相应的侧边界面。
在一些实施方式中，所述功能界面还包括参数设置界面，所述参数设置界面包括至少一个参数设置标识。例如，参数设置应用包括头戴设备的设备自身参数的功能设置应用，如网络连接应用、屏幕亮度调节应用、手电筒操作应用、声音调节应用、头控模式切换应用、语音模式切换应用或者外接设备连接应用等。头戴设备的自身参数设置应用存在对应的参数设置标识，将至少一个参数设置标识整合至一个界面中形成对应的参数设置界面。在一些实施例中，该参数设置界面中包含的至少一个参数设置标识可以是与当前应用相关的参数设置应用对应的标识，例如，当前应用主要用于音视频输出，对应的参数设置标识包括对应音量调节，视频亮度调节，视频窗口比例调节等。在一些情形下，参数设置界面中的至少一个参数设置标识是与当前应用的应用类型无关，对应头戴设备自身参数设置对应的参数标识等，如不同的当前应用，该参数设置界面中的参数设置标识不变。该参数设置界面中的参数设置标识可以是仅进行展示参数相关信息的功能应用，如展示当前电量、展示当前时间等功能展示应用；当然，在一些情形下，这些功能展示应用可以是无交互功能的纯功能展示应用，还可以是带有一定交互功能的功能展示应用，如主要展示音量的音量调节应用还可以包括调节音量功能等。在另一些情形下，参数设置界面中的参数设置标识可以实现参数设置应用对应的参数设置页面的切换功能，如通过触控对应参数设置标识实现从包含当前应用界面的应用操作界面切换至对应的参数设置页面等，例如，跳转至对应的参数设置页面并关闭包含当前应用界面的应用操作界面，又如，启动对应的参数设置页面并叠加显示在包含当前应用界面的应用操作界面上。
在一些实施方式中，所述参数设置界面与所述快捷功能界面分布于所述当前应用界面的不同侧。例如，为了能够更好的进行区分各个界面的不同功能分类，以及简单明了地呈现各个界面元素的功能作用等，我们可以将不同界面分别设置于当前应用界面的不同侧。具体示例参考图2，在当前应用界面的右侧显示应用标识界面，在当前应用界面的上侧显示参数设置界面，在当前应用的左侧显示快捷指令界面等。
在一些实施方式中，所述方法还包括步骤S104(未示出)，在步骤S104中，获取所述用户关于头戴设备中安装应用的应用使用记录信息，根据所述应用使用记录信息生成对应的快捷指令标识，其中，每个快捷指令标识包括指示一条应用使用记录信息对应的应用的指示信息。例如，应用使用记录信息包括用户关于头戴设备上安装的应用的历史使用记录，每一条应用使用记录信息对应的应用的指示信息对应一个历史使用过的应用的应用标识信息或者该应用对应的应用操作功能(如应用内部的操作相关的功能等)的操作指令等。头戴设备根据应用使用记录信息能够生成对应的快捷指令标识，该快捷指令标识用于指向用户历史使用过的应用或者历史使用过的应用的应用操作功能的操作指令等，通过触控该快捷指令标识，头戴设备能够启动该应用，或者启动该应用并执行对应应用操作功能的操作指令等。
在一些实施方式中，所述方法还包括步骤S105(未示出)，在步骤S105中，获取所述用户的头部运动信息，根据所述头部运动信息确定所述用户的凝视点在界面中的凝视位置信息；若所述凝视位置信息处于某触发标识的标识范围中，执行该触发标识对应的触发指令，其中，所述触发标识包括所述至少一个应用标识、所述至少一个参数设置标识以及所述至少一个快捷指令标识。
例如，头戴设备的应用操作界面中包括多个触发标识，该多个触发标识包括但不限于快捷指令界面中的快捷指令标识、参数设置界面中的参数设置标识以及应用标识界面中的应用标识等。当用户凝视点在界面中的凝视位置信息处于某触发标识的标识范围中，可以触发并执行该触发标识对应的触发指令等。用户可以通过控制移动头部动作，将凝视点对准对应触发标识或触发标识的标识范围，从而确定并执行该触发标识的触发指令。具体地，头戴设备获取用户的头部动作信息，根据头部动作信息来动态移动屏幕中呈现的界面，屏幕中固定位置处设置一个凝视点，如在屏幕中心位置处设置一个凝视点，该凝视点在屏幕中的位置不变，当动态移动屏幕中呈现的界面时，凝视点在界面中的凝视位置信息发生改变，若该凝视位置信息处于某一触发标识对应的标识范围内，则确定该用户选中该触发标识，可以确定并执行对应触发指令等，如展示音量增大、减小或者静音等设置功能对应的参数设置页面，还可以是启动并跳转至其他应用等。具体地，在一些实施例中，通过头戴设备的惯性测量单元来实现旋转矢量传感器采集用户的头部动作信息，根据旋转矢量传感器的输出结果计算出欧拉角，然后根据X和Y方向角度的变化，来动态移动用户界面的位置。
在一些实施方式中，所述若所述凝视位置信息处于某触发标识的标识范围中，执行该触发标识对应的触发指令，包括：若所述凝视位置信息处于某触发标识的触发范围中，且获取到所述用户的触发确认操作，则执行该触发标识对应的触发指令，其中，所述触发标识包括所述至少一个应用标识、所述至少一个参数设置标识以及所述至少一个快捷指令标识。例如，仅通过凝视位置信息确定并执行触发指令会存在较大误差，如头部运动时的误触发等，头戴设备可以基于用户进一步的确认操作确定对应的触发指令，如头戴设备基于用户的凝视位置信息确定用户选中的触发标识，若再获取到用户关于该选中的触发标识的选中确认操作(如头部点头、语音输入确认或者触控板点击输入确认、按键输入确认等)，头戴设备才执行该选中的触发标识对应的触发指令等。
在一些实施方式中，所述应用操作界面中的部分或者全部触发标识包括对应的语音提示标识，其中，所述语音提示标识用于表征对应触发标识可通过语音触发，所述触发标识包括所述至少一个应用标识、所述至少一个参数设置标识以及所述至少一个快捷指令标识。
例如，对应触发标识除了基于前述的凝视位置信息执行对应触发指令之外，还可以通过语音输入的方式确认并执行对应触发指令。在一些实施方式中，所述方法还包括步骤S106(未示出)，在步骤S106中，获取所述用户的语音信息；若所述语音信息与某触发标识的预设语音文本相同或相似，则执行该触发标识对应的触发指令，所述触发标识包括所述至少一个应用标识、所述至少一个参数设置标识以及所述至少一个快捷指令标识。在一些情形下，每个触发标识均设置有对应的预设语音文本，头戴设备获取采集到的语音信息，将语音信息对应文本与多个预设语音文本进行匹配，若语音信息与某预设语音文本匹配，则确认并执行该预设语音文本对应触发指令。在另一些情形下，为了更好提示用户通过语音信息触发对应指令，在触发标识中可以呈现对应语音提示标识，如图2中所示，部分或者全部触发标识中包括对应语音标识，用于提示用户该触发标识可以通过语音进行触发等，从而提示用户通过语音信息方便、快捷的实现界面交互。
在一些实施方式中，所述触发指令包括启动其他应用并跳转至所述其他应用界面；其中，所述方法还包括步骤S107(未示出)，在步骤S107中，关闭除所述其他应用界面之外的界面。例如，所述其他应用包括包含页面展示内容的应用，即对应其他应用的触发指令包括唤醒(如启动或者从后台运行变更为前台运行等)并跳转至该应用的其他应用界面。具体地，其他应用包括但不限于应用标识界面中应用标识对应的应用、快捷指令界面中快捷指令标识对应的应用或者参数设置界面中参数设置标识对应的需跳转页面的参数设置应用等。当用户对其他应用进行选中确认操作后，头戴设备关闭除该其他应用之外的界面并呈现该其他应用的其他应用界面。进一步地，当在呈现其他应用界面时，若再次获取用户关于其他应用界面的界面交互操作，则呈现该其他应用界面对应的应用操作界面，如在呈现该其他应用的应用界面的同时，在该其他应用界面的边侧呈现功能界面和应用标识界面。在一些情形下，该其他应用界面的呈现位置与前述当前应用界面的位置相同或相似，以保持相同或相似的用户位姿进行界面交互等。
在一些实施方式中，所述多个侧边界面还包括对应语音指令界面，其中，所述语音指令界面包括至少一个语音指令标识。例如，多个侧边界面还包括语音指令界面，如图2所示，在语音指令界面中还呈现语音指令标识对应的语音文本提示信息，若头戴设备通过采集装置(如麦克风等)采集到用户的语音输入信息，则对语音输入信息进行语音识别，确定对应语音输入信息的语音文本信息，基于语音文本信息确定对应的语音指令；或者，将语音文本信息与语音指令的语音指令标识(如文本信息等)进行匹配，若匹配，则头戴设备执行该语音文本提示信息对应的语音指令。
在一些实施方式中，所述方法还包括步骤S108(未示出)，在步骤S108中，在呈现所述语音指令界面的同时，在其他侧边界面中呈现对应触发标识的语音提示标识，其中，所述语音提示标识用于表征对应触发标识可通过语音触发，所述触发标识包括所述至少一个应用标识、所述至少一个参数设置标识以及所述至少一个快捷指令标识。例如，头戴设备在呈现语音指令界面的同时，还可以对当前界面中的可交互元素赋予对应的语音交互提示功能，如在其他侧边界面中呈现触发标识的语音提示标识等，用于提示用户该触发标识可以通过语音进行触发等，从而提示用户通过语音信息方便、快捷的实现界面交互。
上文主要对本申请的一种界面交互方法的各实施例进行举例介绍，此外，本申请还提供了能够实施上述各实施例的具体设备，下面结合图3进行介绍。
图3示出了根据本申请的一个方面的一种界面交互的头戴设备，具体包括一一模块101、一二模块102以及一三模块103。一一模块101，用于通过头戴设备的显示装置呈现用户正在使用的当前应用的当前应用界面；一二模块102，用于获取所述用户关于所述当前应用界面的界面交互操作；一三模块103，用于基于所述界面交互操作呈现对应的应用操作界面，其中，所述应用操作界面包括多个界面，所述多个界面包括所述当前应用界面及所述当前应用界面的多个侧边界面，所述多个侧边界面包括对应的应用标识界面和功能界面，所述应用标识界面用于呈现多个应用标识，所述功能界面包括快捷功能界面，所述快捷功能界面包括至少一个快捷指令标识，每个快捷指令标识用于触发并生成对应快捷指令。
在一些实施方式中，所述功能界面还包括参数设置界面，所述参数设置界面包括至少一个参数设置标识。在一些实施方式中，所述参数设置界面与所述快捷功能界面分布于所述当前应用界面的不同侧。
在此，图3示出的一一模块101、一二模块102以及一三模块103对应的具体实施方式与前述图1示出的步骤S101、步骤S102以及步骤S103的实施例相同或相似，因而不再赘述，以引用的方式包含于此。
在一些实施方式中，所述设备还包括一四模块(未示出)，用于获取所述用户关于头戴设备中安装应用的应用使用记录信息，根据所述应用使用记录信息生成对应的快捷指令标识，其中，每个快捷指令标识包括指示一条应用使用记录信息对应的应用的指示信息。
在一些实施方式中，所述设备还包括一五模块(未示出)，用于获取所述用户的头部运动信息，根据所述头部运动信息确定所述用户的凝视点在界面中的凝视位置信息；若所述凝视位置信息处于某触发标识的标识范围中，执行该触发标识对应的触发指令，其中，所述触发标识包括所述至少一个应用标识、所述至少一个参数设置标识以及所述至少一个快捷指令标识。
在一些实施方式中，所述若所述凝视位置信息处于某触发标识的标识范围中，执行该触发标识对应的触发指令，包括：若所述凝视位置信息处于某触发标识的触发范围中，且获取到所述用户的触发确认操作，则执行该触发标识对应的触发指令，其中，所述触发标识包括所述至少一个应用标识、所述至少一个参数设置标识以及所述至少一个快捷指令标识。
在一些实施方式中，所述应用操作界面中的部分或者全部触发标识包括对应的语音提示标识，其中，所述语音提示标识用于表征对应触发标识可通过语音触发，所述触发标识包括所述至少一个应用标识、所述至少一个参数设置标识以及所述至少一个快捷指令标识。
在一些实施方式中，所述设备还包括一六模块(未示出)，用于获取所述用户的语音信息；若所述语音信息与某触发标识的预设语音文本相同或相似，则执行该触发标识对应的触发指令，所述触发标识包括所述至少一个应用标识、所述至少一个参数设置标识以及所述至少一个快捷指令标识。
在一些实施方式中，所述触发指令包括启动其他应用并跳转至所述其他应用界面；其中，所述方法还包括一七模块(未示出)，用于关闭除所述其他应用界面之外的界面。
在一些实施方式中，所述多个侧边界面还包括对应语音指令界面，其中，所述语音指令界面包括至少一个个语音指令标识。在一些实施方式中，所述设备还包括一八模块(未示出)，用于在呈现所述语音界面的同时，在其他侧边界面中呈现对应触发标识的语音提示标识，其中，所述语音提示标识用于表征对应触发标识可通过语音触发，所述触发标识包括所述至少一个应用标识、所述至少一个参数设置标识以及所述至少一个快捷指令标识。
在此，所述一四模块至一八模块对应的具体实施方式与前述图1示出的步骤S104至步骤S108的实施例相同或相似，因而不再赘述，以引用的方式包含于此。
除上述各实施例介绍的方法和设备外，本申请还提供了一种计算机可读存储介质，所述计算机可读存储介质存储有计算机代码，当所述计算机代码被执行时，如前任一项所述的方法被执行。
本申请还提供了一种计算机程序产品，当所述计算机程序产品被计算机设备执行时，如前任一项所述的方法被执行。
本申请还提供了一种计算机设备，所述计算机设备包括：
一个或多个处理器；
存储器，用于存储一个或多个计算机程序；
当所述一个或多个计算机程序被所述一个或多个处理器执行时，使得所述一个或多个处理器实现如前任一项所述的方法。
图4示出了可被用于实施本申请中所述的各个实施例的示例性系统；
如图4所示在一些实施例中，系统300能够作为各所述实施例中的任意一个上述设备。在一些实施例中，系统300可包括具有指令的一个或多个计算机可读介质(例如，系统存储器或NVM/存储设备320)以及与该一个或多个计算机可读介质耦合并被配置为执行指令以实现模块从而执行本申请中所述的动作的一个或多个处理器(例如，(一个或多个)处理器305)。
对于一个实施例，系统控制模块310可包括任意适当的接口控制器，以向(一个或多个)处理器305中的至少一个和/或与系统控制模块310通信的任意适当的设备或组件提供任意适当的接口。
系统控制模块310可包括存储器控制器模块330，以向系统存储器315提供接口。存储器控制器模块330可以是硬件模块、软件模块和/或固件模块。
系统存储器315可被用于例如为系统300加载和存储数据和/或指令。对于一个实施例，系统存储器315可包括任意适当的易失性存储器，例如，适当的DRAM。在一些实施例中，系统存储器315可包括双倍数据速率类型四同步动态随机存取存储器(DDR4SDRAM)。
对于一个实施例，系统控制模块310可包括一个或多个输入/输出(I/O)控制器，以向NVM/存储设备320及(一个或多个)通信接口325提供接口。
例如，NVM/存储设备320可被用于存储数据和/或指令。NVM/存储设备320可包括任意适当的非易失性存储器(例如，闪存)和/或可包括任意适当的(一个或多个)非易失性存储设备(例如，一个或多个硬盘驱动器(HDD)、一个或多个光盘(CD)驱动器和/或一个或多个数字通用光盘(DVD)驱动器)。
NVM/存储设备320可包括在物理上作为系统300被安装在其上的设备的一部分的存储资源，或者其可被该设备访问而不必作为该设备的一部分。例如，NVM/存储设备320可通过网络经由(一个或多个)通信接口325进行访问。
(一个或多个)通信接口325可为系统300提供接口以通过一个或多个网络和/或与任意其他适当的设备通信。系统300可根据一个或多个无线网络标准和/或协议中的任意标准和/或协议来与无线网络的一个或多个组件进行无线通信。
对于一个实施例，(一个或多个)处理器305中的至少一个可与系统控制模块310的一个或多个控制器(例如，存储器控制器模块330)的逻辑封装在一起。对于一个实施例，(一个或多个)处理器305中的至少一个可与系统控制模块310的一个或多个控制器的逻辑封装在一起以形成系统级封装(SiP)。对于一个实施例，(一个或多个)处理器305中的至少一个可与系统控制模块310的一个或多个控制器的逻辑集成在同一模具上。对于一个实施例，(一个或多个)处理器305中的至少一个可与系统控制模块310的一个或多个控制器的逻辑集成在同一模具上以形成片上系统(SoC)。
在各个实施例中，系统300可以但不限于是：服务器、工作站、台式计算设备或移动计算设备(例如，膝上型计算设备、手持计算设备、平板电脑、上网本等)。在各个实施例中，系统300可具有更多或更少的组件和/或不同的架构。例如，在一些实施例中，系统300包括一个或多个摄像机、键盘、液晶显示器(LCD)屏幕(包括触屏显示器)、非易失性存储器端口、多个天线、图形芯片、专用集成电路(ASIC)和扬声器。
需要注意的是，本申请可在软件和/或软件与硬件的组合体中被实施，例如，可采用专用集成电路(ASIC)、通用目的计算机或任何其他类似硬件设备来实现。在一个实施例中，本申请的软件程序可以通过处理器执行以实现上文所述步骤或功能。同样地，本申请的软件程序(包括相关的数据结构)可以被存储到计算机可读记录介质中，例如，RAM存储器，磁或光驱动器或软磁盘及类似设备。另外，本申请的一些步骤或功能可采用硬件来实现，例如，作为与处理器配合从而执行各个步骤或功能的电路。
另外，本申请的一部分可被应用为计算机程序产品，例如计算机程序指令，当其被计算机执行时，通过该计算机的操作，可以调用或提供根据本申请的方法和/或技术方案。本领域技术人员应能理解，计算机程序指令在计算机可读介质中的存在形式包括但不限于源文件、可执行文件、安装包文件等，相应地，计算机程序指令被计算机执行的方式包括但不限于：该计算机直接执行该指令，或者该计算机编译该指令后再执行对应的编译后程序，或者该计算机读取并执行该指令，或者该计算机读取并安装该指令后再执行对应的安装后程序。在此，计算机可读介质可以是可供计算机访问的任意可用的计算机可读存储介质或通信介质。
通信介质包括藉此包含例如计算机可读指令、数据结构、程序模块或其他数据的通信信号被从一个系统传送到另一系统的介质。通信介质可包括有导的传输介质(诸如电缆和线(例如，光纤、同轴等))和能传播能量波的无线(未有导的传输)介质，诸如声音、电磁、RF、微波和红外。计算机可读指令、数据结构、程序模块或其他数据可被体现为例如无线介质(诸如载波或诸如被体现为扩展频谱技术的一部分的类似机制)中的已调制数据信号。术语“已调制数据信号”指的是其一个或多个特征以在信号中编码信息的方式被更改或设定的信号。调制可以是模拟的、数字的或混合调制技术。
作为示例而非限制，计算机可读存储介质可包括以用于存储诸如计算机可读指令、数据结构、程序模块或其它数据的信息的任何方法或技术实现的易失性和非易失性、可移动和不可移动的介质。例如，计算机可读存储介质包括，但不限于，易失性存储器，诸如随机存储器(RAM,DRAM,SRAM)；以及非易失性存储器，诸如闪存、各种只读存储器(ROM,PROM,EPROM,EEPROM)、磁性和铁磁/铁电存储器(MRAM,FeRAM)；以及磁性和光学存储设备(硬盘、磁带、CD、DVD)；或其它现在已知的介质或今后开发的能够存储供计算机系统使用的计算机可读信息/数据。
在此，根据本申请的一个实施例包括一个装置，该装置包括用于存储计算机程序指令的存储器和用于执行程序指令的处理器，其中，当该计算机程序指令被该处理器执行时，触发该装置运行基于前述根据本申请的多个实施例的方法和/或技术方案。
对于本领域技术人员而言，显然本申请不限于上述示范性实施例的细节，而且在不背离本申请的精神或基本特征的情况下，能够以其他的具体形式实现本申请。因此，无论从哪一点来看，均应将实施例看作是示范性的，而且是非限制性的，本申请的范围由所附权利要求而不是上述说明限定，因此旨在将落在权利要求的等同要件的含义和范围内的所有变化涵括在本申请内。不应将权利要求中的任何附图标记视为限制所涉及的权利要求。此外，显然“包括”一词不排除其他单元或步骤，单数不排除复数。装置权利要求中陈述的多个单元或装置也可以由一个单元或装置通过软件或者硬件来实现。第一，第二等词语用来表示名称，而并不表示任何特定的顺序。
Claims (12)
1.一种界面交互方法，其中，应用于头戴设备，所述方法包括：
通过头戴设备的显示装置呈现用户正在使用的当前应用的当前应用界面；
获取所述用户关于所述当前应用界面的界面交互操作；
基于所述界面交互操作呈现对应的应用操作界面，其中，所述应用操作界面包括多个界面，所述多个界面包括所述当前应用界面及所述当前应用界面的多个侧边界面，所述多个侧边界面包括对应的应用标识界面和功能界面，所述应用标识界面用于呈现多个应用标识，所述功能界面包括快捷功能界面，所述快捷功能界面包括至少一个快捷指令标识，每个快捷指令标识用于触发并生成对应快捷指令，所述侧边界面是指分布于当前应用界面侧面的界面，所述侧边界面的至少部分与所述当前应用界面均分布于当前屏幕中，所述应用标识界面用于呈现所述头戴设备上安装的部分或者全部应用的应用标识，所述功能界面还包括参数设置界面，所述参数设置界面包括至少一个参数设置标识；
其中，所述方法还包括：
获取所述用户的头部运动信息，根据所述头部运动信息确定所述用户的凝视点在界面中的凝视位置信息；若所述凝视位置信息处于某触发标识的标识范围中，执行该触发标识对应的触发指令，其中，所述触发标识包括所述至少一个应用标识、所述至少一个参数设置标识以及所述至少一个快捷指令标识；或者，
获取所述用户的语音信息；若所述语音信息与某触发标识的预设语音文本相同或相似，则执行该触发标识对应的触发指令，所述触发标识包括所述至少一个应用标识、所述至少一个参数设置标识以及所述至少一个快捷指令标识。
2.根据权利要求1所述的方法，其中，所述参数设置界面与所述快捷功能界面分布于所述当前应用界面的不同侧。
3.根据权利要求1所述的方法，其中，所述方法还包括：
获取所述用户关于头戴设备中安装应用的应用使用记录信息，根据所述应用使用记录信息生成对应的快捷指令标识，其中，每个快捷指令标识包括指示一条应用使用记录信息对应的应用的指示信息。
4.根据权利要求1所述的方法，其中，所述若所述凝视位置信息处于某触发标识的标识范围中，执行该触发标识对应的触发指令，包括：
若所述凝视位置信息处于某触发标识的触发范围中，且获取到所述用户的触发确认操作，则执行该触发标识对应的触发指令，其中，所述触发标识包括所述至少一个应用标识、所述至少一个参数设置标识以及所述至少一个快捷指令标识。
5.根据权利要求1所述的方法，其中，所述应用操作界面中的部分或者全部触发标识包括对应的语音提示标识，其中，所述语音提示标识用于表征对应触发标识可通过语音触发，所述触发标识包括所述至少一个应用标识、所述至少一个参数设置标识以及所述至少一个快捷指令标识。
6.根据权利要求1、4或5中任一项所述的方法，其中，所述触发指令包括启动其他应用并跳转至其他应用界面；其中，所述方法还包括：
关闭除所述其他应用界面之外的界面。
7.根据权利要求1所述的方法，其中，所述多个侧边界面还包括对应语音指令界面，其中，所述语音指令界面包括至少一个语音指令标识。
8.根据权利要求7所述的方法，其中，所述方法还包括：
在呈现所述语音指令界面的同时，在其他侧边界面中呈现对应触发标识的语音提示标识，其中，所述语音提示标识用于表征对应触发标识可通过语音触发，所述触发标识包括所述至少一个应用标识、所述至少一个参数设置标识以及所述至少一个快捷指令标识。
9.一种界面交互的头戴设备，所述设备包括：
一一模块，用于通过头戴设备的显示装置呈现用户正在使用的当前应用的当前应用界面；
一二模块，用于获取所述用户关于所述当前应用界面的界面交互操作；
一三模块，用于基于所述界面交互操作呈现对应的应用操作界面，其中，所述应用操作界面包括多个界面，所述多个界面包括所述当前应用界面及所述当前应用界面的多个侧边界面，所述多个侧边界面包括对应的应用标识界面和功能界面，所述应用标识界面用于呈现多个应用标识，所述功能界面包括快捷功能界面，所述快捷功能界面包括至少一个快捷指令标识，每个快捷指令标识用于触发并生成对应快捷指令，所述侧边界面是指分布于当前应用界面侧面的界面，所述侧边界面的至少部分与所述当前应用界面均分布于当前屏幕中，所述应用标识界面用于呈现所述头戴设备上安装的部分或者全部应用的应用标识，所述功能界面还包括参数设置界面，所述参数设置界面包括至少一个参数设置标识；
其中，所述设备还包括一五模块，用于：获取所述用户的头部运动信息，根据所述头部运动信息确定所述用户的凝视点在界面中的凝视位置信息；若所述凝视位置信息处于某触发标识的标识范围中，执行该触发标识对应的触发指令，其中，所述触发标识包括所述至少一个应用标识、所述至少一个参数设置标识以及所述至少一个快捷指令标识；或者，获取所述用户的语音信息；若所述语音信息与某触发标识的预设语音文本相同或相似，则执行该触发标识对应的触发指令，所述触发标识包括所述至少一个应用标识、所述至少一个参数设置标识以及所述至少一个快捷指令标识。
10.一种计算机设备，其中，该设备包括：
处理器；以及
被安排成存储计算机可执行指令的存储器，所述可执行指令在被执行时使所述处理器执行如权利要求1至8中任一项所述方法的步骤。
11.一种计算机可读存储介质，其上存储有计算机程序/指令，其特征在于，该计算机程序/指令在被执行时使得系统进行执行如权利要求1至8中任一项所述方法的步骤。
12.一种计算机程序产品，包括计算机程序/指令，其特征在于，该计算机程序/指令被处理器执行时实现权利要求1至8中任一项所述方法的步骤。
Priority Applications (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202110977113.7A CN113655927B (zh) | 2021-08-24 | 2021-08-24 | 一种界面交互方法与设备 |
| PCT/CN2022/110487 WO2023024871A1 (zh) | 2021-08-24 | 2022-08-05 | 一种界面交互方法与设备 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202110977113.7A CN113655927B (zh) | 2021-08-24 | 2021-08-24 | 一种界面交互方法与设备 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN113655927A CN113655927A (zh) | 2021-11-16 |
| CN113655927B true CN113655927B (zh) | 2024-04-26 |
Family
ID=78492755
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202110977113.7A Active CN113655927B (zh) | 2021-08-24 | 2021-08-24 | 一种界面交互方法与设备 |
Country Status (2)
| Country | Link |
|---|---|
| CN (1) | CN113655927B (zh) |
| WO (1) | WO2023024871A1 (zh) |
Families Citing this family (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN113655927B (zh) * | 2021-08-24 | 2024-04-26 | 亮风台（上海）信息科技有限公司 | 一种界面交互方法与设备 |
| CN116909439B (zh) * | 2023-09-13 | 2024-03-22 | 荣耀终端有限公司 | 电子设备及其交互方法 |
Citations (13)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN103959135A (zh) * | 2011-11-28 | 2014-07-30 | 谷歌公司 | 基于头部角度触发的动作 |
| CN105324738A (zh) * | 2013-06-07 | 2016-02-10 | 索尼电脑娱乐公司 | 在头戴式显示器中切换操作模式 |
| CN106537290A (zh) * | 2014-05-09 | 2017-03-22 | 谷歌公司 | 与真实和虚拟对象交互的基于生物力学的眼球信号的系统和方法 |
| CN107219922A (zh) * | 2017-05-22 | 2017-09-29 | 三体次元信息科技（宁波）有限公司 | 虚拟现实场景中展示推送消息的系统和包括该系统的终端 |
| CN107506236A (zh) * | 2017-09-01 | 2017-12-22 | 上海智视网络科技有限公司 | 显示设备及其显示方法 |
| CN108304075A (zh) * | 2018-02-11 | 2018-07-20 | 亮风台（上海）信息科技有限公司 | 一种在增强现实设备进行人机交互的方法与设备 |
| CN109547623A (zh) * | 2017-09-21 | 2019-03-29 | 阿里巴巴集团控股有限公司 | 一种界面切换方法及装置 |
| CN109782920A (zh) * | 2019-01-30 | 2019-05-21 | 上海趣虫科技有限公司 | 一种用于扩展现实的人机交互方法及处理终端 |
| CN110471596A (zh) * | 2019-07-17 | 2019-11-19 | 广州视源电子科技股份有限公司 | 一种分屏切换方法、装置、存储介质及电子设备 |
| CN110507993A (zh) * | 2019-08-23 | 2019-11-29 | 腾讯科技（深圳）有限公司 | 控制虚拟对象的方法、装置、设备及介质 |
| CN111736689A (zh) * | 2020-05-25 | 2020-10-02 | 苏州端云创新科技有限公司 | 虚拟现实装置、数据处理方法与计算机可读存储介质 |
| CN111949131A (zh) * | 2020-08-17 | 2020-11-17 | 陈涛 | 一种基于眼动追踪技术的眼动交互方法、系统及设备 |
| CN112631429A (zh) * | 2020-12-28 | 2021-04-09 | 天翼阅读文化传播有限公司 | 一种虚拟现实场景下的注视点语音交互装置及方法 |
Family Cites Families (9)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN105094345B (zh) * | 2015-09-29 | 2018-07-27 | 腾讯科技（深圳）有限公司 | 一种信息处理方法、终端及计算机存储介质 |
| CN106293395A (zh) * | 2016-08-03 | 2017-01-04 | 深圳市金立通信设备有限公司 | 一种虚拟现实眼镜及其界面交互方法 |
| US10403050B1 (en) * | 2017-04-10 | 2019-09-03 | WorldViz, Inc. | Multi-user virtual and augmented reality tracking systems |
| US11308947B2 (en) * | 2018-05-07 | 2022-04-19 | Spotify Ab | Voice recognition system for use with a personal media streaming appliance |
| CN111913639B (zh) * | 2019-05-07 | 2022-01-28 | 广东虚拟现实科技有限公司 | 虚拟内容的交互方法、装置、系统、终端设备及存储介质 |
| CN111913674A (zh) * | 2019-05-07 | 2020-11-10 | 广东虚拟现实科技有限公司 | 虚拟内容的显示方法、装置、系统、终端设备及存储介质 |
| CN112416115B (zh) * | 2019-08-23 | 2023-12-15 | 亮风台（上海）信息科技有限公司 | 一种用于控件交互界面中进行人机交互的方法与设备 |
| CN112698756A (zh) * | 2019-10-23 | 2021-04-23 | 华为终端有限公司 | 用户界面的显示方法及电子设备 |
| CN113655927B (zh) * | 2021-08-24 | 2024-04-26 | 亮风台（上海）信息科技有限公司 | 一种界面交互方法与设备 |
-
2021
- 2021-08-24 CN CN202110977113.7A patent/CN113655927B/zh active Active
-
2022
- 2022-08-05 WO PCT/CN2022/110487 patent/WO2023024871A1/zh unknown
Patent Citations (13)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN103959135A (zh) * | 2011-11-28 | 2014-07-30 | 谷歌公司 | 基于头部角度触发的动作 |
| CN105324738A (zh) * | 2013-06-07 | 2016-02-10 | 索尼电脑娱乐公司 | 在头戴式显示器中切换操作模式 |
| CN106537290A (zh) * | 2014-05-09 | 2017-03-22 | 谷歌公司 | 与真实和虚拟对象交互的基于生物力学的眼球信号的系统和方法 |
| CN107219922A (zh) * | 2017-05-22 | 2017-09-29 | 三体次元信息科技（宁波）有限公司 | 虚拟现实场景中展示推送消息的系统和包括该系统的终端 |
| CN107506236A (zh) * | 2017-09-01 | 2017-12-22 | 上海智视网络科技有限公司 | 显示设备及其显示方法 |
| CN109547623A (zh) * | 2017-09-21 | 2019-03-29 | 阿里巴巴集团控股有限公司 | 一种界面切换方法及装置 |
| CN108304075A (zh) * | 2018-02-11 | 2018-07-20 | 亮风台（上海）信息科技有限公司 | 一种在增强现实设备进行人机交互的方法与设备 |
| CN109782920A (zh) * | 2019-01-30 | 2019-05-21 | 上海趣虫科技有限公司 | 一种用于扩展现实的人机交互方法及处理终端 |
| CN110471596A (zh) * | 2019-07-17 | 2019-11-19 | 广州视源电子科技股份有限公司 | 一种分屏切换方法、装置、存储介质及电子设备 |
| CN110507993A (zh) * | 2019-08-23 | 2019-11-29 | 腾讯科技（深圳）有限公司 | 控制虚拟对象的方法、装置、设备及介质 |
| CN111736689A (zh) * | 2020-05-25 | 2020-10-02 | 苏州端云创新科技有限公司 | 虚拟现实装置、数据处理方法与计算机可读存储介质 |
| CN111949131A (zh) * | 2020-08-17 | 2020-11-17 | 陈涛 | 一种基于眼动追踪技术的眼动交互方法、系统及设备 |
| CN112631429A (zh) * | 2020-12-28 | 2021-04-09 | 天翼阅读文化传播有限公司 | 一种虚拟现实场景下的注视点语音交互装置及方法 |
Non-Patent Citations (1)
| Title |
|---|
| 基于认知负荷的人机交互数字界面设计和评价;汪海波;薛澄岐;黄剑伟;宋广丽;;电子机械工程;20131015(第05期);第57-60页 * |
Also Published As
| Publication number | Publication date |
|---|---|
| WO2023024871A1 (zh) | 2023-03-02 |
| CN113655927A (zh) | 2021-11-16 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN105389040B (zh) | 包括触敏显示器的电子装置及操作该电子装置的方法 | |
| US9323446B2 (en) | Apparatus including a touch screen and screen change method thereof | |
| KR102628044B1 (ko) | 삼차원 가상 현실 환경에서의 이차원 애플리케이션 사용을 위한 시스템 및 방법 | |
| US9625996B2 (en) | Electronic device and control method thereof | |
| KR102219861B1 (ko) | 화면 공유 방법 및 그 전자 장치 | |
| US20150185980A1 (en) | Method and device for switching screens | |
| CN113655927B (zh) | 一种界面交互方法与设备 | |
| CN108463799B (zh) | 电子设备的柔性显示器及其操作方法 | |
| AU2014250635B2 (en) | Apparatus and method for editing synchronous media | |
| EP3001300B1 (en) | Method and apparatus for generating preview data | |
| EP3657311B1 (en) | Apparatus including a touch screen and screen change method thereof | |
| US20140282204A1 (en) | Key input method and apparatus using random number in virtual keyboard | |
| KR20170119934A (ko) | 제스처 입력을 처리하기 위한 전자 장치 및 방법 | |
| CN112822431B (zh) | 一种私密音视频通话的方法与设备 | |
| KR102213897B1 (ko) | 사용자 입력에 따라 하나 이상의 아이템들을 선택하는 방법 및 이를 위한 전자 장치 | |
| CN112685121B (zh) | 一种呈现会话入口的方法与设备 | |
| KR20150136801A (ko) | 어플리케이션 ui 및 전자 장치 | |
| KR20180014632A (ko) | 전자 장치 및 그의 동작 방법 | |
| KR20180043098A (ko) | 영상을 표시하기 위한 전자 장치 및 컴퓨터 판독 가능한 기록 매체 | |
| US20150346947A1 (en) | Feedback in touchless user interface | |
| CN112818719A (zh) | 一种识别二维码的方法与设备 | |
| KR20180122137A (ko) | 영상에 동적 효과를 부여하기 위한 방법 및 그 전자 장치 | |
| KR20180058097A (ko) | 이미지를 표시하는 전자 장치 및 그 제어 방법 | |
| CN114153535B (zh) | 用于在开屏页跳转页面的方法、设备、介质及程序产品 | |
| US10635372B2 (en) | Display device having a transparent display and a method for controlling the display device to render content on a surface of the transparent display that a user faces |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| CB02 | Change of applicant information | ||
| CB02 | Change of applicant information |
Address after: 201210 7th Floor, No. 1, Lane 5005, Shenjiang Road, China (Shanghai) Pilot Free Trade Zone, Pudong New Area, Shanghai Applicant after: HISCENE INFORMATION TECHNOLOGY Co.,Ltd. Address before: Room 501 / 503-505, 570 shengxia Road, China (Shanghai) pilot Free Trade Zone, Pudong New Area, Shanghai, 201203 Applicant before: HISCENE INFORMATION TECHNOLOGY Co.,Ltd. |
|
| GR01 | Patent grant | ||
| GR01 | Patent grant |