CN108243275B - 一种来电提醒方法及虚拟现实设备 - Google Patents

一种来电提醒方法及虚拟现实设备 Download PDF

Info

Publication number
CN108243275B
CN108243275B CN201611229959.8A CN201611229959A CN108243275B CN 108243275 B CN108243275 B CN 108243275B CN 201611229959 A CN201611229959 A CN 201611229959A CN 108243275 B CN108243275 B CN 108243275B
Authority
CN
China
Prior art keywords
incoming call
virtual
instruction
virtual space
audio
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201611229959.8A
Other languages
English (en)
Other versions
CN108243275A (zh
Inventor
黄青锋
鲍苏煜
赵振刚
高黎明
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
China Mobile Communications Group Co Ltd
China Mobile Communications Ltd Research Institute
Original Assignee
China Mobile Communications Group Co Ltd
China Mobile Communications Ltd Research Institute
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by China Mobile Communications Group Co Ltd, China Mobile Communications Ltd Research Institute filed Critical China Mobile Communications Group Co Ltd
Priority to CN201611229959.8A priority Critical patent/CN108243275B/zh
Publication of CN108243275A publication Critical patent/CN108243275A/zh
Application granted granted Critical
Publication of CN108243275B publication Critical patent/CN108243275B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72484User interfaces specially adapted for cordless or mobile telephones wherein functions are triggered by incoming communication events
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H04M1/7243User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality with interactive means for internal management of messages
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72448User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions

Landscapes

  • Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Business, Economics & Management (AREA)
  • General Business, Economics & Management (AREA)
  • Telephone Function (AREA)

Abstract

本发明实施例公开了一种来电提醒方法及虚拟现实设备,应用于虚拟现实设备中;所述虚拟现实设备与移动终端建立通讯连接;所述方法包括:虚拟现实设备显示表征第一视角的第一虚拟空间的第一显示内容;接收到所述移动终端发送的来电请求指令;基于所述来电请求指令生成满足预设音频参数的立体提醒音频并输出;以使用户听到的所述立体提醒音频的声源所在位置不在所述第一虚拟空间内;当检测到第一切换指令时,显示表征第二视角的第二虚拟空间的第二显示内容;其中,所述第二虚拟空间包括用于接听来电的第一标识;检测到针对所述第一标识的第一操作时,生成表征同意接听来电的第一指令,基于所述第一指令接通与所述来电请求指令对应的来电通话。

Description

一种来电提醒方法及虚拟现实设备
技术领域
本发明涉及虚拟现实领域,具体涉及一种来电提醒方法及虚拟现实设备。
背景技术
随着虚拟现实技术的不断发展,越来越多的用户开始使用虚拟现实设备。虚拟现实设备与移动设备(例如手机)建立连接后,虚拟现实设备可将移动设备的显示画面转化为虚拟的立体画面进行显示。当然,在虚拟显示设备显示立体画面时,移动终端仍然会接收到来电请求。现有技术中,当移动终端接收到来电时,通常会中断虚拟显示设备当前显示的立体影像,显示当前的来电信息,直至用户对该来电进行接通操作或拒绝接听操作。这样会中断虚拟现实设备的立体画面的显示,没有做到现实与虚拟的无缝切换,即无法在虚拟现实设备的虚拟画面不中断的情况下对来电进行处理,不利于用户对虚拟现实场景的体验。
发明内容
为解决现有存在的技术问题,本发明实施例提供了一种来电提醒方法及虚拟现实设备。
为达到上述目的,本发明实施例的技术方案是这样实现的:
本发明实施例提供了一种来电提醒方法,应用于虚拟现实设备中;所述虚拟现实设备与移动终端建立通讯连接;所述方法包括:
虚拟现实设备显示表征第一视角的第一虚拟空间的第一显示内容;
接收到所述移动终端发送的来电请求指令;
基于所述来电请求指令生成满足预设音频参数的立体提醒音频并输出,以使用户听到的所述立体提醒音频的声源所在位置不在所述第一虚拟空间内;
当检测到第一切换指令时,显示表征第二视角的第二虚拟空间的第二显示内容;其中,所述第二虚拟空间包括用于接听来电的第一标识;
检测到针对所述第一标识的第一操作时,生成表征同意接听来电的第一指令,基于所述第一指令接通与所述来电请求指令对应的来电通话。
上述方案中,所述检测到第一切换指令时,显示表征第二视角的第二虚拟空间的第二显示内容,包括:
检测到第一切换指令,当所述第一切换指令用于切换视角方向、且所述视角方向指向所述声源所在的位置时,显示表征第二视角的第二虚拟空间的第二显示内容;所述第二显示内容所表征的第二虚拟空间包括用于接听来电的第一标识。
上述方案中,所述检测到针对所述第一标识的第一操作时,生成表征同意接听来电的第一指令,包括:
采集包含有操作体的深度图像,基于所述深度图像获得所述操作体的深度参数,以及基于所述深度参数生成表征所述第二视角且包含有虚拟操作体以及所述第一标识的第三虚拟空间,显示表征所述第三虚拟空间的第三显示内容;其中,所述虚拟操作体的位置伴随所述操作体的位置移动而变化;
检测到所述虚拟操作体所在位置与所述第一标识所在位置一致时,生成表征同意接听来电的第一指令。
上述方案中,所述基于所述来电请求指令生成满足预设音频参数的立体提醒音频并输出之后,所述方法还包括:
当检测到第二切换指令时,终止输出所述立体提醒音频。
上述方案中,所述当检测到第二切换指令时,终止输出所述立体提醒音频,包括:
检测到第二切换指令,当所述第二切换指令用于切换视角方向、且所述视角方向背离所述声源所在的位置时,终止输出所述立体提醒音频。
本发明实施例还提供了一种虚拟现实设备,所述虚拟现实设备包括:显示单元、通讯单元、声音单元和交互单元;其中,
所述显示单元,用于显示表征第一视角的第一虚拟空间的第一显示内容;
所述通讯单元,用于接收到所述移动终端发送的来电请求指令;
所述声音单元,用于基于所述来电请求指令生成满足预设音频参数的立体提醒音频并输出,以使用户听到的所述立体提醒音频的声源所在位置不在所述第一虚拟空间内;
所述交互单元,用于检测切换指令;
所述显示单元,还用于当所述交互单元检测到第一切换指令时,显示表征第二视角的第二虚拟空间的第二显示内容;其中,所述第二虚拟空间包括用于接听来电的第一标识;
所述交互单元,还用于检测到针对所述第一标识的第一操作时,生成表征同意接听来电的第一指令,基于所述第一指令接通与所述来电请求指令对应的来电通话。
上述方案中,所述显示单元,还用于所述交互单元检测到第一切换指令,当所述第一切换指令用于切换视角方向、且所述视角方向指向所述声源所在的位置时,显示表征第二视角的第二虚拟空间的第二显示内容;所述第二显示内容所表征的第二虚拟空间包括用于接听来电的第一标识。
上述方案中,所述交互单元,还用于采集包含有操作体的深度图像,基于所述深度图像获得所述操作体的深度参数;其中,所述虚拟操作体的位置伴随所述操作体的位置移动而变化;
所述显示单元,还用于基于所述深度参数生成表征所述第二视角且包含有虚拟操作体以及所述第一标识的第三虚拟空间,显示表征所述第三虚拟空间的第三显示内容;
所述交互单元,还用于检测到所述虚拟操作体所在位置与所述第一标识所在位置一致时,生成表征同意接听来电的第一指令。
上述方案中,所述交互单元,还用于所述声音单元基于所述来电请求指令生成满足预设音频参数的立体提醒音频并输出之后,当检测到第二切换指令时,终止所述声音单元输出所述立体提醒音频。
上述方案中,所述交互单元,用于检测到第二切换指令,当所述第二切换指令用于切换视角方向、且所述视角方向背离所述声源所在的位置时,终止所述声音单元输出所述立体提醒音频。
本发明实施例提供的来电提醒方法及虚拟现实设备,应用于虚拟现实设备中;所述虚拟现实设备与移动终端建立通讯连接;所述方法包括:虚拟现实设备显示表征第一视角的第一虚拟空间的第一显示内容;接收到所述移动终端发送的来电请求指令;基于所述来电请求指令生成满足预设音频参数的立体提醒音频并输出;以使用户听到的所述立体提醒音频的声源所在位置不在所述第一虚拟空间内;当检测到第一切换指令时,显示表征第二视角的第二虚拟空间的第二显示内容;其中,所述第二虚拟空间包括用于接听来电的第一标识;检测到针对所述第一标识的第一操作时,生成表征同意接听来电的第一指令,基于所述第一指令接通与所述来电请求指令对应的来电通话。采用本发明实施例的技术方案,当用户使用虚拟现实设备沉浸在虚拟场景中时,避免来电通话请求终端虚拟场景,实现虚拟场景体验和现实中的来电接听的无缝结合,大大提升了用户的操作体验。
附图说明
图1为本发明实施例的来电提醒方法的流程示意图;
图2为本发明实施例的来电提醒方法的一种显示场景示意图;
图3为本发明实施例的来电提醒方法的另一种显示场景示意图;
图4为本发明实施例的虚拟现实设备的组成结构示意图。
具体实施方式
下面结合附图及具体实施例对本发明作进一步详细的说明。
实施例一
本发明实施例提供了一种来电提醒方法。图1为本发明实施例的来电提醒方法的流程示意图;如图1所示,所述方法包括:
步骤101:虚拟现实设备显示表征第一视角的第一虚拟空间的第一显示内容。
步骤102:接收到所述移动终端发送的来电请求指令。
步骤103:基于所述来电请求指令生成满足预设音频参数的立体提醒音频并输出,以使用户听到的所述立体提醒音频的声源所在位置不在所述第一虚拟空间内。
步骤104:当检测到第一切换指令时,显示表征第二视角的第二虚拟空间的第二显示内容;其中,所述第二虚拟空间包括用于接听来电的第一标识。
步骤105:检测到针对所述第一标识的第一操作时,生成表征同意接听来电的第一指令,基于所述第一指令接通与所述来电请求指令对应的来电通话。
本实施例中,所述虚拟现实设备可与个人计算机(PC,Personal Computer)建立连接,可基于虚拟现实(VR,Virtual Reality)技术在多维空间上创建虚拟信息环境,通过该虚拟现实设备显示该虚拟信息环境,使用户具有身临其境的沉浸式体验;其中,与所述虚拟现实设备建立连接的PC可以是台式计算机或手机、笔记本电脑、平板电脑等移动终端;在本实施例中,所述PC可以为具有移动通信功能的移动终端,例如手机等,所述移动通信功能可以理解为接听来电、拨打电话等功能。
基于上述描述,本实施例中,在所述虚拟现实设备与移动终端建立通信连接后,所述虚拟现实设备可显示表征第一视角的第一虚拟空间的第一显示内容;所述第一显示内容可以是基于所述移动终端的显示内容结合图形建模、仿真等虚拟现实技术生成的表征第一虚拟空间的第一显示内容。其中,图2为本发明实施例的来电提醒方法的一种显示场景示意图;所述第一视角可以参照图2所示,可以理解为所述第一虚拟空间的视区范围。当所述虚拟现实设备为可穿戴式设备,例如虚拟现实头盔等设备时,所述第一视角也可以理解为用户当前所能看到的视区范围。
本实施例中,当所述虚拟现实设备接收到所述移动终端的来电请求指令时,基于所述来电请求指令生成满足预设音频参数的立体提醒音频并输出,其中,所述立体提醒音频是利用所述虚拟现实设备的至少两个音频输出组件输出使用户感受到立体效果的、且能够识别出所述立体提醒音频的声源位置的音频。具体的,由于人耳的基本声音定位原理是两侧声音强度差别(IID,Interaural Intensity Difference)和两侧声音时间延迟差别(ITD,Interaural Time Difference);IID指的是距离音源较近的耳朵,所收到的音频强度比另一边高,感到声音更大一些。ITD指的是方位的不同,使声音到达两耳的时间有差别。人们会觉得声源位置位于到达时间早些的那一边。基于此,本实施例中,可预先确定所述立体提醒音频的声源位置不在所述第一虚拟空间中,例如图2所示的所述立体提醒音频的声源位置在所述第一虚拟空间的右侧,也即在输出所述立体提醒音频时,用户可感受到所述立体提醒音频的声源位置在所述用户自身的右方甚至右后方;进一步地,基于所述声源位置按预设计算模型计算所述虚拟现实设备的至少两个音频输出组件分别输出的音频的强度和输出时间,从而使用户听到的声音具有立体效果。
本实施例中,所述检测到第一切换指令时,显示表征第二视角的第二虚拟空间的第二显示内容,包括:检测到第一切换指令,当所述第一切换指令用于切换视角方向、且所述视角方向指向所述声源所在的位置时,显示表征第二视角的第二虚拟空间的第二显示内容;所述第二显示内容所表征的第二虚拟空间包括用于接听来电的第一标识。
具体的,由于所述虚拟现实设备所显示的第一显示内容为一立体的虚拟空间(即所述第一虚拟空间);且用户感受到的所述立体提醒音频的声源所在位置不在所述第一虚拟空间内,则用户可基于感受到的所述立体提醒音频的声源所在位置的方位进行交互操作,所述交互操作例如使所述第一虚拟空间转向至所述立体提醒音频的声源所在位置的转向操作;当检测到使所述第一虚拟空间转向至所述立体提醒音频的声源所在位置的转向操作时,即检测到第一切换指令。图3为本发明实施例的来电提醒方法的另一种显示场景示意图;如图3所示,通过交互操作使显示的表征第一视角的第一虚拟空间通过转向显示表征第二视角的第二虚拟空间;由所述第一视角切换至第二视角的过程,其转动的方向指向所述立体提醒音频的声源所在位置。在具体的实施过程中,若虚拟现实设备为可穿戴式虚拟现实设备,则所述第一切换指令可通过用户头戴所述可穿戴式虚拟现实设备后通过转头或转身检测获得。若虚拟现实设备为非可穿戴式虚拟现实设备,则所述第一切换指令可通过检测用户的操作体(该操作体例如用户的手部)的动作获得。进一步地,在视角切换过程中,即转向过程中,在虚拟空间的某一位置显示用于接听来电的第一标识;其中,所述第一标识可以是电话标识。
本实施例中,所述检测到针对所述第一标识的第一操作时,生成表征同意接听来电的第一指令,包括:采集包含有操作体的深度图像,基于所述深度图像获得所述操作体的深度参数,以及基于所述深度参数生成表征所述第二视角且包含有虚拟操作体以及所述第一标识的第三虚拟空间,显示表征所述第三虚拟空间的第三显示内容;其中,所述虚拟操作体的位置伴随所述操作体的位置移动而变化;检测到所述虚拟操作体所在位置与所述第一标识所在位置一致时,生成表征同意接听来电的第一指令。
具体的,所述针对所述第一标识的第一操作可通过检测用户的操作体(该操作体例如用户的手部)的动作获得。在具体实现过程中,所述虚拟现实设备上可设置深度摄像头或3D扫描仪等组件,该组件可采集包含有操作体的深度图像或者立体图像,基于采集的深度图像或立体图像可确定所述操作体的深度参数,以便基于获得的操作体的深度参数将所述用户的操作体生成用户在虚拟空间中呈现的虚拟操作体,将虚拟操作体显示在虚拟空间中,使得用户可感受到自身一边在进行交互动作,一边在眼睛可感受到的虚拟空间中呈现该交互动作。例如用户伸出手臂,在虚拟现实设备显示的虚拟空间中伴随着手臂的伸出,一个虚拟的手臂也在逐渐伸出。基于此,用户可基于看到的虚拟景象中虚拟手臂的伸出方向及深度范围,以及所述第一标识所在位置逐渐调整手臂的伸出方向以及深度范围,从而使得虚拟手臂的末端、也即虚拟手能碰到所述第一标识,相当于所述虚拟操作体所在位置与所述第一标识所在位置一致,进一步生成表征同意接听来电的第一指令。作为另一种实施方式,为了使用户的体验更加,所述第一标识可以为一个虚拟电话的标识;则用户可通过上述交互操作使得虚拟操作体抓取到所述虚拟电话,或者抓取到虚拟电话的听筒,则进一步生成表征同意接听来电的第一指令。
作为一种实施方式,所述基于所述来电请求指令生成满足预设音频参数的立体提醒音频并输出之后,所述方法还包括:当检测到第二切换指令时,终止输出所述立体提醒音频。
具体的,所述当检测到第二切换指令时,终止输出所述立体提醒音频,包括:检测到第二切换指令,当所述第二切换指令用于切换视角方向、且所述视角方向背离所述声源所在的位置时,终止输出所述立体提醒音频。
本实施例中,由于所述虚拟现实设备所显示的第一显示内容为一立体的虚拟空间(即所述第一虚拟空间);且用户感受到的所述立体提醒音频的声源所在位置不在所述第一虚拟空间内,则用户可基于感受到的所述立体提醒音频的声源所在位置的方位进行交互操作,所述交互操作例如使所述第一虚拟空间背离至所述立体提醒音频的声源所在位置的转向操作;当检测到使所述第一虚拟空间背离至所述立体提醒音频的声源所在位置的转向操作时,即检测到第二切换指令;所述第二切换指令可以理解为“挂断当前来电”的指令。基于所述第二切换指令,终止输出所述立体提醒音频,从而使用户继续虚拟场景的沉浸式体验。
采用本发明实施例的技术方案,当用户使用虚拟现实设备沉浸在虚拟场景中时,避免来电通话请求终端虚拟场景,实现虚拟场景体验和现实中的来电接听的无缝结合,大大提升了用户的操作体验。
实施例二
本发明实施例还提供了一种虚拟现实设备。图4为本发明实施例的虚拟现实设备的组成结构示意图;如图4所示,所述虚拟现实设备包括:显示单元41、通讯单元42、声音单元43和交互单元44;其中,
所述显示单元41,用于显示表征第一视角的第一虚拟空间的第一显示内容;
所述通讯单元42,用于接收到所述移动终端发送的来电请求指令;
所述声音单元43,用于基于所述来电请求指令生成满足预设音频参数的立体提醒音频并输出,以使用户听到的所述立体提醒音频的声源所在位置不在所述第一虚拟空间内;
所述交互单元44,用于检测切换指令;
所述显示单元41,还用于当所述交互单元44检测到第一切换指令时,显示表征第二视角的第二虚拟空间的第二显示内容;其中,所述第二虚拟空间包括用于接听来电的第一标识;
所述交互单元44,还用于检测到针对所述第一标识的第一操作时,生成表征同意接听来电的第一指令,基于所述第一指令接通与所述来电请求指令对应的来电通话。
本实施例中,所述虚拟现实设备可与PC建立连接,可基于VR技术在多维空间上创建虚拟信息环境,通过该虚拟现实设备显示该虚拟信息环境,使用户具有身临其境的沉浸式体验;其中,与所述虚拟现实设备建立连接的PC可以是台式计算机或手机、笔记本电脑、平板电脑等移动终端;在本实施例中,所述PC可以为具有移动通信功能的移动终端,例如手机等,所述移动通信功能可以理解为接听来电、拨打电话等功能。
基于上述描述,本实施例中,在所述通讯单元42与移动终端建立通信连接后,所述显示单元41可显示表征第一视角的第一虚拟空间的第一显示内容;所述第一显示内容可以是基于所述移动终端的显示内容结合图形建模、仿真等虚拟现实技术生成的表征第一虚拟空间的第一显示内容。其中,所述第一视角可以参照图2所示,可以理解为所述第一虚拟空间的视区范围。当所述虚拟现实设备为可穿戴式设备,例如虚拟现实头盔等设备时,所述第一视角也可以理解为用户当前所能看到的视区范围。
本实施例中,当所述通讯单元42接收到所述移动终端的来电请求指令时,所述声音单元43基于所述来电请求指令生成满足预设音频参数的立体提醒音频并输出,其中,所述立体提醒音频是利用所述虚拟现实设备的至少两个音频输出组件输出使用户感受到立体效果的、且能够识别出所述立体提醒音频的声源位置的音频。具体的,由于人耳的基本声音定位原理是IID和ITD;IID指的是距离音源较近的耳朵,所收到的音频强度比另一边高,感到声音更大一些。ITD指的是方位的不同,使声音到达两耳的时间有差别。人们会觉得声源位置位于到达时间早些的那一边。基于此,本实施例中,可预先确定所述立体提醒音频的声源位置不在所述第一虚拟空间中,例如图2所示的所述立体提醒音频的声源位置在所述第一虚拟空间的右侧,也即在输出所述立体提醒音频时,用户可感受到所述立体提醒音频的声源位置在所述用户自身的右方甚至右后方;进一步地,所述声音单元43基于所述声源位置按预设计算模型计算所述虚拟现实设备的至少两个音频输出组件分别输出的音频的强度和输出时间,从而使用户听到的声音具有立体效果。
本实施例中,所述显示单元41,还用于所述交互单元44检测到第一切换指令,当所述第一切换指令用于切换视角方向、且所述视角方向指向所述声源所在的位置时,显示表征第二视角的第二虚拟空间的第二显示内容;所述第二显示内容所表征的第二虚拟空间包括用于接听来电的第一标识。
具体的,由于所述显示单元41所显示的第一显示内容为一立体的虚拟空间(即所述第一虚拟空间);且用户感受到的所述立体提醒音频的声源所在位置不在所述第一虚拟空间内,则用户可基于感受到的所述立体提醒音频的声源所在位置的方位进行交互操作,所述交互操作例如使所述第一虚拟空间转向至所述立体提醒音频的声源所在位置的转向操作;当所述交互单元44检测到使所述第一虚拟空间转向至所述立体提醒音频的声源所在位置的转向操作时,即检测到第一切换指令。如图3所示,通过交互操作使所述显示单元41显示的表征第一视角的第一虚拟空间通过转向显示表征第二视角的第二虚拟空间;由所述第一视角切换至第二视角的过程,其转动的方向指向所述立体提醒音频的声源所在位置。在具体的实施过程中,若虚拟现实设备为可穿戴式虚拟现实设备,则所述第一切换指令可通过用户头戴所述可穿戴式虚拟现实设备后通过转头或转身检测获得。若虚拟现实设备为非可穿戴式虚拟现实设备,则所述第一切换指令可通过所述交互单元44检测用户的操作体(该操作体例如用户的手部)的动作获得。进一步地,在视角切换过程中,即转向过程中,在虚拟空间的某一位置显示用于接听来电的第一标识;其中,所述第一标识可以是电话标识。
本实施例中,所述交互单元44,还用于采集包含有操作体的深度图像,基于所述深度图像获得所述操作体的深度参数;其中,所述虚拟操作体的位置伴随所述操作体的位置移动而变化;所述显示单元41,还用于基于所述深度参数生成表征所述第二视角且包含有虚拟操作体以及所述第一标识的第三虚拟空间,显示表征所述第三虚拟空间的第三显示内容;所述交互单元44,还用于检测到所述虚拟操作体所在位置与所述第一标识所在位置一致时,生成表征同意接听来电的第一指令。
具体的,所述针对所述第一标识的第一操作可通过所述交互单元44检测用户的操作体(该操作体例如用户的手部)的动作获得。在具体实现过程中,所述交互单元44可通过深度摄像头或3D扫描仪等组件结合计算处理组件实现,该组件可采集包含有操作体的深度图像或者立体图像,基于采集的深度图像或立体图像可确定所述操作体的深度参数,以便基于获得的操作体的深度参数将所述用户的操作体生成用户在虚拟空间中呈现的虚拟操作体,将虚拟操作体显示在虚拟空间中,使得用户可感受到自身一边在进行交互动作,一边在眼睛可感受到的虚拟空间中呈现该交互动作。例如用户伸出手臂,在虚拟现实设备显示的虚拟空间中伴随着手臂的伸出,一个虚拟的手臂也在逐渐伸出。基于此,用户可基于看到的虚拟景象中虚拟手臂的伸出方向及深度范围,以及所述第一标识所在位置逐渐调整手臂的伸出方向以及深度范围,从而使得虚拟手臂的末端、也即虚拟手能碰到所述第一标识,相当于所述虚拟操作体所在位置与所述第一标识所在位置一致,进一步生成表征同意接听来电的第一指令。作为另一种实施方式,为了使用户的体验更加,所述第一标识可以为一个虚拟电话的标识;则用户可通过上述交互操作使得虚拟操作体抓取到所述虚拟电话,或者抓取到虚拟电话的听筒,则进一步生成表征同意接听来电的第一指令。
作为一种实施方式,所述交互单元44,还用于所述声音单元43基于所述来电请求指令生成满足预设音频参数的立体提醒音频并输出之后,当检测到第二切换指令时,终止所述声音单元43输出所述立体提醒音频。
所述交互单元44,用于检测到第二切换指令,当所述第二切换指令用于切换视角方向、且所述视角方向背离所述声源所在的位置时,终止所述声音单元43输出所述立体提醒音频。
本实施例中,由于所述显示单元41所显示的第一显示内容为一立体的虚拟空间(即所述第一虚拟空间);且用户感受到的所述立体提醒音频的声源所在位置不在所述第一虚拟空间内,则用户可基于感受到的所述立体提醒音频的声源所在位置的方位进行交互操作,所述交互操作例如使所述第一虚拟空间背离至所述立体提醒音频的声源所在位置的转向操作;当所述交互单元44检测到使所述第一虚拟空间背离至所述立体提醒音频的声源所在位置的转向操作时,即检测到第二切换指令;所述第二切换指令可以理解为“挂断当前来电”的指令。基于所述第二切换指令,终止输出所述立体提醒音频,从而使用户继续虚拟场景的沉浸式体验。
本发明实施例中,所述虚拟现实设备中的显示单元41、声音单元43和交互单元44,在实际应用中可分别由所述设备中的中央处理器(CPU,Central Processing Unit)、数字信号处理器(DSP,Digital Signal Processor)、微控制单元(MCU,Microcontroller Unit)或可编程门阵列(FPGA,Field-Programmable Gate Array)结合显示屏、耳机和各传感器(例如立体摄像头、3D扫描仪等)实现;所述虚拟现实设备中的通讯单元42,在实际应用中可通过通信模组(包含:基础通信套件、操作系统、通信模块、标准化接口和协议等)及收发天线实现。
采用本发明实施例的技术方案,当用户使用虚拟现实设备沉浸在虚拟场景中时,避免来电通话请求终端虚拟场景,实现虚拟场景体验和现实中的来电接听的无缝结合,大大提升了用户的操作体验。
在本申请所提供的几个实施例中,应该理解到,所揭露的设备和方法,可以通过其它的方式实现。以上所描述的设备实施例仅仅是示意性的,例如,所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,如:多个单元或组件可以结合,或可以集成到另一个系统,或一些特征可以忽略,或不执行。另外,所显示或讨论的各组成部分相互之间的耦合、或直接耦合、或通信连接可以是通过一些接口,设备或单元的间接耦合或通信连接,可以是电性的、机械的或其它形式的。
上述作为分离部件说明的单元可以是、或也可以不是物理上分开的,作为单元显示的部件可以是、或也可以不是物理单元,即可以位于一个地方,也可以分布到多个网络单元上;可以根据实际的需要选择其中的部分或全部单元来实现本实施例方案的目的。
另外,在本发明各实施例中的各功能单元可以全部集成在一个处理单元中,也可以是各单元分别单独作为一个单元,也可以两个或两个以上单元集成在一个单元中;上述集成的单元既可以采用硬件的形式实现,也可以采用硬件加软件功能单元的形式实现。
本领域普通技术人员可以理解:实现上述方法实施例的全部或部分步骤可以通过程序指令相关的硬件来完成,前述的程序可以存储于一计算机可读取存储介质中,该程序在执行时,执行包括上述方法实施例的步骤;而前述的存储介质包括:移动存储设备、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
或者,本发明上述集成的单元如果以软件功能模块的形式实现并作为独立的产品销售或使用时,也可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明实施例的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机、服务器、或者网络设备等)执行本发明各个实施例所述方法的全部或部分。而前述的存储介质包括:移动存储设备、ROM、RAM、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述,仅为本发明的具体实施方式,但本发明的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本发明揭露的技术范围内,可轻易想到变化或替换,都应涵盖在本发明的保护范围之内。因此,本发明的保护范围应以所述权利要求的保护范围为准。

Claims (10)

1.一种来电提醒方法,应用于虚拟现实设备中;所述虚拟现实设备与移动终端建立通讯连接;其特征在于,所述方法包括:
虚拟现实设备显示表征第一视角的第一虚拟空间的第一显示内容;
接收到所述移动终端发送的来电请求指令;
基于所述来电请求指令生成满足预设音频参数的立体提醒音频并输出,以使用户听到的所述立体提醒音频的声源所在位置不在所述第一虚拟空间内;
当检测到第一切换指令时,显示表征第二视角的第二虚拟空间的第二显示内容;其中,所述第二虚拟空间包括用于接听来电的第一标识;
检测到针对所述第一标识的第一操作时,生成表征同意接听来电的第一指令,基于所述第一指令接通与所述来电请求指令对应的来电通话。
2.根据权利要求1所述的方法,其特征在于,所述检测到第一切换指令时,显示表征第二视角的第二虚拟空间的第二显示内容,包括:
检测到第一切换指令,当所述第一切换指令用于切换视角方向、且所述视角方向指向所述声源所在的位置时,显示表征第二视角的第二虚拟空间的第二显示内容;所述第二显示内容所表征的第二虚拟空间包括用于接听来电的第一标识。
3.根据权利要求1所述的方法,其特征在于,所述检测到针对所述第一标识的第一操作时,生成表征同意接听来电的第一指令,包括:
采集包含有操作体的深度图像,基于所述深度图像获得所述操作体的深度参数,以及基于所述深度参数生成表征所述第二视角且包含有虚拟操作体以及所述第一标识的第三虚拟空间,显示表征所述第三虚拟空间的第三显示内容;其中,所述虚拟操作体的位置伴随所述操作体的位置移动而变化;
检测到所述虚拟操作体所在位置与所述第一标识所在位置一致时,生成表征同意接听来电的第一指令。
4.根据权利要求1所述的方法,其特征在于,所述基于所述来电请求指令生成满足预设音频参数的立体提醒音频并输出之后,所述方法还包括:
当检测到第二切换指令时,终止输出所述立体提醒音频。
5.根据权利要求4所述的方法,其特征在于,所述当检测到第二切换指令时,终止输出所述立体提醒音频,包括:
检测到第二切换指令,当所述第二切换指令用于切换视角方向、且所述视角方向背离所述声源所在的位置时,终止输出所述立体提醒音频。
6.一种虚拟现实设备,其特征在于,所述虚拟现实设备包括:显示单元、通讯单元、声音单元和交互单元;其中,
所述显示单元,用于显示表征第一视角的第一虚拟空间的第一显示内容;
所述通讯单元,用于接收到移动终端发送的来电请求指令;
所述声音单元,用于基于所述来电请求指令生成满足预设音频参数的立体提醒音频并输出,以使用户听到的所述立体提醒音频的声源所在位置不在所述第一虚拟空间内;
所述交互单元,用于检测切换指令;
所述显示单元,还用于当所述交互单元检测到第一切换指令时,显示表征第二视角的第二虚拟空间的第二显示内容;其中,所述第二虚拟空间包括用于接听来电的第一标识;
所述交互单元,还用于检测到针对所述第一标识的第一操作时,生成表征同意接听来电的第一指令,基于所述第一指令接通与所述来电请求指令对应的来电通话。
7.根据权利要求6所述的虚拟现实设备,其特征在于,所述显示单元,还用于所述交互单元检测到第一切换指令,当所述第一切换指令用于切换视角方向、且所述视角方向指向所述声源所在的位置时,显示表征第二视角的第二虚拟空间的第二显示内容;所述第二显示内容所表征的第二虚拟空间包括用于接听来电的第一标识。
8.根据权利要求6所述的虚拟现实设备,其特征在于,所述交互单元,还用于采集包含有操作体的深度图像,基于所述深度图像获得所述操作体的深度参数;
所述显示单元,还用于基于所述深度参数生成表征所述第二视角且包含有虚拟操作体以及所述第一标识的第三虚拟空间,显示表征所述第三虚拟空间的第三显示内容;其中,所述虚拟操作体的位置伴随所述操作体的位置移动而变化;
所述交互单元,还用于检测到所述虚拟操作体所在位置与所述第一标识所在位置一致时,生成表征同意接听来电的第一指令。
9.根据权利要求6所述的虚拟现实设备,其特征在于,所述交互单元,还用于所述声音单元基于所述来电请求指令生成满足预设音频参数的立体提醒音频并输出之后,当检测到第二切换指令时,终止所述声音单元输出所述立体提醒音频。
10.根据权利要求9所述的虚拟现实设备,其特征在于,所述交互单元,用于检测到第二切换指令,当所述第二切换指令用于切换视角方向、且所述视角方向背离所述声源所在的位置时,终止所述声音单元输出所述立体提醒音频。
CN201611229959.8A 2016-12-27 2016-12-27 一种来电提醒方法及虚拟现实设备 Active CN108243275B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201611229959.8A CN108243275B (zh) 2016-12-27 2016-12-27 一种来电提醒方法及虚拟现实设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201611229959.8A CN108243275B (zh) 2016-12-27 2016-12-27 一种来电提醒方法及虚拟现实设备

Publications (2)

Publication Number Publication Date
CN108243275A CN108243275A (zh) 2018-07-03
CN108243275B true CN108243275B (zh) 2020-07-21

Family

ID=62703026

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201611229959.8A Active CN108243275B (zh) 2016-12-27 2016-12-27 一种来电提醒方法及虚拟现实设备

Country Status (1)

Country Link
CN (1) CN108243275B (zh)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109348075B (zh) * 2018-09-17 2021-02-02 北京盘古影艺文化传播有限公司 一种来电处理系统
CN110290137A (zh) * 2019-06-26 2019-09-27 上海乐相科技有限公司 一种虚拟现实系统的控制方法及装置
CN111240634A (zh) * 2020-01-08 2020-06-05 百度在线网络技术(北京)有限公司 音箱工作模式调整方法和装置
CN116048241A (zh) * 2022-06-14 2023-05-02 荣耀终端有限公司 一种提示方法、扩展现实设备及介质

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110086711A1 (en) * 2009-10-08 2011-04-14 Sony Ericsson Mobile Communications Ab Game Environment to Interact with Telephony Modem
KR101566897B1 (ko) * 2009-12-03 2015-11-06 엘지전자 주식회사 자전거 관리용 휴대 단말기 및 그 제어방법
US9952652B2 (en) * 2014-12-04 2018-04-24 Htc Corporation Virtual reality system and method for controlling operation modes of virtual reality system
CN105892667B (zh) * 2016-03-31 2019-03-29 联想(北京)有限公司 一种虚拟现实场景下的信息处理方法和电子设备
CN105898062A (zh) * 2016-04-26 2016-08-24 乐视控股(北京)有限公司 一种基于虚拟设备的来电管理方法及装置
CN106254630B (zh) * 2016-07-20 2019-06-28 Oppo广东移动通信有限公司 一种接听电话的方法及终端

Also Published As

Publication number Publication date
CN108243275A (zh) 2018-07-03

Similar Documents

Publication Publication Date Title
CN108243275B (zh) 一种来电提醒方法及虚拟现实设备
US11356797B2 (en) Display a graphical representation to indicate sound will externally localize as binaural sound
US11765538B2 (en) Wearable electronic device (WED) displays emoji that plays binaural sound
US10496360B2 (en) Emoji to select how or where sound will localize to a listener
US20200389753A1 (en) Emoji that Indicates a Location of Binaural Sound
CN106139587A (zh) 一种基于vr游戏用来规避现实环境障碍物的方法及系统
CN111386517A (zh) 用于体验虚拟现实的用户之间的通信的装置和相关方法
US11297456B2 (en) Moving an emoji to move a location of binaural sound
CN111580661A (zh) 交互方法和增强现实设备
US11361497B2 (en) Information processing device and information processing method
US20210081047A1 (en) Head-Mounted Display With Haptic Output
JP2014110558A (ja) 情報処理装置、情報処理システム及びプログラム
GB2590256A (en) Method and device for processing audio signal
WO2017152592A1 (zh) 一种移动终端应用操作方法及移动终端
CN110782532B (zh) 图像生成方法、生成装置、电子设备及存储介质
CN112927718B (zh) 感知周围环境的方法、装置、终端和存储介质
CN107168662B (zh) 一种信息处理方法及电子设备
WO2023016302A1 (zh) 虚拟输入元件的显示方法、电子设备和可读存储介质
EP3337165A1 (en) Video communication method and system
CN114979544A (zh) 一种音视频通话场景的交互方法、装置及系统
CN116521282A (zh) 一种虚拟现实设备及虚拟现实场景中的显示方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant