CN114721512B - 终端交互方法、装置、电子设备及存储介质 - Google Patents

终端交互方法、装置、电子设备及存储介质 Download PDF

Info

Publication number
CN114721512B
CN114721512B CN202210269557.XA CN202210269557A CN114721512B CN 114721512 B CN114721512 B CN 114721512B CN 202210269557 A CN202210269557 A CN 202210269557A CN 114721512 B CN114721512 B CN 114721512B
Authority
CN
China
Prior art keywords
audio
target
volume
sound source
content
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202210269557.XA
Other languages
English (en)
Other versions
CN114721512A (zh
Inventor
王玮晨
刘可心
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Chengshi Wanglin Information Technology Co Ltd
Original Assignee
Beijing Chengshi Wanglin Information Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Chengshi Wanglin Information Technology Co Ltd filed Critical Beijing Chengshi Wanglin Information Technology Co Ltd
Priority to CN202210269557.XA priority Critical patent/CN114721512B/zh
Publication of CN114721512A publication Critical patent/CN114721512A/zh
Application granted granted Critical
Publication of CN114721512B publication Critical patent/CN114721512B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16Sound input; Sound output
    • G06F3/165Management of the audio stream, e.g. setting of volume, audio stream path
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16Sound input; Sound output
    • G06F3/167Audio in a user interface, e.g. using voice commands for navigating, audio feedback
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/003Navigation within 3D models or images
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/006Mixed reality
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/01Indexing scheme relating to G06F3/01
    • G06F2203/012Walk-in-place systems for allowing a user to walk in a virtual environment while constraining him to a given position in the physical environment
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2200/00Indexing scheme for image data processing or generation, in general
    • G06T2200/24Indexing scheme for image data processing or generation, in general involving graphical user interfaces [GUIs]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2210/00Indexing scheme for image generation or computer graphics
    • G06T2210/04Architectural design, interior design

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Software Systems (AREA)
  • Human Computer Interaction (AREA)
  • General Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Health & Medical Sciences (AREA)
  • Multimedia (AREA)
  • Computer Graphics (AREA)
  • Computer Hardware Design (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Stereophonic System (AREA)

Abstract

本发明实施例提供了一种终端交互方法、装置、电子设备及可读存储介质,所述方法包括:在用户浏览的过程中,可以根据漫游点与音源对象之间的位置关系,对音源对象的音频输出进行控制,丰富了音频控制的方式,同时在控制音频输出的过程中,可以对显示的内容进行联动输出,有效地将音频与场景内容进行结合,丰富了信息输出的方式,提高了用户的浏览效率。

Description

终端交互方法、装置、电子设备及存储介质
技术领域
本发明涉及终端交互技术领域,特别是涉及一种终端交互方法、一种终端交互装置、一种电子设备以及一种计算机可读存储介质。
背景技术
随着网络技术的发展以及用户需求的改变,用户可以通过终端实现在线看房、看车、购物等等。例如,用户线上看房的过程中,可以在终端中基于AR(Augmented Reality,增强显示)、VR(Virtual Reality,虚拟现实)的方式实现沉浸式看房,同时为了丰富线上看房的方式,还可以在三维空间中增加音效,在丰富信息获取方式的同时,提高了用户获取信息的效率。然而,在相关技术中,对于三维空间中的音频控制,其往往是自动播放或者根据用户操作进行播放,音频播放的控制方式过于单一,且无法与相关场景内容进行联动,难以满足不同用户的需求。
发明内容
本发明实施例是提供一种终端交互方法、装置、电子设备以及计算机可读存储介质,以解决或部分解决相关技术中用户对基于AR/VR的三维空间内容进行浏览过程中,场景内音频的控制播放方式过于单一,且无法与相关场景内容进行联动的问题。
本发明实施例公开了一种终端交互方法,通过预设终端提供图形用户界面,所述图形用户界面显示的内容至少包括根据目标对象建立的虚拟空间,所述虚拟空间中配置有至少一个音源对象,其中,所述音源对象为以所述目标对象为参考目标,所模拟的在所述目标对象的环境下以声音为传播媒介的溯源对象,所述方法包括:
响应于视角选择指令,在所述虚拟空间中确定与所述视角选择指令对应的漫游位置点,并获取所述漫游位置点对应的当前观察视角;
根据所述漫游位置点与所述音源对象在所述虚拟空间中的位置关系,确定针对所述音源对象的音频输出信息;
根据所述音频输出信息控制所述音源对象的音频输出,并在所述图形用户界面中以所述当前观察视角输出所述音源对象对应的第一目标内容。
可选地,所述根据所述漫游位置点与所述音源对象在所述虚拟空间中的位置关系,确定针对所述音源对象的音频输出信息,包括:
获取所述音源对象在所述虚拟空间中的音源范围,所述音源范围包括若干个对应不同播放参数的音区;
将所述漫游位置点与各个所述音区进行匹配,确定所述漫游位置点所处的目标音区,并获取与所述目标音区对应的音频输出信息;
其中,所述音频输出信息至少包括音量、音频内容、音色以及音调中的一种。
可选地,所述音区包括外层音区,所述获取与所述目标音区对应的音频输出信息,包括:
若所述目标音区为所述外层音区,则获取所述外层音区对应的第一音量以及所述音源对象的第一音频内容;
其中,所述根据所述音频输出信息控制所述音源对象的音频输出,并在所述图形用户界面中以所述当前观察视角输出所述音源对象对应的第一目标内容,包括:
采用所述第一音量播放所述第一音频内容;
在所述虚拟空间中提取与所述第一音频内容对应的第一层级信息,并在所述图形用户界面以所述当前观察视角输出所述第一层级信息。
可选地,所述音区包括中层音区,所述获取与所述目标音区对应的音频输出信息,包括:
若所述目标音区为所述中层音区,则获取所述中层音区对应的第二音量以及所述音源对象的第二音频内容;
其中,所述根据所述音频输出信息控制所述音源对象的音频输出,并在所述图形用户界面中以所述当前观察视角输出所述音源对象对应的第一目标内容,包括:
采用所述第二音量播放所述第二音频内容;
在所述虚拟空间中提取与所述第二音频内容对应的第二层级信息,并在所述图形用户界面中以所述当前观察视角输出所述第二层级信息。
可选地,所述音区包括内层音区,所述获取与所述目标音区对应的音频输出信息,包括:
若所述目标音区为所述内层音区,则获取所述内层音区对应的第三音量以及所述音源对象的第三音频内容;
其中,所述根据所述音频输出信息控制所述音源对象的音频输出,并在所述图形用户界面中以所述当前观察视角输出所述音源对象对应的第一目标内容,包括:
采用所述第三音量播放所述第三音频内容;
在所述虚拟空间中提取与所述第三音频内容对应的第三层级信息,并在所述图形用户界面中以所述当前观察视角输出所述第三层级信息。
可选地,所述采用所述第三音量播放所述第三音频内容之前,所述方法还包括:
在所述图形用户界面中显示与所述第三音量对应的音量提示信息,所述音量提示信息用于提示用户所述预设终端将以目标音量进行音频输出。
可选地,还包括:
响应于视角切换指令,获取所述视角切换指令对应的目标观察视角,并在所述图形用户界面中输出所述目标观察视角对应的第二目标内容;
若所述第二目标内容中未包含所述音源对象,则获取所述音源对象在所述虚拟空间中相对于所述目标观察视角的方位信息,并在所述图形用户界面中显示与所述方位信息对应的音源指引标识。
可选地,还包括:
若所述漫游位置点位于所述音区之外,则获取针对所述音源对象的静音控制指令;
其中,所述根据所述音频输出信息控制所述音源对象的音频输出,并在所述图形用户界面中控制所述虚拟空间输出与所述当前观察视角对应的目标内容,包括:
控制所述音源对象执行与所述静音控制指令对应的静音操作;
在所述图形用户界面中控制所述虚拟空间输出与所述当前观察视角对应的目标内容。
可选地,所述根据所述音频输出信息控制所述音源对象的音频输出,并在所述图形用户界面中以所述当前观察视角输出所述音源对象对应的第一目标内容,包括:
获取与所述音频输出信息对应的目标音量以及目标音频内容;
在所述虚拟空间中提取与所述目标音频内容对应的目标层级信息;
控制所述预设终端从当前音量平滑变化至所述目标音量,并在音量变化的过程中将当前音频内容切换至所述目标音频内容;
在所述图形用户界面中以所述当前观察视角输出所述目标层级信息。
可选地,还包括:
响应于所述音源对象的音频输出,在所述图形用户界面中显示音量标识,所述音量标识包括一音量调节控件;
响应针对所述音量调节控件的控制操作,获取与所述控制操作对应的目标音量,并将当前音量调节为所述目标音量。
本发明实施例还公开了一种终端交互装置,通过预设终端提供图形用户界面,所述图形用户界面显示的内容至少包括根据目标对象建立的虚拟空间,所述虚拟空间中配置有至少一个音源对象,其中,所述音源对象为以所述目标对象为参考目标,所模拟的在所述目标对象的环境下以声音为传播媒介的溯源对象,所述装置包括:
当前观察视角获取模块,用于响应于视角选择指令,在所述虚拟空间中确定与所述视角选择指令对应的漫游位置点,并获取所述漫游位置点对应的当前观察视角;
音频输出信息确定模块,用于根据所述漫游位置点与所述音源对象在所述虚拟空间中的位置关系,确定针对所述音源对象的音频输出信息;
内容输出模块,用于根据所述音频输出信息控制所述音源对象的音频输出,并在所述图形用户界面中以所述当前观察视角输出所述音源对象对应的第一目标内容。
可选地,所述音频输出信息确定模块包括:
音源范围获取子模块,用于获取所述音源对象在所述虚拟空间中的音源范围,所述音源范围包括若干个对应不同播放参数的音区;
音频输出信息确定子模块,用于将所述漫游位置点与各个所述音区进行匹配,确定所述漫游位置点所处的目标音区,并获取与所述目标音区对应的音频输出信息;
其中,所述音频输出信息至少包括音量、音频内容、音色以及音调中的一种。
可选地,所述音区包括外层音区,所述音频输出信息确定子模块具体用于:
若所述目标音区为所述外层音区,则获取所述外层音区对应的第一音量以及所述音源对象的第一音频内容;
其中,所述内容输出模块具体用于:
采用所述第一音量播放所述第一音频内容;
在所述虚拟空间中提取与所述第一音频内容对应的第一层级信息,并在所述图形用户界面以所述当前观察视角输出所述第一层级信息。
可选地,所述音区包括中层音区,所述音频输出信息确定子模块具体用于:
若所述目标音区为所述中层音区,则获取所述中层音区对应的第二音量以及所述音源对象的第二音频内容;
其中,所述内容输出模块具体用于:
采用所述第二音量播放所述第二音频内容;
在所述虚拟空间中提取与所述第二音频内容对应的第二层级信息,并在所述图形用户界面中以所述当前观察视角输出所述第二层级信息。
可选地,所述音区包括内层音区,所述音频输出信息确定子模块具体用于:
若所述目标音区为所述内层音区,则获取所述内层音区对应的第三音量以及所述音源对象的第三音频内容;
其中,所述内容输出模块具体用于:
采用所述第三音量播放所述第三音频内容;
在所述虚拟空间中提取与所述第三音频内容对应的第三层级信息,并在所述图形用户界面中以所述当前观察视角输出所述第三层级信息。
可选地,所述装置还包括:
提示信息输出模块,用于在所述图形用户界面中显示与所述第三音量对应的音量提示信息,所述音量提示信息用于提示用户所述预设终端将以目标音量进行音频输出。
可选地,还包括:
视角切换模块,用于响应于视角切换指令,获取所述视角切换指令对应的目标观察视角,并在所述图形用户界面中输出所述目标观察视角对应的第二目标内容;
指引标识显示模块,用于若所述第二目标内容中未包含所述音源对象,则获取所述音源对象在所述虚拟空间中相对于所述目标观察视角的方位信息,并在所述图形用户界面中显示与所述方位信息对应的音源指引标识。
可选地,还包括:
静音指令获取模块,用于若所述漫游位置点位于所述音区之外,则获取针对所述音源对象的静音控制指令;
其中,所述内容输出模块具体用于:
控制所述音源对象执行与所述静音控制指令对应的静音操作;
在所述图形用户界面中控制所述虚拟空间输出与所述当前观察视角对应的目标内容。
可选地,所述内容输出模块包括:
内容获取子模块,用于获取与所述音频输出信息对应的目标音量以及目标音频内容;
层级信息提取子模块,用于在所述虚拟空间中提取与所述目标音频内容对应的目标层级信息;
音频输出控制子模块,用于控制所述预设终端从当前音量平滑变化至所述目标音量,并在音量变化的过程中将当前音频内容切换至所述目标音频内容;
层级信息输出子模块,用于在所述图形用户界面中以所述当前观察视角输出所述目标层级信息。
可选地,还包括:
音量标识显示模块,用于响应于所述音源对象的音频输出,在所述图形用户界面中显示音量标识,所述音量标识包括一音量调节控件;
音量调节模块,用于响应针对所述音量调节控件的控制操作,获取与所述控制操作对应的目标音量,并将当前音量调节为所述目标音量。
本发明实施例还公开了一种电子设备,包括处理器、通信接口、存储器和通信总线,其中,所述处理器、所述通信接口以及所述存储器通过所述通信总线完成相互间的通信;
所述存储器,用于存放计算机程序;
所述处理器,用于执行存储器上所存放的程序时,实现如本发明实施例所述的方法。
本发明实施例还公开了一个或多个计算机可读存储介质,其上存储有指令,当由一个或多个处理器执行时,使得所述处理器执行如本发明实施例所述的方法。
本发明实施例包括以下优点:
在本发明实施例中,用户可以通过终端浏览根据目标对象建立的虚拟空间,在该虚拟空间中可以配置有至少一个音源对象,对于音源对象,其可以为以目标对象为参考目标所模拟的在目标对象的环境下以声音为传播媒介的溯源对象,则针对其中的某个音源对象,终端可以响应于视角选择指令,在虚拟空间中确定与视角选择指令对应的漫游位置点,并获取该漫游位置点对应的当前观察视角,接着可以根据漫游位置点与音源对象在虚拟空间中的位置关系,确定针对音源对象的音频输出信息,然后在根据音频输出信息控制音源对象的音频输出的同时,在图形用户界面中以当前观察视角输出音源对象对应的第一目标内容,从而在用户浏览的过程中,可以根据漫游点与音源对象之间的位置关系,对音源对象的音频输出进行控制,丰富了音频控制的方式,同时在控制音频输出的过程中,可以对显示的内容进行联动输出,有效地将音频与场景内容进行结合,丰富了信息输出的方式,提高了用户的浏览效率。
附图说明
图1是本发明实施例中提供的一种终端交互方法的步骤流程图;
图2是本发明实施例中提供的音源范围的示意图;
图4是本发明实施例中提供的音频控制的示意图;
图3是本发明实施例中提供的音频控制的示意图;
图5是本发明实施例中提供的音频控制的示意图;
图6是本发明实施例中提供的音源指引标识的示意图;
图7是本发明实施例中提供的音量提示信息的示意图;
图8是本发明实施例中提供的一种终端交互装置的结构框图;
图9是本发明实施例中提供的一种电子设备的框图;
图10是本发明实施例中提供的一种计算机可读存储介质的示意图。
具体实施方式
为使本发明的上述目的、特征和优点能够更加明显易懂,下面结合附图和具体实施方式对本发明作进一步详细的说明。
作为一种示例,基于VR/AR技术对相关信息进行三维图像模式的显示,已经较为普遍的方式,通过三维图像模式的内容显示,能够有效提高用户浏览信息时,对相关内容的真实感,例如,通过构建与房屋对应的虚拟空间,用户在该虚拟空间中进行“漫游”时,能够提高对房屋实景空间的真实感等。其中,为了进一步增强用户在虚拟空间的真实感,在相关技术中,在用户浏览的过程中,增加了相应的音效,包括播放音频、设置固定的控件并通过用户操作触发音频播放等等。然而,在该过程中,对于三维空间中的音频控制,其往往是自动播放或者根据用户操作进行播放,音频播放的控制方式过于单一,且无法与相关场景内容进行联动,难以满足不同用户的需求。
对此,本发明实施例的核心发明点之一在于在根据目标对象的对象数据构建了虚拟空间之后,在该虚拟空间中配置至少一个音源对象,对于音源对象,其可以为以目标对象为参考目标所模拟的在目标对象的环境下以声音为传播媒介的溯源对象,则用户在对该虚拟空间进行浏览的过程中,终端可以响应于视角选择指令,在虚拟空间中确定与该视角选择指令对应的漫游位置点,并获取该漫游位置点对应的当前观察视角,接着可以根据漫游位置点与音源对象在虚拟空间中的位置关系,确定针对音源对象的音频输出信息,然后在根据音频输出信息控制音源对象的音频输出的同时,在图形用户界面中以当前观察视角输出音源对象对应的第一目标内容,从而在用户浏览的过程中,可以根据漫游点与音源对象之间的位置关系,对音源对象的音频输出进行控制,丰富了音频控制的方式,同时在控制音频输出的过程中,可以对显示的内容进行联动输出,有效地将音频与场景内容进行结合,丰富了信息输出的方式,提高了用户的浏览效率。
具体的,参照图1,示出了本发明实施例中提供的一种终端交互方法的步骤流程图,通过预设终端提供图形用户界面,所述图形用户界面显示的内容至少包括根据目标对象建立的虚拟空间,所述虚拟空间中配置有至少一个音源对象,其中,所述音源对象为以所述目标对象为参考目标,所模拟的在所述目标对象的环境下以声音为传播媒介的溯源对象,具体可以包括如下步骤:
步骤101,响应于视角选择指令,在所述虚拟空间中确定与所述视角选择指令对应的漫游位置点,并获取所述漫游位置点对应的当前观察视角;
在本发明实施例中,目标对象可以包括车源对象、房源对象、商品对象等,车源对象可以为在相应平台进行租售的车辆;房源对象可以为在相应平台上进行租售的房屋;商品对象可以包括在相应平台上进行租售的物品、服务等等,本发明对此不作限制。
可选地,预设终端可以为台式电脑、笔记本电脑、平板电脑以及移动终端等设备,在电子终端中可以运行相应的应用程序,例如生活类应用程序、音频应用程序以及游戏应用程序等。其中,生活类应用程序又可以根据类型不同进一步进行划分,例如租售车应用程序、租售房应用程序、家政服务应用程序、休闲娱乐应用程序等。
具体的,终端在运行应用程序的过程中,当用户想要浏览某个目标对象时,可以在终端展示的对象推荐界面中选择某个目标对象(如在房源推荐界面中选择某条房源帖子、在车源推荐界面中选择某条车源帖子以及在商品推荐界面中选择某个商品等),终端可以获取用户所选的目标对象的对象数据(如车源对象的车源数据,房源对象的房源数据,商品对象的商品数据等),接着根据对象数据构建与目标对象对应的虚拟空间,并在虚拟空间中配置至少一个音源对象,每个音源对象可以为关联有音频内容的对象,从而使得用户可以在该虚拟空间中进行“漫游”,以浏览目标对象的相关信息,同时可以通过相应的音频内容获取信息,进而通过视觉与听觉之间的结合,丰富了用户获取信息的方式。
可选地,对于音源对象,其可以为以目标对象为参考目标所模拟的在目标对象的环境下以声音为传播媒介的溯源对象,例如,假设目标对象为房屋,则音源对象可以为位于房屋中电视机、收音机等房屋内部家具对象,家具对象可以关联有相应的音频内容,还可以是房屋自身的组成部分,如窗户等,则音源对象可以为房屋外部的噪音,即窗户可以关联有房屋外部噪音的音频内容等。假设目标对象为车辆,则音源对象可以为与发动机引擎、车载中控大屏、车轮等车辆的自身组件或配件等,本发明对此不作限制。
其中,虚拟空间可以为根据实际的对象的图像(例如针对目标对象进行图像采集所得的全景图)进行相应的VR技术处理、或AR技术处理等构建目标空间的场景,从而通过三维图形模式对相关内容进行显示,一方面能够提高用户浏览过程中信息呈现的真实度,另一方面通过三维的方式丰富了用户获取信息的方式。
例如,对于车源对象,车源数据可以包括车辆的基础信息、外观信息以及内饰信息等,则终端可以根据车源数据构建该车辆对应的三维外观模型以及三维内饰空间等等,终端在展示该车辆的外观时,可以通过一个虚拟空间对三维外观模型进行展示,以便用户从不同的视角观察车辆的外观;在展示车辆的车内空间时,则三维内饰空间即展示空间,用户可以在该三维内饰空间中通过不同的点位进行信息浏览;此外,还可以是一个立体车型的平面二维图像,用户在浏览平面二维图像的过程中,终端可以通过远近缩放的方式模拟虚拟空间的显示。
对于房源对象,房源数据可以包括房屋的基础信息、户型图、实景图像等,则终端可以根据房源数据构建该房屋对应的三维房屋空间,在该三维房屋空间中,用户可以通过在房屋空间中通过视角切换、点位变化等进行“漫游”浏览房屋不同位置的实景信息,如浏览客厅、餐厅、卧室、卫生间、阳台、厨房等功能空间的实景信息。
对于商品对象,商品数据可以包括商品的基础信息、商品外观、尺寸信息等,则终端可以根据商品数据构建针对该商品的三维展示空间,在该三维展示空间中,用户可以通过不同的视角切换、点位变化等在三维展示空间中浏览该商品。
需要说明的是,本发明实施例包括但不限于上述示例,对于目标对象,还可以包括其他能够构建对应的展示空间、或产品空间等对象,本发明对此不作限制。
在用户浏览虚拟空间的过程中,用户可以通过选择不同的观察视角、漫游位置点等对虚拟空间中的内容进行浏览,则终端可以响应于用户输入的视角选择指令,在虚拟空间中确定与该视角选择指令对应的漫游位置点,并获取该漫游位置点对应的当前观察视角。其中,虚拟空间中可以设置有不同观察点位,用户可以通过视角选择指令进行观察点位选择的指令;观察视角可以为终端当前在图形用户界面中为用户呈现内容的视角,终端可以根据用户操作对观察视角进行切换以在图形用户界面中呈现虚拟空间中不同位置、角度的内容,在完成漫游位置点的切换时,终端可以以默认的观察视角呈现对应的内容,如主视角等。
对于不同的虚拟空间,用户在浏览过程中音源的输出可以为用户营造不同的效果,例如,对于在线看房,由于房屋空间相对较小,用户可能采取的视角切换可以是视角转动等,则其对应的是在同一个漫游位置点上的视角切换,在这种情况下,若进行音源输出,则音源可以随着用户视角切换,进行传播方向的变化,包括从正前方逐渐切换至左前方等,为用户营造一种“听声辨位”的氛围;对于在线看车,由于车辆远近呈现方式的差异,用户可能采取的是视角切换可以是从远处观看车辆整体到近处观看车辆的局部,则其对应的是与车辆不同距离的漫游位置点,在这种情况下,若进行音源输出,则随着漫游位置点距离的变化,可以控制音源从小音量逐渐向大音量变化,从而为用户营造一种“由远及近”的氛围。
可选地,漫游位置点可以为用户在虚拟空间中“漫游”时的实时位置,该实时位置可以随着用户操作而变化,从而用户可以根据实际需求选择相应的漫游位置点从不同的位置对虚拟空间中的内容进行浏览。对于漫游位置点,可以事先根据虚拟空间中的内容设置对应的交互控件,以便用户在浏览过程中通过漫游点控件进行漫游位置点的切换,例如,对于三维房屋空间可以包括客厅、餐厅、卧室、厨房等不同功能空间,则可以针对这些功能空间设置对应的漫游点控件,从而用户在浏览三维房屋空间时,可以通过这些漫游点控件在不同的功能空间中进行“漫游”,以浏览对应功能空间的实景信息等;对于车辆的三维外观模型,可以在展示该三维外观模型的三维展示空间中设置不同观察角度的观察点控件,从而用户在三维展示空间中浏览车辆的三维外观模型时,可以通过不同的观察点控件从不同的角度进行信息获取等,本发明对此不作限制。
步骤102,根据所述漫游位置点与所述音源对象在所述虚拟空间中的位置关系,确定针对所述音源对象的音频输出信息;
在本发明实施例中,音源对象与漫游位置点均可以为虚拟空间中的固定位置,则用户浏览虚拟空间的过程中,随着漫游位置点的切换,其所在的当前漫游位置点与虚拟空间中各个音源对象之间的位置可以发生变化,终端可以根据当前漫游位置点与各个音源对象之间在虚拟空间中的位置关系,判定是否满足相应的音频控制条件,进而确定针对音源对象的音频输出信息。其中,音频输出信息可以包括音量、音频内容、音色、音调等。
其中,每个音源对象可以关联有至少一种音频内容,则用户在浏览虚拟空间时,当满足音频播放条件时,终端可以播放相应音源对象所对应的音频内容。例如,假设目标对象为车源对象,虚拟空间可以为三维的车辆展示空间,在该车辆展示空间中可以包括若干车辆,每一车辆均可以作为一个音源对象,则每个车辆可以关联有至少一种音频内容,当满足音频播放条件时,终端可以获取对应的音频内容进行播放,进一步的,针对车源对象还可以将其某个部件作为音源对象,如轮胎、车门、车载中控屏幕等;假设目标对象为房源对象,虚拟空间可以为三维房屋空间,在该三维房屋空间中可以包括若干个漫游点、若干个家具模型等,则漫游点、家具模型可以作为音源对象,且可以关联至少一种音频内容,当满足音频播放条件时,终端可以获取对应的音频内容进行播放等。此外,其他目标对象也可以参照前述描述,在此不再赘述。
在具体实现中,每个音源对象均可以配置有一音源范围,音源范围可以若多个不同的音区以“圆环”型构成,当漫游位置点落入该音源范围的某个音区时,则可以触发对应的音频输出,则在用户浏览虚拟空间的过程中,当发生漫游位置点的切换时,终端可以先获取各个音源对象在虚拟空间中的音源范围,接着可以将当前的漫游位置点与各音源对象的各个音区进行匹配,确定当前的漫游位置点是否落入了某个音源对象的某个音区中,若落入,则可以获取漫游位置点所落入的目标音区对应的音频输出信息;若当前的漫游位置点位于各个音源对象的音源范围之外,则获取针对音源对象的静音控制指令,并根据该静音控制指令对相应的音频内容进行静音处理。
在一种示例中,音源范围可以为音源对象在虚拟空间中能够触发音频播放的范围,参照图2,示出了本发明实施例中提供的音源范围的示意图,假设音源对象为位于虚拟空间的某物件,则该物件的音源范围可以包括三层音区,由外及内包括外层音区①、中层音区②以及内层音区③等。其中,外层音区①可以对应播放“吸引进入音乐”,音量为“小”;中层音区②可以对应播放“产品基本信息”,音量为“中”;内层音区③可以对应播放“产品优势介绍”,音量为“大”,则随着当前漫游位置点在该物件中所处位置的变化,终端可以根据所处的目标音区,生成对应音频输出信息,包括音量、音频内容、音色以及音调等,从而随着漫游位置点与音源对象之间的距离越近,终端所播放的音频内容可以更加“具体”、“详尽”以及“特点鲜明”,并且播放的音量也会更大,进而通过播放内容、播放音量等变化为用户多维度、多层级的音频输出,丰富了音频控制的方式。此外,若当前的漫游位置点位于音源范围内,则不播放任何内容,处于静音状态,从而通过确定漫游位置点与音源对象的音源范围之间的位置关系,终端可以确定是否触发音频内容的输出以及输出的音量等等。
可选地,对于音量的“大”、“中”、“小”,可以预先设置对应的音量值,例如,“小”音量可以对应于终端的1~30音量值,“中”音量可以对应于终端的31~60音量值,“大”音量可以对应于终端的60以上的音量值,当满足音频控制条件时,终端可以获取对应的音量范围,并按照对应的音量值进行音频内容的输出,本发明对此不作限制。
在另一种示例中,假设虚拟空间中的某一个音源对象的音源范围包括外层音区、中层音区以及内层音区等三层音区,则终端可以获取用户当前在虚拟空间中的漫游位置点,并获取该漫游位置点与虚拟空间中该音源对象之间的位置关系,当该漫游位置点处于该音源对象的音源范围时,可以根据漫游位置点所在的目标音区,确定对应的音量控制信息。具体的,若目标音区为外层音区,则获取外层音区对应的第一音量以及音源对象的第一音频内容;若目标音区为中层音区,则获取中层音区对应的第二音量以及音源对象的第二音频内容;若目标音区为内层音区,则获取内层音区对应的第三音量以及音源对象的第三音频内容。其中,各音量的大小关系为:第一音量<第二音量<第三音量,音频内容所包含的信息具体程度、详尽程度以及突出程度可以为:第一音频内容<第二音频内容<第三音频内容,从而随着漫游位置点与音源对象之间位置关系的变化,音频输出信息也可以随之发生变化,以便终端根据用户浏览操作的变化,实时调整音频播放内容以及播放音量。
需要说明的是,在上述示例中不同音区可以对应不同层级的内容,且各个层级之间的内容为依次递进的关系进行示例性说明,可以理解的是,还可以针对不同的音区设置不同的音频内容,从而丰富用户的浏览方式以及提高浏览过程中的趣味性,满足不同用户的需求。
步骤103,根据所述音频输出信息控制所述音源对象的音频输出,并在所述图形用户界面中以所述当前观察视角输出所述音源对象对应的第一目标内容。
在本发明实施例中,随着漫游位置点与音源对象之间在虚拟空间中位置关系的变化,终端可以实时判断当前的漫游位置点是否满足音频控制条件,并在满足的情况下,确定对应的音频输出信息,然后根据音频输出信息控制音频对象的音频输出,同时在图形用户界面中以当前观察视角显示音频对象对应的第一目标内容,从而在用户浏览的过程中,可以根据漫游点与音源对象之间的位置关系,一方面实现对音源对象的音频输出进行控制,丰富了音频控制的方式,另一方面在控制音频输出的过程中,可以对显示的内容进行联动输出,有效地将音频与场景内容进行结合,丰富了信息输出的方式,提高了用户的浏览效率。
在一种示例中,假设虚拟空间中的某一个音源对象的音源范围包括外层音区、中层音区以及内层音区等三层音区,若漫游位置点位于外层音区,则音频输出信息可以包括第一音量以及第一音频内容,终端可以采用第一音量播放第一音频内容,并在虚拟空间中提取与第一音频内容对应的第一层级信息,并在图形用户界面以当前观察视角显示第一层级信息;若漫游位置点位于中层音区,则音频输出信息可以包括第二音量以及第二频内容,终端可以采用第二音量播放第二音频内容,并在虚拟空间中提取与第二音频内容对应的第二层级信息,并在图形用户界面以当前观察视角显示第二层级信息;若漫游位置点位于内层音区,则音频输出信息可以包括第三音量以及第三音频内容,终端可以采用第三音量播放第三音频内容,并在虚拟空间中提取与第三音频内容对应的第三层级信息,并在图形用户界面以当前观察视角显示第三层级信息,从而终端在控制音频输出的过程中,可以对显示的内容进行联动输出,有效地将音频与场景内容进行结合,丰富了信息输出的方式,提高了用户的浏览效率。
其中,第一层级信息、第二层级信息以及第三层级信息之间可以为递进关系的信息,如第一层级信息可以为通过“上帝视角”显示的虚拟空间,第二层级信息可以为通过“第一人称视角”显示的虚拟空间中某个音源对象,第三层级信息可以为通过“第一人称视角”显示的该音源对象的局部放大图等,本发明对此不作限制。
此外,若漫游位置点位于音区之外,则终端可以获取针对音源对象的静音控制指令,并控制音源对象执行与静音控制指令对应的静音操作,同时在图形用户界面中控制虚拟空间显示与当前观察视角对应的目标内容,从而为用户通过不同音量进行音频输出,丰富了音频控制的方式。
需要说明的是,由于第三音量属于较大的音量输出,因此当终端判定当前需要以第三音量进行音频输出时,可以先在图形用户界面中显示与第三音量对应的播放提示窗口,该播放提示窗口可以包括音量提示信息,音量提示信息用于提示用户预设终端将以目标音量进行音频输出,从而在终端需要以较大音量进行音频输出时,先提醒用户以避免音量过大给用户带来较差的听觉体验。
在上述过程中以漫游位置点位于某个目标音区进行音频输出的实时调节为例进行示例性说明,可以理解的是,用户在浏览虚拟空间的过程中,其漫游位置点可以实时变化,则音频输出的过程也可以实时变化,随着漫游位置点的切换,在满足音频输出条件的情况下,终端可以播放音量、播放内容进行实时切换。具体的,终端可以先获取与音频输出信息对应的目标音量以及目标音频内容,接着在虚拟空间中提取与目标音频内容对应的目标层级信息,并控制预设终端从当前音量平滑变化至目标音量,以及在音量变化的过程中将当前音频内容切换至目标音频内容,以及在图形用户界面中以当前观察视角显示目标层级信息。
在具体实现中,若终端当前已经在输出某个音源对象的音频内容,且用户切换了漫游位置点,当该漫游位置点触发了新的音频输出信息时,则终端可以获取新的音频输出信息对应的目标音量、目标音频内容等,然后在虚拟空间中提取与目标音频内容对应的目标层级信息,接着再将从当前音量平滑变化至目标音量(包括音量增大或音量减少等),在音量变化的过程中将当前音频内容切换至目标音频内容,并展示对应的目标层级信息,从而终端可以实时根据漫游位置点的变化对音频输出进行灵活地控制,并在控制音频输出的过程中,对显示的内容进行联动输出,有效地将音频与场景内容进行结合,丰富了信息输出的方式,提高了用户的浏览效率。
可选地,若当前音频内容与目标音频内容之间属于相同的音量,则终端可以不调节音量,而是直接对音频内容进行切换。
在上述涉及音频输出的过程中,终端可以响应于音源对象的音频输出,在图形用户界面中显示音量标识,音量标识包括一音量调节控件,接着可以响应针对音量调节控件的控制操作,获取与控制操作对应的目标音量,并将当前音量调节为目标音量。在具体实现中,当用户触发音频输出时,终端可以在图形用户界面中显示一个音量标识,且该音量标识中可以包括音量调节控件,从而当用户切换漫游位置点触发音频内容输出时,若播放音量无法满足用户的实际需求时,用户可以通过该音量调节控件调节音量。
此外,终端还可以响应于视角切换指令,获取视角切换指令对应的目标观察视角,并在图形用户界面中显示目标观察视角对应的第二目标内容,若第二目标内容中未包含音源对象,则获取音源对象在虚拟空间中相对于目标观察视角的方位信息,并在图形用户界面中显示与方位信息对应的音源指引标识。在具体实现中,用户除了可以通过视角选择指令对漫游位置点进行切换之外,还可以通过视角切换指令切换当前的观察视角,随着观察视角的切换,终端可以在图形用户界面中基于同一个漫游位置点显示不同观察角度的内容(如以某个漫游位置点为球心,随着用户观察视角的切换,可以向用户呈现该漫游位置点“球形区域”内的全景信息等),则由于音源对象位于虚拟空间中的固定位置,随着用户观察视角的切换,音源对象可能“移出”观察视角,即不显示或不完全显示于图形用户界面中,此时,终端可以获取处于音频输出的音源对象在虚拟空间中相对于观察视角的方位信息,并在图形用户界面中显示与该方位信息对应的音源指引标识,从而一方面可以通过音源指引标识告知用户当前处于音频输出的音源对象的方位,另一方面用户还可以通过音源指引标识跳转显示针对该音源对象的观察视角,如针对音源对象的主视角等,进而进一步丰富了音频控制的方式。
可选地,在本发明实施例中,由于音源对象位于虚拟空间的固定位置,而漫游位置点为用户实时浏览的当前位置,则随着两者的位置关系变化,终端还可以获取音源对象相对于漫游位置点的方位信息,并根据该方位信息进行音频输出,例如,当用户戴耳机的情况下,可以根据方位信息控制左声道和/或右声道进行音频输出,从而基于三维空间的浏览,通过不同方式的音频输出为用户营造更加真实的浏览场景。
需要说明的是,本发明实施例包括但不限于上述示例,可以理解的是,在本发明实施例的思想指导下,本领域技术人员还可以根据实际需求进行设置,本发明对此不作限制。
在本发明实施例中,用户可以通过终端浏览根据目标对象建立的虚拟空间,在该虚拟空间中可以配置有至少一个音源对象,对于音源对象,其可以为以目标对象为参考目标所模拟的在目标对象的环境下以声音为传播媒介的溯源对象,则针对其中的某个音源对象,终端可以响应于视角选择指令,在虚拟空间中确定与视角选择指令对应的漫游位置点,并获取该漫游位置点对应的当前观察视角,接着可以根据漫游位置点与音源对象在虚拟空间中的位置关系,确定针对音源对象的音频输出信息,然后在根据音频输出信息控制音源对象的音频输出的同时,在图形用户界面中以当前观察视角输出音源对象对应的第一目标内容,从而在用户浏览的过程中,可以根据漫游点与音源对象之间的位置关系,对音源对象的音频输出进行控制,丰富了音频控制的方式,同时在控制音频输出的过程中,可以对显示的内容进行联动输出,有效地将音频与场景内容进行结合,丰富了信息输出的方式,提高了用户的浏览效率。
为了使本领域技术人员更好地理解本发明实施例的技术方案,下面通过一个例子进行示例性说明。
假设目标对象为车源对象,则可以获取与车源对象对应的对象数据,并并构建对应的车辆展示空间,在该车辆展示空间中可以展示不同的车辆模型,每一个车辆模型可以为一个音源对象。
在具体实现中,参照图3,示出了本发明实施例中提供的音频控制的示意图,通过终端运行对应的应用程序,并在图形用户界面中显示车辆展示空间30,在该车辆展示空间30中可以包括若干个车辆模型310,当车辆模型310关联有对应的音频内容时,则可以在车辆模型310对应的位置显示声音标识320,以标识该车辆模型310关联有音频内容,用户可以通过相应的操作触发播放音频内容。并且,对于车辆展示空间30,此时终端以“上帝视角”对该空间所有的内容进行展示,意味着当前漫游位置点并未满足音频输出的触发条件。若当前漫游位置点满足音频输出的触发条件时,参照图4,终端根据用户输出的视角选择指令,切换至车辆模型对应的产品空间40,并触发按照一定的音量对该车辆模型的相应音频内容进行输出,同时显示音量标识410,以便用户通过音量标识410中的音量调节控件调节音量。
在上述过程中,用户可以从整体视角切换至局部产品显示视角进行浏览,在该过程中,随着漫游位置点的变化,终端可以在控制音频输出的同时,控制车辆展示空间的内容展示,实现视觉与听觉的结合,丰富音频控制方式的同时,丰富了用户浏览信息的方式。
参照图5,示出了本发明实施例中提供的音频控制的示意图,在图5中,终端可以根据用户浏览过程中的当前漫游位置点与车辆展示空间中车辆模型之间的位置关系,实时对音频输出的内容、音量以及显示的内容进行调节,从而在丰富音频控制方式的同时,可以对显示的内容进行联动输出,有效地将音频与场景内容进行结合,丰富了信息输出的方式,提高了用户的浏览效率。具体的,假设“物件”为车辆展示空间中的某一个车辆模型,则当前漫游位置点位于车辆模型的音源范围之外时,终端以“上帝视角”在图形用户界面中为用户呈现车辆展示空间的全部内容,并在关联有音频内容的车辆模型上显示一声音标识,建立用户对声音的预期;接着随着用户切换漫游位置点,使得当前漫游位置点位于车辆模型的外层音区时,则终端可以在图形用户界面中以主视图的方式显示车辆模型的产品空间,并以“小音量”的方式播放“进入音乐”;接着用户进一步切换漫游位置点,使得当前漫游位置点位于车辆模型的中层音区时,则终端可以在图形用户界面中以主视图的方式显示车辆模型的产品局部空间,并以“中音量”的方式播放“车辆基本信息”;接着用户再进一步切换漫游位置点,使得当前漫游位置点位于车辆模型的内层音区时,则终端可以在图形用户界面中以主视图的方式对车辆模型进行局部放大,并以“大音量”的方式播放“车辆轮胎特色”等,从而在用户浏览的过程中,可以根据漫游点与音源对象之间的位置关系,对音源对象的音频输出进行控制,丰富了音频控制的方式,同时在控制音频输出的过程中,可以对显示的内容进行联动输出,有效地将音频与场景内容进行结合,丰富了信息输出的方式,提高了用户的浏览效率。
参照图6,示出了本发明实施例中提供的音源指引标识的示意图,假设“物件”为车辆模型,在上述过程中,当车辆模型610不在用户视角主视图时,终端可以在图形用户界面中显示音源指引标识620(即用户在当前漫游位置的观察视角并不正对着车辆模型,而是存在一定的视角偏差),从而一方面可以通过音源指引标识告知用户当前处于音频输出的音源对象的方位,另一方面用户还可以通过音源指引标识跳转显示针对该音源对象的观察视角,如针对音源对象的主视角等,进而进一步丰富了音频控制的方式。
此外,参照图7,示出了本发明实施例中提供的音量提示信息的示意图,当终端将以“大音量”播放音频内容时,可以在图形用户界面中显示音量提示窗口70,并在该音量提示窗口70中显示音量提示信息,提示用户终端将以较大的音量进行音频内容的播放,此时用户可以选择继续播放或关闭音量,从而提供不同的音量控制方式,使得用户可以根据自身的需求进行调节,提高了音量调节的灵活性。
假设目标对象为房源对象,则可以获取与房源对象对应的对象数据,并构建对应的三维房屋空间,在该三维房屋空间中可以包括关联有不同音频内容的音频对象,例如,位于客厅空间的电视机、收音机等,三维房屋空间中不同功能空间的窗户等,对于电视机、收音机等其可以关联相应的新闻内容、或房源特色播报信息等,对于不同的功能空间,其可以根据功能空间的外部所对应的环境进行音频关联,包括关联“公路车辆噪音”、“周边鸟语花香”以及“楼上在施工”等。在三维房屋空间中的各个功能空间可以配置有对应的漫游位置点,则用户在浏览三维房屋空间时,随着当前漫游位置点的变化,终端可以根据当前漫游位置点与音源对象之间的位置关系,对相应的音频内容进行输出,以及根据位置关系控制音频内容的输出方式(包括音量、播放方向、播放内容等),具体过程可以参考前述车源对象的处理过程,在此不再赘述。
需要说明的是,在上述示例中以音源对象的音源范围包括三个音区进行示例性说明,可以理解的是,本领域技术人员可以根据实际需求对音区的数量进行设置,本发明对此不作限制。
需要说明的是,对于方法实施例,为了简单描述,故将其都表述为一系列的动作组合,但是本领域技术人员应该知悉,本发明实施例并不受所描述的动作顺序的限制,因为依据本发明实施例,某些步骤可以采用其他顺序或者同时进行。其次,本领域技术人员也应该知悉,说明书中所描述的实施例均属于优选实施例,所涉及的动作并不一定是本发明实施例所必须的。
参照图8,示出了本发明实施例中提供的一种终端交互装置的结构框图,通过预设终端提供图形用户界面,所述图形用户界面显示的内容至少包括根据目标对象建立的虚拟空间,所述虚拟空间中配置有至少一个音源对象,其中,所述音源对象为以所述目标对象为参考目标,所模拟的在所述目标对象的环境下以声音为传播媒介的溯源对象,具体可以包括如下模块:
当前观察视角获取模块801,用于响应于视角选择指令,在所述虚拟空间中确定与所述视角选择指令对应的漫游位置点,并获取所述漫游位置点对应的当前观察视角;
音频输出信息确定模块802,用于根据所述漫游位置点与所述音源对象在所述虚拟空间中的位置关系,确定针对所述音源对象的音频输出信息;
内容输出模块803,用于根据所述音频输出信息控制所述音源对象的音频输出,并在所述图形用户界面中以所述当前观察视角输出所述音源对象对应的第一目标内容。
在一种可选实施例中,所述音频输出信息确定模块802包括:
音源范围获取子模块,用于获取所述音源对象在所述虚拟空间中的音源范围,所述音源范围包括若干个对应不同播放参数的音区;
音频输出信息确定子模块,用于将所述漫游位置点与各个所述音区进行匹配,确定所述漫游位置点所处的目标音区,并获取与所述目标音区对应的音频输出信息;
其中,所述音频输出信息至少包括音量、音频内容、音色以及音调中的一种。
在一种可选实施例中,所述音区包括外层音区,所述音频输出信息确定子模块具体用于:
若所述目标音区为所述外层音区,则获取所述外层音区对应的第一音量以及所述音源对象的第一音频内容;
其中,所述内容输出模块803具体用于:
采用所述第一音量播放所述第一音频内容;
在所述虚拟空间中提取与所述第一音频内容对应的第一层级信息,并在所述图形用户界面以所述当前观察视角输出所述第一层级信息。
在一种可选实施例中,所述音区包括中层音区,所述音频输出信息确定子模块具体用于:
若所述目标音区为所述中层音区,则获取所述中层音区对应的第二音量以及所述音源对象的第二音频内容;
其中,所述内容输出模块803具体用于:
采用所述第二音量播放所述第二音频内容;
在所述虚拟空间中提取与所述第二音频内容对应的第二层级信息,并在所述图形用户界面中以所述当前观察视角输出所述第二层级信息。
在一种可选实施例中,所述音区包括内层音区,所述音频输出信息确定子模块具体用于:
若所述目标音区为所述内层音区,则获取所述内层音区对应的第三音量以及所述音源对象的第三音频内容;
其中,所述内容输出模块803具体用于:
采用所述第三音量播放所述第三音频内容;
在所述虚拟空间中提取与所述第三音频内容对应的第三层级信息,并在所述图形用户界面中以所述当前观察视角输出所述第三层级信息。
在一种可选实施例中,所述装置还包括:
提示信息输出模块,用于在所述图形用户界面中显示与所述第三音量对应的音量提示信息,所述音量提示信息用于提示用户所述预设终端将以目标音量进行音频输出。
在一种可选实施例中,还包括:
视角切换模块,用于响应于视角切换指令,获取所述视角切换指令对应的目标观察视角,并在所述图形用户界面中输出所述目标观察视角对应的第二目标内容;
指引标识显示模块,用于若所述第二目标内容中未包含所述音源对象,则获取所述音源对象在所述虚拟空间中相对于所述目标观察视角的方位信息,并在所述图形用户界面中显示与所述方位信息对应的音源指引标识。
在一种可选实施例中,还包括:
静音指令获取模块,用于若所述漫游位置点位于所述音区之外,则获取针对所述音源对象的静音控制指令;
其中,所述内容输出模块803具体用于:
控制所述音源对象执行与所述静音控制指令对应的静音操作;
在所述图形用户界面中控制所述虚拟空间输出与所述当前观察视角对应的目标内容。
在一种可选实施例中,所述内容输出模块803包括:
内容获取子模块,用于获取与所述音频输出信息对应的目标音量以及目标音频内容;
层级信息提取子模块,用于在所述虚拟空间中提取与所述目标音频内容对应的目标层级信息;
音频输出控制子模块,用于控制所述预设终端从当前音量平滑变化至所述目标音量,并在音量变化的过程中将当前音频内容切换至所述目标音频内容;
层级信息输出子模块,用于在所述图形用户界面中以所述当前观察视角输出所述目标层级信息。
在一种可选实施例中,还包括:
音量标识显示模块,用于响应于所述音源对象的音频输出,在所述图形用户界面中显示音量标识,所述音量标识包括一音量调节控件;
音量调节模块,用于响应针对所述音量调节控件的控制操作,获取与所述控制操作对应的目标音量,并将当前音量调节为所述目标音量。
对于装置实施例而言,由于其与方法实施例基本相似,所以描述的比较简单,相关之处参见方法实施例的部分说明即可。
另外,本发明实施例还提供一种电子设备,如图9所示,包括处理器901、通信接口902、存储器903和通信总线904,其中,处理器901,通信接口902,存储器903通过通信总线904完成相互间的通信,
存储器903,用于存放计算机程序;
处理器901,用于执行存储器903上所存放的程序时,实现如下步骤:
响应于视角选择指令,在所述虚拟空间中确定与所述视角选择指令对应的漫游位置点,并获取所述漫游位置点对应的当前观察视角;
根据所述漫游位置点与所述音源对象在所述虚拟空间中的位置关系,确定针对所述音源对象的音频输出信息;
根据所述音频输出信息控制所述音源对象的音频输出,并在所述图形用户界面中以所述当前观察视角输出所述音源对象对应的第一目标内容。
在一种可选实施例中,所述根据所述漫游位置点与所述音源对象在所述虚拟空间中的位置关系,确定针对所述音源对象的音频输出信息,包括:
获取所述音源对象在所述虚拟空间中的音源范围,所述音源范围包括若干个对应不同播放参数的音区;
将所述漫游位置点与各个所述音区进行匹配,确定所述漫游位置点所处的目标音区,并获取与所述目标音区对应的音频输出信息;
其中,所述音频输出信息至少包括音量、音频内容、音色以及音调中的一种。
在一种可选实施例中,所述音区包括外层音区,所述获取与所述目标音区对应的音频输出信息,包括:
若所述目标音区为所述外层音区,则获取所述外层音区对应的第一音量以及所述音源对象的第一音频内容;
其中,所述根据所述音频输出信息控制所述音源对象的音频输出,并在所述图形用户界面中以所述当前观察视角输出所述音源对象对应的第一目标内容,包括:
采用所述第一音量播放所述第一音频内容;
在所述虚拟空间中提取与所述第一音频内容对应的第一层级信息,并在所述图形用户界面以所述当前观察视角输出所述第一层级信息。
在一种可选实施例中,所述音区包括中层音区,所述获取与所述目标音区对应的音频输出信息,包括:
若所述目标音区为所述中层音区,则获取所述中层音区对应的第二音量以及所述音源对象的第二音频内容;
其中,所述根据所述音频输出信息控制所述音源对象的音频输出,并在所述图形用户界面中以所述当前观察视角输出所述音源对象对应的第一目标内容,包括:
采用所述第二音量播放所述第二音频内容;
在所述虚拟空间中提取与所述第二音频内容对应的第二层级信息,并在所述图形用户界面中以所述当前观察视角输出所述第二层级信息。
在一种可选实施例中,所述音区包括内层音区,所述获取与所述目标音区对应的音频输出信息,包括:
若所述目标音区为所述内层音区,则获取所述内层音区对应的第三音量以及所述音源对象的第三音频内容;
其中,所述根据所述音频输出信息控制所述音源对象的音频输出,并在所述图形用户界面中以所述当前观察视角输出所述音源对象对应的第一目标内容,包括:
采用所述第三音量播放所述第三音频内容;
在所述虚拟空间中提取与所述第三音频内容对应的第三层级信息,并在所述图形用户界面中以所述当前观察视角输出所述第三层级信息。
在一种可选实施例中,所述采用所述第三音量播放所述第三音频内容之前,所述方法还包括:
在所述图形用户界面中显示与所述第三音量对应的音量提示信息,所述音量提示信息用于提示用户所述预设终端将以目标音量进行音频输出。
在一种可选实施例中,还包括:
响应于视角切换指令,获取所述视角切换指令对应的目标观察视角,并在所述图形用户界面中输出所述目标观察视角对应的第二目标内容;
若所述第二目标内容中未包含所述音源对象,则获取所述音源对象在所述虚拟空间中相对于所述目标观察视角的方位信息,并在所述图形用户界面中显示与所述方位信息对应的音源指引标识。
在一种可选实施例中,还包括:
若所述漫游位置点位于所述音区之外,则获取针对所述音源对象的静音控制指令;
其中,所述根据所述音频输出信息控制所述音源对象的音频输出,并在所述图形用户界面中控制所述虚拟空间输出与所述当前观察视角对应的目标内容,包括:
控制所述音源对象执行与所述静音控制指令对应的静音操作;
在所述图形用户界面中控制所述虚拟空间输出与所述当前观察视角对应的目标内容。
在一种可选实施例中,所述根据所述音频输出信息控制所述音源对象的音频输出,并在所述图形用户界面中以所述当前观察视角输出所述音源对象对应的第一目标内容,包括:
获取与所述音频输出信息对应的目标音量以及目标音频内容;
在所述虚拟空间中提取与所述目标音频内容对应的目标层级信息;
控制所述预设终端从当前音量平滑变化至所述目标音量,并在音量变化的过程中将当前音频内容切换至所述目标音频内容;
在所述图形用户界面中以所述当前观察视角输出所述目标层级信息。
在一种可选实施例中,还包括:
响应于所述音源对象的音频输出,在所述图形用户界面中显示音量标识,所述音量标识包括一音量调节控件;
响应针对所述音量调节控件的控制操作,获取与所述控制操作对应的目标音量,并将当前音量调节为所述目标音量。
上述终端提到的通信总线可以是外设部件互连标准(Peripheral ComponentInterconnect,简称PCI)总线或扩展工业标准结构(Extended Industry StandardArchitecture,简称EISA)总线等。该通信总线可以分为地址总线、数据总线、控制总线等。为便于表示,图中仅用一条粗线表示,但并不表示仅有一根总线或一种类型的总线。
通信接口用于上述终端与其他设备之间的通信。
存储器可以包括随机存取存储器(Random Access Memory,简称RAM),也可以包括非易失性存储器(non-volatile memory),例如至少一个磁盘存储器。可选的,存储器还可以是至少一个位于远离前述处理器的存储装置。
上述的处理器可以是通用处理器,包括中央处理器(Central Processing Unit,简称CPU)、网络处理器(Network Processor,简称NP)等;还可以是数字信号处理器(Digital Signal Processing,简称DSP)、专用集成电路(Application SpecificIntegrated Circuit,简称ASIC)、现场可编程门阵列(Field-Programmable Gate Array,简称FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。
如图10所示,在本发明提供的又一实施例中,还提供了一种计算机可读存储介质1001,该计算机可读存储介质中存储有指令,当其在计算机上运行时,使得计算机执行上述实施例中所述的终端交互方法。
在本发明提供的又一实施例中,还提供了一种包含指令的计算机程序产品,当其在计算机上运行时,使得计算机执行上述实施例中所述的终端交互方法。
在上述实施例中,可以全部或部分地通过软件、硬件、固件或者其任意组合来实现。当使用软件实现时,可以全部或部分地以计算机程序产品的形式实现。所述计算机程序产品包括一个或多个计算机指令。在计算机上加载和执行所述计算机程序指令时,全部或部分地产生按照本发明实施例所述的流程或功能。所述计算机可以是通用计算机、专用计算机、计算机网络、或者其他可编程装置。所述计算机指令可以存储在计算机可读存储介质中,或者从一个计算机可读存储介质向另一个计算机可读存储介质传输,例如,所述计算机指令可以从一个网站站点、计算机、服务器或数据中心通过有线(例如同轴电缆、光纤、数字用户线(DSL))或无线(例如红外、无线、微波等)方式向另一个网站站点、计算机、服务器或数据中心进行传输。所述计算机可读存储介质可以是计算机能够存取的任何可用介质或者是包含一个或多个可用介质集成的服务器、数据中心等数据存储设备。所述可用介质可以是磁性介质,(例如,软盘、硬盘、磁带)、光介质(例如,DVD)、或者半导体介质(例如固态硬盘Solid State Disk(SSD))等。
需要说明的是,在本文中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
本说明书中的各个实施例均采用相关的方式描述,各个实施例之间相同相似的部分互相参见即可,每个实施例重点说明的都是与其他实施例的不同之处。尤其,对于系统实施例而言,由于其基本相似于方法实施例,所以描述的比较简单,相关之处参见方法实施例的部分说明即可。
以上所述仅为本发明的较佳实施例而已,并非用于限定本发明的保护范围。凡在本发明的精神和原则之内所作的任何修改、等同替换、改进等,均包含在本发明的保护范围内。

Claims (13)

1.一种终端交互方法,其特征在于,通过预设终端提供图形用户界面,所述图形用户界面显示的内容至少包括根据目标对象建立的虚拟空间,所述虚拟空间中配置有至少一个音源对象,其中,所述音源对象为以所述目标对象为参考目标,所模拟的在所述目标对象的环境下以声音为传播媒介的溯源对象,所述方法包括:
响应于视角选择指令,在所述虚拟空间中确定与所述视角选择指令对应的漫游位置点,并获取所述漫游位置点对应的当前观察视角;
根据所述漫游位置点与所述音源对象在所述虚拟空间中的位置关系,确定针对所述音源对象的音频输出信息,所述音频输出信息至少包括音量、音频内容、音色以及音调中的一种;
根据所述音频输出信息控制所述音源对象的音频输出,并在所述图形用户界面中以所述当前观察视角输出所述音源对象对应的第一目标内容。
2.根据权利要求1所述的方法,其特征在于,所述根据所述漫游位置点与所述音源对象在所述虚拟空间中的位置关系,确定针对所述音源对象的音频输出信息,包括:
获取所述音源对象在所述虚拟空间中的音源范围,所述音源范围包括若干个对应不同播放参数的音区;
将所述漫游位置点与各个所述音区进行匹配,确定所述漫游位置点所处的目标音区,并获取与所述目标音区对应的音频输出信息。
3.根据权利要求2所述的方法,其特征在于,所述音区包括外层音区,所述获取与所述目标音区对应的音频输出信息,包括:
若所述目标音区为所述外层音区,则获取所述外层音区对应的第一音量以及所述音源对象的第一音频内容;
其中,所述根据所述音频输出信息控制所述音源对象的音频输出,并在所述图形用户界面中以所述当前观察视角输出所述音源对象对应的第一目标内容,包括:
采用所述第一音量播放所述第一音频内容;
在所述虚拟空间中提取与所述第一音频内容对应的第一层级信息,并在所述图形用户界面以所述当前观察视角输出所述第一层级信息。
4.根据权利要求2所述的方法,其特征在于,所述音区包括中层音区,所述获取与所述目标音区对应的音频输出信息,包括:
若所述目标音区为所述中层音区,则获取所述中层音区对应的第二音量以及所述音源对象的第二音频内容;
其中,所述根据所述音频输出信息控制所述音源对象的音频输出,并在所述图形用户界面中以所述当前观察视角输出所述音源对象对应的第一目标内容,包括:
采用所述第二音量播放所述第二音频内容;
在所述虚拟空间中提取与所述第二音频内容对应的第二层级信息,并在所述图形用户界面中以所述当前观察视角输出所述第二层级信息。
5.根据权利要求2所述的方法,其特征在于,所述音区包括内层音区,所述获取与所述目标音区对应的音频输出信息,包括:
若所述目标音区为所述内层音区,则获取所述内层音区对应的第三音量以及所述音源对象的第三音频内容;
其中,所述根据所述音频输出信息控制所述音源对象的音频输出,并在所述图形用户界面中以所述当前观察视角输出所述音源对象对应的第一目标内容,包括:
采用所述第三音量播放所述第三音频内容;
在所述虚拟空间中提取与所述第三音频内容对应的第三层级信息,并在所述图形用户界面中以所述当前观察视角输出所述第三层级信息。
6.根据权利要求5所述的方法,其特征在于,所述采用所述第三音量播放所述第三音频内容之前,所述方法还包括:
在所述图形用户界面中显示与所述第三音量对应的音量提示信息,所述音量提示信息用于提示用户所述预设终端将以目标音量进行音频输出。
7.根据权利要求3或4或5或6任一项所述的方法,其特征在于,还包括:
响应于视角切换指令,获取所述视角切换指令对应的目标观察视角,并在所述图形用户界面中输出所述目标观察视角对应的第二目标内容;
若所述第二目标内容中未包含所述音源对象,则获取所述音源对象在所述虚拟空间中相对于所述目标观察视角的方位信息,并在所述图形用户界面中显示与所述方位信息对应的音源指引标识。
8.根据权利要求2或3或4或5或6任一项所述的方法,其特征在于,还包括:
若所述漫游位置点位于所述音区之外,则获取针对所述音源对象的静音控制指令;
其中,所述根据所述音频输出信息控制所述音源对象的音频输出,并在所述图形用户界面中控制所述虚拟空间输出与所述当前观察视角对应的目标内容,包括:
控制所述音源对象执行与所述静音控制指令对应的静音操作;
在所述图形用户界面中控制所述虚拟空间输出与所述当前观察视角对应的目标内容。
9.根据权利要求1所述的方法,其特征在于,所述根据所述音频输出信息控制所述音源对象的音频输出,并在所述图形用户界面中以所述当前观察视角输出所述音源对象对应的第一目标内容,包括:
获取与所述音频输出信息对应的目标音量以及目标音频内容;
在所述虚拟空间中提取与所述目标音频内容对应的目标层级信息;
控制所述预设终端从当前音量平滑变化至所述目标音量,并在音量变化的过程中将当前音频内容切换至所述目标音频内容;
在所述图形用户界面中以所述当前观察视角输出所述目标层级信息。
10.根据权利要求1所述的方法,其特征在于,还包括:
响应于所述音源对象的音频输出,在所述图形用户界面中显示音量标识,所述音量标识包括一音量调节控件;
响应针对所述音量调节控件的控制操作,获取与所述控制操作对应的目标音量,并将当前音量调节为所述目标音量。
11.一种终端交互装置,其特征在于,通过预设终端提供图形用户界面,所述图形用户界面显示的内容至少包括根据目标对象建立的虚拟空间,所述虚拟空间中配置有至少一个音源对象,其中,所述音源对象为以所述目标对象为参考目标,所模拟的在所述目标对象的环境下以声音为传播媒介的溯源对象,所述装置包括:
当前观察视角获取模块,用于响应于视角选择指令,在所述虚拟空间中确定与所述视角选择指令对应的漫游位置点,并获取所述漫游位置点对应的当前观察视角;
音频输出信息确定模块,用于根据所述漫游位置点与所述音源对象在所述虚拟空间中的位置关系,确定针对所述音源对象的音频输出信息,所述音频输出信息至少包括音量、音频内容、音色以及音调中的一种;
内容输出模块,用于根据所述音频输出信息控制所述音源对象的音频输出,并在所述图形用户界面中以所述当前观察视角输出所述音源对象对应的第一目标内容。
12.一种电子设备,其特征在于,包括处理器、通信接口、存储器和通信总线,其中,所述处理器、所述通信接口以及所述存储器通过所述通信总线完成相互间的通信;
所述存储器,用于存放计算机程序;
所述处理器,用于执行存储器上所存放的程序时,实现如权利要求1-10任一项所述的方法。
13.一个或多个计算机可读存储介质,其上存储有指令,当由一个或多个处理器执行时,使得所述处理器执行如权利要求1-10任一项所述的方法。
CN202210269557.XA 2022-03-18 2022-03-18 终端交互方法、装置、电子设备及存储介质 Active CN114721512B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202210269557.XA CN114721512B (zh) 2022-03-18 2022-03-18 终端交互方法、装置、电子设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210269557.XA CN114721512B (zh) 2022-03-18 2022-03-18 终端交互方法、装置、电子设备及存储介质

Publications (2)

Publication Number Publication Date
CN114721512A CN114721512A (zh) 2022-07-08
CN114721512B true CN114721512B (zh) 2023-06-13

Family

ID=82238289

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210269557.XA Active CN114721512B (zh) 2022-03-18 2022-03-18 终端交互方法、装置、电子设备及存储介质

Country Status (1)

Country Link
CN (1) CN114721512B (zh)

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113178015A (zh) * 2021-03-26 2021-07-27 瑞庭网络技术(上海)有限公司 房源的交互方法、装置、电子设备及存储介质
CN113961066A (zh) * 2021-09-23 2022-01-21 北京城市网邻信息技术有限公司 视角的切换方法、装置、电子设备及可读介质

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108597530B (zh) * 2018-02-09 2020-12-11 腾讯科技(深圳)有限公司 声音再现方法和装置、存储介质及电子装置
CN112068750A (zh) * 2020-08-20 2020-12-11 北京五八信息技术有限公司 一种房源的处理方法和装置
CN113722625A (zh) * 2021-07-27 2021-11-30 北京城市网邻信息技术有限公司 车源信息的显示方法、装置、电子设备及可读介质
CN114020235B (zh) * 2021-09-29 2022-06-17 北京城市网邻信息技术有限公司 实景空间中的音频处理方法、电子终端及存储介质

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113178015A (zh) * 2021-03-26 2021-07-27 瑞庭网络技术(上海)有限公司 房源的交互方法、装置、电子设备及存储介质
CN113961066A (zh) * 2021-09-23 2022-01-21 北京城市网邻信息技术有限公司 视角的切换方法、装置、电子设备及可读介质

Also Published As

Publication number Publication date
CN114721512A (zh) 2022-07-08

Similar Documents

Publication Publication Date Title
US10656903B1 (en) Directional audio for virtual environments
KR102204485B1 (ko) 오디오-비주얼 내비게이션 및 통신
JP7375186B2 (ja) 弾幕処理方法、装置、電子機器及びプログラム
US20200389756A1 (en) Dynamic Positional Audio
CN105516748A (zh) 一种实现网络直播的方法和服务器
JP2017073136A (ja) 通信セッションでメッセージの機能を拡張する方法およびシステム
CN111880874A (zh) 媒体文件的分享方法、装置、设备及计算机可读存储介质
US20230079893A1 (en) Multi-Viewpoint Multi-User Audio User Experience
CN113298602A (zh) 商品对象信息互动方法、装置及电子设备
CN113938696B (zh) 基于自定义虚拟礼物的直播互动方法、系统及计算机设备
CN108304434B (zh) 信息反馈方法和终端设备
CN114721512B (zh) 终端交互方法、装置、电子设备及存储介质
US20100169782A1 (en) Content and/or service guiding device and guiding method, and information recording medium
CN112673650B (zh) 空间增强
CN113407146A (zh) 终端语音交互方法、系统以及相应的终端设备
CN114286158B (zh) 直播间的虚拟资源活动显示方法、装置、介质以及设备
KR20200017152A (ko) 가상현실 서비스 제공 시스템 및 방법
US20210121784A1 (en) Like button
CN116474379A (zh) 基于游戏直播的数据处理方法以及相关设备
CN115942016A (zh) 信息处理方法及相关产品
CN116017015A (zh) 弹幕的发布方法、装置、设备、存储介质及产品
JP2022017203A (ja) 効果音のレンダリング用のマルチトラックコンテナ
JP6120793B2 (ja) 端末装置、動画配信装置、及びプログラム
GB2620151A (en) Content preparation devices and methods
Cosmas et al. Rapid prototyping and fast user trial of multimedia broadcast and cellular services

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant