CN106162037A - 一种视频通话时进行互动的方法和装置 - Google Patents
一种视频通话时进行互动的方法和装置 Download PDFInfo
- Publication number
- CN106162037A CN106162037A CN201610645911.9A CN201610645911A CN106162037A CN 106162037 A CN106162037 A CN 106162037A CN 201610645911 A CN201610645911 A CN 201610645911A CN 106162037 A CN106162037 A CN 106162037A
- Authority
- CN
- China
- Prior art keywords
- terminal
- object event
- event
- user
- video calling
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/14—Systems for two-way working
- H04N7/141—Systems for two-way working between two video terminals, e.g. videophone
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
- H04N21/478—Supplemental services, e.g. displaying phone caller identification, shopping application
- H04N21/4788—Supplemental services, e.g. displaying phone caller identification, shopping application communicating with other users, e.g. chatting
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- General Engineering & Computer Science (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Abstract
本发明公开了一种视频通话时进行互动的方法和装置。所述方法包括:与正在进行视频通话的第二终端展示同一目标事件,接收所述第二终端的用户根据所展示的目标事件发出的互动信息,根据所述互动信息调整所述目标事件的展示进度。上述方案使第一终端和第二终端同步展示该目标事件,实现以所述通话音频作为所述目标事件的事件配音。通过展示目标事件并提供事件配音,应用到讲故事的场景,可以使视频通话中用户看故事的同时可以听故事,同时实现了讲故事的音频与故事的展示进度相同步,结合视频通话环境,使第一终端的用户还能看到第二终端用户的实时视频,使得讲故事的环境更为真实。
Description
技术领域
本发明涉及通信技术领域,具体涉及一种视频通话时进行互动的方法,以及一种视频通话时进行互动的装置。
背景技术
随着视频通话技术的出现和普及,人们远程沟通的需要被更好地满足。但目前的视频通话产品功能较为简单,对于一些复杂的沟通的处理并不能令人满意。在生活中,一些父母不在孩子身边,需要通过视频通话产品给孩子讲故事。由于目前的视频通话产品只是简单的传输双方的声音和通话画面,在父母讲故事时,无法同时展示故事的视频或图片,不能图文并茂地为孩子讲故事。
发明内容
鉴于上述问题,提出了本发明以便提供一种克服上述问题或者至少部分地解决上述问题的视频通话时进行互动的方法和相应的装置。
依据本发明的一个方面,提供了一种视频通话时进行互动的方法,应用在第一终端,所述方法包括:
与正在进行视频通话的第二终端展示同一目标事件;
接收所述第二终端的用户根据所展示的目标事件发出的互动信息;
根据所述互动信息调整所述目标事件的展示进度。
可选地,在所述与正在进行视频通话的第二终端展示同一目标事件之前,所述方法还包括:
通过识别用户语音或根据用户操作发起视频通话;
或,接收所述第二终端发起的视频通话。
可选地,所述与正在进行视频通话的第二终端展示同一目标事件包括:
展示所述第一终端的用户选择的目标事件,并提示所述第二终端展示同一目标事件。
可选地,所述提示所述第二终端展示同一目标事件包括:
将所述目标事件送至第二终端进行展示;
或,提取所述目标事件的事件标识传送至云端服务器,由所述云端服务器根据所述事件标识查找目标事件反馈至第二终端进行展示;
或,提取所述目标事件的事件标识传送至所述第二终端,由所述第二终端根据所述事件标识提取预存的目标事件并展示。
可选地,所述与正在进行视频通话的第二终端展示同一目标事件包括:
接收并展示所述第二终端根据用户的选择展示的目标事件;
或,接收所述第二终端根据用户的选择展示的目标事件的事件标识,根据所述事件标识查找所述目标事件并展示。
可选地,所述接收所述第二终端的用户根据所展示的目标事件发出的互动信息包括:
接收所述第二终端通知的片段标识,或接收所述第二终端的用户根据所述目标事件发出的通话视频,识别所述通话视频对应的通话音频所指示的片段标识;所述片段标识指示所述第二终端的用户当前发出的通话视频所针对的目标事件的事件内容;
所述根据所述互动信息调整所述目标事件的展示进度包括:
根据所述片段标识调整所述目标事件的展示进度,以实现以所述通话音频作为所述目标事件的事件配音。
可选地,所述接收所述第二终端的用户根据所展示的目标事件发出的互动信息包括:
接收所述第二终端的用户根据所述目标事件发出的通话视频,识别所述通话视频对应的通话音频对应的音频文字;
查找所述目标事件的文字素材中与所识别的音频文字匹配的位置;
所述根据所述互动信息调整所述目标事件的展示进度包括:
调整所述目标事件的展示进度至查找的所述文字素材的位置,以实现以所述通话音频作为所述目标事件的事件配音。
可选地,在所述识别所述通话视频对应的通话音频对应的音频文字之后,所述方法还包括:
将所识别的音频文字上传到云端服务器;
所述查找所述目标事件的文字素材中与所识别的音频文字匹配的位置包括:
接收云端服务器查找所述目标事件的文字素材中与所识别的音频文字匹配的位置。
可选地,所述接收所述第二终端的用户根据所展示的目标事件发出的互动信息包括:
接收所述第二终端的用户选择的目标事件的展示速度;
所述根据所述互动信息调整所述目标事件的展示进度包括:
根据所接收的展示速度控制所述第一终端对所述目标事件的展示进度,以实现以所述通话音频作为所述目标事件的事件配音。
可选地,所述方法还包括:
根据所述第一终端的用户的用户声音或用户图像识别用户方向;
调整所述第一终端采集所述通话视频的镜头方向指向所识别的用户方向。
可选地,所述第一终端由可转动的显示界面与支撑体构成,所述显示界面相对于所述支撑体可转动设定角度;
所述调整所述第一终端采集所述通话视频的镜头方向指向所识别的用户方向包括:
通过控制所述显示界面的转动角度以使所述显示界面上的镜头方向指向所识别的用户方向。
可选地,所述方法还包括:
根据所述第二终端的调整指示对所述第一终端的镜头方向进行调整。
可选地,所述方法还包括:
接收所述第二终端的用户的暂停操作;
根据所述第二终端的用户的暂停操作暂停所述目标事件的的展示。
可选地,所述与正在进行视频通话的第二终端展示同一目标事件包括:
在所述第一终端的显示界面中分区域展示所述目标事件以及所述视频通话的通话界面。
可选地,所述第一终端将所述目标事件展示为图片或视频,所述第二终端将所述目标事件展示为文字、图片或视频。
依据本发明的另一个方面,还提供了一种视频通话时进行互动的方法,应用在第二终端,所述方法包括:
与正在进行视频通话的第一终端展示同一目标事件;
将所述第二终端的用户根据所展示的目标事件发出的互动信息发送至第一终端,以由所述第一终端根据互动信息调整所述目标事件的展示进度。
根据本发明的另一方面,提供了一种视频通话时进行互动的装置,应用在第一终端,所述装置包括:
第一展示模块,用于与正在进行视频通话的第二终端展示同一目标事件;
接收模块,用于接收所述第二终端的用户根据所展示的目标事件发出的互动信息;
调整模块,用于根据所述互动信息调整所述目标事件的展示进度。
可选地,在所述与正在进行视频通话的第二终端展示同一目标事件之前,所述装置还包括:
视频请求发起模块,用于通过识别用户语音或根据用户操作发起视频通话;
或,视频请求接收模块,用于接收所述第二终端发起的视频通话。
可选地,所述第一展示模块包括:
第一展示子模块,用于展示所述第一终端的用户选择的目标事件,并提示所述第二终端展示同一目标事件。
可选地,所述第一展示子模块包括:
第一发送子单元,用于将所述目标事件送至第二终端进行展示;
或,第二发送子单元,用于提取所述目标事件的事件标识传送至云端服务器,由所述云端服务器根据所述事件标识查找目标事件反馈至第二终端进行展示;
或,第三发送子单元,用于提取所述目标事件的事件标识传送至所述第二终端,由所述第二终端根据所述事件标识提取预存的目标事件并展示。
可选地,所述第一展示模块包括:
第二展示子模块,用于接收并展示所述第二终端根据用户的选择展示的目标事件;
或,第三展示子模块,用于接收所述第二终端根据用户的选择展示的目标事件的事件标识,根据所述事件标识查找所述目标事件并展示。
可选地,所述接收模块包括:
标识识别子模块,用于接收所述第二终端通知的片段标识,或接收所述第二终端的用户根据所述目标事件发出的通话视频,识别所述通话视频对应的通话音频所指示的片段标识;所述片段标识指示所述第二终端的用户当前发出的通话视频所针对的目标事件的事件内容;
所述调整模块包括:
第一调整子模块,用于根据所述片段标识调整所述目标事件的展示进度,以实现以所述通话音频作为所述目标事件的事件配音。
可选地,所述接收模块包括:
文字识别子模块,用于接收所述第二终端的用户根据所述目标事件发出的通话视频,识别所述通话视频对应的通话音频对应的音频文字;
查找子模块,用于查找所述目标事件的文字素材中与所识别的音频文字匹配的位置;
所述调整模块包括:
第二调整子模块,用于调整所述目标事件的展示进度至查找的所述文字素材的位置,以实现以所述通话音频作为所述目标事件的事件配音。
可选地,在所述识别所述通话视频对应的通话音频对应的音频文字之后,所述装置还包括:
上传子模块,用于将所识别的音频文字上传到云端服务器;
所述查找子模块包括:
接收查找子单元,用于接收云端服务器查找所述目标事件的文字素材中与所识别的音频文字匹配的位置。
可选地,所述接收模块包括:
选择接收子模块,用于接收所述第二终端的用户选择的目标事件的展示速度;
所述调整模块包括:
速度控制子模块,用于根据所接收的展示速度控制所述第一终端对所述目标事件的展示进度,以实现以所述通话音频作为所述目标事件的事件配音。
可选地,所述装置还包括:
方向识别模块,用于根据所述第一终端的用户的用户声音或用户图像识别用户方向;
第一方向调整模块,用于调整所述第一终端采集所述通话视频的镜头方向指向所识别的用户方向。
可选地,所述第一终端由可转动的显示界面与支撑体构成,所述显示界面相对于所述支撑体可转动设定角度;
所述第一方向调整模块包括:
角度控制子模块,用于通过控制所述显示界面的转动角度以使所述显示界面上的镜头方向指向所识别的用户方向。
可选地,所述装置还包括:
第二方向调整模块,用于根据所述第二终端的调整指示对所述第一终端的镜头方向进行调整。
可选地,所述装置还包括:
暂停模块,用于接收所述第二终端的用户的暂停操作;根据所述第二终端的用户的暂停操作暂停所述目标事件的的展示。
可选地,所述第一展示模块包括:
分区展示子模块,用于在所述第一终端的显示界面中分区域展示所述目标事件以及所述视频通话的通话界面。
可选地,所述第一终端将所述目标事件展示为图片或视频,所述第二终端将所述目标事件展示为文字、图片或视频。
根据本发明的另一方面,提供了一种视频通话时进行互动的装置,应用在第二终端,所述装置包括:
展示模块,用于与正在进行视频通话的第一终端展示同一目标事件;
视频发送模块,用于将所述第二终端的用户根据所展示的目标事件发出的互动信息发送至第一终端,以由所述第一终端根据互动信息调整所述目标事件的展示进度。
根据本发明的一种视频通话时进行互动的方法和装置可以在视频通话时,与正在进行视频通话的第二终端展示同一目标事件,接收所述第二终端的用户根据所展示的目标事件发出的互动信息,根据所述互动信息调整所述目标事件的展示进度。上述方案使第一终端和第二终端同步展示该目标事件,实现以所述通话音频作为所述目标事件的事件配音。通过展示目标事件并提供事件配音,应用到讲故事的场景,可以使视频通话中用户看故事的同时可以听故事,同时实现了讲故事的音频与故事的展示进度相同步,结合视频通话环境,使第一终端的用户还能看到第二终端用户的实时视频,使得讲故事的环境更为真实。
上述说明仅是本发明技术方案的概述,为了能够更清楚了解本发明的技术手段,而可依照说明书的内容予以实施,并且为了让本发明的上述和其它目的、特征和优点能够更明显易懂,以下特举本发明的具体实施方式。
附图说明
通过阅读下文优选实施方式的详细描述,各种其他的优点和益处对于本领域普通技术人员将变得清楚明了。附图仅用于示出优选实施方式的目的,而并不认为是对本发明的限制。而且在整个附图中,用相同的参考符号表示相同的部件。在附图中:
图1示出了根据本发明的一种视频通话时进行互动的方法实施例一的步骤流程示意图;
图2示出了根据本发明的一种视频通话时进行互动的方法实施例二的步骤流程示意图;
图3示出了根据本发明的一种视频通话时进行互动的方法实施例三的步骤流程示意图;
图4示出了根据本发明的一种视频通话时进行互动的装置实施例四的结构框图;
图5示出了根据本发明的一种视频通话时进行互动的装置实施例五的结构框图。
具体实施方式
下面将参照附图更详细地描述本公开的示例性实施例。虽然附图中显示了本公开的示例性实施例,然而应当理解,可以以各种形式实现本公开而不应被这里阐述的实施例所限制。相反,提供这些实施例是为了能够更透彻地理解本公开,并且能够将本公开的范围完整的传达给本领域的技术人员。
实施例一
参照图1,示出了根据本发明的一种视频通话时进行互动的方法实施例一的步骤流程示意图,具体可以包括如下步骤:
步骤101,与正在进行视频通话的第二终端展示同一目标事件。
目标事件是指第一终端的用户选择的故事或第二终端的用户选择的故事。在本发明实施例中,第一终端的用户和第二终端的用户进行视频通话时,可以开启讲故事模式,在第一终端或第二终端的用户选择要讲的故事后,在第一终端和第二终端的界面上展示所选择的故事。
第一终端和第二终端展示故事的形式可以不一样。具体而言,第一终端或第二终端可以将目标事件展示为文字、图片或视频。其中,文字是指描述故事情节或场景的文字内容;图片是指代表故事情节或场景的图片内容,图片中也可以包括有描述故事情节或场景的文字内容;视频是指演绎故事情节或场景的视频内容,视频中也可以包括描述故事情节或场景的文字内容。
步骤102,接收所述第二终端的用户根据所展示的目标事件发出的互动信息。
互动信息是指可以调整所述目标事件的展示进度的信息,可以包括片段标识,通话视频,展示速度等。互动信息是第一终端可以直接用来对目标事件展示进度进行调整的指示信息,或需要被第一终端识别后才可以用来对目标事件展示进度进行调整的指示信息。
在本发明实施例中,在视频通话时,第二终端展示目标事件后,第二终端将用户根据所展示的目标事件所产生的互动信息发送给第一终端,而第一终端则接收互动信息。
步骤103,根据所述互动信息调整所述目标事件的展示进度。
在本发明实施例中,第一终端在接收到第二终端的用户根据所展示的目标事件发出的互动信息后,根据互动信息调整目标事件的展示进度,从而使得在第一终端的用户听到通话音频的同时能看到通话音频所对应的目标事件。
具体而言,第一终端可以根据接收自第二终端的进度通知,调整目标事件的展示进度;或者第一终端可以识别通话音频所对应的片段标识,调整目标事件的展示进度;或者第一终端可以识别通话音频对应的音频文字,根据音频文字查找出目标事件的展示进度;或者第一终端可以根据接收自第二终端的目标事件展示速度调整目标事件的展示进度。
当第二终端的用户在视频通话中讲故事时,可以根据所述互动信息调整所述目标事件的展示进度,以使对于第一终端的用户来说听到的通话音频是作为所述目标事件的事件配音。
综上所述,依据本发明实施例,在视频通话时,与正在进行视频通话的第二终端展示同一目标事件,接收所述第二终端的用户根据所展示的目标事件发出的通话视频,根据所述互动信息调整所述目标事件的展示进度,从而使第一终端和第二终端同步展示该目标事件,以实现以所述通话音频作为所述目标事件的事件配音。由此可见,依据本发明实施例,通过展示目标事件并提供事件配音,应用到讲故事的场景,可以使视频通话中用户看故事的同时可以听故事,同时实现了讲故事的音频与故事的展示进度相同步,结合视频通话环境,使第一终端的用户还能看到第二终端用户的实时视频,使得讲故事的环境更为真实。
本发明实施例中,优选地,所述与正在进行视频通话的第二终端展示同一目标事件包括:展示所述第一终端的用户选择的目标事件,并提示所述第二终端展示同一目标事件。在实际应用中,第一终端可以生成目标事件列表供第一终端的用户选择目标事件,其中目标事件可以预存在第一终端和/或第二终端的本地存储器中,也可以预存在提供目标事件的云端服务器中。
具体而言,第一终端根据用户的选择提取预存在本地的目标事件或下载预存在云端服务器或第二终端的目标事件,并展示在第一终端的屏幕中,同时将用户的选择发送给第二终端,以供第二终端根据第一终端的用户选择提取预存在本地的目标事件或下载预存在云端服务器或第一终端的目标事件,并展示在第二终端的屏幕中。
当用户选择的目标事件预存在第一终端的本地存储器中时,将所述目标事件发送至第二终端进行展示。具体而言,根据第一终端的用户选择,第一终端将预存在本地存储器中的目标事件发送给第二终端,以供第二终端展示。
当目标事件预存在的云端服务器中时,提取所述目标事件的事件标识传送至云端服务器,由所述云端服务器根据所述事件标识查找目标事件反馈至第一终端和第二终端进行展示。具体而言,第一终端根据用户的选择,提取目标事件的事件标识,将事件标识传送至云端服务器,以供云端服务器查找目标事件并发送至第一终端和第二终端进行展示。
当目标事件预存在第二终端的本地存储器中时,提取所述目标事件的事件标识传送至所述第二终端,由所述第二终端根据所述事件标识提取预存的目标事件并展示,第二终端将目标事件发送至第一终端。具体而言,根据第一终端的用户选择,提取目标事件的事件标识传送至第二终端,以供第二终端在本地存储器查找目标事件进行展示并发送至第一终端,第一终端接收目标事件并展示。
在本发明实施例中,优选地,所述与正在进行视频通话的第二终端展示同一目标事件包括:接收并展示所述第二终端根据用户的选择展示的目标事件;或,接收所述第二终端根据用户的选择展示的目标事件的事件标识,根据所述事件标识查找所述目标事件并展示。在实际应用中,第二终端可以生成目标事件列表供第二终端的用户选择目标事件,其中目标事件可以预存在第一终端和/或第二终端的本地存储器中,也可以预存在提供目标事件的云端服务器中。
当目标事件预存在第二终端的本地存储器中时,接收并展示所述第二终端根据用户的选择展示的目标事件。具体而言,根据第二终端的用户选择,第二终端将预存在本地存储器中的目标事件发送给第一终端,以供第一终端展示,以使第一终端的用户在听到通话音频的同时,为用户展示了相应的目标事件的内容。
当目标事件预存在第一终端的本地存储器中时,接收所述第二终端根据用户的选择展示的目标事件的事件标识,根据所述事件标识查找所述目标事件并展示。具体而言,根据第二终端的用户选择,第二终端将目标事件的事件标识传送至第一终端,以供第一终端根据事件标识查找目标事件并进行展示,以使第一终端的用户在听到通话音频的同时,为用户展示了相应的目标事件的内容。
在本发明实施例中,优选地,所述接收所述第二终端的用户根据所展示的目标事件发出的互动信息包括:接收所述第二终端通知的片段标识,或接收所述第二终端的用户根据所述目标事件发出的通话视频,识别所述通话视频对应的通话音频所指示的片段标识;所述片段标识指示所述第二终端的用户当前发出的通话视频所针对的目标事件的事件内容;所述根据所述互动信息调整所述目标事件的展示进度包括:根据所述片段标识调整所述目标事件的展示进度,以实现以所述通话音频作为所述目标事件的事件配音。
片段标识是指用来指示第二终端的用户当前发出的通话视频所针对的目标事件的事件内容的标识。第一终端根据片段标识查找目标事件的展示进度,并做相应的调整,以使第一终端的用户在听到通话音频的同时,为用户展示了相应的目标事件的内容。
当片段标识是第二终端根据第二终端的用户的手动操作或语音命令生成的标识时,第一终端接收第二终端通知的片段标识,根据片段标识所指示的事件内容调整目标事件的展示进度,以实现以所述通话音频作为所述目标事件的事件配音。当片段标识是第一终端接收第二终端发来的通话视频后,识别通话视频对应的通话音频所指示的片段标识,第一终端根据片段标识所指示的时间内容调整目标事件的展示进度,以使第一终端的用户在听到通话音频的同时,为用户展示了相应的目标事件的内容,以实现以所述通话音频作为所述目标事件的事件配音。
在本发明实施例中,优选地,所述接收所述第二终端的用户根据所展示的目标事件发出的互动信息包括:包括:接收所述第二终端的用户根据所述目标事件发出的通话视频,识别所述通话视频对应的通话音频对应的音频文字;查找所述目标事件的文字素材中与所识别的音频文字匹配的位置;所述根据所述互动信息调整所述目标事件的展示进度包括:调整所述目标事件的展示进度至查找的所述文字素材的位置,以实现以所述通话音频作为所述目标事件的事件配音。
第一终端接收第二终端发送来的通话视频,将通话视频对应的通话音频转换成对应的音频文字,查找与音频文字相同的目标事件的文字素材内容,确定与音频文字相同的文字素材的位置,再调整目标事件的展示进度到与音频文字相同的文字素材的位置,以使第一终端的用户在听到通话音频的同时,为用户展示了相应的目标事件的内容。
在本发明实施例中,优选地,在所述识别所述第二终端的用户根据所展示的目标事件发出的通话音频对应的音频文字之后,所述方法还包括:将所识别的音频文字上传到云端服务器;所述查找所述目标事件的文字素材中与所识别的音频文字匹配的位置包括:接收云端服务器查找所述目标事件的文字素材中与所识别的音频文字匹配的位置。
第一终端将音频文字上传到云端服务器,云端服务器查找与音频文字相同的目标事件的文字素材内容,确定与音频文字相同的文字素材的位置,再将确定的位置发送至第一终端,第一终端接收由云端服务器确定的位置。
在本发明实施例中,优选地,所述接收所述第二终端的用户根据所展示的目标事件发出的互动信息包括:包括:接收所述第二终端的用户选择的目标事件的展示速度;所述根据所述互动信息调整所述目标事件的展示进度包括:根据所接收的展示速度控制所述第一终端对所述目标事件的展示进度,以实现以所述通话音频作为所述目标事件的事件配音。
第二终端的用户可以通过选择目标事件的展示速度,以使目标事件的展示进度可以与通话音频相配合。具体而言,第一终端接收第二终端的用户选择的目标事件的展示速度,第二终端用户可以在视频通话过程中,不断通过操作更改目标事件的展示速度。根据接收的展示速度控制目标事件的展示进度,以使第一终端的用户在听到通话音频的同时,为用户展示了相应的目标事件的内容。
在本发明实施例中,优选地,所述与正在进行视频通话的第二终端展示同一目标事件包括:在所述第一终端的显示界面中分区域展示所述目标事件以及所述视频通话的通话界面。
第一终端在显示界面的部分区域展示目标事件,在显示界面的部分区域展示视频通话的通话界面,以使第一终端的用户可以同时看到第二终端的用户的通话界面和目标事件的展示内容。在具体实现中,显示界面中展示目标事件的区域和展示视频通话的区域的位置和大小可以根据用户的需求进行调整,本发明对此不作限制。
在本发明实施例中,优选地,所述第一终端将所述目标事件展示为图片或视频,所述第二终端将所述目标事件展示为文字、图片或视频。
第一终端可以将目标事件展示为图片或视频,第二终端可以将目标事件展示为文字、图片或视频,以使第一终端的用户可以看到目标事件的展示内容,第二终端的用户可以看到目标事件的展示内容和/或目标事件的文字内容。
实施例二
参照图2,示出了根据本发明的一种视频通话时进行互动的方法实施例二的步骤流程示意图,具体可以包括如下步骤:
步骤201,通过识别用户语音或根据用户操作发起视频通话;或,接收所述第二终端发起的视频通话。
第一终端识别用户语音为预设的发起视频通话的语音命令,则向第二终端发起视频通话请求;或者第一终端在触摸屏上检测到发起视频通话的用户操作,则向第二终端发起视频通话请求。
步骤202,根据所述第一终端的用户的用户声音或用户图像识别用户方向;调整所述第一终端采集所述通话视频的镜头方向指向所识别的用户方向。
第一终端采集视频通话的镜头方向可以调整,其中一种调整方法可以根据第一终端的用户的用户声音或用户图像识别用户方向;调整所述第一终端采集所述通话视频的镜头方向指向所识别的用户方向。
第一终端可以通过声音传感器识别声音的方向来确定用户所在的方向,或者通过摄像头识别用户的脸部特征来确定用户所在的方向,或者结合声音传感器识别的声音方向和摄像头识别的脸部特征共同来确定用户所在的方向。根据确定的用户方向调整第一终端采集所述通话视频的镜头方向指向所确定的用户方向。
步骤203,根据所述第二终端的调整指示对所述第一终端的镜头方向进行调整。
第一终端采集视频通话的镜头方向可以调整,其中另一种调整方法可以根据所述第二终端的调整指示对所述第一终端的镜头方向进行调整。
第二终端的用户可以根据视频通话的画面,对第一终端的镜头方向发出调整指示,第一终端根据调整指示转动第一终端的镜头方向。
步骤204,与正在进行视频通话的第二终端展示同一目标事件。
目标事件是指第一终端的用户选择的故事或第二终端的用户选择的故事。在本发明实施例中,第一终端的用户和第二终端的用户进行视频通话时,可以开启讲故事模式,在第一终端或第二终端的用户选择要讲的故事后,在第一终端和第二终端的界面上展示所选择的故事。
第一终端和第二终端展示故事的形式可以不一样。具体而言,第一终端或第二终端可以将目标事件展示为文字、图片或视频。其中,文字是指描述故事情节或场景的文字内容;图片是指代表故事情节或场景的图片内容,图片中也可以包括有描述故事情节或场景的文字内容;视频是指演绎故事情节或场景的视频内容,视频中也可以包括描述故事情节或场景的文字内容。
步骤205,接收所述第二终端的用户的暂停操作;根据所述第二终端的用户的暂停操作暂停所述目标事件的的展示。
在展示目标事件的过程中,第二终端的用户可以随时暂停目标事件的展示,并将暂停操作发送给第一终端。暂停操作可以是第二终端用户的语音命令或第二终端用户在触摸屏上的操作。第一终端接收到暂停操作后,暂停目标事件的展示,例如暂停视频的播放,暂停图片的翻页等。
步骤206,接收所述第二终端的用户根据所展示的目标事件发出的互动信息。
互动信息是指可以调整所述目标事件的展示进度的信息,可以包括片段标识,通话视频,展示速度等。互动信息是第一终端可以直接用来对目标事件展示进度进行调整的指示信息,或需要被第一终端识别后才可以用来对目标事件展示进度进行调整的指示信息。
在本发明实施例中,在视频通话时,第二终端展示目标事件后,第二终端将用户根据所展示的目标事件所产生的互动信息发送给第一终端,第一终端接收互动信息。
步骤207,根据所述互动信息调整所述目标事件的展示进度。
在本发明实施例中,第一终端在接收到第二终端的用户根据所展示的目标事件发出的互动信息后,根据互动信息调整目标事件的展示进度,从而使得在第一终端的用户听到通话音频的同时能看到通话音频所对应的目标事件。
具体而言,第一终端可以根据接收自第二终端的进度通知,调整目标事件的展示进度;或者第一终端可以识别通话音频所对应的片段标识,调整目标事件的展示进度;或者第一终端可以识别通话音频对应的音频文字,根据音频文字查找出目标事件的展示进度;或者第一终端可以根据接收自第二终端的目标事件展示速度调整目标事件的展示进度。
当第二终端的用户在视频通话中讲故事时,可以根据所述互动信息调整所述目标事件的展示进度,以使对于第一终端的用户来说听到的通话音频是作为所述目标事件的事件配音。
在本发明实施例中,优选地,所述第一终端由可转动的显示界面与支撑体构成,所述显示界面相对于所述支撑体可转动设定角度;所述调整所述第一终端采集所述通话视频的镜头方向指向所识别的用户方向包括:通过控制所述显示界面的转动角度以使所述显示界面上的镜头方向指向所识别的用户方向。
第一终端可以通过控制内置在支撑体中的电机来转动显示界面。第一终端在需要调整镜头方向指向所识别的用户方向时,可以通过控制显示界面的转动角度来使镜头方向指向所识别的用户方向。
综上所述,依据本发明实施例,通过展示目标事件并提供事件配音,应用到讲故事的场景,可以使视频通话中用户看故事的同时可以听故事,同时实现了讲故事的音频与故事的展示进度相同步,结合视频通话环境,使第一终端的用户还能看到第二终端用户的实时视频,使得讲故事的环境更为真实,通过调整镜头指向识别的用户方向,使得第一终端的镜头可以自动的转向用户,通过第二终端对第一终端的镜头进行的调整,实现了第二终端用户对第一终端镜头的远程控制,通过接收第二终端用户的暂停操作,可以暂停目标事件的展示,使得讲故事的过程可以随时暂停,以解答第一终端用户的问题。
本领域的技术人员应可理解,上述实施例中的方法步骤并非每一个都必不可少,在具体状况下,可以省略其中的一个或多个步骤(例如可省略步骤203),只要能够实现在视频通话中进行互动的技术目的,本发明并不限定的实施例中步骤的数量及其顺序,本发明的保护范围当以权利要求书的限定为准。
为使本领域技术人员更好地理解本发明实施例,以下通过一个具体的示例对本发明实施例的视频通话时进行互动的方案进行说明。第一终端为实现孩子使用的可视频通话的智能机器人,第二终端为家长的手机。
在家长与孩子进行视频通话时,可以开启讲故事模式,在家长或孩子选择要讲的故事后,在智能机器人或手机的界面上展示所选择的故事。家长所使用的手机展示故事的进度可以按照预设的速度确定,或根据家长讲故事时的手动操作或语音命令确定,或根据家长讲故事时的通话音频确定,上述可以确定展示故事进度的信息即互动信息,可以是根据通话音频识别的文字素材的位置、故事片段的片段标识、展示速度等。手机向智能机器人发送家长根据所展示的故事发出的互动信息,其中互动信息智能机器人根据互动信息调整其对故事的展示进度,以使为孩子提供通话音频的同时,在智能机器人端为孩子展示了相应的故事。
实施例三
参照图3,示出了根据本发明的一种视频通话时进行互动的方法实施例三的步骤流程示意图,具体可以包括如下步骤:
步骤301,与正在进行视频通话的第一终端展示同一目标事件。
目标事件是指第一终端的用户选择的故事或第二终端的用户选择的故事。在本发明实施例中,第一终端的用户和第二终端的用户进行视频通话时,可以开启讲故事模式,在第一终端或第二终端的用户选择要讲的故事后,在第一终端和第二终端的界面上展示所选择的故事。
步骤302,将所述第二终端的用户根据所展示的目标事件发出的互动信息发送至第一终端。
在本发明实施例中,在视频通话时,第二终端展示目标事件后,第二终端将用户根据所展示的目标事件所产生的互动信息发送给第一终端,以由所述第一终端根据互动信息调整所述目标事件的展示进度,以实现以所述通话音频作为所述目标事件的事件配音。
综上所述,依据本发明实施例,第二终端通过展示与第一终端相同的目标事件,并将互动信息发送至第一终端,实现了第二终端用户为第一终端用户讲故事的过程,结合视频通话环境,使第二终端用户还能看到第一终端用户的实时视频,使得第二终端用户可以在讲故事的同时得到第一终端用户的反馈。
对于方法实施例,为了简单描述,故将其都表述为一系列的动作组合,但是本领域技术人员应该知悉,本发明实施例并不受所描述的动作顺序的限制,因为依据本发明实施例,某些步骤可以采用其他顺序或者同时进行。其次,本领域技术人员也应该知悉,说明书中所描述的实施例均属于优选实施例,所涉及的动作并不一定是本发明实施例所必须的。
实施例四
参照图4,示出了根据本发明的一种视频通话时进行互动的装置实施例四的结构框图,具体可以包括如下模块:
第一展示模块401,用于与正在进行视频通话的第二终端展示同一目标事件;
接收模块402,用于接收所述第二终端的用户根据所展示的目标事件发出的互动信息;
调整模块403,用于根据所述互动信息调整所述目标事件的展示进度。
优选地,在所述与正在进行视频通话的第二终端展示同一目标事件之前,所述装置还包括:
视频请求发起模块,用于通过识别用户语音或根据用户操作发起视频通话;
或,视频请求接收模块,用于接收所述第二终端发起的视频通话。
优选地,所述第一展示模块包括:
第一展示子模块,用于展示所述第一终端的用户选择的目标事件,并提示所述第二终端展示同一目标事件。
优选地,所述第一展示子模块包括:
第一发送子单元,用于将所述目标事件送至第二终端进行展示;
或,第二发送子单元,用于提取所述目标事件的事件标识传送至云端服务器,由所述云端服务器根据所述事件标识查找目标事件反馈至第二终端进行展示;
或,第三发送子单元,用于提取所述目标事件的事件标识传送至所述第二终端,由所述第二终端根据所述事件标识提取预存的目标事件并展示。
优选地,所述第一展示模块包括:
第二展示子模块,用于接收并展示所述第二终端根据用户的选择展示的目标事件;
或,第三展示子模块,用于接收所述第二终端根据用户的选择展示的目标事件的事件标识,根据所述事件标识查找所述目标事件并展示。
优选地,所述接收模块包括:
标识识别子模块,用于接收所述第二终端通知的片段标识,或接收所述第二终端的用户根据所述目标事件发出的通话视频,识别所述通话视频对应的通话音频所指示的片段标识;所述片段标识指示所述第二终端的用户当前发出的通话视频所针对的目标事件的事件内容;
所述调整模块包括:
第一调整子模块,用于根据所述片段标识调整所述目标事件的展示进度,以实现以所述通话音频作为所述目标事件的事件配音。
优选地,所述接收模块包括:
文字识别子模块,用于接收所述第二终端的用户根据所述目标事件发出的通话视频,识别所述通话视频对应的通话音频对应的音频文字;
查找子模块,用于查找所述目标事件的文字素材中与所识别的音频文字匹配的位置;
所述调整模块包括:
第二调整子模块,用于调整所述目标事件的展示进度至查找的所述文字素材的位置,以实现以所述通话音频作为所述目标事件的事件配音。
优选地,在所述识别所述通话视频对应的通话音频对应的音频文字之后,所述装置还包括:
上传子模块,用于将所识别的音频文字上传到云端服务器;
所述查找子模块包括:
接收查找子单元,用于接收云端服务器查找所述目标事件的文字素材中与所识别的音频文字匹配的位置。
优选地,所述接收模块包括:
选择接收子模块,用于接收所述第二终端的用户选择的目标事件的展示速度;
所述调整模块包括:
速度控制子模块,用于根据所接收的展示速度控制所述第一终端对所述目标事件的展示进度,以实现以所述通话音频作为所述目标事件的事件配音。
优选地,所述装置还包括:
方向识别模块,用于根据所述第一终端的用户的用户声音或用户图像识别用户方向;
第一方向调整模块,用于调整所述第一终端采集所述通话视频的镜头方向指向所识别的用户方向。
优选地,所述第一终端由可转动的显示界面与支撑体构成,所述显示界面相对于所述支撑体可转动设定角度;
所述第一方向调整模块包括:
角度控制子模块,用于通过控制所述显示界面的转动角度以使所述显示界面上的镜头方向指向所识别的用户方向。
优选地,所述装置还包括:
第二方向调整模块,用于根据所述第二终端的调整指示对所述第一终端的镜头方向进行调整。
优选地,所述装置还包括:
暂停模块,用于接收所述第二终端的用户的暂停操作;根据所述第二终端的用户的暂停操作暂停所述目标事件的的展示。
优选地,所述第一展示模块包括:
分区展示子模块,用于在所述第一终端的显示界面中分区域展示所述目标事件以及所述视频通话的通话界面。
优选地,所述第一终端将所述目标事件展示为图片或视频,所述第二终端将所述目标事件展示为文字、图片或视频。
综上所述,依据本发明实施例,在视频通话时,与正在进行视频通话的第二终端展示同一目标事件,接收所述第二终端的用户根据所展示的目标事件发出的通话视频,根据所述互动信息调整所述目标事件的展示进度,从而使第一终端和第二终端同步展示该目标事件,以实现以所述通话音频作为所述目标事件的事件配音。由此可见,依据本发明实施例,通过展示目标事件并提供事件配音,应用到讲故事的场景,可以使视频通话中用户看故事的同时可以听故事,同时实现了讲故事的音频与故事的展示进度相同步,结合视频通话环境,使第一终端的用户还能看到第二终端用户的实时视频,使得讲故事的环境更为真实。
本领域的技术人员应可理解,上述实施例中的各模块并非每一个都必不可少,在具体状况下,可以省略其中的一个或多个模块(例如可省略第二方向调整模块),只要能够实现在视频通话中进行互动的技术目的,本发明并不限定的实施例中模块的数量及其组合顺序,本发明的保护范围当以权利要求书的限定为准。
实施例五
参照图5,示出了根据本发明的一种视频通话时进行互动的装置实施例五的结构框图,具体可以包括如下模块:
展示模块501,用于与正在进行视频通话的第一终端展示同一目标事件;
视频发送模块502,用于将所述第二终端的用户根据所展示的目标事件发出的互动信息发送至第一终端,以由所述第一终端根据互动信息调整所述目标事件的展示进度。
综上所述,依据本发明实施例,第二终端通过展示与第一终端相同的目标事件,并将互动信息发送至第一终端,实现了第二终端用户为第一终端用户讲故事的过程,结合视频通话环境,使第二终端用户还能看到第一终端用户的实时视频,使得第二终端用户可以在讲故事的同时得到第一终端用户的反馈。
在此提供的算法和显示不与任何特定计算机、虚拟系统或者其它设备固有相关。各种通用系统也可以与基于在此的示教一起使用。根据上面的描述,构造这类系统所要求的结构是显而易见的。此外,本发明也不针对任何特定编程语言。应当明白,可以利用各种编程语言实现在此描述的本发明的内容,并且上面对特定语言所做的描述是为了披露本发明的最佳实施方式。
在此处所提供的说明书中,说明了大量具体细节。然而,能够理解,本发明的实施例可以在没有这些具体细节的情况下实践。在一些实例中,并未详细示出公知的方法、结构和技术,以便不模糊对本说明书的理解。
类似地,应当理解,为了精简本公开并帮助理解各个发明方面中的一个或多个,在上面对本发明的示例性实施例的描述中,本发明的各个特征有时被一起分组到单个实施例、图、或者对其的描述中。然而,并不应将该公开的方法解释成反映如下意图:即所要求保护的本发明要求比在每个权利要求中所明确记载的特征更多的特征。更确切地说,如下面的权利要求书所反映的那样,发明方面在于少于前面公开的单个实施例的所有特征。因此,遵循具体实施方式的权利要求书由此明确地并入该具体实施方式,其中每个权利要求本身都作为本发明的单独实施例。
本领域那些技术人员可以理解,可以对实施例中的设备中的模块进行自适应性地改变并且把它们设置在与该实施例不同的一个或多个设备中。可以把实施例中的模块或单元或组件组合成一个模块或单元或组件,以及此外可以把它们分成多个子模块或子单元或子组件。除了这样的特征和/或过程或者单元中的至少一些是相互排斥之外,可以采用任何组合对本说明书(包括伴随的权利要求、摘要和附图)中公开的所有特征以及如此公开的任何方法或者设备的所有过程或单元进行组合。除非另外明确陈述,本说明书(包括伴随的权利要求、摘要和附图)中公开的每个特征可以由提供相同、等同或相似目的的替代特征来代替。
此外,本领域的技术人员能够理解,尽管在此所述的一些实施例包括其它实施例中所包括的某些特征而不是其它特征,但是不同实施例的特征的组合意味着处于本发明的范围之内并且形成不同的实施例。例如,在下面的权利要求书中,所要求保护的实施例的任意之一都可以以任意的组合方式来使用。
本发明的各个部件实施例可以以硬件实现,或者以在一个或者多个处理器上运行的软件模块实现,或者以它们的组合实现。本领域的技术人员应当理解,可以在实践中使用微处理器或者数字信号处理器(DSP)来实现根据本发明实施例的一种视频通话时进行互动的方法和装置中的一些或者全部部件的一些或者全部功能。本发明还可以实现为用于执行这里所描述的方法的一部分或者全部的设备或者装置程序(例如,计算机程序和计算机程序产品)。这样的实现本发明的程序可以存储在计算机可读介质上,或者可以具有一个或者多个信号的形式。这样的信号可以从因特网网站上下载得到,或者在载体信号上提供,或者以任何其他形式提供。
应该注意的是上述实施例对本发明进行说明而不是对本发明进行限制,并且本领域技术人员在不脱离所附权利要求的范围的情况下可设计出替换实施例。在权利要求中,不应将位于括号之间的任何参考符号构造成对权利要求的限制。单词“包含”不排除存在未列在权利要求中的元件或步骤。位于元件之前的单词“一”或“一个”不排除存在多个这样的元件。本发明可以借助于包括有若干不同元件的硬件以及借助于适当编程的计算机来实现。在列举了若干装置的单元权利要求中,这些装置中的若干个可以是通过同一个硬件项来具体体现。单词第一、第二、以及第三等的使用不表示任何顺序。可将这些单词解释为名称。
本发明公开了A1、一种视频通话时进行互动的方法,应用在第一终端,所述方法包括:
与正在进行视频通话的第二终端展示同一目标事件;
接收所述第二终端的用户根据所展示的目标事件发出的互动信息;
根据所述互动信息调整所述目标事件的展示进度。
A2、根据A1所述的方法,其中,在所述与正在进行视频通话的第二终端展示同一目标事件之前,所述方法还包括:
通过识别用户语音或根据用户操作发起视频通话;
或,接收所述第二终端发起的视频通话。
A3、根据A1所述的方法,其中,所述与正在进行视频通话的第二终端展示同一目标事件包括:
展示所述第一终端的用户选择的目标事件,并提示所述第二终端展示同一目标事件。
A4、根据A3所述的方法,其中,所述提示所述第二终端展示同一目标事件包括:
将所述目标事件送至第二终端进行展示;
或,提取所述目标事件的事件标识传送至云端服务器,由所述云端服务器根据所述事件标识查找目标事件反馈至第二终端进行展示;
或,提取所述目标事件的事件标识传送至所述第二终端,由所述第二终端根据所述事件标识提取预存的目标事件并展示。
A5、根据A1所述的方法,其中,所述与正在进行视频通话的第二终端展示同一目标事件包括:
接收并展示所述第二终端根据用户的选择展示的目标事件;
或,接收所述第二终端根据用户的选择展示的目标事件的事件标识,根据所述事件标识查找所述目标事件并展示。
A6、根据A1所述的方法,其中,所述接收所述第二终端的用户根据所展示的目标事件发出的互动信息包括:
接收所述第二终端通知的片段标识,或接收所述第二终端的用户根据所述目标事件发出的通话视频,识别所述通话视频对应的通话音频所指示的片段标识;所述片段标识指示所述第二终端的用户当前发出的通话视频所针对的目标事件的事件内容;
所述根据所述互动信息调整所述目标事件的展示进度包括:
根据所述片段标识调整所述目标事件的展示进度,以实现以所述通话音频作为所述目标事件的事件配音。
A7、根据A1所述的方法,其中,所述接收所述第二终端的用户根据所展示的目标事件发出的互动信息包括:
接收所述第二终端的用户根据所述目标事件发出的通话视频,识别所述通话视频对应的通话音频对应的音频文字;
查找所述目标事件的文字素材中与所识别的音频文字匹配的位置;
所述根据所述互动信息调整所述目标事件的展示进度包括:
调整所述目标事件的展示进度至查找的所述文字素材的位置,以实现以所述通话音频作为所述目标事件的事件配音。
A8、根据A7所述的方法,其中,在所述识别所述通话视频对应的通话音频对应的音频文字之后,所述方法还包括:
将所识别的音频文字上传到云端服务器;
所述查找所述目标事件的文字素材中与所识别的音频文字匹配的位置包括:
接收云端服务器查找所述目标事件的文字素材中与所识别的音频文字匹配的位置。
A9、根据A1所述的方法,其中,所述接收所述第二终端的用户根据所展示的目标事件发出的互动信息包括:
接收所述第二终端的用户选择的目标事件的展示速度;
所述根据所述互动信息调整所述目标事件的展示进度包括:
根据所接收的展示速度控制所述第一终端对所述目标事件的展示进度,以实现以所述通话音频作为所述目标事件的事件配音。
A10、根据A1所述的方法,其中,所述方法还包括:
根据所述第一终端的用户的用户声音或用户图像识别用户方向;
调整所述第一终端采集所述通话视频的镜头方向指向所识别的用户方向。
A11、根据A10所述的方法,其中,所述第一终端由可转动的显示界面与支撑体构成,所述显示界面相对于所述支撑体可转动设定角度;
所述调整所述第一终端采集所述通话视频的镜头方向指向所识别的用户方向包括:
通过控制所述显示界面的转动角度以使所述显示界面上的镜头方向指向所识别的用户方向。
A12、根据A1所述的方法,其中,所述方法还包括:
根据所述第二终端的调整指示对所述第一终端的镜头方向进行调整。
A13、根据A1所述的方法,其中,所述方法还包括:
接收所述第二终端的用户的暂停操作;
根据所述第二终端的用户的暂停操作暂停所述目标事件的的展示。
A14、根据A1所述的方法,其中,所述与正在进行视频通话的第二终端展示同一目标事件包括:
在所述第一终端的显示界面中分区域展示所述目标事件以及所述视频通话的通话界面。
A15、根据A1所述的方法,其中,所述第一终端将所述目标事件展示为图片或视频,所述第二终端将所述目标事件展示为文字、图片或视频。
本发明还公开了B16、一种视频通话时进行互动的方法,其中,应用在第二终端,所述方法包括:
与正在进行视频通话的第一终端展示同一目标事件;
将所述第二终端的用户根据所展示的目标事件发出的互动信息发送至第一终端,以由所述第一终端根据互动信息调整所述目标事件的展示进度。
本发明还公开了C17、一种视频通话时进行互动的装置,其中,应用在第一终端,所述装置包括:
展示模块,用于与正在进行视频通话的第二终端展示同一目标事件;
接收模块,用于接收所述第二终端的用户根据所展示的目标事件发出的互动信息;
调整模块,用于根据所述互动信息调整所述目标事件的展示进度。
C18、根据C17所述的装置,其中,在所述与正在进行视频通话的第二终端展示同一目标事件之前,所述装置还包括:
视频请求发起模块,用于通过识别用户语音或根据用户操作发起视频通话;
或,视频请求接收模块,用于接收所述第二终端发起的视频通话。
C19、根据C17所述的装置,其中,所述展示模块包括:
第一展示子模块,用于展示所述第一终端的用户选择的目标事件,并提示所述第二终端展示同一目标事件。
C20、根据C19所述的装置,其中,所述第一展示子模块包括:
第一发送子单元,用于将所述目标事件送至第二终端进行展示;
或,第二发送子单元,用于提取所述目标事件的事件标识传送至云端服务器,由所述云端服务器根据所述事件标识查找目标事件反馈至第二终端进行展示;
或,第三发送子单元,用于提取所述目标事件的事件标识传送至所述第二终端,由所述第二终端根据所述事件标识提取预存的目标事件并展示。
C21、根据C17所述的装置,其中,所述展示模块包括:
第二展示子模块,用于接收并展示所述第二终端根据用户的选择展示的目标事件;
或,第三展示子模块,用于接收所述第二终端根据用户的选择展示的目标事件的事件标识,根据所述事件标识查找所述目标事件并展示。
C22、根据C17所述的装置,其中,所述接收模块包括:
标识识别子模块,用于接收所述第二终端通知的片段标识,或接收所述第二终端的用户根据所述目标事件发出的通话视频,识别所述通话视频对应的通话音频所指示的片段标识;所述片段标识指示所述第二终端的用户当前发出的通话视频所针对的目标事件的事件内容;
所述调整模块包括:
第一调整子模块,用于根据所述片段标识调整所述目标事件的展示进度,以实现以所述通话音频作为所述目标事件的事件配音。
C23、根据C17所述的装置,其中,所述接收模块包括:
文字识别子模块,用于接收所述第二终端的用户根据所述目标事件发出的通话视频,识别所述通话视频对应的通话音频对应的音频文字;
查找子模块,用于查找所述目标事件的文字素材中与所识别的音频文字匹配的位置;
所述调整模块包括:
第二调整子模块,用于调整所述目标事件的展示进度至查找的所述文字素材的位置,以实现以所述通话音频作为所述目标事件的事件配音。
C24、根据C23所述的装置,其中,在所述识别所述通话视频对应的通话音频对应的音频文字之后,所述装置还包括:
上传子模块,用于将所识别的音频文字上传到云端服务器;
所述查找子模块包括:
接收查找子单元,用于接收云端服务器查找所述目标事件的文字素材中与所识别的音频文字匹配的位置。
C25、根据C17所述的装置,其中,所述接收模块包括:
选择接收子模块,用于接收所述第二终端的用户选择的目标事件的展示速度;
所述调整模块包括:
速度控制子模块,用于根据所接收的展示速度控制所述第一终端对所述目标事件的展示进度,以实现以所述通话音频作为所述目标事件的事件配音。
C26、根据C17所述的装置,其中,所述装置还包括:
方向识别模块,用于根据所述第一终端的用户的用户声音或用户图像识别用户方向;
第一方向调整模块,用于调整所述第一终端采集所述通话视频的镜头方向指向所识别的用户方向。
C27、根据C26所述的装置,其中,所述第一终端由可转动的显示界面与支撑体构成,所述显示界面相对于所述支撑体可转动设定角度;
所述第一方向调整模块包括:
角度控制子模块,用于通过控制所述显示界面的转动角度以使所述显示界面上的镜头方向指向所识别的用户方向。
C28、根据C17所述的装置,其中,所述装置还包括:
第二方向调整模块,用于根据所述第二终端的调整指示对所述第一终端的镜头方向进行调整。
C29、根据C17所述的装置,其中,所述装置还包括:
暂停模块,用于接收所述第二终端的用户的暂停操作;根据所述第二终端的用户的暂停操作暂停所述目标事件的的展示。
C30、根据C17所述的装置,其中,所述展示模块包括:
分区展示子模块,用于在所述第一终端的显示界面中分区域展示所述目标事件以及所述视频通话的通话界面。
C31、根据C17所述的装置,其中,所述第一终端将所述目标事件展示为图片或视频,所述第二终端将所述目标事件展示为文字、图片或视频。
本发明还公开了D32、一种视频通话时进行互动的装置,其中,应用在第二终端,所述装置包括:
展示模块,用于与正在进行视频通话的第一终端展示同一目标事件;
视频发送模块,用于将所述第二终端的用户根据所展示的目标事件发出的互动信息发送至第一终端,以由所述第一终端根据互动信息调整所述目标事件的展示进度。
Claims (10)
1.一种视频通话时进行互动的方法,应用在第一终端,所述方法包括:
与正在进行视频通话的第二终端展示同一目标事件;
接收所述第二终端的用户根据所展示的目标事件发出的互动信息;
根据所述互动信息调整所述目标事件的展示进度。
2.根据权利要求1所述的方法,其中,在所述与正在进行视频通话的第二终端展示同一目标事件之前,所述方法还包括:
通过识别用户语音或根据用户操作发起视频通话;
或,接收所述第二终端发起的视频通话。
3.根据权利要求1所述的方法,其中,所述与正在进行视频通话的第二终端展示同一目标事件包括:
展示所述第一终端的用户选择的目标事件,并提示所述第二终端展示同一目标事件。
4.根据权利要求3所述的方法,其中,所述提示所述第二终端展示同一目标事件包括:
将所述目标事件送至第二终端进行展示;
或,提取所述目标事件的事件标识传送至云端服务器,由所述云端服务器根据所述事件标识查找目标事件反馈至第二终端进行展示;
或,提取所述目标事件的事件标识传送至所述第二终端,由所述第二终端根据所述事件标识提取预存的目标事件并展示。
5.根据权利要求1所述的方法,其中,所述与正在进行视频通话的第二终端展示同一目标事件包括:
接收并展示所述第二终端根据用户的选择展示的目标事件;
或,接收所述第二终端根据用户的选择展示的目标事件的事件标识,根据所述事件标识查找所述目标事件并展示。
6.根据权利要求1所述的方法,其中,所述接收所述第二终端的用户根据所展示的目标事件发出的互动信息包括:
接收所述第二终端通知的片段标识,或接收所述第二终端的用户根据所述目标事件发出的通话视频,识别所述通话视频对应的通话音频所指示的片段标识;所述片段标识指示所述第二终端的用户当前发出的通话视频所针对的目标事件的事件内容;
所述根据所述互动信息调整所述目标事件的展示进度包括:
根据所述片段标识调整所述目标事件的展示进度,以实现以所述通话音频作为所述目标事件的事件配音。
7.根据权利要求1所述的方法,其中,所述接收所述第二终端的用户根据所展示的目标事件发出的互动信息包括:
接收所述第二终端的用户根据所述目标事件发出的通话视频,识别所述通话视频对应的通话音频对应的音频文字;
查找所述目标事件的文字素材中与所识别的音频文字匹配的位置;
所述根据所述互动信息调整所述目标事件的展示进度包括:
调整所述目标事件的展示进度至查找的所述文字素材的位置,以实现以所述通话音频作为所述目标事件的事件配音。
8.一种视频通话时进行互动的方法,应用在第二终端,所述方法包括:
与正在进行视频通话的第一终端展示同一目标事件;
将所述第二终端的用户根据所展示的目标事件发出的互动信息发送至第一终端,以由所述第一终端根据互动信息调整所述目标事件的展示进度。
9.一种视频通话时进行互动的装置,应用在第一终端,所述装置包括:
展示模块,用于与正在进行视频通话的第二终端展示同一目标事件;
接收模块,用于接收所述第二终端的用户根据所展示的目标事件发出的互动信息;
调整模块,用于根据所述互动信息调整所述目标事件的展示进度。
10.一种视频通话时进行互动的装置,应用在第二终端,所述装置包括:
展示模块,用于与正在进行视频通话的第一终端展示同一目标事件;
视频发送模块,用于将所述第二终端的用户根据所展示的目标事件发出的互动信息发送至第一终端,以由所述第一终端根据互动信息调整所述目标事件的展示进度。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201610645911.9A CN106162037A (zh) | 2016-08-08 | 2016-08-08 | 一种视频通话时进行互动的方法和装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201610645911.9A CN106162037A (zh) | 2016-08-08 | 2016-08-08 | 一种视频通话时进行互动的方法和装置 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN106162037A true CN106162037A (zh) | 2016-11-23 |
Family
ID=57328927
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201610645911.9A Pending CN106162037A (zh) | 2016-08-08 | 2016-08-08 | 一种视频通话时进行互动的方法和装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN106162037A (zh) |
Cited By (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106791572A (zh) * | 2017-01-17 | 2017-05-31 | 维沃移动通信有限公司 | 一种视频通话方法、装置及系统 |
CN107135418A (zh) * | 2017-06-14 | 2017-09-05 | 北京易世纪教育科技有限公司 | 一种视频播放的控制方法及装置 |
WO2018108176A1 (zh) * | 2016-12-15 | 2018-06-21 | 北京奇虎科技有限公司 | 机器人视频通话控制方法、装置及终端 |
CN109089068A (zh) * | 2018-09-21 | 2018-12-25 | 上海赛连信息科技有限公司 | 一种可移动视频通话终端及控制方法 |
CN109191971A (zh) * | 2018-11-19 | 2019-01-11 | 哈尔滨学院 | 一种基于智能图像识别的学前教育互动系统 |
CN113852778A (zh) * | 2021-11-29 | 2021-12-28 | 见面(天津)网络科技有限公司 | 多人视频通话方法、装置、设备及存储介质 |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN203070150U (zh) * | 2012-11-16 | 2013-07-17 | 上海大学 | 一种基于人脸识别的显示器自动调节装置 |
CN103269346A (zh) * | 2013-06-04 | 2013-08-28 | 温才燚 | 一种用于教学的远程交互系统 |
US20140189589A1 (en) * | 2013-01-03 | 2014-07-03 | Samsung Electronics Co., Ltd. | Display apparatus and control method thereof |
CN104580992A (zh) * | 2014-12-31 | 2015-04-29 | 广东欧珀移动通信有限公司 | 一种控制方法及移动终端 |
CN104866208A (zh) * | 2014-02-21 | 2015-08-26 | 联想(北京)有限公司 | 信息处理方法和电子设备 |
CN104994921A (zh) * | 2013-01-07 | 2015-10-21 | 微软技术许可有限责任公司 | 用于分布式故事阅读的视觉内容修改 |
-
2016
- 2016-08-08 CN CN201610645911.9A patent/CN106162037A/zh active Pending
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN203070150U (zh) * | 2012-11-16 | 2013-07-17 | 上海大学 | 一种基于人脸识别的显示器自动调节装置 |
US20140189589A1 (en) * | 2013-01-03 | 2014-07-03 | Samsung Electronics Co., Ltd. | Display apparatus and control method thereof |
CN104994921A (zh) * | 2013-01-07 | 2015-10-21 | 微软技术许可有限责任公司 | 用于分布式故事阅读的视觉内容修改 |
CN103269346A (zh) * | 2013-06-04 | 2013-08-28 | 温才燚 | 一种用于教学的远程交互系统 |
CN104866208A (zh) * | 2014-02-21 | 2015-08-26 | 联想(北京)有限公司 | 信息处理方法和电子设备 |
CN104580992A (zh) * | 2014-12-31 | 2015-04-29 | 广东欧珀移动通信有限公司 | 一种控制方法及移动终端 |
Cited By (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2018108176A1 (zh) * | 2016-12-15 | 2018-06-21 | 北京奇虎科技有限公司 | 机器人视频通话控制方法、装置及终端 |
CN106791572A (zh) * | 2017-01-17 | 2017-05-31 | 维沃移动通信有限公司 | 一种视频通话方法、装置及系统 |
CN106791572B (zh) * | 2017-01-17 | 2018-09-04 | 维沃移动通信有限公司 | 一种视频通话方法、装置及系统 |
CN107135418A (zh) * | 2017-06-14 | 2017-09-05 | 北京易世纪教育科技有限公司 | 一种视频播放的控制方法及装置 |
CN109089068A (zh) * | 2018-09-21 | 2018-12-25 | 上海赛连信息科技有限公司 | 一种可移动视频通话终端及控制方法 |
CN109191971A (zh) * | 2018-11-19 | 2019-01-11 | 哈尔滨学院 | 一种基于智能图像识别的学前教育互动系统 |
CN113852778A (zh) * | 2021-11-29 | 2021-12-28 | 见面(天津)网络科技有限公司 | 多人视频通话方法、装置、设备及存储介质 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN106162037A (zh) | 一种视频通话时进行互动的方法和装置 | |
US10514885B2 (en) | Apparatus and method for controlling audio mixing in virtual reality environments | |
CN109167950B (zh) | 视频录制方法、视频播放方法、装置、设备及存储介质 | |
JP6317047B2 (ja) | インターフェース表示方法、装置、プログラム及び記録媒体 | |
US20190139312A1 (en) | An apparatus and associated methods | |
US20170026577A1 (en) | Apparatus for video output and associated methods | |
CN106571149A (zh) | 电子装置及电子装置的音乐内容可视化方法 | |
US11863856B2 (en) | Method and terminal device for matching photographed objects and preset text information | |
CN113518237B (zh) | 语音直播方法、装置、计算机设备及存储介质 | |
US12067053B2 (en) | Media file processing method, device, readable medium, and electronic apparatus | |
EP3299971A1 (en) | Method and system for remote management of location-based spatial object | |
CN111327916B (zh) | 基于地理对象的直播管理方法、装置、设备及存储介质 | |
KR20150045206A (ko) | 원격 제어 시스템, 모바일 디바이스 및 디지털 디바이스 제어 방법 | |
US20100275120A1 (en) | Processing of fields in motion picture videos or still photos | |
CN106101576A (zh) | 一种增强现实照片的拍摄方法、装置及移动终端 | |
CN104461219B (zh) | 信息处理设备及信息处理方法 | |
US20230008575A1 (en) | Relocation of content item to motion picture sequences at multiple devices | |
WO2022115743A1 (en) | Real world beacons indicating virtual locations | |
CN112100437A (zh) | 图像处理方法、装置、电子设备及计算机可读存储介质 | |
US11223925B2 (en) | Apparatus and associated methods for presentation of captured spatial audio content | |
CN113646747A (zh) | 连接计算设备软件集成系统和方法 | |
US11592977B2 (en) | Interactive media content platform | |
JP2021508193A5 (zh) | ||
US11950030B2 (en) | Electronic apparatus and method of controlling the same, and recording medium | |
US20230421866A1 (en) | Server apparatus of distribution system |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20161123 |
|
RJ01 | Rejection of invention patent application after publication |