CN115052181A - 分屏健身模式启动方法、装置、显示设备及可读存储介质 - Google Patents

分屏健身模式启动方法、装置、显示设备及可读存储介质 Download PDF

Info

Publication number
CN115052181A
CN115052181A CN202210810543.4A CN202210810543A CN115052181A CN 115052181 A CN115052181 A CN 115052181A CN 202210810543 A CN202210810543 A CN 202210810543A CN 115052181 A CN115052181 A CN 115052181A
Authority
CN
China
Prior art keywords
data
audio
screen
video data
split
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202210810543.4A
Other languages
English (en)
Inventor
孙思凯
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen Skyworth RGB Electronics Co Ltd
Original Assignee
Shenzhen Skyworth RGB Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen Skyworth RGB Electronics Co Ltd filed Critical Shenzhen Skyworth RGB Electronics Co Ltd
Priority to CN202210810543.4A priority Critical patent/CN115052181A/zh
Publication of CN115052181A publication Critical patent/CN115052181A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • H04N21/4344Remultiplexing of multiplex streams, e.g. by modifying time stamps or remapping the packet identifiers
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • H04N21/4341Demultiplexing of audio and video streams

Abstract

本申请公开了分屏健身模式启动方法、装置、显示设备及可读存储介质,应用于通信技术领域,所述分屏健身模式启动方法包括:获取移动端发送的音频流数据、视频流数据以及数据标识;将所述音频流数据解码为音频时间戳以及音频数据,将所述视频流数据解码为视频时间戳以及视频数据;根据所述音频时间戳以及所述视频时间戳将所述音频数据以及所述视频数据融合为音视频数据;若检测到所述数据标识为预设标识,则分屏播放所述音视频数据。本申请解决了现有技术中启动分屏模式便利性低的技术问题。

Description

分屏健身模式启动方法、装置、显示设备及可读存储介质
技术领域
本申请涉及通信技术领域,尤其涉及一种分屏健身模式启动方法、装置、显示设备及可读存储介质。
背景技术
随着通信技术的发展,无线投屏技术越来越成熟。Android操作系统提供了同操作系统设备之间的传屏支持,如手机端与电视端进行传屏操作,但就现在的传屏来说,仅能实现将一端的画面传输到另一端进行分屏显示,但随着用户需求的提升,目前的分屏功能比较单一,启动方式比较繁琐,影响启动分屏模式的便利性。
发明内容
本申请的主要目的在于提供一种分屏健身模式启动方法、装置、显示设备及可读存储介质,旨在解决现有技术中启动分屏模式便利性低的技术问题。
为实现上述目的,本申请提供一种分屏健身模式启动方法,所述分屏健身模式启动方法包括:
获取移动端发送的音频流数据、视频流数据以及数据标识;
将所述音频流数据解码为音频时间戳以及音频数据,将所述视频流数据解码为视频时间戳以及视频数据;
根据所述音频时间戳以及所述视频时间戳将所述音频数据以及所述视频数据融合为音视频数据;
若检测到所述数据标识为预设标识,则分屏播放所述音视频数据。
可选地,所述分屏播放所述音视频数据的步骤,包括:
获取分屏显示数据;
将显示设备的预设区域分割为第一显示区域以及第二显示区域;
在所述第一显示区域播放所述音视频数据,在所述第二显示区域播放所述分屏显示数据。
可选地,所述获取分屏显示数据的步骤,包括:
通过摄像设备录制用户视频数据;或
获取终端接收的源视频数据;
将所述用户视频数据或所述源视频数据作为分屏显示数据。
可选地,所述在所述第一显示区域播放所述音视频数据的步骤,还包括:
根据所述分屏显示数据以及所述音视频数据,确定基于所述音视频数据反馈的动作纠错信息;
将所述动作纠错信息与所述音视频数据融合,以在所述第一显示区域播放所述音视频数据以及所述动作纠错信息。
可选地,所述根据所述分屏显示数据以及所述音视频数据,确定基于所述音视频数据反馈的动作纠错信息的步骤,包括:
根据所述音视频数据获取标准动作信息,根据所述分屏显示数据获取用户动作信息;
将所述标准动作信息与所述用户动作信息进行动作对比,以得到动作对比结果;
根据所述动作对比结果确定动作纠错信息。
可选地,所述分屏健身模式启动方法还包括:
若不能获取到所述数据标识,则确定所述音频数据以及所述视频数据是否来源于同一应用程序;
若检测到所述音频数据以及所述视频数据来源于同一应用程序,则检测所述应用程序的应用类型;
将所述应用程序的应用类型作为所述音频数据以及所述视频数据对应的数据标识。
可选地,在所述检测所述应用程序的应用类型的步骤之后,所述分屏健身模式启动方法还包括:
若根据所述应用程序的应用类型不能确定所述数据标识,则对所述音频数据或所述视频数据进行特征识别,以确定所述音频数据或所述视频数据中是否存在所述预设标识的相关特征;
若在所述音频数据或所述视频数据中识别到所述预设标识的相关特征,则将健身作为所述音频数据以及所述视频数据对应的数据标识。
为实现上述目的,本申请还提供一种分屏健身模式启动装置,所述分屏健身模式启动装置包括:
数据获取模块,用于获取音频流数据、视频流数据以及数据标识;
数据解码模块,用于将所述音频流数据解码为音频时间戳以及音频数据,将所述视频流数据解码为视频时间戳以及视频数据;
数据合成模块,用于根据所述音频时间戳以及所述视频时间戳将所述音频数据以及所述视频数据融合为音视频数据;
分屏播放模块,用于若检测到所述数据标识为预设标识,则分屏播放所述音视频数据。
可选地,所述分屏播放模块还用于:
获取分屏显示数据;
将显示设备的预设区域分割为第一显示区域以及第二显示区域;
在所述第一显示区域播放所述音视频数据,在所述第二显示区域播放所述分屏显示数据。
可选地,所述分屏播放模块还用于:
通过摄像设备录制用户视频数据;或
获取终端接收的源视频数据;
将所述用户视频数据或所述源视频数据作为分屏显示数据。
可选地,所述分屏播放模块还用于:
根据所述分屏显示数据以及所述音视频数据,确定基于所述音视频数据反馈的动作纠错信息;
将所述动作纠错信息与所述音视频数据融合,以在所述第一显示区域播放所述音视频数据以及所述动作纠错信息。
可选地,所述分屏播放模块还用于:
根据所述音视频数据获取标准动作信息,根据所述分屏显示数据获取用户动作信息;
将所述标准动作信息与所述用户动作信息进行动作对比,以得到动作对比结果;
根据所述动作对比结果确定动作纠错信息。
可选地,所述分屏健身模式启动装置还用于:
若不能获取到所述数据标识,则确定所述音频数据以及所述视频数据是否来源于同一应用程序;
若检测到所述音频数据以及所述视频数据来源于同一应用程序,则检测所述应用程序的应用类型;
将所述应用程序的应用类型作为所述音频数据以及所述视频数据对应的数据标识。
可选地,所述分屏健身模式启动装置还用于:
若根据所述应用程序的应用类型不能确定所述数据标识,则对所述音频数据或所述视频数据进行特征识别,以确定所述音频数据或所述视频数据中是否存在所述预设标识的相关特征;
若在所述音频数据或所述视频数据中识别到所述预设标识的相关特征,则将健身作为所述音频数据以及所述视频数据对应的数据标识。
本申请还提供一种显示设备,所述显示设备包括:存储器、处理器以及存储在所述存储器上并可在所述处理器上运行的所述分屏健身模式启动方法的程序,所述分屏健身模式启动方法的程序被处理器执行时可实现如上述的分屏健身模式启动方法的步骤。
本申请还提供一种可读存储介质,所述可读存储介质为计算机可读存储介质,所述计算机可读存储介质上存储有实现分屏健身模式启动方法的程序,所述分屏健身模式启动方法的程序被处理器执行时实现如上述的分屏健身模式启动方法的步骤。
本申请还提供一种计算机程序产品,包括计算机程序,所述计算机程序被处理器执行时实现如上述的分屏健身模式启动方法的步骤。
本申请提供了一种分屏健身模式启动方法、装置、显示设备及可读存储介质,也即,获取移动端发送的音频流数据、视频流数据以及数据标识;将所述音频流数据解码为音频时间戳以及音频数据,将所述视频流数据解码为视频时间戳以及视频数据;根据所述音频时间戳以及所述视频时间戳将所述音频数据以及所述视频数据融合为音视频数据;若检测到所述数据标识为预设标识,则分屏播放所述音视频数据,在检测到用户端需要投屏的数据标签为健身后,自动启动分屏功能,并开启终端的健身模式,通过主动判断接收到的数据标签,触发分屏功能,自动开启终端的健身模式,提高了启动分屏健身模式的便利性。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分,示出了符合本申请的实施例,并与说明书一起用于解释本申请的原理。
为了更清楚地说明本申请实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,对于本领域普通技术人员而言,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1为本申请分屏健身模式启动方法第一实施例的流程示意图;
图2为本申请分屏健身模式启动方法的通讯过程示意图;
图3为本申请分屏健身模式启动方法第二实施例的流程示意图;
图4为本申请分屏健身模式启动方法的结构关系示意图;
图5为本申请实施例中分屏健身模式启动方法涉及的硬件运行环境的设备结构示意图。
本申请目的实现、功能特点及优点将结合实施例,参照附图做进一步说明。
具体实施方式
为使本发明的上述目的、特征和优点能够更加明显易懂,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述。显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动的前提下所获得的所有其它实施例,均属于本发明保护的范围。
实施例一
本申请实施例提供一种分屏健身模式启动方法,在本申请分屏健身模式启动的第一实施例中,参照图1,所述分屏健身模式启动方法包括:
步骤S10,获取移动端发送的音频流数据、视频流数据以及数据标识;
步骤S20,将所述音频流数据解码为音频时间戳以及音频数据,将所述视频流数据解码为视频时间戳以及视频数据;
步骤S30,根据所述音频时间戳以及所述视频时间戳将所述音频数据以及所述视频数据融合为音视频数据;
步骤S40,若检测到所述数据标识为预设标识,则分屏播放所述音视频数据。
在本实施例中,需要说明的是,如图2所示,所述音频流数据以及视频流数据可以通过其他电子设备获得,例如可以通过电视端以及移动端之间传输获得,所述移动端与所述电视端可以通过socket通信进行视频流数据以及音频流数据的传输,所述socket通信是在双方建立起连接后就可以直接进行数据的传输,在连接时可实现信息的主动推送,而不需要每次由客户端向服务器发送请求,所述数据标识通过cmd通路进行传输;所述数据标识可以为为移动端发送的一个label信息,可以是移动端通过对应应用类型获取到,也可以是移动端通过识别音频和视频内容得到,所述预设标识可以为健身类型标识,所述音频流数据和视频流数据通常为其他设备应用程序上录制的数据。所述音频数据的编码方式是Acc编码,所述视频数据的编码方式可以为H264编码,所述数据标识通常通过音频数据和视频数据来源的数据标识确定,此外,也可以通过识别音频内容和视频内容来确定。
示例性的,步骤S10至步骤S40包括:
接收移动端通过socket发送的音频流数据以及视频流数据,同时获取移动端发送的音频流数据、视频流数据对应的数据标识,将收到的音频流数据和视频流数据解码,得到解码后的音频数据、音频时间戳、视频数据以及视频时间戳,根据音频时间戳和视频时间戳确定共同时间点,依据共同时间点将音频数据以及视频数据合成为音视频数据;若检测到接收到的所述数据标识为预设标识,则启动健身模式,可以打开终端的摄像头录制当前屏幕面前的画面帧数据,将画面帧数据和音视频数据分屏显示在设备上。
此外,可以通过打开3D摄像头收集当前屏幕前用户的动作信息,在进行对比预览的同时,将需要显示的分屏数据在屏幕右边展示,将音视频数据/投屏内容在左边展示,通过左右对比可以对用户进行动作纠正,对动作信息进行识别,与视频数据进行对比,得到对比结果通过音频数据或者/视频数据显示出来,实现智能对用户动作进行自动纠错。
在步骤S40中,所述在所述屏幕上分屏播放所述画面帧数据以及所述音视频数据以启动健身模式的步骤,包括:
步骤S41,获取分屏显示数据;
步骤S42,将显示设备的预设区域分割为第一显示区域以及第二显示区域;
步骤S43,在所述第一显示区域播放所述音视频数据,在所述第二显示区域播放所述分屏显示数据。
在本实施例中,需要说明的是,所述分屏显示数据为需要与音视频数据同时播放的其它视频数据,所述第一显示区域以及所述第二显示区域都在所述电视端的屏幕内,不作范围大小的限定,用来同时分屏播放所述分屏显示数据以及所述音视频数据,所述分屏显示数据可以为电视端上的摄像头录制的屏幕前用户的画面,通常为用户正在健身的动作,也可以为需要电视端同时播放的其它电视节目。
示例性的,步骤S41至步骤S43包括:
获取分屏显示数据,将显示设备的屏幕分割为第一显示区域以及第二显示区域两部分,以同时在屏幕上分屏显示分屏显示数据以及音视频数据,在第一显示区域播放音视频数据,在第二显示区域播放分屏显示数据,启动电视端上预设的健身模式并将分屏显示数据进行对比,从而纠正用户的健身动作,实现了分屏播放以及以及识别交互。
在步骤S40前,在所述分屏播放所述音视频数据的步骤之前,所述分屏健身模式启动方法还包括:
步骤A10,通过摄像设备录制用户视频数据;或
步骤A20,获取终端接收的源视频数据;
步骤A30,将所述用户视频数据或所述源视频数据作为分屏显示数据。
在本实施例中,需要说明的是,所述用户视频数据可以为电视端上的摄像头录制的屏幕前用户的画面视频数据,通常录制用户正在健身的动作,所述源视频数据可以为用户同时观看的其它电视节目等视频。
示例性的,步骤A10至步骤A30包括:
通过摄像设备录制用户视频数据,或者获取终端接收的源视频数据;将所述用户视频数据或所述源视频数据作为分屏显示数据,使终端可以在健身模式分屏下同时播放音视频数据和想要播放的其他视频。
在步骤S43中,所述在所述第一显示区域播放所述音视频数据的步骤,还包括:
步骤B10,根据所述分屏显示数据以及所述音视频数据,确定基于所述音视频数据反馈的动作纠错信息;
步骤B20,将所述动作纠错信息与所述音视频数据融合,以在所述第一显示区域播放所述音视频数据以及所述动作纠错信息。
在本实施例中,需要说明的是,所述动作纠错信息通过接收的用户视频数据对比得到,所述动作纠错信息是将用户视频数据与具有标准动作的视频数据进行对比,以确定用户的健身动作上的错误,所述动作纠错信息可以是语音提示信息也可以是在屏幕上可视的提示信息。
示例性的,步骤B10至步骤B20包括:
启动终端上预设的健身模式并将用户视频数据与标准动作进行对比,确定基于所述音视频视频数据反馈的动作纠错信息,将动作纠错信息与音视频数据合成,在下一时间步的音视频数据播放时,将动作纠错信息同步的在第一显示区域显示出来。
具体的,首次应用本申请实施例的分屏健身模式启动方法,显示了首次的画面帧数据以及音视频数据,在分屏播放的同时将画面帧数据传回移动端进行动作识别,得到动作纠错信息,将动作纠错信息同第二次得到的画面帧数据以及音视频数据融合,并同步播放。
在步骤B10中,所述根据所述分屏显示数据以及所述音视频数据,确定基于所述音视频数据反馈的动作纠错信息的步骤,包括:
步骤B11,根据所述音视频数据获取标准动作信息,根据所述分屏显示数据获取用户动作信息;
步骤B12,将所述标准动作信息与所述用户动作信息进行动作对比,以得到动作对比结果;
步骤B13,根据所述动作对比结果确定动作纠错信息。
在本实施例中,需要说明的是,所述音视频数据中为健身类应用所播放的标准动作的视频,而所述分屏显示数据为录制的用户的健身动作视频,可以提取出用户动作信息,将所述音视频数据中识别的标准动作信息与所述用户动作信息进行动作对比,可以检测出用户的健身动作是否与标准动作存在差异,所述动作纠错信息是根据所述动作对比结果确定的纠错信息,可以在终端同步展示,通过动作识别可以纠正用户的健身动作,在分屏投屏的功能上新增了具有交互性的功能,提高了传屏的交互性。
示例性的,步骤B11至步骤B13包括:
根据音视频数据获取标准动作信息,根据分屏显示数据获取用户动作信息,将标准动作信息与用户动作信息进行动作对比识别,检测画面帧数据中的动作与视频数据中的动作的差异,以得到动作对比结果,根据动作对比结果确定动作纠错信息,在下一时间步的数据传输中,将动作纠错信息在显示设备上播放。
本申请实施例提供了一种分屏健身模式启动方法,也即,获取移动端发送的音频流数据、视频流数据以及数据标识;将所述音频流数据解码为音频时间戳以及音频数据,将所述视频流数据解码为视频时间戳以及视频数据;根据所述音频时间戳以及所述视频时间戳将所述音频数据以及所述视频数据融合为音视频数据;若检测到所述数据标识为预设标识,则分屏播放所述音视频数据,在检测到用户端需要投屏的数据标签为健身后,自动启动分屏功能,并开启终端的健身模式,通过主动判断接收到的数据标签,触发分屏功能,自动开启终端的健身模式,提高了启动分屏健身模式的便利性。
实施例二
进一步地,参照图3,基于本申请第一实施例,在本申请另一实施例中,与上述实施例一相同或相似的内容,可以参考上文介绍,后续不再赘述。在此基础上,所述分屏健身模式启动方法还包括:
步骤C10,若不能获取到所述数据标识,则确定所述音频数据以及所述视频数据是否来源于同一应用程序;
步骤C20,若检测到所述音频数据以及所述视频数据来源于同一应用程序,则检测所述应用程序的应用类型;
步骤C30,将所述应用程序的应用类型作为所述音频数据以及所述视频数据对应的数据标识。
在本实施例中,需要说明的是,所述应用程序为播放所述音频数据和所述视频数据所在应用程序,例如,在某健身软件中播放的健身类音频数据以及健身数据,其应用程序是某健身软件;所述应用类型为通过识别所述应用程序得到的类型,在应用程序下载时可以获得应用的类型,也可以通过音频数据以及视频数据连接确定应用程序的类型;所述数据标识对应应用类型,一款软件为健身软件,它的数据标识为健身。
示例性的,步骤C10至步骤C30包括:
若不能成功获取到数据标识,则确定所述音频数据以及所述视频数据是否来源于同一应用程序,通过下载链接或者播放链接确定应用程序的应用类型,将应用程序的应用类型作为音频数据和视频数据对应的数据标识,确定音频数据和视频数据的数据标识,以便通过判断是否为健身的数据标识启动分屏健身模式。
在步骤C20中,在所述检测所述应用程序的应用类型的步骤之后,所述分屏健身模式启动方法还包括:
步骤C21,若根据所述应用程序的应用类型不能确定所述数据标识,则对所述音频数据或所述视频数据进行特征识别,以确定所述音频数据或所述视频数据中是否存在所述预设标识的相关特征;
步骤C22,若在所述音频数据或所述视频数据中识别到所述预设标识的相关特征,则将健身作为所述音频数据以及所述视频数据对应的数据标识。
在本实施例中,需要说明的是,所述特征识别是在所述音频数据或所述视频数据中检测是否存在健身相关的信息,例如在音频数据中出现“健身方法”等类似字眼,或者在视频数据中检测到有人在做健身动作、有人穿着健身专用服装等情况,以确定健身相关特征。
示例性的,步骤C21至步骤C22包括:
若已经通过数据标识确定音频数据以及视频数据的应用程序为健身类应用,则可以直接确定是健身相关的音频数据和视频数据;若根据所述应用程序的应用类型不能确定数据标识,则需要对音频数据或视频数据进行特征识别,以确定音频数据或视频数据中是否存在健身相关特征;若识别成功,在音频数据或视频数据中识别到存在健身相关特征,则将健身作为音频数据以及健身数据对应的数据标识。在直接通过应用程序类型确定数据标识的途径之外,提供更加丰富的方法来确定音频数据以及视频数据的数据标识。
本申请实施例提供了一种数据标识识别方法,也即,若不能获取到所述数据标识,则确定所述音频数据以及所述视频数据是否来源于同一应用程序;若检测到所述音频数据以及所述视频数据来源于同一应用程序,则检测所述应用程序的应用类型;将所述应用程序的应用类型作为所述音频数据以及所述视频数据对应的数据标识。实现了通过检测音频数据以及视频数据的来源应用程序,确定音频数据以及视频数据的数据标识,以通过健身的数据标识驱动电视端启动分屏健身模式,提升了启动分屏健身模式的便利性。
实施例三
本申请实施例还提供一种如图4所示的分屏健身模式启动装置,所述分屏健身模式启动装置包括:
数据获取模块,用于获取音频流数据、视频流数据以及数据标识;
数据解码模块,用于将所述音频流数据解码为音频时间戳以及音频数据,将所述视频流数据解码为视频时间戳以及视频数据;
数据合成模块,用于根据所述音频时间戳以及所述视频时间戳将所述音频数据以及所述视频数据融合为音视频数据;
分屏播放模块,用于若检测到所述数据标识为预设标识,则分屏播放所述音视频数据。
可选地,所述分屏播放模块还用于:
获取分屏显示数据;
将显示设备的预设区域分割为第一显示区域以及第二显示区域;
在所述第一显示区域播放所述音视频数据,在所述第二显示区域播放所述分屏显示数据。
可选地,所述分屏播放模块还用于:
通过摄像设备录制用户视频数据;或
获取终端接收的源视频数据;
将所述用户视频数据或所述源视频数据作为分屏显示数据。
可选地,所述分屏播放模块还用于:
根据所述分屏显示数据以及所述音视频数据,确定基于所述音视频数据反馈的动作纠错信息;
将所述动作纠错信息与所述音视频数据融合,以在所述第一显示区域播放所述音视频数据以及所述动作纠错信息。
可选地,所述分屏播放模块还用于:
根据所述音视频数据获取标准动作信息,根据所述分屏显示数据获取用户动作信息;
将所述标准动作信息与所述用户动作信息进行动作对比,以得到动作对比结果;
根据所述动作对比结果确定动作纠错信息。
可选地,所述分屏健身模式启动装置还用于:
若不能获取到所述数据标识,则确定所述音频数据以及所述视频数据是否来源于同一应用程序;
若检测到所述音频数据以及所述视频数据来源于同一应用程序,则检测所述应用程序的应用类型;
将所述应用程序的应用类型作为所述音频数据以及所述视频数据对应的数据标识。
可选地,所述分屏健身模式启动装置还用于:
若根据所述应用程序的应用类型不能确定所述数据标识,则对所述音频数据或所述视频数据进行特征识别,以确定所述音频数据或所述视频数据中是否存在所述预设标识的相关特征;
若在所述音频数据或所述视频数据中识别到所述预设标识的相关特征,则将健身作为所述音频数据以及所述视频数据对应的数据标识。
本发明提供的分屏健身模式启动装置,采用上述实施例一或实施例二中的分屏健身模式启动方法,解决了启动分屏模式便利性低的技术问题。与现有技术相比,本发明实施例提供的分屏健身模式启动装置的有益效果与上述实施例提供的分屏健身模式启动方法的有益效果相同,且该分屏健身模式启动装置中的其他技术特征与上述实施例方法公开的特征相同,在此不做赘述。
实施例四
本发明实施例提供一种显示设备,显示设备包括:至少一个处理器;以及,与至少一个处理器通信连接的存储器;其中,存储器存储有可被至少一个处理器执行的指令,指令被至少一个处理器执行,以使至少一个处理器能够执行上述实施例一或实施例二中的分屏健身模式启动方法。
下面参考图5,其示出了适于用来实现本公开实施例的显示设备的结构示意图。本公开实施例中的显示设备可以包括但不限于诸如移动电话、笔记本电脑、数字广播接收器、PDA(个人数字助理)、PAD(平板电脑)、PMP(便携式多媒体播放器)、车载终端(例如车载导航终端)等等的移动终端以及诸如数字TV、台式计算机等等的固定终端。图5示出的显示设备仅仅是一个示例,不应对本公开实施例的功能和使用范围带来任何限制。
如图5所示,显示设备可以包括处理装置(例如中央处理器、图形处理器等),其可以根据存储在只读存储器(ROM)中的程序或者从存储装置加载到随机访问存储器(RAM)中的程序而执行各种适当的动作和处理。在RAM中,还存储有显示设备操作所需的各种程序和数据。处理装置、ROM以及RAM通过总线彼此相连。输入/输出(I/O)接口也连接至总线。
通常,以下系统可以连接至I/O接口:包括例如触摸屏、触摸板、键盘、鼠标、图像传感器、麦克风、加速度计、陀螺仪等的输入装置;包括例如液晶显示器(LCD)、扬声器、振动器等的输出装置;包括例如磁带、硬盘等的存储装置;以及通信装置。通信装置可以允许显示设备与其他设备进行无线或有线通信以交换数据。虽然图中示出了具有各种系统的显示设备,但是应理解的是,并不要求实施或具备所有示出的系统。可以替代地实施或具备更多或更少的系统。
特别地,根据本公开的实施例,上文参考流程图描述的过程可以被实现为计算机软件程序。例如,本公开的实施例包括一种计算机程序产品,其包括承载在计算机可读介质上的计算机程序,该计算机程序包含用于执行流程图所示的方法的程序代码。在这样的实施例中,该计算机程序可以通过通信装置从网络上被下载和安装,或者从存储装置被安装,或者从ROM被安装。在该计算机程序被处理装置执行时,执行本公开实施例的方法中限定的上述功能。
本发明提供的显示设备,采用上述实施例一或实施例二中的分屏健身模式启动方法,解决了启动分屏模式便利性低的技术问题。与现有技术相比,本发明实施例提供的显示设备的有益效果与上述实施例一提供的分屏健身模式启动方法的有益效果相同,且该显示设备中的其他技术特征与上述实施例方法公开的特征相同,在此不做赘述。
应当理解,本公开的各部分可以用硬件、软件、固件或它们的组合来实现。在上述实施方式的描述中,具体特征、结构、材料或者特点可以在任何的一个或多个实施例或示例中以合适的方式结合。
以上所述,仅为本发明的具体实施方式,但本发明的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本发明揭露的技术范围内,可轻易想到变化或替换,都应涵盖在本发明的保护范围之内。因此,本发明的保护范围应以所述权利要求的保护范围为准。
实施例五
本实施例提供一种计算机可读存储介质,具有存储在其上的计算机可读程序指令,计算机可读程序指令用于执行上述实施例一或实施例二中的分屏健身模式启动的方法。
本发明实施例提供的计算机可读存储介质例如可以是U盘,但不限于电、磁、光、电磁、红外线、或半导体的系统、系统或器件,或者任意以上的组合。计算机可读存储介质的更具体的例子可以包括但不限于:具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机访问存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本实施例中,计算机可读存储介质可以是任何包含或存储程序的有形介质,该程序可以被指令执行系统、系统或者器件使用或者与其结合使用。计算机可读存储介质上包含的程序代码可以用任何适当的介质传输,包括但不限于:电线、光缆、RF(射频)等等,或者上述的任意合适的组合。
上述计算机可读存储介质可以是显示设备中所包含的;也可以是单独存在,而未装配入显示设备中。
上述计算机可读存储介质承载有一个或者多个程序,当上述一个或者多个程序被显示设备执行时,使得显示设备:获取移动端发送的音频流数据、视频流数据以及数据标识;将所述音频流数据解码为音频时间戳以及音频数据,将所述视频流数据解码为视频时间戳以及视频数据;根据所述音频时间戳以及所述视频时间戳将所述音频数据以及所述视频数据融合为音视频数据;若检测到所述数据标识为预设标识,则分屏播放所述音视频数据。
可以以一种或多种程序设计语言或其组合来编写用于执行本公开的操作的计算机程序代码,上述程序设计语言包括面向对象的程序设计语言—诸如Java、Smalltalk、C++,还包括常规的过程式程序设计语言—诸如“C”语言或类似的程序设计语言。程序代码可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或服务器上执行。在涉及远程计算机的情形中,远程计算机可以通过任意种类的网络——包括局域网(LAN)或广域网(WAN)—连接到用户计算机,或者,可以连接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。
附图中的流程图和框图,图示了按照本发明各种实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分,该模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意,在有些作为替换的实现中,方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如,两个接连地表示的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这依所涉及的功能而定。也要注意的是,框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合,可以用执行规定的功能或操作的专用的基于硬件的系统来实现,或者可以用专用硬件与计算机指令的组合来实现。
描述于本公开实施例中所涉及到的模块可以通过软件的方式实现,也可以通过硬件的方式来实现。其中,模块的名称在某种情况下并不构成对该单元本身的限定。
本发明提供的计算机可读存储介质,存储有用于执行上述分屏健身模式启动方法的计算机可读程序指令,解决了启动分屏模式便利性低的技术问题。与现有技术相比,本发明实施例提供的计算机可读存储介质的有益效果与上述实施例一或实施例二提供的分屏健身模式启动方法的有益效果相同,在此不做赘述。
实施例六
本申请还提供一种计算机程序产品,包括计算机程序,所述计算机程序被处理器执行时实现如上述的分屏健身模式启动方法的步骤。
本申请提供的计算机程序产品解决了启动分屏模式便利性低的技术问题。与现有技术相比,本发明实施例提供的计算机程序产品的有益效果与上述实施例一或实施例二提供的分屏健身模式启动方法的有益效果相同,在此不做赘述。
以上仅为本申请的优选实施例,并非因此限制本申请的专利范围,凡是利用本申请说明书及附图内容所作的等效结构或等效流程变换,或直接或间接运用在其他相关的技术领域,均同理包括在本申请的专利处理范围内。

Claims (10)

1.一种分屏健身模式启动方法,其特征在于,所述分屏健身模式启动方法包括:
获取音频流数据、视频流数据以及数据标识;
将所述音频流数据解码为音频时间戳以及音频数据,将所述视频流数据解码为视频时间戳以及视频数据;
根据所述音频时间戳以及所述视频时间戳将所述音频数据以及所述视频数据融合为音视频数据;
若检测到所述数据标识为预设标识,则分屏播放所述音视频数据。
2.如权利要求1所述的分屏健身模式启动方法,其特征在于,所述分屏播放所述音视频数据的步骤,包括:
获取分屏显示数据;
将显示设备的预设区域分割为第一显示区域以及第二显示区域;
在所述第一显示区域播放所述音视频数据,在所述第二显示区域播放所述分屏显示数据。
3.如权利要求2所述的分屏健身模式启动方法,其特征在于,所述获取分屏显示数据的步骤,包括:
通过摄像设备录制用户视频数据;或
获取终端接收的源视频数据;
将所述用户视频数据或所述源视频数据作为分屏显示数据。
4.如权利要求2所述的分屏健身模式启动方法,其特征在于,所述在所述第一显示区域播放所述音视频数据的步骤,还包括:
根据所述分屏显示数据以及所述音视频数据,确定基于所述音视频数据反馈的动作纠错信息;
将所述动作纠错信息与所述音视频数据融合,以在所述第一显示区域播放所述音视频数据以及所述动作纠错信息。
5.如权利要求4所述的分屏健身模式启动方法,其特征在于,所述根据所述分屏显示数据以及所述音视频数据,确定基于所述音视频数据反馈的动作纠错信息的步骤,包括:
根据所述音视频数据获取标准动作信息,根据所述分屏显示数据获取用户动作信息;
将所述标准动作信息与所述用户动作信息进行动作对比,以得到动作对比结果;
根据所述动作对比结果确定动作纠错信息。
6.如权利要求1所述的分屏健身模式启动方法,其特征在于,所述分屏健身模式启动方法还包括:
若不能获取到所述数据标识,则确定所述音频数据以及所述视频数据是否来源于同一应用程序;
若检测到所述音频数据以及所述视频数据来源于同一应用程序,则检测所述应用程序的应用类型;
将所述应用程序的应用类型作为所述音频数据以及所述视频数据对应的数据标识。
7.如权利要求6所述的分屏健身模式启动方法,其特征在于,在所述检测所述应用程序的应用类型的步骤之后,所述分屏健身模式启动方法还包括:
若根据所述应用程序的应用类型不能确定所述数据标识,则对所述音频数据或所述视频数据进行特征识别,以确定所述音频数据或所述视频数据中是否存在所述预设标识的相关特征;
若在所述音频数据或所述视频数据中识别到所述预设标识的相关特征,则将健身作为所述音频数据以及所述视频数据对应的数据标识。
8.一种分屏健身模式启动装置,其特征在于,所述分屏健身模式启动装置包括:
数据获取模块,用于获取音频流数据、视频流数据以及数据标识;
数据解码模块,用于将所述音频流数据解码为音频时间戳以及音频数据,将所述视频流数据解码为视频时间戳以及视频数据;
数据合成模块,用于根据所述音频时间戳以及所述视频时间戳将所述音频数据以及所述视频数据融合为音视频数据;
分屏播放模块,用于若检测到所述数据标识为预设标识,则分屏播放所述音视频数据。
9.一种显示设备,其特征在于,所述显示设备包括:
至少一个处理器;以及,
与所述至少一个处理器通信连接的存储器;其中,
所述存储器存储有可被所述至少一个处理器执行的指令,所述指令被所述至少一个处理器执行,以使所述至少一个处理器能够执行权利要求1至7中任一项所述的分屏健身模式启动方法的步骤。
10.一种可读存储介质,其特征在于,所述可读存储介质上存储有实现分屏健身模式启动方法的程序,所述实现分屏健身模式启动方法的程序被处理器执行以实现如权利要求1至7中任一项所述分屏健身模式启动方法的步骤。
CN202210810543.4A 2022-07-11 2022-07-11 分屏健身模式启动方法、装置、显示设备及可读存储介质 Pending CN115052181A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202210810543.4A CN115052181A (zh) 2022-07-11 2022-07-11 分屏健身模式启动方法、装置、显示设备及可读存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210810543.4A CN115052181A (zh) 2022-07-11 2022-07-11 分屏健身模式启动方法、装置、显示设备及可读存储介质

Publications (1)

Publication Number Publication Date
CN115052181A true CN115052181A (zh) 2022-09-13

Family

ID=83165433

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210810543.4A Pending CN115052181A (zh) 2022-07-11 2022-07-11 分屏健身模式启动方法、装置、显示设备及可读存储介质

Country Status (1)

Country Link
CN (1) CN115052181A (zh)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20160121161A1 (en) * 2014-10-30 2016-05-05 Echostar Uk Holdings Limited Fitness overlay and incorporation for home automation system
CN106139564A (zh) * 2016-08-01 2016-11-23 纳恩博(北京)科技有限公司 图像处理方法和装置
CN112328831A (zh) * 2020-07-23 2021-02-05 深圳Tcl新技术有限公司 基于智能电视的健身交互方法、终端设备及可读存储介质
CN112348942A (zh) * 2020-09-18 2021-02-09 当趣网络科技(杭州)有限公司 一种健身交互方法和系统
CN113633956A (zh) * 2018-05-29 2021-11-12 库里欧瑟产品公司 用于交互式训练和演示的反射视频显示设备及其使用方法

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20160121161A1 (en) * 2014-10-30 2016-05-05 Echostar Uk Holdings Limited Fitness overlay and incorporation for home automation system
CN106139564A (zh) * 2016-08-01 2016-11-23 纳恩博(北京)科技有限公司 图像处理方法和装置
CN113633956A (zh) * 2018-05-29 2021-11-12 库里欧瑟产品公司 用于交互式训练和演示的反射视频显示设备及其使用方法
CN112328831A (zh) * 2020-07-23 2021-02-05 深圳Tcl新技术有限公司 基于智能电视的健身交互方法、终端设备及可读存储介质
CN112348942A (zh) * 2020-09-18 2021-02-09 当趣网络科技(杭州)有限公司 一种健身交互方法和系统

Similar Documents

Publication Publication Date Title
CN111930973B (zh) 多媒体数据的播放方法、装置、电子设备及存储介质
EP3316582B1 (en) Multimedia information processing method and system, standardized server and live broadcast terminal
WO2022042389A1 (zh) 搜索结果的展示方法、装置、可读介质和电子设备
CN109600656B (zh) 一种视频榜单显示方法、装置,终端设备及存储介质
CN108124172B (zh) 云投影的方法、装置及系统
CN112533014B (zh) 视频直播中目标物品信息处理和显示方法、装置及设备
CN104918136A (zh) 视频定位方法和装置
CN109462779B (zh) 视频预览信息的播放控制方法、应用客户端及电子设备
US11706465B2 (en) ATSC 3.0 advertising notification using event streams
CN112165652B (zh) 视频处理方法、装置、设备及计算机可读存储介质
CN109618216B (zh) 显示视频加载状态标识的方法、装置、设备及存储介质
CN105704508A (zh) 一种视频合并方法及装置
CN113630614A (zh) 游戏直播方法、装置、系统、电子设备及可读存储介质
CN111246245A (zh) 视频聚合页面的推送方法、装置,服务器及终端设备
CN112738620A (zh) 一种媒体资源投屏方法、设备及系统
CN114257572A (zh) 数据处理方法、装置、计算机可读介质及电子设备
KR20150073573A (ko) 미러링 화면에 관련된 콘텐츠 출력 방법 및 그 장치
CN115052181A (zh) 分屏健身模式启动方法、装置、显示设备及可读存储介质
WO2022218109A1 (zh) 交互方法, 装置, 电子设备及计算机可读存储介质
CN114567809A (zh) 投屏控制方法、装置、电子设备及可读存储介质
CN116156077A (zh) 用于多媒体资源剪辑场景的方法、装置、设备及存储介质
CN110140357B (zh) 用于播放代用广告的电子装置及其控制方法
CN114501041B (zh) 特效显示方法、装置、设备及存储介质
CN115065852B (zh) 音画同步方法、装置、电子设备及可读存储介质
KR102157397B1 (ko) 콘텐츠 재생 방법 및 그 장치

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination