CN114245210B - 视频播放方法、装置、设备以及存储介质 - Google Patents

视频播放方法、装置、设备以及存储介质 Download PDF

Info

Publication number
CN114245210B
CN114245210B CN202111108841.0A CN202111108841A CN114245210B CN 114245210 B CN114245210 B CN 114245210B CN 202111108841 A CN202111108841 A CN 202111108841A CN 114245210 B CN114245210 B CN 114245210B
Authority
CN
China
Prior art keywords
user
rotation angle
video
target
body rotation
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202111108841.0A
Other languages
English (en)
Other versions
CN114245210A (zh
Inventor
莫铭锟
郭晓周
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing ByteDance Network Technology Co Ltd
Original Assignee
Beijing ByteDance Network Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing ByteDance Network Technology Co Ltd filed Critical Beijing ByteDance Network Technology Co Ltd
Priority to CN202111108841.0A priority Critical patent/CN114245210B/zh
Publication of CN114245210A publication Critical patent/CN114245210A/zh
Application granted granted Critical
Publication of CN114245210B publication Critical patent/CN114245210B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44213Monitoring of end-user related data
    • H04N21/44218Detecting physical presence or behaviour of the user, e.g. using sensors to detect if the user is leaving the room or changes his face expression during a TV program
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T17/00Three dimensional [3D] modelling, e.g. data description of 3D objects
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/20Editing of 3D images, e.g. changing shapes or colours, aligning objects or positioning parts
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81Monomedia components thereof
    • H04N21/816Monomedia components thereof involving special video data, e.g 3D video
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2219/00Indexing scheme for manipulating 3D models or images for computer graphics
    • G06T2219/20Indexing scheme for editing of 3D models
    • G06T2219/2016Rotation, translation, scaling

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Computer Graphics (AREA)
  • Health & Medical Sciences (AREA)
  • Signal Processing (AREA)
  • Social Psychology (AREA)
  • General Health & Medical Sciences (AREA)
  • Software Systems (AREA)
  • Multimedia (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Geometry (AREA)
  • Architecture (AREA)
  • General Engineering & Computer Science (AREA)
  • Computer Hardware Design (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Databases & Information Systems (AREA)
  • Processing Or Creating Images (AREA)

Abstract

本申请公开了一种视频播放方法、装置、设备以及存储介质,该方法包括:获取用户的当前图像,根据用户的当前图像构建用户的3D运动模型,根据用户的3D运动模型和用户的3D人体模型库,确定用户当前身体旋转角度,用户的3D人体模型库包括用户的多个身体旋转角度对应的3D人体模型,根据用户当前身体旋转角度和当前播放的目标视频中目标人物的当前身体旋转角度,确定目标视频的目标旋转角度,目标视频为预存的3D环物视频,将目标视频旋转目标旋转角度后播放,以使目标视频旋转后目标人物的身体旋转角度与用户当前身体旋转角度相同。从而,用户可从多个角度观看动作细节,保证了动作细节教学的完整性,且视频播放与用户的交互性较好。

Description

视频播放方法、装置、设备以及存储介质
技术领域
本申请涉及多媒体技术领域,尤其涉及一种视频播放方法、装置、设备以及存储介质。
背景技术
随着人们生活水平的提高,越来越多的人开始注重自身的身体健康,进而选择参加各类健身运动。考虑到健身的便捷性,多数人选择一边观看健身教学视频,一边学习健身教学视频中的健身动作,以达到健身锻炼的目的。
目前,电子设备播放健身教学视频时,支持循环播放预先录制的健身教学视频,目前的健身教学视频一般会录制教学人员的正面和侧面的动作视频,在播放时根据录制时的角度(包括正面和侧面)顺序播放,例如,正面动作视频播放一段时间,接着播放侧面动作视频,如此循环。
但是,上述方法中,用户只能从教学人员的正面动作和侧面动作观察学习健身动作的细节,动作细节教学不完整,不利于用户学习,且视频播放与用户的交互性较差。
发明内容
针对现有技术存在的问题,本申请提供一种视频播放方法、装置、设备以及存储介质。
第一方面,本申请提供一种视频播放方法,包括:
获取用户的当前图像,根据所述用户的当前图像构建所述用户的3D运动模型;
根据所述用户的3D运动模型和所述用户的3D人体模型库,确定所述用户当前身体旋转角度,所述用户的3D人体模型库包括所述用户的多个身体旋转角度对应的3D人体模型;
根据所述用户当前身体旋转角度和当前播放的目标视频中目标人物的当前身体旋转角度,确定所述目标视频的目标旋转角度,所述目标视频为预存的3D环物视频;
将所述目标视频旋转所述目标旋转角度后播放,以使所述目标视频旋转后所述目标人物的身体旋转角度与所述用户当前身体旋转角度相同。
第二方面,本申请提供一种视频播放装置,包括:
获取模块,用于获取用户的当前图像,根据所述用户的当前图像构建所述用户的3D运动模型;
第一确定模块,用于根据所述用户的3D运动模型和所述用户的3D人体模型库,确定所述用户当前身体旋转角度,所述用户的3D人体模型库包括所述用户的多个身体旋转角度对应的3D人体模型;
第二确定模块,用于根据所述用户当前身体旋转角度和当前播放的目标视频中目标人物的当前身体旋转角度,确定所述目标视频的目标旋转角度,所述目标视频为预存的3D环物视频;
播放模块,用于将所述目标视频旋转所述目标旋转角度后播放,以使所述目标视频旋转后所述目标人物的身体旋转角度与所述用户当前身体旋转角度相同。
第三方面,本申请提供一种电子设备,包括:
处理器;以及
存储器,用于存储所述处理器的可执行指令;
其中,所述处理器配置为经由执行所述可执行指令来执行第一方面或第一方面各可能的实施方式中任一所述的视频播放方法。
第四方面,本申请实施例提供一种计算机可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时实现第一方面或第一方面各可能的实施方式中任一所述的视频播放方法。
第五方面,本申请实施例提供一种计算机程序产品,包括计算机程序,该计算机程序被处理器执行时实现第一方面或第一方面各可能的实施方式中任一所述的视频播放方法。
本申请提供的视频播放方法、装置、设备以及存储介质,通过根据用户的当前图像构建用户的3D运动模型,根据用户的3D运动模型和用户的3D人体模型库确定出用户当前身体旋转角度,根据用户当前身体旋转角度和当前播放的目标视频中目标人物的当前身体旋转角度,确定目标视频的目标旋转角度,将目标视频旋转目标旋转角度后播放,以使目标视频旋转后目标人物的身体旋转角度与用户当前身体旋转角度相同。对于3D环物视频的任意一帧图像,都可以通过旋转来观看任意角度的画面,从而,用户在运动时可通过转动自身身体的角度来调节目标视频中目标人物的身体旋转角度,用户可从多个角度观看目标人物运动的动作细节,保证了动作细节教学的完整性,便于用户运动学习,且视频播放与用户的交互性(即互动性)较好,具有良好的用户体验。
附图说明
图1为本申请实施例提供的视频播放方法的一种应用场景示意图;
图2为本申请实施例提供的一种视频播放方法的流程图;
图3为一种摄像装置的放置位置示意图;
图4为本申请实施例提供的一种视频播放方法的流程图;
图5为本申请实施例提供的一种用户当前身体旋转角度与当前播放的视频调整后目标人物的身体旋转角度的示意图;
图6为本申请实施例提供的一种用户当前身体旋转角度与当前播放的视频调整后目标人物的身体旋转角度的示意图;
图7为本申请实施例提供的一种用户当前身体旋转角度与当前播放的视频调整后目标人物的身体旋转角度的示意图;
图8为本申请实施例提供的一种视频播放装置的结构示意图;
图9为本申请实施例提供的一种电子设备的结构示意图。
具体实施方式
下面详细描述本申请的实施例,所述实施例的示例在附图中示出。下面通过参考附图描述的实施例是示例性的,旨在用于解释本申请,而不能理解为对本申请的限制。
本申请实施例的说明书、权利要求书及附图中的术语“第一”和“第二”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的本申请实施例的实施例例如能够以除了在这里图示或描述的那些以外的顺序实施。此外,术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
相关技术中,电子设备播放健身教学视频时,正面动作视频播放一段时间,接着播放侧面动作视频,如此循环,用户只能从教学人员的正面动作和侧面动作观察学习健身动作的细节,动作细节教学不完整,不利于用户学习,且视频播放与用户的交互性较差。为解决这一问题,本申请实施例提供一种视频播放方法、装置、设备以及存储介质,通过在录制教学视频时,拍摄多个角度的教学视频并将多个角度的教学视频通过视频合成技术合成为一个3D环物视频,在播放该教学视频的过程中,根据用户的当前图像进行3D建模确定用户当前身体旋转角度,根据用户当前身体旋转角度和当前播放的教学视频中教学人员的当前身体旋转角度,确定教学视频的目标旋转角度,将目标视频旋转目标旋转角度后播放,可以使得目标视频旋转后目标人物的身体旋转角度与用户当前身体旋转角度相同。对于3D环物视频的任意一帧图像,都可以通过旋转来观看任意角度的画面,从而,用户在运动时可通过转动自身身体的角度来调节教学视频中教学人员的身体旋转角度,用户可从多个角度观看动作细节,保证了动作细节教学的完整性,便于用户运动学习,且视频播放与用户的交互性(即互动性)较好,具有良好的用户体验。
接下来,对本申请实施例涉及的应用场景进行示例说明。
本申请实施例提供的视频播放方法至少可以应用于下述应用场景中,下面结合附图进行说明。
示例性的,图1为本申请实施例提供的视频播放方法的一种应用场景示意图,如图1所示,本实施例的应用场景中涉及电子设备1和用户2,电子设备1设置有摄像装置10,用户2可位于摄像装置10的可拍摄区域,例如位于摄像装置的正前方,电子设备1播放用户选择的视频,例如播放运动类教学视频(直播或非直播),用户2一边观看运动类(如健身、舞蹈、武术和体操等)教学视频,一边学习运动类教学视频中的动作,以达到运动锻炼或学习的目的。电子设备1可以为运行具有视频播放功能的应用程序(也称为客户端)的电子设备。电子设备1包括但不限于手机、电脑、智能屏、智能电视、智慧屏等。为实现在视频播放过程中,用户可从多个角度观看动作细节,保证动作细节教学的完整性。可选的,可以是在一开始播放运动类教学视频时,或者用户选择开启该视频播放功能时,电子设备1执行本申请实施例提供的视频播放方法,具体地,电子设备1获取用户的当前图像,根据用户的当前图像构建用户的3D运动模型,根据用户的3D运动模型和用户的3D人体模型库,确定用户当前身体旋转角度,根据用户当前身体旋转角度和当前播放的目标视频中目标人物的当前身体旋转角度,确定目标视频的目标旋转角度,将目标视频旋转目标旋转角度后播放,以使目标视频旋转后目标人物的身体旋转角度与用户当前身体旋转角度相同。可以是根据预设周期周期性执行上述过程,从而,可以实时地根据用户的实时身体旋转角度调节教学视频中教学人员的身体旋转角度,用户可从多个角度观看动作细节,保证良好的学习效果。
需要说明的是,图1所示的场景仅是一种示例,本申请实施例对摄像装置位于电子设备的位置不作限制。
下面以具体的实施例对本申请的技术方案以及本申请的技术方案如何解决上述技术问题进行详细说明。下面这几个具体的实施例可以相互结合,对于相同或相似的概念或过程可能在某些实施例中不再赘述。下面将结合附图,对本申请的实施例进行描述。
图2为本申请实施例提供的一种视频播放方法的流程图,该视频播放方法可以由视频播放装置执行,该视频播放装置可以通过软件和/或硬件的方式实现。该视频播放装置可以是电子设备或电子设备的芯片或电路。如图2所示,本实施例的方法可以包括:
S101、获取用户的当前图像,根据用户的当前图像构建用户的3D运动模型。
具体地,获取用户的当前图像,可以通过电子设备安装的摄像装置(如摄像头)拍摄用户的当前图像,一般地,电子设备上安装一个摄像头,在电子设备上安装的一APP播放视频时(如运动类教学视频),可以开启摄像头以拍摄用户的当前图像,或者是在接收到拍摄指令时拍摄用户的当前图像。
在获取到用户的当前图像后,根据用户的当前图像构建用户的3D运动模型,具体地,可以是根据用户的当前图像进行3D建模,得到用户的3D运动模型,3D建模可以采用已有的3D建模技术,本申请实施例对此不作限制。
在一种可实施的方式中,可以是在接收到用户触发的指令时,获取用户的当前图像,还可以是在检测到当前播放预设类型的视频时,如播放3D环物视频时,开始获取用户的当前图像,具体可以是根据预设周期周期性地获取用户的当前图像,接着执行S102-S104,以实现实时调整视频的旋转角度并播放。
S102、根据用户的3D运动模型和用户的3D人体模型库,确定用户当前身体旋转角度,用户的3D人体模型库包括用户的多个身体旋转角度对应的3D人体模型。
具体来说,用户的3D运动模型是当前用户的运动状态对应的3D模型,用户的3D人体模型库包括用户的多个身体旋转角度对应的3D人体模型,用户的3D人体模型库可以是已存储在内存中。其中,用户的多个身体旋转角度,可以是0-360度之间的每个旋转角度,如每个旋转角度的间隔为1度、0.5度或者90度,还可以是其他数值,本实施例对此不作限制。可选的,当用户正对摄像装置时,即摄像装置拍摄的是用户的正面时,此时用户的身体旋转角度为0,按照顺时针旋转,用户向右侧转身90度即左侧肩膀正对摄像装置时,此时用户的身体旋转角度是90度,按照顺时针旋转,用户向右侧转身180度即背面正对摄像装置时,此时用户的身体旋转角度是180度,按照顺时针旋转,用户向右侧转身270度即右侧肩膀正对摄像装置时,此时用户的身体旋转角度是270度,按照顺时针旋转,用户向右侧转身360度即回到初始位置,此时用户的身体旋转角度是360度,0度与360度用户所处位置和身体状态相同。可选的,还可以设定摄像装置拍摄的是用户的正面时,此时用户的身体旋转角度为0,按照逆时针旋转,依次得到0-360度之间的每个旋转角度。需要说明的是,不论是顺时针还是逆时针,用户的旋转方向的确定要根据当前播放的视频中目标人物的旋转方向确定,用户的旋转方向与当前播放的视频中目标人物的旋转方向保持一致。
根据用户的3D运动模型和用户的3D人体模型库,可以确定出用户当前身体旋转角度。作为一种可实施的方式,根据用户的3D运动模型和用户的3D人体模型库,确定用户当前身体旋转角度,具体可以包括:
S1021、将用户的3D运动模型与用户的3D人体模型库中用户的多个身体旋转角度对应的3D人体模型进行匹配,确定出匹配度最高的3D人体模型。
S1022、将匹配度最高的3D人体模型的身体旋转角度确定为用户当前身体旋转角度。
本实施例中,用户的3D人体模型库可以是已存储在内存中,还可以是实时获取用户的3D人体模型库,例如,在一用户首次播放目标视频时,获取该用户的3D人体模型库,然后存储在内存中,同时还可以存储该用户的标识,后续用户再次播放该目标视频时,可以直接使用已存储的该用户的3D人体模型库,这样可以减少处理的时间。
作为一种可实施的方式,若是实时获取用户的3D人体模型库,本实施例的方法在S101之前,还可以包括:
根据以预设拍摄角度拍摄的用户的图像构建用户的3D人体模型。根据用户的3D人体模型计算用户的多个预设身体旋转角度对应的3D人体模型。根据计算出的用户的多个预设身体旋转角度对应的3D人体模型,得到用户的3D人体模型库。
其中,预设拍摄角度可以是摄像装置拍摄的是用户的正面对应的拍摄角度,例如,开始播放视频时,用户一般都是正面面对播放视频的电子设备,此时拍摄用户的正面图像,根据该正面图像构建用户的3D人体模型,此时得到的是用户身体旋转角度为0度时的3D人体模型,根据是用户身体旋转角度为0度时的3D人体模型可以计算出用户的多个预设身体旋转角度对应的3D人体模型,多个预设身体旋转角度可以是0-360度之间的角度,例如,如每相邻两个旋转角度的间隔为1度,则预设身体旋转角度为1度、2度、…359度、360度,如每相邻两个旋转角度的间隔为90度,则预设身体旋转角度为90度、180度、270度和360度,可以理解的是,身体旋转角度为0度时的3D人体模型与身体旋转角度为360度时的3D人体模型相同。可选的,根据用户的3D人体模型计算用户的多个预设身体旋转角度对应的3D人体模型,还可以是将用户的3D人体模型依次旋转预设的身体旋转角度得到对应的旋转角度对应的3D人体模型。例如,将用户的3D人体模型按照旋转方向(如顺时针或逆时针)旋转1度,则得到身体旋转角度为1度时的3D人体模型,将用户的3D人体模型按照旋转方向(如顺时针或逆时针)旋转90度,则得到身体旋转角度为90度时的3D人体模型,等等。
S103、根据用户当前身体旋转角度和当前播放的目标视频中目标人物的当前身体旋转角度,确定目标视频的目标旋转角度,目标视频为预存的3D环物视频。
具体地,作为一种可实施的方式,根据用户当前身体旋转角度和当前播放的目标视频中目标人物的当前身体旋转角度,确定目标视频的目标旋转角度,具体可以包括:
S1031、若用户当前身体旋转角度和目标人物的当前身体旋转角度相同,则确定目标视频的目标旋转角度为0。
S1032、若用户当前身体旋转角度和目标人物的当前身体旋转角度不同,将用户当前身体旋转角度与目标人物的当前身体旋转角度的差值确定为目标视频的目标旋转角度。
例如,用户当前身体旋转角度为顺时针旋转90度,目标人物的当前身体旋转角度为顺时针180度,则将90度-180度=-90度作为目标视频的目标旋转角度,即目标视频的目标旋转角度为逆时针90度。又例如,用户当前身体旋转角度为0度,目标人物的当前身体旋转角度为顺时针180度,则将0度-180度=-180度作为目标视频的目标旋转角度,即目标视频的目标旋转角度为逆时针180度。从而可以使得目标视频旋转后目标人物的身体旋转角度与用户当前身体旋转角度相同。
本申请实施例中,当前播放的目标视频为预存的3D环物视频,在一种可实施的方式中,3D环物视频的获取可以是通过如下方式:
先通过位于所述目标人物的M个预设位置的摄像装置在同一时间启动并拍摄所述目标人物的运动视频,得到所述目标人物的M个拍摄角度的运动视频,所述M为正整数,M个预设位置与所述目标人物的距离相等,接着根据所述目标人物的M个拍摄角度的运动视频进行3D视频合成,得到所述3D环物视频。具体地,进行视频合成可以是通过3D成像软件,将目标人物的M个拍摄角度的运动视频进行3D视频合成,得到一个3D环物视频,该3D环物视频中,对于视频的任意一帧图像,都可以通过旋转来观看任意角度的画面。
可选的,M等于8,即拍摄目标人物(如运动教学人员)的8个拍摄角度的运动视频,相应地,在一种可实施的方式中,8个预设位置可以包括:正前方、正后方、左侧、右侧、左前方、右前方、左后方和右后方,其中的左前方可以是左前方45度方向,右前方可以是右前方45度方向,左后方可以是左后方45度方向,右后方可以是右后方45度方向。
图3为一种摄像装置的放置位置示意图,如图3所示,中心点为目标人物所在位置,8个摄像装置分别位于图3中所示的8个位置,即中心点的正前方、正后方、左侧、右侧、左前方45度方向、右前方45度方向、左后方45度方向和右后方45度方向,每个摄像装置与目标人物的距离相等,便于视频合成处理。
S104、将目标视频旋转目标旋转角度后播放,以使目标视频旋转后目标人物的身体旋转角度与用户当前身体旋转角度相同。
具体地,将目标视频旋转目标旋转角度后播放,使得目标视频旋转后目标人物的身体旋转角度与用户当前身体旋转角度相同。从而,用户在跟随当前播放的目标视频运动时,可以通过转动自身的身体调节目标视频的教学的角度,用户可从多方位、多角度观看动作细节,目标视频中目标人物的身体旋转角度与用户当前身体旋转角度保持一致,用户与目标视频中目标人物的交互关系如同用户『照镜子』一样,从而用户可具有良好的交互体验。
本实施例提供的视频播放方法,通过根据用户的当前图像构建用户的3D运动模型,根据用户的3D运动模型和用户的3D人体模型库确定出用户当前身体旋转角度,根据用户当前身体旋转角度和当前播放的目标视频中目标人物的当前身体旋转角度,确定目标视频的目标旋转角度,将目标视频旋转目标旋转角度后播放,以使目标视频旋转后目标人物的身体旋转角度与用户当前身体旋转角度相同。对于3D环物视频的任意一帧图像,都可以通过旋转来观看任意角度的画面,从而,用户在运动时可通过转动自身身体的角度来调节目标视频中目标人物的身体旋转角度,用户可从多个角度观看目标人物运动的动作细节,保证了动作细节教学的完整性,便于用户运动学习,且视频播放与用户的交互性(即互动性)较好,具有良好的用户体验。
下面结合一个具体的实施例,对本申请的技术方案进行详细说明。
图4为本申请实施例提供的一种视频播放方法的流程图,该视频播放方法可以由视频播放装置执行,该视频播放装置可以通过软件和/或硬件的方式实现。该视频播放装置例如可以是具有视频播放功能的应用程序(APP)。本实施例中,以用户首次使用该APP进行运动为例进行说明,如图4所示,本实施例的方法可以包括:
S201、检测到当前播放的是预设类型的视频时,以预设角度拍摄用户的图像。
可选的,还可以是在接收到用户触发的指令,如用户点击视频同步功能的开关,即接收到用户触发的指令,则开始以预设角度拍摄用户的图像。预设角度可以是摄像装置拍摄的是用户的正面对应的拍摄角度,例如,开始播放视频时,用户一般都是正面面对播放视频的电子设备,此时拍摄用户的正面图像,即可得到预设角度拍摄的用户的图像。
S202、根据以预设拍摄角度拍摄的用户的图像构建用户的3D人体模型。
具体来说,用户正面面对电子设备的屏幕,业绩正面面对电子设备上安装的摄像装置,此时拍摄得到的是用户身体旋转角度为0度时图像,因此构建的也相应是用户身体旋转角度为0度时的3D人体模型,具体的3D建模过程可采用现有的3D建模技术。
S203、根据用户的3D人体模型计算用户的多个预设身体旋转角度对应的3D人体模型,根据计算出的用户的多个预设身体旋转角度对应的3D人体模型,得到用户的3D人体模型库。
具体地,多个预设身体旋转角度可以是0-360度之间的角度,例如,如每相邻两个旋转角度的间隔为1度,则预设身体旋转角度为1度、2度、…359度、360度,如每相邻两个旋转角度的间隔为90度,则预设身体旋转角度为90度、180度、270度和360度,可以理解的是,身体旋转角度为0度时的3D人体模型与身体旋转角度为360度时的3D人体模型相同。本实施例中以预设角度为0-360度之间的角度,每两个角度每相邻两个旋转角度的间隔为1度为例。
可选的,根据用户的3D人体模型计算用户的多个预设身体旋转角度对应的3D人体模型,还可以是将用户的3D人体模型依次旋转预设的身体旋转角度得到对应的旋转角度对应的3D人体模型。例如,将用户的3D人体模型按照旋转方向(如顺时针或逆时针)旋转1度,则得到身体旋转角度为1度时的3D人体模型,将用户的3D人体模型按照旋转方向(如顺时针或逆时针)旋转90度,则得到身体旋转角度为90度时的3D人体模型,等等。
S204、根据预设周期获取用户的当前图像,根据用户的当前图像构建用户的3D运动模型。
预设周期例如可以是5s、10s等等。根据用户的当前图像构建用户的3D运动模型,具体地,可以是根据用户的当前图像进行3D建模,得到用户的3D运动模型。
S205、将用户的3D运动模型与用户的3D人体模型库中用户的多个身体旋转角度对应的3D人体模型进行匹配,确定出匹配度最高的3D人体模型。
S206、将匹配度最高的3D人体模型的身体旋转角度确定为用户当前身体旋转角度。
S207、根据用户当前身体旋转角度和当前播放的视频中目标人物的当前身体旋转角度,确定当前播放的视频的目标旋转角度。
一般地,对于运动健身类教学视频,教学人员为一个,此时的目标人物即为这一个教学人员,若教学人员为多个,多个教学人员的动作也是一致的,此时的目标人物为该多个教学人员。
具体地,作为一种可实施的方式,S207具体可以为:若用户当前身体旋转角度和目标人物的当前身体旋转角度相同,则确定目标视频的目标旋转角度为0;若用户当前身体旋转角度和目标人物的当前身体旋转角度不同,将用户当前身体旋转角度与目标人物的当前身体旋转角度的差值确定为目标视频的目标旋转角度。例如,用户当前身体旋转角度为顺时针旋转90度,目标人物的当前身体旋转角度为顺时针180度,则将90度-180度=-90度作为目标视频的目标旋转角度,即目标视频的目标旋转角度为逆时针90度。
S208、将当前播放的视频旋转目标旋转角度后播放,以使当前播放的视频旋转后目标人物的身体旋转角度与用户当前身体旋转角度相同。
本实施例中,当前播放的视频为3D环物视频,对于3D环物视频的任意一帧图像,都可以通过旋转来观看任意角度的画面。当前播放的视频预先录制存储,当前播放的视频的获取方式具体可参见图2所示实施例中的描述,此处不再赘述。
将当前播放的视频旋转目标旋转角度后播放,使得当前播放的视频旋转后目标人物的身体旋转角度与用户当前身体旋转角度相同。从而,用户在跟随当前播放的视频运动时,可以通过转动自身的身体调节当前播放的视频的教学的角度,用户可从多方位、多角度观看动作细节,下面结合图5-图7示出了3种用户在运动时通过转动自身身体的角度来调节当前播放的视频中目标人物的身体旋转角度的示意图。
图5为本申请实施例提供的一种用户当前身体旋转角度与当前播放的视频调整后目标人物的身体旋转角度的示意图,如图5所示,用户当前正面面对屏幕,则用户当前身体旋转角度为0度,通过执行本实施例的视频播放方法,当前播放的视频中目标人物的身体旋转角度也为0度,在视频播放时显示目标人物正面。
图6为本申请实施例提供的一种用户当前身体旋转角度与当前播放的视频调整后目标人物的身体旋转角度的示意图,如图6所示,用户从正面面对屏幕的状态开始向右转动90度后,用户当前左臂面对屏幕,则用户当前身体旋转角度为顺时针90度,通过执行本实施例的视频播放方法,当前播放的视频中目标人物的身体旋转角度也为顺时针90度,在视频播放时屏幕当前显示目标人物的右臂,用户可看见目标人物的右臂面向用户时对应的身体动作。
图7为本申请实施例提供的一种用户当前身体旋转角度与当前播放的视频调整后目标人物的身体旋转角度的示意图,如图7所示,用户从正面面对屏幕的状态开始向左转动90度后,用户当前右臂面对屏幕,则用户当前身体旋转角度为逆时针90度,通过执行本实施例的视频播放方法,当前播放的视频中目标人物的身体旋转角度也为逆时针90度,在视频播放时屏幕当前显示目标人物的左臂,用户可看见目标人物的左臂面向用户时对应的身体动作。
本实施例中,用户与当前播放的视频中目标人物的交互关系如同用户『照镜子』一样,从而用户可具有良好的交互体验,用户可从多方位、多角度观看动作细节。
以下为本申请装置实施例,可以用于执行本申请上述方法实施例。对于本申请装置实施例中未披露的细节,可参考本申请上述方法实施例。
图8为本申请实施例提供的一种视频播放装置的结构示意图,如图8所示,本实施例的装置可以包括:获取模块11、第一确定模块12、第二确定模块13和播放模块14,其中,
获取模块11用于获取用户的当前图像,根据用户的当前图像构建用户的3D运动模型;
第一确定模块12用于根据用户的3D运动模型和用户的3D人体模型库,确定用户当前身体旋转角度,用户的3D人体模型库包括用户的多个身体旋转角度对应的3D人体模型;
第二确定模块13用于根据用户当前身体旋转角度和当前播放的目标视频中目标人物的当前身体旋转角度,确定目标视频的目标旋转角度,目标视频为预存的3D环物视频;
播放模块14用于将目标视频旋转目标旋转角度后播放,以使目标视频旋转后目标人物的身体旋转角度与用户当前身体旋转角度相同。
可选的,获取模块11还用于:根据以预设拍摄角度拍摄的用户的图像构建用户的3D人体模型;
根据用户的3D人体模型计算用户的多个预设身体旋转角度对应的3D人体模型;
根据计算出的用户的多个预设身体旋转角度对应的3D人体模型,得到用户的3D人体模型库。
可选的,第一确定模块12用于将用户的3D运动模型与用户的3D人体模型库中用户的多个身体旋转角度对应的3D人体模型进行匹配,确定出匹配度最高的3D人体模型;
将匹配度最高的3D人体模型的身体旋转角度确定为用户当前身体旋转角度。
可选的,第二确定模块13用于:
若用户当前身体旋转角度和目标人物的当前身体旋转角度相同,则确定目标视频的目标旋转角度为0;
若用户当前身体旋转角度和目标人物的当前身体旋转角度不同,将用户当前身体旋转角度与目标人物的当前身体旋转角度的差值确定为目标视频的目标旋转角度。
可选的,获取模块11还用于:通过位于目标人物的M个预设位置的摄像装置在同一时间启动并拍摄目标人物的运动视频,得到目标人物的M个拍摄角度的运动视频,M为正整数;
根据目标人物的M个拍摄角度的运动视频进行3D视频合成,得到3D环物视频。
可选的,M等于8,预设位置包括位正前方、正后方、左侧、右侧、左前方、右前方、左后方和右后方。
可选的,获取模块11具体用于:根据预设周期获取用户的当前图像。
本申请实施例提供的装置,可执行上述方法实施例,其具体实现原理和技术效果,可参见上述方法实施例,本实施例此处不再赘述。
需要说明的是,应理解以上装置的各个模块的划分仅仅是一种逻辑功能的划分,实际实现时可以全部或部分集成到一个物理实体上,也可以物理上分开。且这些模块可以全部以软件通过处理元件调用的形式实现;也可以全部以硬件的形式实现;还可以部分模块通过处理元件调用软件的形式实现,部分模块通过硬件的形式实现。例如,处理模块可以为单独设立的处理元件,也可以集成在上述装置的某一个芯片中实现,此外,也可以以程序代码的形式存储于上述装置的存储器中,由上述装置的某一个处理元件调用并执行以上处理模块的功能。其它模块的实现与之类似。此外这些模块全部或部分可以集成在一起,也可以独立实现。这里的处理元件可以是一种集成电路,具有信号的处理能力。在实现过程中,上述方法的各步骤或以上各个模块可以通过处理器元件中的硬件的集成逻辑电路或者软件形式的指令完成。
例如,以上这些模块可以是被配置成实施以上方法的一个或多个集成电路,例如:一个或多个特定集成电路(application specific integrated circuit,ASIC),或,一个或多个微处理器(digital signal processor,DSP),或,一个或者多个现场可编程门阵列(field programmable gate array,FPGA)等。再如,当以上某个模块通过处理元件调度程序代码的形式实现时,该处理元件可以是通用处理器,例如中央处理器(centralprocessing unit,CPU)或其它可以调用程序代码的处理器。再如,这些模块可以集成在一起,以片上系统(system-on-a-chip,SOC)的形式实现。
在上述实施例中,可以全部或部分地通过软件、硬件、固件或者其任意组合来实现。当使用软件实现时,可以全部或部分地以计算机程序产品的形式实现。计算机程序产品包括一个或多个计算机指令。在计算机上加载和执行计算机程序指令时,全部或部分地产生按照本申请实施例的流程或功能。计算机可以是通用计算机、专用计算机、计算机网络、或者其他可编程装置。计算机指令可以存储在计算机可读存储介质中,或者从一个计算机可读存储介质向另一个计算机可读存储介质传输,例如,计算机指令可以从一个网站站点、计算机、服务器或数据中心通过有线(例如同轴电缆、光纤、数字用户线(DSL))或无线(例如红外、无线、微波等)方式向另一个网站站点、计算机、服务器或数据中心进行传输。计算机可读存储介质可以是计算机能够存取的任何可用介质或者是包含一个或多个可用介质集成的服务器、数据中心等数据存储设备。可用介质可以是磁性介质,(例如,软盘、硬盘、磁带)、光介质(例如,DVD)、或者半导体介质(例如固态硬盘solid state disk(SSD))等。
图9为本申请实施例提供的一种电子设备的结构示意图,如图9所示,本实施例的电子设备可以包括处理器21和存储器22,
其中,存储器22用于存储处理器21的可执行指令。
处理器21配置为经由执行可执行指令来执行上述方法实施例中的视频播放方法。
可选地,存储器22既可以是独立的,也可以跟处理器21集成在一起。
当存储器22是独立于处理器21之外的器件时,本实施例的电子设备还可以包括:
总线23,用于连接存储器22和处理器21。
可选地,本实施例的电子设备还可以包括:通信接口24,该通信接口24可以通过总线23与处理器21连接。
本申请还提供一种计算机可读存储介质,计算机可读存储介质中存储有计算机执行指令,当其在计算机上运行时,使得计算机执行如上述实施例的视频播放方法。
本申请实施例还提供一种计算机程序产品,包括计算机程序,该计算机程序被处理器执行时实现如上实施例中的视频播放方法。
在本说明书的描述中,参考术语“一个实施例”、“一些实施例”、“示例”、“具体示例”、或“一些示例”等的描述意指结合该实施例或示例描述的具体特征、结构、材料或者特点包含于本申请的至少一个实施例或示例中。在本说明书中,对上述术语的示意性表述不必须针对的是相同的实施例或示例。而且,描述的具体特征、结构、材料或者特点可以在任一个或多个实施例或示例中以合适的方式结合。此外,在不相互矛盾的情况下,本领域的技术人员可以将本说明书中描述的不同实施例或示例以及不同实施例或示例的特征进行结合和组合。
尽管上面已经示出和描述了本申请的实施例,可以理解的是,上述实施例是示例性的,不能理解为对本申请的限制,本领域的普通技术人员在本申请的范围内可以对上述实施例进行变化、修改、替换和变型。

Claims (10)

1.一种视频播放方法,其特征在于,包括:
在播放视频时,通过摄像装置实时获取用户的当前图像,根据所述用户的当前图像构建所述用户的3D运动模型;
根据所述用户的3D运动模型和所述用户的3D人体模型库,确定所述用户当前身体旋转角度,所述用户的3D人体模型库包括所述用户的多个身体旋转角度对应的3D人体模型;
根据所述用户当前身体旋转角度和当前播放的目标视频中目标人物的当前身体旋转角度,确定所述目标视频的目标旋转角度,所述目标视频为预存的3D环物视频;
将所述目标视频旋转所述目标旋转角度后播放,以使所述目标视频旋转后所述目标人物的身体旋转角度与所述用户当前身体旋转角度相同。
2.根据权利要求1所述的方法,其特征在于,所述通过摄像装置实时获取用户的当前图像之前,所述方法还包括:
根据以预设拍摄角度拍摄的所述用户的图像构建所述用户的3D人体模型;
根据所述用户的3D人体模型计算所述用户的多个预设身体旋转角度对应的3D人体模型;
根据计算出的所述用户的多个预设身体旋转角度对应的3D人体模型,得到所述用户的3D人体模型库。
3.根据权利要求1或2所述的方法,其特征在于,所述根据所述用户的3D运动模型和所述用户的3D人体模型库,确定所述用户当前身体旋转角度,包括:
将所述用户的3D运动模型与所述用户的3D人体模型库中所述用户的多个身体旋转角度对应的3D人体模型进行匹配,确定出匹配度最高的3D人体模型;
将所述匹配度最高的3D人体模型的身体旋转角度确定为所述用户当前身体旋转角度。
4.根据权利要求1或2所述的方法,其特征在于,所述根据所述用户当前身体旋转角度和当前播放的目标视频中目标人物的当前身体旋转角度,确定所述目标视频的目标旋转角度,包括:
若所述用户当前身体旋转角度和所述目标人物的当前身体旋转角度相同,则确定所述目标视频的目标旋转角度为0;
若所述用户当前身体旋转角度和所述目标人物的当前身体旋转角度不同,将所述用户当前身体旋转角度与所述目标人物的当前身体旋转角度的差值确定为所述目标视频的目标旋转角度。
5.根据权利要求1所述的方法,其特征在于,所述方法还包括:
通过位于所述目标人物的M个预设位置的摄像装置在同一时间启动并拍摄所述目标人物的运动视频,得到所述目标人物的M个拍摄角度的运动视频,所述M为正整数,所述M个预设位置与所述目标人物的距离相等;
根据所述目标人物的M个拍摄角度的运动视频进行3D视频合成,得到所述3D环物视频。
6.根据权利要求5所述的方法,其特征在于,所述M等于8,所述预设位置包括位正前方、正后方、左侧、右侧、左前方、右前方、左后方和右后方。
7.根据权利要求1所述的方法,其特征在于,所述获取用户的当前图像,包括:
根据预设周期获取所述用户的当前图像。
8.一种视频播放装置,其特征在于,包括:
获取模块,用于在播放视频时,通过摄像装置实时获取用户的当前图像,根据所述用户的当前图像构建所述用户的3D运动模型;
第一确定模块,用于根据所述用户的3D运动模型和所述用户的3D人体模型库,确定所述用户当前身体旋转角度,所述用户的3D人体模型库包括所述用户的多个身体旋转角度对应的3D人体模型;
第二确定模块,用于根据所述用户当前身体旋转角度和当前播放的目标视频中目标人物的当前身体旋转角度,确定所述目标视频的目标旋转角度,所述目标视频为预存的3D环物视频;
播放模块,用于将所述目标视频旋转所述目标旋转角度后播放,以使所述目标视频旋转后所述目标人物的身体旋转角度与所述用户当前身体旋转角度相同。
9.一种电子设备,其特征在于,包括:
处理器;以及
存储器,用于存储所述处理器的可执行指令;
其中,所述处理器配置为经由执行所述可执行指令来执行权利要求1-7任一项所述的视频播放方法。
10.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现权利要求1-7任一项所述的视频播放方法。
CN202111108841.0A 2021-09-22 2021-09-22 视频播放方法、装置、设备以及存储介质 Active CN114245210B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202111108841.0A CN114245210B (zh) 2021-09-22 2021-09-22 视频播放方法、装置、设备以及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202111108841.0A CN114245210B (zh) 2021-09-22 2021-09-22 视频播放方法、装置、设备以及存储介质

Publications (2)

Publication Number Publication Date
CN114245210A CN114245210A (zh) 2022-03-25
CN114245210B true CN114245210B (zh) 2024-01-09

Family

ID=80742996

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202111108841.0A Active CN114245210B (zh) 2021-09-22 2021-09-22 视频播放方法、装置、设备以及存储介质

Country Status (1)

Country Link
CN (1) CN114245210B (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114885210B (zh) * 2022-04-22 2023-11-28 海信集团控股股份有限公司 教程视频处理方法、服务器及显示设备
CN116980654B (zh) * 2023-09-22 2024-01-19 北京小糖科技有限责任公司 基于视频教学的交互方法、装置、设备及存储介质

Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2015196582A1 (zh) * 2014-06-26 2015-12-30 北京小鱼儿科技有限公司 一种行为模式统计装置与方法
CN105867619A (zh) * 2016-03-28 2016-08-17 联想(北京)有限公司 一种信息处理方法及电子设备
CN106534938A (zh) * 2016-09-30 2017-03-22 乐视控股(北京)有限公司 视频播放方法及装置
JP6523493B1 (ja) * 2018-01-09 2019-06-05 株式会社コロプラ プログラム、情報処理装置、及び情報処理方法
JP2019149122A (ja) * 2018-02-28 2019-09-05 ソニー株式会社 情報処理装置、情報処理方法、及び、プログラム
WO2020042188A1 (zh) * 2018-08-31 2020-03-05 华为技术有限公司 一种图像拍摄方法和装置
CN111698521A (zh) * 2019-03-12 2020-09-22 广州华林珠宝有限公司 网络直播方法和装置
CN111710314A (zh) * 2020-06-23 2020-09-25 深圳创维-Rgb电子有限公司 一种显示画面的调整方法、智能终端及可读存储介质
WO2021082692A1 (zh) * 2019-10-30 2021-05-06 平安科技(深圳)有限公司 一种行人图片标注方法、装置、存储介质和智能设备
CN112911349A (zh) * 2021-01-27 2021-06-04 北京翔云颐康科技发展有限公司 视频发送方法及装置、存储介质、电子装置
CN113170231A (zh) * 2019-04-11 2021-07-23 华为技术有限公司 跟随用户运动控制播放视频内容的方法和装置
JP2021111890A (ja) * 2020-01-14 2021-08-02 三菱電機エンジニアリング株式会社 映像表示装置

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20170264973A1 (en) * 2016-03-14 2017-09-14 Le Holdings (Beijing) Co., Ltd. Video playing method and electronic device
US20180063599A1 (en) * 2016-08-26 2018-03-01 Minkonet Corporation Method of Displaying Advertisement of 360 VR Video

Patent Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2015196582A1 (zh) * 2014-06-26 2015-12-30 北京小鱼儿科技有限公司 一种行为模式统计装置与方法
CN105867619A (zh) * 2016-03-28 2016-08-17 联想(北京)有限公司 一种信息处理方法及电子设备
CN106534938A (zh) * 2016-09-30 2017-03-22 乐视控股(北京)有限公司 视频播放方法及装置
JP6523493B1 (ja) * 2018-01-09 2019-06-05 株式会社コロプラ プログラム、情報処理装置、及び情報処理方法
JP2019149122A (ja) * 2018-02-28 2019-09-05 ソニー株式会社 情報処理装置、情報処理方法、及び、プログラム
WO2020042188A1 (zh) * 2018-08-31 2020-03-05 华为技术有限公司 一种图像拍摄方法和装置
CN111698521A (zh) * 2019-03-12 2020-09-22 广州华林珠宝有限公司 网络直播方法和装置
CN113170231A (zh) * 2019-04-11 2021-07-23 华为技术有限公司 跟随用户运动控制播放视频内容的方法和装置
WO2021082692A1 (zh) * 2019-10-30 2021-05-06 平安科技(深圳)有限公司 一种行人图片标注方法、装置、存储介质和智能设备
JP2021111890A (ja) * 2020-01-14 2021-08-02 三菱電機エンジニアリング株式会社 映像表示装置
CN111710314A (zh) * 2020-06-23 2020-09-25 深圳创维-Rgb电子有限公司 一种显示画面的调整方法、智能终端及可读存储介质
CN112911349A (zh) * 2021-01-27 2021-06-04 北京翔云颐康科技发展有限公司 视频发送方法及装置、存储介质、电子装置

Also Published As

Publication number Publication date
CN114245210A (zh) 2022-03-25

Similar Documents

Publication Publication Date Title
CN114245210B (zh) 视频播放方法、装置、设备以及存储介质
CN106803966B (zh) 一种多人网络直播方法、装置及其电子设备
JP6610689B2 (ja) 情報処理装置、情報処理方法及び記録媒体
WO2020069116A1 (en) Techniques for generating media content
US20120204202A1 (en) Presenting content and augmenting a broadcast
US20120120201A1 (en) Method of integrating ad hoc camera networks in interactive mesh systems
CN113301351B (zh) 视频播放方法、装置、电子设备及计算机存储介质
CN112581627A (zh) 用于体积视频的用户控制的虚拟摄像机的系统和装置
CN109361954B (zh) 视频资源的录制方法、装置、存储介质及电子装置
JP7423974B2 (ja) 情報処理システム、情報処理方法及びプログラム
US11622099B2 (en) Information-processing apparatus, method of processing information, and program
CN106060609B (zh) 获取图片的方法及装置
CN115442658B (zh) 直播方法、装置、存储介质、电子设备及产品
CN109862385B (zh) 直播的方法、装置、计算机可读存储介质及终端设备
KR20090032819A (ko) 다자간 온라인 골프 게임 서비스 제공장치 및 방법
CN202777830U (zh) 7d放映系统
CN110166825B (zh) 视频数据处理方法及装置、视频播放方法及装置
US20150375109A1 (en) Method of Integrating Ad Hoc Camera Networks in Interactive Mesh Systems
CN113971693A (zh) 直播画面生成方法、系统、装置及电子设备
CN113542721A (zh) 深度图处理方法、视频重建方法及相关装置
CN114071211B (zh) 视频播放方法、装置、设备以及存储介质
WO2018094804A1 (zh) 一种图像处理方法及装置
CN113473244A (zh) 一种自由视点视频播放控制方法及设备
CN117939196A (zh) 比赛体验方法及装置
CN109561354B (zh) 一种投篮直播系统和方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant