CN107920269A - 视频生成方法、装置和电子设备 - Google Patents

视频生成方法、装置和电子设备 Download PDF

Info

Publication number
CN107920269A
CN107920269A CN201711185439.6A CN201711185439A CN107920269A CN 107920269 A CN107920269 A CN 107920269A CN 201711185439 A CN201711185439 A CN 201711185439A CN 107920269 A CN107920269 A CN 107920269A
Authority
CN
China
Prior art keywords
action
video
audio
human action
human
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201711185439.6A
Other languages
English (en)
Inventor
李震
杨鹏博
戴硕
李鹤
黄怡青
张晨曦
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hong Kong Lemi Co Ltd
Original Assignee
Happy Honey Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Happy Honey Co Ltd filed Critical Happy Honey Co Ltd
Priority to CN201711185439.6A priority Critical patent/CN107920269A/zh
Publication of CN107920269A publication Critical patent/CN107920269A/zh
Priority to PCT/CN2018/098602 priority patent/WO2019100757A1/zh
Pending legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
    • H04N21/4307—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen
    • H04N21/43074—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen of additional data with content streams on the same device, e.g. of EPG data or interactive icon with a TV program
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/439—Processing of audio elementary streams
    • H04N21/4394—Processing of audio elementary streams involving operations for analysing the audio stream, e.g. detecting features or characteristics in audio streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44004—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving video buffer management, e.g. video decoder buffer or video display buffer
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442—Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44213—Monitoring of end-user related data
    • H04N21/44218—Detecting physical presence or behaviour of the user, e.g. using sensors to detect if the user is leaving the room or changes his face expression during a TV program
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/47217—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for controlling playback functions for recorded or on-demand content, e.g. using progress bars, mode or play-point indicators or bookmarks
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/478—Supplemental services, e.g. displaying phone caller identification, shopping application
    • H04N21/4781—Games
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/845—Structuring of content, e.g. decomposing content into time segments
    • H04N21/8456—Structuring of content, e.g. decomposing content into time segments by decomposing the content in the time domain, e.g. in time segments

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Social Psychology (AREA)
  • Databases & Information Systems (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Human Computer Interaction (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本发明提出一种视频生成方法、装置和电子设备，其中，方法包括：获取选定的音频以及音频中各时间节点对应的标准动作；播放音频，并在播放音频过程中采集各视频画面帧；在音频播放至每一个时间节点时，展示对应的标准动作，并识别时间节点同步采集的视频画面帧中的人体动作；根据同一时间节点的标准动作与人体动作之间的差异程度，生成人体动作的动作评价信息；根据音频、各视频画面帧和各人体动作的动作评价信息，生成目标视频。由于标准动作为用户需要做出的人体动作，相比于现有技术中用户脚踩箭头的跳舞方式，能够有效丰富跳舞动作。此外，通过生成动作评价信息，能够使用户及时了解自己做出的人体动作是否标准，进一步提升用户的使用体验。

Description

视频生成方法、装置和电子设备
技术领域
本发明涉及移动终端技术领域，尤其涉及一种视频生成方法、装置和电子设备。
背景技术
体感跳舞游戏，通过互联网运营平台，进行人机互动。用户通过根据体感跳舞设备的提示，做出相应的身体的动作，从而使用户在跳舞的同时，能够达到健身的作用，享受体感互动的体验。
现有技术中，体感跳舞游戏主要应用于固定设备上，例如体感跳舞机、电脑等，便携性较差。此外，对用户身体动作的判断，是通过确定用户脚踩的箭头方向正确与否，跳舞的方式较为单一。并且，用户在玩游戏时，由于无法记录游戏过程，导致用户的参与感较低。
发明内容
本发明旨在至少在一定程度上解决相关技术中的技术问题之一。
为此，本发明的第一个目的在于提出一种视频生成方法，由于标准动作为用户需要做出的人体动作，相比于现有技术中用户脚踩箭头的跳舞方式，能够有效丰富跳舞动作，提升用户体验。此外，根据同一时间节点的标准动作与人体动作之间的差异程度，生成人体动作的动作评价信息，能够使得用户及时了解自己做出的人体动作是否标准，进一步提升用户的使用体验。最后，通过在音频播放结束时，生成视频，由此，用户可以回放或者分享视频，提升用户的参与感，解决现有技术中体感跳舞游戏主要应用于固定设备上，例如体感跳舞机、电脑等，便携性较差。此外，对用户身体动作的判断，是通过确定用户脚踩的箭头方向正确与否，跳舞的方式较为单一。并且，用户在玩游戏时，由于无法记录游戏过程，导致用户的参与感较低的技术问题。
本发明的第二个目的在于提出一种视频生成装置。
本发明的第三个目的在于提出一种电子设备。
本发明的第四个目的在于提出一种非临时性计算机可读存储介质。
为达上述目的，本发明第一方面实施例提出了一种视频生成方法，包括：
获取选定的音频，以及所述音频中各时间节点对应的标准动作；
播放所述音频，并在播放所述音频过程中采集各视频画面帧；
在所述音频播放至每一个时间节点时，展示对应的标准动作，并识别所述时间节点同步采集的视频画面帧中的人体动作；
根据同一时间节点的所述标准动作与所述人体动作之间的差异程度，生成所述人体动作的动作评价信息；
根据所述音频、各视频画面帧和各人体动作的动作评价信息，生成目标视频。
可选地，作为第一方面的第一种可能的实现方式，所述播放所述音频，并同步采集视频画面之前，还包括：
展示准备动作，并采集准备图像；
确定所述准备图像中的人体动作与所述准备动作匹配。
可选地，作为第一方面的第二种可能的实现方式，所述根据所述音频、各视频画面帧和各人体动作的动作评价信息，生成目标视频，包括：
根据各视频画面帧所识别出的人体动作，在各视频画面帧中，添加相应人体动作的动作评价信息；
根据所述音频和添加所述动作评价信息后的视频画面帧，生成所述目标视频。
可选地，作为第一方面的第三种可能的实现方式，所述根据同一时间节点的所述标准动作与所述人体动作之间的差异程度，生成所述人体动作的动作评价信息之后，还包括：
在用于采集各视频画面帧的拍摄界面上，展示每一个人体动作的动作评价信息；
当所述音频播放结束时，根据每一个人体动作的动作评价信息，生成总评价信息；
在结果展示界面，展示所述总评价信息。
可选地，作为第一方面的第四种可能的实现方式，所述结果展示界面还包括：回看控件、拍摄控件和分享控件；
当探测到针对所述回看控件的触发操作时，播放所述目标视频；
当探测到针对所述拍摄控件的触发操作时，展示所述拍摄界面，以重新生成所述目标视频；
当探测到针对所述分享控件的触发操作时，对所述目标视频进行分享。
可选地，作为第一方面的第五种可能的实现方式，所述对所述目标视频进行分享，包括：
展示分享界面；其中，所述分享界面包括自有平台分享控件和第三方平台分享控件；
当探测到针对所述自有平台分享控件的触发操作时，在所述分享界面展示所述拍摄控件和展示控件；
当探测到针对所述展示控件的触发操作时，展示视频聚合页面；所述视频聚合页面包含所述目标视频和/或在自有平台已分享的视频。
可选地，作为第一方面的第六种可能的实现方式，所述获取选定的音频之前，还包括：
当探测到针对拍摄控件的操作时，展示歌曲选择界面。
可选地，作为第一方面的第七种可能的实现方式，所述识别所述时间节点同步采集的视频画面帧的人体动作，包括：
识别所述视频画面帧中，人体的各关节；
连接人体各关节中相邻的两关节，得到相邻两关节之间的连线；
根据相邻两关节之间的连线与预设参考方向之间的实际夹角，确定人体动作。
本发明实施例的视频生成方法，通过获取选定的音频，以及音频中各时间节点对应的标准动作；播放音频，并在播放音频过程中采集各视频画面帧；在音频播放至每一个时间节点时，展示对应的标准动作，并识别时间节点同步采集的视频画面帧中的人体动作；根据同一时间节点的标准动作与人体动作之间的差异程度，生成人体动作的动作评价信息；根据音频、各视频画面帧和各人体动作的动作评价信息，生成目标视频。本实施例中，由于标准动作为用户需要做出的人体动作，相比于现有技术中用户脚踩箭头的跳舞方式，能够有效丰富跳舞动作，提升用户体验。此外，根据同一时间节点的标准动作与人体动作之间的差异程度，生成人体动作的动作评价信息，能够使得用户及时了解自己做出的人体动作是否标准，进一步提升用户的使用体验。最后，通过在音频播放结束时，生成视频，由此，用户可以回放或者分享视频，提升用户的参与感，用于解决现有技术中体感跳舞游戏主要应用于固定设备上，例如体感跳舞机、电脑等，便携性较差。此外，对用户身体动作的判断，是通过确定用户脚踩的箭头方向正确与否，跳舞的方式较为单一。并且，用户在玩游戏时，由于无法记录游戏过程，导致用户的参与感较低的技术问题。
为达上述目的，本发明第二方面实施例提出了一种视频生成装置，包括：
选择模块，用于获取选定的音频，以及所述音频中各时间节点对应的标准动作；
采集模块，用于播放所述音频，并在播放所述音频过程中采集各视频画面帧；
展示模块，用于在所述音频播放至每一个时间节点时，展示对应的标准动作，并识别所述时间节点同步采集的视频画面帧的人体动作；
评价模块，用于根据同一时间节点的所述标准动作与所述人体动作之间的差异程度，生成所述人体动作的动作评价信息；
生成模块，用于根据所述音频、各视频画面帧和各人体动作的动作评价信息，生成目标视频。
可选地，作为第二方面的第一种可能的实现方式，所述装置还包括：
展示确定模块，用于在所述播放所述音频，并同步采集视频画面之前，展示准备动作，并采集准备图像，确定所述准备图像中的人体动作与所述准备动作匹配。
可选地，作为第二方面的第二种可能的实现方式，所述生成模块，具体用于：
根据各视频画面帧所识别出的人体动作，在各视频画面帧中，添加相应人体动作的动作评价信息；
根据所述音频和添加所述动作评价信息后的视频画面帧，生成所述目标视频。
可选地，作为第二方面的第三种可能的实现方式，所述装置还包括：
展示生成模块，用于在所述根据同一时间节点的所述标准动作与所述人体动作之间的差异程度，生成所述人体动作的动作评价信息之后，在用于采集各视频画面帧的拍摄界面上，展示每一个人体动作的动作评价信息；当所述音频播放结束时，根据每一个人体动作的动作评价信息，生成总评价信息；在结果展示界面，展示所述总评价信息。
可选地，作为第二方面的第四种可能的实现方式，所述结果展示界面还包括：回看控件、拍摄控件和分享控件；所述展示生成模块，还用于：
当探测到针对所述回看控件的触发操作时，播放所述目标视频；
当探测到针对所述拍摄控件的触发操作时，展示所述拍摄界面，以重新生成所述目标视频；
当探测到针对所述分享控件的触发操作时，对所述目标视频进行分享。
可选地，作为第二方面的第五种可能的实现方式，所述展示生成模块，具体用于：
展示分享界面；其中，所述分享界面包括自有平台分享控件和第三方平台分享控件；
当探测到针对所述自有平台分享控件的触发操作时，在所述分享界面展示所述拍摄控件和展示控件；
当探测到针对所述展示控件的触发操作时，展示视频聚合页面；所述视频聚合页面包含所述目标视频和/或在自有平台已分享的视频。
可选地，作为第二方面的第六种可能的实现方式，所述装置还包括：
界面展示模块，用于在所述获取选定的音频之前，当探测到针对拍摄控件的操作时，展示歌曲选择界面。
可选地，作为第二方面的第七种可能的实现方式，所述展示模块，具体用于：
识别所述视频画面帧中，人体的各关节；
连接人体各关节中相邻的两关节，得到相邻两关节之间的连线；
根据相邻两关节之间的连线与预设参考方向之间的实际夹角，确定人体动作。
本发明实施例的视频生成装置，通过获取选定的音频，以及音频中各时间节点对应的标准动作；播放音频，并在播放音频过程中采集各视频画面帧；在音频播放至每一个时间节点时，展示对应的标准动作，并识别时间节点同步采集的视频画面帧中的人体动作；根据同一时间节点的标准动作与人体动作之间的差异程度，生成人体动作的动作评价信息；根据音频、各视频画面帧和各人体动作的动作评价信息，生成目标视频。本实施例中，由于标准动作为用户需要做出的人体动作，相比于现有技术中用户脚踩箭头的跳舞方式，能够有效丰富跳舞动作，提升用户体验。此外，根据同一时间节点的标准动作与人体动作之间的差异程度，生成人体动作的动作评价信息，能够使得用户及时了解自己做出的人体动作是否标准，进一步提升用户的使用体验。最后，通过在音频播放结束时，生成视频，由此，用户可以回放或者分享视频，提升用户的参与感，用于解决现有体感跳舞游戏主要应用于固定设备上，例如体感跳舞机、电脑等，便携性较差。此外，对用户身体动作的判断，是通过确定用户脚踩的箭头方向正确与否，跳舞的方式较为单一。并且，用户在玩游戏时，由于无法记录游戏过程，导致用户的参与感较低的技术问题。
为达上述目的，本发明第三方面实施例提出了一种电子设备，包括：壳体、处理器、存储器、电路板和电源电路，其中，电路板安置在壳体围成的空间内部，处理器和存储器设置在电路板上；电源电路，用于为上述电子设备的各个电路或器件供电；存储器用于存储可执行程序代码；处理器通过读取存储器中存储的可执行程序代码来运行与可执行程序代码对应的程序，用于执行本发明第一方面实施例所述的视频生成方法。
为达上述目的，本发明第四方面实施例提出了一种非临时性计算机可读存储介质，其上存储有计算机程序，其特征在于，该程序被处理器执行时实现如本发明第一方面实施例所述的视频生成方法。
本发明附加的方面和优点将在下面的描述中部分给出，部分将从下面的描述中变得明显，或通过本发明的实践了解到。
附图说明
本发明上述的和/或附加的方面和优点从下面结合附图对实施例的描述中将变得明显和容易理解，其中：
图1为本发明实施例所提供的第一种视频生成方法的流程示意图；
图2为本发明实施例所提供的第二种视频生成方法的流程示意图；
图3为本发明实施例所提供的第三种视频生成方法的流程示意图；
图4为本发明实施例所提供的第四种视频生成方法的流程示意图；
图5为本发明实施例提供的一种视频生成装置的结构示意图；
图6为本发明实施例提供的另一种视频生成装置的结构示意图；
图7为本发明电子设备一个实施例的结构示意图。
具体实施方式
下面详细描述本发明的实施例，所述实施例的示例在附图中示出，其中自始至终相同或类似的标号表示相同或类似的元件或具有相同或类似功能的元件。下面通过参考附图描述的实施例是示例性的，旨在用于解释本发明，而不能理解为对本发明的限制。
针对现有体感跳舞游戏主要应用于固定设备上，例如体感跳舞机、电脑等，便携性较差。此外，对用户身体动作的判断，是通过确定用户脚踩的箭头方向正确与否，跳舞的方式较为单一。并且，用户在玩游戏时，由于无法记录游戏过程，导致用户的参与感较低的技术问题，本发明实施例中，通过获取选定的音频，以及音频中各时间节点对应的标准动作；播放音频，并在播放音频过程中采集各视频画面帧；在音频播放至每一个时间节点时，展示对应的标准动作，并识别时间节点同步采集的视频画面帧中的人体动作；根据同一时间节点的标准动作与人体动作之间的差异程度，生成人体动作的动作评价信息；根据音频、各视频画面帧和各人体动作的动作评价信息，生成目标视频。本实施例中，由于标准动作为用户需要做出的人体动作，相比于现有技术中用户脚踩箭头的跳舞方式，能够有效丰富跳舞动作，提升用户体验。此外，根据同一时间节点的标准动作与人体动作之间的差异程度，生成人体动作的动作评价信息，能够使得用户及时了解自己做出的人体动作是否标准，进一步提升用户的使用体验。最后，通过在音频播放结束时，生成视频，由此，用户可以回放或者分享视频，提升用户的参与感。
下面参考附图描述本发明实施例的视频生成方法、装置和电子设备。
图1为本发明实施例所提供的第一种视频生成方法的流程示意图。该视频生成方法可以应用于电子设备的应用程序中，其中，电子设备例如为个人电脑(PersonalComputer，PC)，云端设备或者移动设备，移动设备例如智能手机，或者平板电脑等。
如图1所示，该视频生成方法包括以下步骤：
步骤101，获取选定的音频，以及音频中各时间节点对应的标准动作。
作为一种可能的实现方式，电子设备的应用程序上可以设置一个音频选取的触发条件，例如，触发条件可以为一个音频选取控件，用户可以通过该音频选取控件触发选取音频。例如，当用户触发该音频选取控件时，可以调用歌曲选择界面，而后用户可以从歌曲选择界面任意选取一个音频，作为自身选定的音频。当用户选定音频后，应用程序可以获取用户选定的音频。
作为另一种可能的实现方式，电子设备的应用程序上可以设置一个拍摄控件，当应用程序探测到用户针对该拍摄控件的操作时，例如，当用户点击该拍摄控件时，该应用程序的界面可以自动展示歌曲选择界面，而后用户可以根据自身需求，从歌曲选择界面选取一个音频，作为自身选定的音频。当用户选定音频后，应用程序可以获取用户选定的音频。
本实施例中，歌曲选择界面中的音频，可以预先导入对应的标准动作，具体地，音频中每个时间节点均具有对应的标准动作，因此，在应用程序获取选定的音频后，该应用程序可以从该音频中获取各时间节点对应的标准动作。
步骤102，播放音频，并在播放音频过程中采集各视频画面帧。
可选地，在拍摄界面，当用户选定音频后，电子设备可以根据用户的操作对该音频进行播放，例如，当电子设备监测到用户点击该音频时，电子设备可以播放该音频，同时打开摄像头，采集各视频画面帧。
步骤103，在音频播放至每一个时间节点时，展示对应的标准动作。
由于用户从看到标准动作到做出人体动作，大脑需要反应一段时间，因此，本发明实施例中，为了便于用户及时做出人体动作，可以在音频播放至每一个时间节点之前，提前预设的提前时长，展示对应的标准动作。其中，预设的提前时长可以由用户根据自身需求进行设置，或者，预设的提前时长可以由电子设备的内置程序预先设定，对此不作限制。应当理解的是，预设的提前时长不应设置的过长，例如预设的提前时长可以为0.2s。
具体地，可以针对每一个时间节点，将时间节点与提前时长作差，得到差值，而后将差值作为起始时刻，进而可以从起始时刻开始，展示标准动作的示意图。
作为一种可能的实现方式，可以在拍摄界面的任意区域展示标准动作的示意图，该标准动作的示意图可以是固定不动的，或者，该标准动作的示意图可以沿预设轨迹移动，对此不作限制。其中，预设轨迹可以为电子设备的内置程序预先设置的。
作为另一种可能的实现方式，为了不影响用户查看电子设备屏幕上内容的同时，用户又能观看标准动作，本实施例中，可以在拍摄界面，展示半透明蒙版，其中，蒙版具有镂空的关注区，关注区内展示有用于示意标准动作的图像，即在关注区内展示标准动作的示意图。或者，可以在拍摄界面以弹幕的形式展示对应的标准动作，对此不作限制。
当标准动作的示意图沿预设轨迹移动时，在拍摄界面展示标准动作的示意图的同时，可以控制该标准动作的示意图沿预设轨迹移动。
步骤104，识别时间节点同步采集的视频画面帧中的人体动作。
作为一种可能的实现方式，用于采集视频画面帧的摄像头可以为能够采集用户深度信息的摄像头，通过获取的深度信息，可以识别出视频画面帧中的人体动作。例如，该摄像头可以为深度摄像头(Red-Green-Blue Depth，RGBD)，成像的同时可以获取视频画面帧中人体的深度信息，从而根据深度信息可以识别视频画面帧中的人体动作。此外，还可以通过结构光或者TOF镜头进行人体动作深度信息的获取，从而根据深度信息可以识别视频画面帧中的人体动作，对此不作限制。
作为另一种可能的实现方式，可以识别视频画面帧中，人体的各关节。例如，可以根据人脸识别技术识别出视频画面帧中的人脸以及人脸的位置信息，而后根据人体解剖学中肢体与身高的比例关系，可计算得到人体各关节的位置信息。当然也可以通过其他算法确定视频画面帧中人体的各关节的位置信息，对此不作限制。
在识别各关节后，可以连接人体各关节相邻的两关节，得到相邻两关节之间的连线，最后根据相邻两关节之间的连线与预设参考方向之间的实际夹角，确定视频画面帧中的人体动作。其中，预设参考方向可以为水平方向或者垂直方向。
步骤105，根据同一时间节点的标准动作与人体动作之间的差异程度，生成人体动作的动作评价信息。
本发明实施例中，人体动作的动作评价信息包括人体动作分值，用于指示人体动作与对应的标准动作之间的差异程度，具体地，人体动作分值越高，表明人体动作与对应的标准动作之间的差异程度越小，而人体动作分值越低，表明人体动作与对应的标准动作之间的差异程度越大。
本发明实施例中，在生成人体动作的动作评价信息之前，可以预先根据人体动作与标准动作之间的差异程度是否大于差异阈值，判断人体动作与标准动作是否匹配。具体地，可以确定在执行标准动作时，各相邻两关节之间的连线与参考方向之间的标准角度，针对每一条相邻两关节之间的连线，比较对应的标准角度与实际角度之间的差值。当每一条相邻两关节之间的连线计算出的差值均在误差范围内时，可以确定视频画面帧中的人体动作与标准动作匹配，而当存在至少一条相邻两关节之间的连线计算出的差值未处于误差范围内时，可以确定视频画面帧中的人体动作与标准动作不匹配。
可选地，当视频画面帧中的人体动作与标准动作不匹配时，表明用户做出的人体动作与对应的标准动作之间的差异程度较大，此时，可以将用户做出的人体动作得到的评分置0，而当视频画面帧中的人体动与标准动作匹配时，表明用户做出的人体动作与对应的标准动作之间的差异程度较小，此时，可以针对每一条相邻两关节之间的连线，根据对应的差值和误差范围，确定连线的评分系数，例如，标记误差范围为[a，b]，误差为Δ，可以根据公式p＝1-[2Δ/(a-b)]，计算得到连线的评分系数p，或者可以根据其他算法计算连线的评分系数，对此不作限制。当得到连线的评分系数后，可以根据连线的评分系数和连线对应的分值，生成连线的评价信息，例如，连线的评价信息可以等于该连线的评分系数乘以连线对应的分值。最后，可以通过将各条相邻两关节之间的连线的评价信息相加，得到人体动作的动作评价信息。
进一步地，人体动作的动作评价信息还可以包括人体动作分值所属区间对应的动画效果。例如，当人体动作分值满分为100时，若人体动作分值所属的区间[90,100]，动画效果可以为“完美或perfect”并搭配钻石闪烁，所属的区间[80，90)，动画效果可以为“很好或good”并搭配鲜花闪烁。
举例而言，根据时间节点A的标准动作与人体动作之间的差异程度，生成的人体动作分值为94分，在拍摄界面生成的动画效果为“perfect”并搭配钻石闪烁。由此，可以使得用户及时了解自己做出的人体动作是否标准，从而提升了用户的代入感。
步骤106，根据音频、各视频画面帧和各人体动作的动作评价信息，生成目标视频。
本发明实施例中，当音频播放结束时，可以获取不同时间节点对应的人体动作的动作评价信息，而后根据该音频、获取的各视频画面帧和对应的人体动作的动作评价信息，生成目标视频。
作为一种可能的实现方式，可以根据各视频画面帧所识别出的人体动作，在各视频画面帧中，添加相应人体动作的动作评价信息，而后根据音频和添加动作评价信息后的视频画面帧，生成目标视频。
本实施例的视频生成方法，通过获取选定的音频，以及音频中各时间节点对应的标准动作；播放音频，并在播放音频过程中采集各视频画面帧；在音频播放至每一个时间节点时，展示对应的标准动作，并识别时间节点同步采集的视频画面帧中的人体动作；根据同一时间节点的标准动作与人体动作之间的差异程度，生成人体动作的动作评价信息；根据音频、各视频画面帧和各人体动作的动作评价信息，生成目标视频。本实施例中，由于标准动作为用户需要做出的人体动作，相比于现有技术中用户脚踩箭头的跳舞方式，能够有效丰富跳舞动作，提升用户体验。此外，根据同一时间节点的标准动作与人体动作之间的差异程度，生成人体动作的动作评价信息，能够使得用户及时了解自己做出的人体动作是否标准，进一步提升用户的使用体验。最后，通过在音频播放结束时，生成视频，由此，用户可以回放或者分享视频，提升用户的参与感。
作为一种可能的实现方式，为了避免用户无意触发电子设备的拍摄控件，从而导致摄像头误采集图像的情况，或者，为了避免摄像头在未对准用户的情况下就进行图像采集，从而导致录入无效的图像的情况，本发明实施例中，在电子设备进行图像采集前，可以预先进入准备阶段。下面结合图2，对上述过程进行详细说明。
图2为本发明实施例所提供的第二种视频生成方法的流程示意图。
如图2所示，该视频生成方法包括以下步骤：
步骤201，展示准备动作，并采集准备图像。
本发明实施例中，可以在准备界面，展示准备动作，该准备动作可以由电子设备的内置程序预先设置，准备动作例如可以为双手平举的动作，或者为其他，对此不作限制。在展示准备动作的同时，电子设备的摄像头可以采集准备图像，其中，准备图像中包含用户做出的人体动作。
作为一种可能的实现方式，可以在准备界面的任意区域展示准备动作，该准备动作可以在预设时间段内固定不动，或者，该准备动作可以沿预设轨迹移动，对此不作限制。其中，预设轨迹可以为电子设备的内置程序预先设置的。
作为另一种可能的实现方式，为了不影响用户查看电子设备屏幕上内容的同时，用户又能观看准备动作，本实施例中，可以在准备界面，展示半透明蒙版，其中，蒙版具有镂空的关注区，关注区内展示有用于示意准备动作的图像，即在关注区展示准备动作的示意图。或者，可以在准备界面以弹幕的形式展示准备动作，对此不作限制。由此，用户可以在观看准备动作的同时，可以查看其它内容，提升用户体验。
步骤202，确定准备图像中的人体动作与准备动作匹配。
本发明实施例中，可以识别准备图像中的人体动作，而后判断准备图像中的人体动作是否与准备动作匹配，在确定准备图像中的人体动作与准备动作匹配时，可以开始进行图像采集。
作为一种可能的实现方式，用于采集准备图像的摄像头可以为能够采集用户深度信息的摄像头，通过获取的深度信息，可以识别出准备图像中的人体动作。例如，该摄像头可以为深度摄像头，成像的同时可以获取准备图像中人体的深度信息，从而根据深度信息可以识别准备图像中的人体动作。此外，还可以通过结构光或者TOF镜头进行人体动作深度信息的获取，从而根据深度信息可以识别准备图像中的人体动作，对此不作限制。
作为另一种可能的实现方式，可以识别准备图像中人体的各关节，而后连接人体各关节相邻的两关节，得到相邻两关节之间的连线，最后根据相邻两关节之间的连线与预设参考方向之间的实际夹角，确定视频画面帧中的人体动作。
在识别准备图像中的人体动作后，可以根据人体动作与准备动作之间的差异程度是否大于差异阈值，判断人体动作是否与准备动作匹配。具体地，可以确定在执行准备动作时，各相邻两关节之间的连线与参考方向之间的标准角度，针对每一条相邻两关节之间的连线，比较对应的标准角度与实际角度之间的差值。当每一条相邻两关节之间的连线计算出的差值均在误差范围内时，可以确定准备图像中的人体动作与准备动作匹配，而当存在至少一条相邻两关节之间的连线计算出的差值未处于误差范围内时，可以确定准备图像中的人体动作与准备动作不匹配。
本实施例的视频生成方法，通过在电子设备进行图像采集前，预先进入准确阶段。具体地，展示准备动作，并采集准备图像；确定准备图像中的人体动作与准备动作匹配。本实施例中，通过在人体动作与准备动作匹配时，开始进行图像采集，由此可以避免用户无意触发电子设备的拍摄控件，从而导致摄像头误采集图像的情况，或者，可以避免摄像头在未对准用户的情况下就进行图像采集，从而导致录入无效的图像的情况，能够保证后续图像采集的有效性和准确性。
作为一种可能的实现方式，为了增强视频生成过程中的参与感和趣味性，可以对用户做出的人体动作进行评价，参见图3，在图1所示实施例的基础上，在步骤105后，该视频生成方法还可以包括以下步骤：
步骤301，在用于采集各视频画面帧的拍摄界面上，展示每一个人体动作的动作评价信息。
本发明实施例中，拍摄界面展示标准动作时，同步采集的视频画面帧可以为多个，每一个视频画面帧具有对应的一个动作评价信息，将人体动作的动作评价信息，添加到同步采集到的视频画面帧，即在用于采集各视频画面帧的拍摄界面上，展示每一个人体动作的动作评价信息。作为一种可能的实现方式，可以对生成的多个动作评价信息进行筛选，保留评价最高的动作评价信息，而后将评价最高的动作评价信息，添加到同步采集到的多个视频画面帧中的至少一个视频画面帧，其中，至少一个视频画面帧，展示有评价最高的动作评价信息对应的人体动作。
步骤302，当音频播放结束时，根据每一个人体动作的动作评价信息，生成总评价信息。
本发明实施例中，当音频播放结束时，可以根据每一个人体动作的动作评价信息，将其中包含的人体动作分值生成总的成绩分值，以及总的分值所属区间对应的动画效果，生成总评价信息。
作为一种可能的实现方式，可以预先设置音频中每一个标准动作对应的权重，在确定每一个人体动作的动作评价信息后，可以通过将每一个人体动作的人体动作分值乘以对应的权重，得到乘积值，从而通过累加乘积值，获取总的成绩分值，而后根据总的成绩分值所属的区间，确定对应的动画效果。
举例而言，当音频中具有100个时间节点，即有100个标准动作时，可以设置每一个标准动作对应的权重，例如可以设置每一个标准动作对应权重均为0.01，当确定每一个人体动作的动作评价信息后，可以通过将每一个人体动作的人体动作分值乘以对应的权重，得到乘积值，从而通过累加乘积值，获取总的成绩分值。如果获取的总的成绩分值为87，可知其所属的区间为[80，90)，因此，动画效果可以为“good”并搭配鲜花闪烁。
步骤303，在结果展示界面，展示总评价信息。
本实施例中，当确定总评价信息后，可以在结果展示界面，展示总评价信息，从而可以使得用户了解自己做出的人体动作是否标准，提升了用户的使用体验。
本实施例的视频生成方法，通过在用于采集各视频画面帧的拍摄界面上，展示每一个人体动作的动作评价信息，当音频播放结束时，根据每一个人体动作的动作评价信息，生成总评价信息，在结果展示界面，展示总评价信息。由此，可以使得用户了解自己做出的人体动作是否标准，提升了用户的使用体验。
本发明实施例中，结果展示界面还包括：回看控件、拍摄控件和分享控件。具体地，当电子设备探测到用户针对回看控件的触发操作时，可以播放目标视频，使得用户在回放视频时，能够了解并纠正人体动作，使得下次录视频时动作更加标准；而当电子设备探测到用户针对拍摄控件的触发操作时，可以展示拍摄界面，触发步骤102～106，以重新生成目标视频，即用户可以通过触发拍摄控件，再次拍摄视频；而当电子设备探测到针对分享控件的触发操作时，对目标视频进行分享。
作为一种可能的实现方式，参见图4，对目标视频进行分享，具体包括以下步骤：
步骤401，展示分享界面。
本发明实施例中，分享界面包括自有平台分享控件和第三方平台分享控件。其中，第三方平台例如可以为Instagram、Facebook、Twitter等。
本发明实施例中，通过展示分享界面，从而用户可以通过分享界面的分享控件对目标视频进行分享。
步骤402，当探测到针对自有平台分享控件的触发操作时，在分享界面展示拍摄控件和展示控件。
本发明实施例中，当用户触发自有平台分享控件时，分享界面可以展示拍摄控件和展示控件，当用户点击拍摄控件时，电子设备可以获取目标视频中的音频，并展示准备界面，从而用户可以根据目标视频中的音频，重新生成视频。而当用户点击展示控件时，可以触发步骤403。
步骤403，当探测到针对展示控件的触发操作时，展示视频聚合页面；视频聚合页面包含目标视频和/或在自有平台已分享的视频。
本发明实施例中，当用户点击展示控件时，电子设备可以展示视频聚合页面，从而用户可分享目标视频，或者查看其它用户已分享的视频。
可选地，视频聚合页面还可以包含拍摄控件，从而用户可以通过拍摄控件重新选取音频，并录制视频。
本实施例的视频生成方法，通过展示分享界面，当探测到针对自有平台分享控件的触发操作时，在分享界面展示拍摄控件和展示控件，当探测到针对展示控件的触发操作时，展示视频聚合页面；视频聚合页面包含目标视频和/或在自有平台已分享的视频。由此，用户可以分享目标视频，从而可以使其它用户可以观看目标视频，提升用户的参与感。
为了实现上述实施例，本发明还提出一种视频生成装置。
图5为本发明实施例提供的一种视频生成装置的结构示意图。
如图5所示，该视频生成装置500包括：选择模块510、采集模块520、展示模块530、评价模块540，以及生成模块550。其中，
选择模块510，用于获取选定的音频，以及音频中各时间节点对应的标准动作。
采集模块520，用于播放音频，并在播放音频过程中采集各视频画面帧。
展示模块530，用于在音频播放至每一个时间节点时，展示对应的标准动作，并识别时间节点同步采集的视频画面帧的人体动作。
作为一种可能的实现方式，展示模块530，具体用于识别视频画面帧中，人体的各关节；连接人体各关节中相邻的两关节，得到相邻两关节之间的连线；根据相邻两关节之间的连线与预设参考方向之间的实际夹角，确定人体动作。
评价模块540，用于根据同一时间节点的标准动作与人体动作之间的差异程度，生成人体动作的动作评价信息。
生成模块550，用于根据音频、各视频画面帧和各人体动作的动作评价信息，生成目标视频。
作为一种可能的实现方式，生成模块550，具体用于根据各视频画面帧所识别出的人体动作，在各视频画面帧中，添加相应人体动作的动作评价信息；根据音频和添加动作评价信息后的视频画面帧，生成目标视频。
进一步地，作为本发明实施例的一种可能的实现方式，参见图6，在图5所示实施例的基础上，该视频生成装置还可以包括：
展示确定模块560，用于在播放音频，并同步采集视频画面之前，展示准备动作，并采集准备图像，确定准备图像中的人体动作与准备动作匹配。
展示生成模块570，用于在根据同一时间节点的标准动作与人体动作之间的差异程度，生成人体动作的动作评价信息之后，在采集各视频画面帧的拍摄界面上，展示每一个人体动作的动作评价信息；当音频播放结束时，根据每一个人体动作的动作评价信息，生成总评价信息；在结果展示界面，展示总评价信息。
界面展示模块580，用于在获取选定的音频之前，当探测到针对拍摄控件的操作时，展示歌曲选择界面。
本发明实施例中，结果展示界面还包括：回看控件、拍摄控件和分享控件；展示生成模块570，还用于当探测到针对回看控件的触发操作时，播放目标视频；当探测到针对拍摄控件的触发操作时，展示拍摄界面，以重新生成目标视频；当探测到针对分享控件的触发操作时，对目标视频进行分享。
作为一种可能的实现方式，展示生成模块570，具体用于展示分享界面；其中，分享界面包括自有平台分享控件和第三方平台分享控件；当探测到针对自有平台分享控件的触发操作时，在分享界面展示拍摄控件和展示控件；当探测到针对展示控件的触发操作时，展示视频聚合页面；视频聚合页面包含目标视频和/或在自有平台已分享的视频。
需要说明的是，前述对视频生成方法实施例的解释说明也适用于该实施例的视频生成装置500，此处不再赘述。
本实施例的视频生成装置，通过获取选定的音频，以及音频中各时间节点对应的标准动作；播放音频，并在播放音频过程中采集各视频画面帧；在音频播放至每一个时间节点时，展示对应的标准动作，并识别时间节点同步采集的视频画面帧中的人体动作；根据同一时间节点的标准动作与人体动作之间的差异程度，生成人体动作的动作评价信息；根据音频、各视频画面帧和各人体动作的动作评价信息，生成目标视频。本实施例中，由于标准动作为用户需要做出的人体动作，相比于现有技术中用户脚踩箭头的跳舞方式，能够有效丰富跳舞动作，提升用户体验。此外，根据同一时间节点的标准动作与人体动作之间的差异程度，生成人体动作的动作评价信息，能够使得用户及时了解自己做出的人体动作是否标准，进一步提升用户的使用体验。最后，通过在音频播放结束时，生成视频，由此，用户可以回放或者分享视频，提升用户的参与感。
本发明实施例还提供一种电子设备，电子设备包含前述任一实施例所述的装置。
图7为本发明电子设备一个实施例的结构示意图，可以实现本发明图1-6所示实施例的流程，如图7所示，上述电子设备可以包括：壳体41、处理器42、存储器43、电路板44和电源电路45，其中，电路板44安置在壳体41围成的空间内部，处理器42和存储器43设置在电路板44上；电源电路45，用于为上述电子设备的各个电路或器件供电；存储器43用于存储可执行程序代码；处理器42通过读取存储器43中存储的可执行程序代码来运行与可执行程序代码对应的程序，用于执行前述任一实施例所述的视频生成方法。
处理器42对上述步骤的具体执行过程以及处理器42通过运行可执行程序代码来进一步执行的步骤，可以参见本发明图1-6所示实施例的描述，在此不再赘述。
该电子设备以多种形式存在，包括但不限于：
(1)移动通信设备：这类设备的特点是具备移动通信功能，并且以提供话音、数据通信为主要目标。这类终端包括：智能手机(例如iPhone)、多媒体手机、功能性手机，以及低端手机等。
(2)超移动个人计算机设备：这类设备属于个人计算机的范畴，有计算和处理功能，一般也具备移动上网特性。这类终端包括：PDA、MID和UMPC设备等，例如iPad。
(3)便携式娱乐设备：这类设备可以显示和播放多媒体内容。该类设备包括：音频、视频播放器(例如iPod)，掌上游戏机，电子书，以及智能玩具和便携式车载导航设备。
(4)服务器：提供计算服务的设备，服务器的构成包括处理器、硬盘、内存、系统总线等，服务器和通用的计算机架构类似，但是由于需要提供高可靠的服务，因此在处理能力、稳定性、可靠性、安全性、可扩展性、可管理性等方面要求较高。
(5)其他具有数据交互功能的电子设备。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程，是可以通过计算机程序来指令相关的硬件来完成，所述的程序可存储于一计算机可读取存储介质中，该程序在执行时，可包括如上述各方法的实施例的流程。其中，所述的存储介质可为磁碟、光盘、只读存储记忆体(Read-Only Memory，ROM)或随机存储记忆体(Random AccessMemory，RAM)等。
以上所述，仅为本发明的具体实施方式，但本发明的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本发明揭露的技术范围内，可轻易想到的变化或替换，都应涵盖在本发明的保护范围之内。因此，本发明的保护范围应以权利要求的保护范围为准。
为了实现上述实施例，本发明还提出一种非临时性计算机可读存储介质，其上存储有计算机程序，其特征在于，该程序被处理器执行时实现如前述实施例所述的视频生成方法。
在本说明书的描述中，参考术语“一个实施例”、“一些实施例”、“示例”、“具体示例”、或“一些示例”等的描述意指结合该实施例或示例描述的具体特征、结构、材料或者特点包含于本发明的至少一个实施例或示例中。在本说明书中，对上述术语的示意性表述不必须针对的是相同的实施例或示例。而且，描述的具体特征、结构、材料或者特点可以在任一个或多个实施例或示例中以合适的方式结合。此外，在不相互矛盾的情况下，本领域的技术人员可以将本说明书中描述的不同实施例或示例以及不同实施例或示例的特征进行结合和组合。
此外，术语“第一”、“第二”仅用于描述目的，而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此，限定有“第一”、“第二”的特征可以明示或者隐含地包括至少一个该特征。在本发明的描述中，“多个”的含义是至少两个，例如两个，三个等，除非另有明确具体的限定。
流程图中或在此以其他方式描述的任何过程或方法描述可以被理解为，表示包括一个或更多个用于实现定制逻辑功能或过程的步骤的可执行指令的代码的模块、片段或部分，并且本发明的优选实施方式的范围包括另外的实现，其中可以不按所示出或讨论的顺序，包括根据所涉及的功能按基本同时的方式或按相反的顺序，来执行功能，这应被本发明的实施例所属技术领域的技术人员所理解。
在流程图中表示或在此以其他方式描述的逻辑和/或步骤，例如，可以被认为是用于实现逻辑功能的可执行指令的定序列表，可以具体实现在任何计算机可读介质中，以供指令执行系统、装置或设备(如基于计算机的系统、包括处理器的系统或其他可以从指令执行系统、装置或设备取指令并执行指令的系统)使用，或结合这些指令执行系统、装置或设备而使用。就本说明书而言，"计算机可读介质"可以是任何可以包含、存储、通信、传播或传输程序以供指令执行系统、装置或设备或结合这些指令执行系统、装置或设备而使用的装置。计算机可读介质的更具体的示例(非穷尽性列表)包括以下：具有一个或多个布线的电连接部(电子装置)，便携式计算机盘盒(磁装置)，随机存取存储器(RAM)，只读存储器(ROM)，可擦除可编辑只读存储器(EPROM或闪速存储器)，光纤装置，以及便携式光盘只读存储器(CDROM)。另外，计算机可读介质甚至可以是可在其上打印所述程序的纸或其他合适的介质，因为可以例如通过对纸或其他介质进行光学扫描，接着进行编辑、解译或必要时以其他合适方式进行处理来以电子方式获得所述程序，然后将其存储在计算机存储器中。
应当理解，本发明的各部分可以用硬件、软件、固件或它们的组合来实现。在上述实施方式中，多个步骤或方法可以用存储在存储器中且由合适的指令执行系统执行的软件或固件来实现。如，如果用硬件来实现和在另一实施方式中一样，可用本领域公知的下列技术中的任一项或他们的组合来实现：具有用于对数据信号实现逻辑功能的逻辑门电路的离散逻辑电路，具有合适的组合逻辑门电路的专用集成电路，可编程门阵列(PGA)，现场可编程门阵列(FPGA)等。
本技术领域的普通技术人员可以理解实现上述实施例方法携带的全部或部分步骤是可以通过程序来指令相关的硬件完成，所述的程序可以存储于一种计算机可读存储介质中，该程序在执行时，包括方法实施例的步骤之一或其组合。
此外，在本发明各个实施例中的各功能单元可以集成在一个处理模块中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个模块中。上述集成的模块既可以采用硬件的形式实现，也可以采用软件功能模块的形式实现。所述集成的模块如果以软件功能模块的形式实现并作为独立的产品销售或使用时，也可以存储在一个计算机可读取存储介质中。
上述提到的存储介质可以是只读存储器，磁盘或光盘等。尽管上面已经示出和描述了本发明的实施例，可以理解的是，上述实施例是示例性的，不能理解为对本发明的限制，本领域的普通技术人员在本发明的范围内可以对上述实施例进行变化、修改、替换和变型。

Claims (10)

1.一种视频生成方法，其特征在于，包括以下步骤：
获取选定的音频，以及所述音频中各时间节点对应的标准动作；
播放所述音频，并在播放所述音频过程中采集各视频画面帧；
在所述音频播放至每一个时间节点时，展示对应的标准动作，并识别所述时间节点同步采集的视频画面帧中的人体动作；
根据同一时间节点的所述标准动作与所述人体动作之间的差异程度，生成所述人体动作的动作评价信息；
根据所述音频、各视频画面帧和各人体动作的动作评价信息，生成目标视频。
2.根据权利要求1所述的视频生成方法，其特征在于，所述播放所述音频，并同步采集视频画面之前，还包括：
展示准备动作，并采集准备图像；
确定所述准备图像中的人体动作与所述准备动作匹配。
3.根据权利要求1所述的视频生成方法，其特征在于，所述根据所述音频、各视频画面帧和各人体动作的动作评价信息，生成目标视频，包括：
根据各视频画面帧所识别出的人体动作，在各视频画面帧中，添加相应人体动作的动作评价信息；
根据所述音频和添加所述动作评价信息后的视频画面帧，生成所述目标视频。
4.根据权利要求1所述的视频生成方法，其特征在于，所述根据同一时间节点的所述标准动作与所述人体动作之间的差异程度，生成所述人体动作的动作评价信息之后，还包括：
在用于采集各视频画面帧的拍摄界面上，展示每一个人体动作的动作评价信息；
当所述音频播放结束时，根据每一个人体动作的动作评价信息，生成总评价信息；
在结果展示界面，展示所述总评价信息。
5.根据权利要求4所述的视频生成方法，其特征在于，所述结果展示界面还包括：回看控件、拍摄控件和分享控件；
当探测到针对所述回看控件的触发操作时，播放所述目标视频；
当探测到针对所述拍摄控件的触发操作时，展示所述拍摄界面，以重新生成所述目标视频；
当探测到针对所述分享控件的触发操作时，对所述目标视频进行分享。
6.根据权利要求5所述的视频生成方法，其特征在于，所述对所述目标视频进行分享，包括：
展示分享界面；其中，所述分享界面包括自有平台分享控件和第三方平台分享控件；
当探测到针对所述自有平台分享控件的触发操作时，在所述分享界面展示所述拍摄控件和展示控件；
当探测到针对所述展示控件的触发操作时，展示视频聚合页面；所述视频聚合页面包含所述目标视频和/或在自有平台已分享的视频。
7.根据权利要求1所述的视频生成方法，其特征在于，所述获取选定的音频之前，还包括：
当探测到针对拍摄控件的操作时，展示歌曲选择界面。
8.根据权利要求1-7任一项所述的视频生成方法，其特征在于，所述识别所述时间节点同步采集的视频画面帧的人体动作，包括：
识别所述视频画面帧中，人体的各关节；
连接人体各关节中相邻的两关节，得到相邻两关节之间的连线；
根据相邻两关节之间的连线与预设参考方向之间的实际夹角，确定人体动作。
9.一种视频生成装置，其特征在于，所述装置包括：
选择模块，用于获取选定的音频，以及所述音频中各时间节点对应的标准动作；
采集模块，用于播放所述音频，并在播放所述音频过程中采集各视频画面帧；
展示模块，用于在所述音频播放至每一个时间节点时，展示对应的标准动作，并识别所述时间节点同步采集的视频画面帧的人体动作；
评价模块，用于根据同一时间节点的所述标准动作与所述人体动作之间的差异程度，生成所述人体动作的动作评价信息；
生成模块，用于根据所述音频、各视频画面帧和各人体动作的动作评价信息，生成目标视频。
10.一种电子设备，其特征在于，包括：壳体、处理器、存储器、电路板和电源电路，其中，电路板安置在壳体围成的空间内部，处理器和存储器设置在电路板上；电源电路，用于为上述电子设备的各个电路或器件供电；存储器用于存储可执行程序代码；处理器通过读取存储器中存储的可执行程序代码来运行与可执行程序代码对应的程序，用于执行权利要求1-8任一项所述的视频生成方法。
CN201711185439.6A 2017-11-23 2017-11-23 视频生成方法、装置和电子设备 Pending CN107920269A (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN201711185439.6A CN107920269A (zh) 2017-11-23 2017-11-23 视频生成方法、装置和电子设备
PCT/CN2018/098602 WO2019100757A1 (zh) 2017-11-23 2018-08-03 视频生成方法、装置和电子设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201711185439.6A CN107920269A (zh) 2017-11-23 2017-11-23 视频生成方法、装置和电子设备

Publications (1)

Publication Number Publication Date
CN107920269A true CN107920269A (zh) 2018-04-17

Family

ID=61897675

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201711185439.6A Pending CN107920269A (zh) 2017-11-23 2017-11-23 视频生成方法、装置和电子设备

Country Status (2)

Country Link
CN (1) CN107920269A (zh)
WO (1) WO2019100757A1 (zh)

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109068081A (zh) * 2018-08-10 2018-12-21 北京微播视界科技有限公司 视频生成方法、装置、电子设备及存储介质
CN109525891A (zh) * 2018-11-29 2019-03-26 北京字节跳动网络技术有限公司 多用户视频特效添加方法、装置、终端设备及存储介质
CN109621425A (zh) * 2018-12-25 2019-04-16 广州华多网络科技有限公司 一种视频生成方法、装置、设备及存储介质
WO2019100757A1 (zh) * 2017-11-23 2019-05-31 乐蜜有限公司 视频生成方法、装置和电子设备
CN110465074A (zh) * 2019-08-20 2019-11-19 腾讯科技（深圳）有限公司 一种信息提示方法及装置
CN113283384A (zh) * 2021-06-17 2021-08-20 贝塔智能科技(北京)有限公司 一种基于肢体识别技术的太极互动系统
CN113596353A (zh) * 2021-08-10 2021-11-02 广州艾美网络科技有限公司 体感互动数据处理方法、装置及体感互动设备
CN113678137A (zh) * 2019-08-18 2021-11-19 聚好看科技股份有限公司 显示设备
CN114513694A (zh) * 2022-02-17 2022-05-17 平安国际智慧城市科技股份有限公司 评分确定方法、装置、电子设备和存储介质
CN114549706A (zh) * 2022-02-21 2022-05-27 成都工业学院 一种动画生成方法及动画生成装置
WO2022116751A1 (zh) * 2020-12-02 2022-06-09 北京字节跳动网络技术有限公司 交互方法、装置、终端、服务器和存储介质

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112750184B (zh) * 2019-10-30 2023-11-10 阿里巴巴集团控股有限公司 数据处理、动作驱动与人机交互方法及设备
CN110958386B (zh) * 2019-11-12 2022-05-06 北京达佳互联信息技术有限公司 视频合成方法、装置、电子设备及计算机可读存储介质
CN113132808B (zh) * 2019-12-30 2022-07-29 腾讯科技（深圳）有限公司 视频生成方法、装置及计算机可读存储介质
CN112752142B (zh) * 2020-08-26 2022-07-29 腾讯科技（深圳）有限公司 配音数据处理方法、装置及电子设备
CN113365133B (zh) * 2021-06-02 2022-10-18 北京字跳网络技术有限公司 视频分享方法、装置、设备及介质
CN113810536B (zh) * 2021-08-02 2023-12-12 惠州Tcl移动通信有限公司 基于视频中人肢体动作轨迹展示信息方法、装置、终端
CN113949891B (zh) * 2021-10-13 2023-12-08 咪咕文化科技有限公司 一种视频处理方法、装置、服务端及客户端
CN114745576A (zh) * 2022-03-25 2022-07-12 上海合志信息技术有限公司 一种家庭健身互动方法、装置、电子设备以及存储介质

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20120051593A1 (en) * 2010-08-26 2012-03-01 Canon Kabushiki Kaisha Apparatus and method for detecting subject from image
CN102622509A (zh) * 2012-01-21 2012-08-01 天津大学 基于单目视频的三维游戏交互系统
CN102724449A (zh) * 2011-03-31 2012-10-10 青岛海信电器股份有限公司 互动式电视机和利用显示装置实现与用户互动的方法
CN103390174A (zh) * 2012-05-07 2013-11-13 深圳泰山在线科技有限公司 基于人体姿态识别的体育教学辅助系统和方法
CN104899912A (zh) * 2014-03-07 2015-09-09 腾讯科技（深圳）有限公司 动画制作方法和回放方法以及设备
CN105228708A (zh) * 2013-04-02 2016-01-06 日本电气方案创新株式会社 身体动作评分装置、舞蹈评分装置、卡拉ok装置以及游戏装置

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN201349264Y (zh) * 2008-12-30 2009-11-18 深圳市同洲电子股份有限公司 一种运动图像处理装置和系统
CN102799191B (zh) * 2012-08-07 2016-07-13 通号通信信息集团有限公司 基于动作识别技术的云台控制方法及系统
US9805766B1 (en) * 2016-07-19 2017-10-31 Compal Electronics, Inc. Video processing and playing method and video processing apparatus thereof
CN107920269A (zh) * 2017-11-23 2018-04-17 乐蜜有限公司 视频生成方法、装置和电子设备
CN107952238B (zh) * 2017-11-23 2020-11-17 香港乐蜜有限公司 视频生成方法、装置和电子设备

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20120051593A1 (en) * 2010-08-26 2012-03-01 Canon Kabushiki Kaisha Apparatus and method for detecting subject from image
CN102724449A (zh) * 2011-03-31 2012-10-10 青岛海信电器股份有限公司 互动式电视机和利用显示装置实现与用户互动的方法
CN102622509A (zh) * 2012-01-21 2012-08-01 天津大学 基于单目视频的三维游戏交互系统
CN103390174A (zh) * 2012-05-07 2013-11-13 深圳泰山在线科技有限公司 基于人体姿态识别的体育教学辅助系统和方法
CN105228708A (zh) * 2013-04-02 2016-01-06 日本电气方案创新株式会社 身体动作评分装置、舞蹈评分装置、卡拉ok装置以及游戏装置
CN104899912A (zh) * 2014-03-07 2015-09-09 腾讯科技（深圳）有限公司 动画制作方法和回放方法以及设备

Cited By (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2019100757A1 (zh) * 2017-11-23 2019-05-31 乐蜜有限公司 视频生成方法、装置和电子设备
CN109068081A (zh) * 2018-08-10 2018-12-21 北京微播视界科技有限公司 视频生成方法、装置、电子设备及存储介质
WO2020029523A1 (zh) * 2018-08-10 2020-02-13 北京微播视界科技有限公司 视频生成方法、装置、电子设备及存储介质
CN109525891A (zh) * 2018-11-29 2019-03-26 北京字节跳动网络技术有限公司 多用户视频特效添加方法、装置、终端设备及存储介质
CN109525891B (zh) * 2018-11-29 2020-01-21 北京字节跳动网络技术有限公司 多用户视频特效添加方法、装置、终端设备及存储介质
CN109621425A (zh) * 2018-12-25 2019-04-16 广州华多网络科技有限公司 一种视频生成方法、装置、设备及存储介质
CN109621425B (zh) * 2018-12-25 2023-08-18 广州方硅信息技术有限公司 一种视频生成方法、装置、设备及存储介质
CN113678137B (zh) * 2019-08-18 2024-03-12 聚好看科技股份有限公司 显示设备
CN113678137A (zh) * 2019-08-18 2021-11-19 聚好看科技股份有限公司 显示设备
CN110465074A (zh) * 2019-08-20 2019-11-19 腾讯科技（深圳）有限公司 一种信息提示方法及装置
CN110465074B (zh) * 2019-08-20 2023-10-20 腾讯科技（深圳）有限公司 一种信息提示方法及装置
WO2022116751A1 (zh) * 2020-12-02 2022-06-09 北京字节跳动网络技术有限公司 交互方法、装置、终端、服务器和存储介质
CN113283384A (zh) * 2021-06-17 2021-08-20 贝塔智能科技(北京)有限公司 一种基于肢体识别技术的太极互动系统
CN113596353A (zh) * 2021-08-10 2021-11-02 广州艾美网络科技有限公司 体感互动数据处理方法、装置及体感互动设备
CN114513694A (zh) * 2022-02-17 2022-05-17 平安国际智慧城市科技股份有限公司 评分确定方法、装置、电子设备和存储介质
CN114549706A (zh) * 2022-02-21 2022-05-27 成都工业学院 一种动画生成方法及动画生成装置

Also Published As

Publication number Publication date
WO2019100757A1 (zh) 2019-05-31

Similar Documents

Publication Publication Date Title
CN107920269A (zh) 视频生成方法、装置和电子设备
CN107952238A (zh) 视频生成方法、装置和电子设备
CN107920203A (zh) 图像采集方法、装置和电子设备
CN104936664B (zh) 包括用于捕获飞镖游戏图像的图像捕获设备的飞镖游戏设备
CN107943291B (zh) 人体动作的识别方法、装置和电子设备
JP6213920B2 (ja) ゲームシステム、それに用いられる制御方法及びコンピュータプログラム
CN109068053A (zh) 图像特效展示方法、装置和电子设备
CN107968921A (zh) 视频生成方法、装置和电子设备
CN107566751B (zh) 图像处理方法、装置、电子设备及介质
CN108245891B (zh) 一种头戴式设备、游戏交互平台、桌游实现系统及方法
CN109429052A (zh) 信息处理设备、信息处理设备的控制方法以及存储介质
CN109432753A (zh) 动作矫正方法、装置、存储介质及电子设备
CN108234591A (zh) 基于身份验证装置的内容数据推荐方法、装置和存储介质
KR101962578B1 (ko) Vr을 이용한 피트니스 운동 서비스 제공 시스템
US11253787B2 (en) Server system and play data community system for modified reproduction play
CN104041063B (zh) 视频的关联信息库制作和视频播放的方法、平台及系统
JP2014012195A (ja) ゲーム機、及びそれを利用したカード発行方法
CN108601980A (zh) 信息处理系统、信息处理方法、程序、服务器和信息处理终端
CN110574380A (zh) 服务器装置以及在该服务器装置中使用的计算机程序
JP2014023745A (ja) ダンス教習装置
JP6472949B2 (ja) プログラム、ゲーム装置及びサーバ
JP6586610B2 (ja) ゲーム機、ゲームシステム及びコンピュータプログラム
CN110532472A (zh) 内容同步推荐方法、装置、电子设备和存储介质
US10434421B2 (en) Game system, and storage medium used in same
JP5807053B2 (ja) ゲームシステム、それに用いられる制御方法及びコンピュータプログラム

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
TA01 Transfer of patent application right
TA01 Transfer of patent application right

Effective date of registration: 20190625

Address after: Room 1101, Santai Commercial Building, 139 Connaught Road, Hong Kong, China

Applicant after: Hong Kong Lemi Co., Ltd.

Address before: Cayman Islands, Greater Cayman Island, Kamana Bay, Casia District, Seitus Chamber of Commerce, 2547

Applicant before: Happy honey Company Limited

RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20180417