CN111083537A - 烹饪视频生成方法及装置 - Google Patents

烹饪视频生成方法及装置 Download PDF

Info

Publication number
CN111083537A
CN111083537A CN201911394270.4A CN201911394270A CN111083537A CN 111083537 A CN111083537 A CN 111083537A CN 201911394270 A CN201911394270 A CN 201911394270A CN 111083537 A CN111083537 A CN 111083537A
Authority
CN
China
Prior art keywords
cooking
video
determining
target
key frame
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201911394270.4A
Other languages
English (en)
Other versions
CN111083537B (zh
Inventor
杨华
樊光民
张涛
王剑楠
吴宇
何明强
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shanghai Chunmi Electronics Technology Co Ltd
Original Assignee
Shanghai Chunmi Electronics Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shanghai Chunmi Electronics Technology Co Ltd filed Critical Shanghai Chunmi Electronics Technology Co Ltd
Priority to CN201911394270.4A priority Critical patent/CN111083537B/zh
Publication of CN111083537A publication Critical patent/CN111083537A/zh
Application granted granted Critical
Publication of CN111083537B publication Critical patent/CN111083537B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/27Server based end-user applications
    • H04N21/274Storing end-user multimedia data in response to end-user request, e.g. network recorder
    • H04N21/2743Video hosting of uploaded data from client
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/23418Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44008Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics in the video stream
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

本公开是关于一种烹饪视频生成方法及装置。该方法包括:获取烹饪视频;所述烹饪视频为在烹饪过程中拍摄的食物视频;在所述烹饪视频中提取多个第一关键帧;所述多个第一关键帧用于表征烹饪过程中每个烹饪阶段食物状态的变化;根据所述多个第一关键帧确定目标关键帧;根据所述目标关键帧生成目标视频。该技术方案生成的目标视频既能够反映整个烹饪过程中食物状态的变化,又缩短了视频长度,从而节省了用户的观看时间,还缩小了目标视频占用的存储空间。

Description

烹饪视频生成方法及装置
技术领域
本公开涉及烹饪技术领域,尤其涉及一种烹饪视频生成方法及装置。
背景技术
随着食品加工装置的发展,诸如电饭煲、烤箱等烹饪器具得到广泛应用。
相关技术中,烹饪器具内设有摄像头,在烹饪过程中,摄像头能够拍摄食物从烹饪开始至烹饪结束的全部状态,使得用户能够根据摄像头拍摄的视频看到食物的整个烹饪过程。
但上述摄像头拍摄的视频是整个烹饪过程中的视频,视频较长,用户需要花费大量时间观看才能够获知整个食物的变化状态,这样,不仅浪费用户时间,还导致视频占用的存储空间较大。
发明内容
为克服相关技术中存在的问题,本公开实施例提供一种烹饪视频生成方法及装置。所述技术方案如下:
根据本公开实施例的第一方面,提供一种烹饪视频生成方法,包括:
获取烹饪视频;所述烹饪视频为在烹饪过程中拍摄的食物视频;
在所述烹饪视频中提取多个第一关键帧;所述多个第一关键帧用于表征烹饪过程中每个烹饪阶段食物状态的变化;
根据所述多个第一关键帧确定目标关键帧;
根据所述目标关键帧生成目标视频。
本公开的实施例提供的技术方案可以包括以下有益效果:在烹饪视频中提取用于表征烹饪过程中食物状态的变化的多个第一关键帧,再根据多个第一关键帧生成目标视频。这样,生成的目标视频既能够反映整个烹饪过程中食物状态的变化,又缩短了视频长度,从而节省了用户的观看时间,还缩小了目标视频占用的存储空间。
在一个实施例中,所述根据所述多个第一关键帧确定目标关键帧包括:
根据所述多个第一关键帧确定每个烹饪阶段食物状态的变化程度;
根据每个烹饪阶段所述食物状态的变化程度确定目标关键帧。
在一个实施例中,所述烹饪视频包括每个烹饪阶段的子视频;
所述在所述烹饪视频中提取多个第一关键帧包括:
在每个烹饪阶段的子视频中分别提取多个第一关键帧;
所述根据所述多个第一关键帧确定每个烹饪阶段食物状态的变化程度包括:
针对每个烹饪阶段的子视频,将间隔预设时间的两个第一关键帧进行比较,或者,将第一个关键帧分别与除所述第一个关键帧之外的其他关键帧进行比较,得到比较值;
在确定所述比较值大于或等于预设值时,确定当前烹饪阶段的食物状态的变化程度为一级程度;
在确定所述比较值小于所述预设值时,确定当前烹饪阶段的食物状态的变化程度为二级程度。
在一个实施例中,所述根据每个烹饪阶段所述食物状态的变化程度确定目标关键帧包括:
在确定当前烹饪阶段的食物状态的变化程度为一级程度时,在所述当前烹饪阶段对应的子视频中提取至少一个第二关键帧;所述第二关键帧与所述第一关键帧为不同的关键帧;
将所述多个第一关键帧和所述至少一个第二关键帧确定为所述目标关键帧。
在一个实施例中,还包括:
在当前烹饪阶段的食物状态的变化程度为二级程度时,在所述当前烹饪阶段对应的子视频中提取至少一个第三关键帧;所述第三关键帧与所述第一关键帧为不同的关键帧,且所述第三关键帧的数量小于所述第二关键帧的数量;
将所述多个第一关键帧和所述至少一个第三关键帧确定为所述目标关键帧。
在一个实施例中,所述烹饪视频中携带有至少一个操控标记;所述操控标记为获取操控指令时在所述烹饪视频中添加的与所述操控指令对应的标识;
所述根据所述多个第一关键帧确定每个烹饪阶段食物状态的变化程度包括:
根据所述操控标记确定与每个所述操控指令对应的烹饪阶段;
从所述多个第一关键帧中获取每个烹饪阶段内的关键帧;
将每个烹饪阶段内的关键帧进行比较,确定所述食物状态的变化程度。
在一个实施例中,所述根据所述多个第一关键帧确定目标关键帧包括:
获取关注时间段;
从所述烹饪视频中提取所述关注时间段内的至少一个第四关键帧;
将所述多个第一关键帧和所述至少一个第四关键帧确定为所述目标关键帧。
在一个实施例中,所述在所述烹饪视频中提取多个第一关键帧包括:
获取目标烹饪类型;
在预先存储的烹饪类型与帧提取规则的对应关系中,确定与所述目标烹饪类型对应的目标帧提取规则;所述帧提取规则为根据所述烹饪类型对应的烹饪状态变化预先设定的提取规则;
根据所述目标帧提取规则在所述烹饪视频中提取多个所述第一关键帧;
所述根据所述多个第一关键帧确定目标关键帧包括:
将所述多个第一关键帧确定为所述目标关键帧。
根据本公开实施例的第二方面,提供一种烹饪视频生成装置,包括:
获取模块,用于获取烹饪视频;所述烹饪视频为在烹饪过程中拍摄的食物视频;
提取模块,用于在所述烹饪视频中提取多个第一关键帧;所述多个第一关键帧用于表征烹饪过程中每个烹饪阶段食物状态的变化;
确定模块,用于根据所述多个第一关键帧确定目标关键帧;
生成模块,用于根据所述目标关键帧生成目标视频。
本公开的实施例提供的技术方案可以包括以下有益效果:在烹饪视频中提取用于表征烹饪过程中食物状态的变化的多个第一关键帧,再根据多个第一关键帧生成目标视频。这样,生成的目标视频既能够反映整个烹饪过程中食物状态的变化,又缩短了视频长度,从而节省了用户的观看时间,还缩小了目标视频占用的存储空间。
在一个实施例中,所述确定模块包括第一确定子模块和第二确定子模块;
所述第一确定子模块,用于根据所述多个第一关键帧确定每个烹饪阶段食物状态的变化程度;
所述第二确定子模块,用于根据每个烹饪阶段所述食物状态的变化程度确定目标关键帧。
在一个实施例中,所述烹饪视频包括每个烹饪阶段的子视频;所述提取模块包括第一提取子模块,所述第一确定子模块包括比较单元、第一确定单元和第二确定单元;
所述第一提取子模块,用于在每个烹饪阶段的子视频中分别提取多个第一关键帧;
所述比较单元,用于针对每个烹饪阶段的子视频,将间隔预设时间的两个第一关键帧进行比较,或者,将第一个关键帧分别与除所述第一个关键帧之外的其他关键帧进行比较,得到比较值;
所述第一确定单元,用于在确定所述比较值大于或等于预设值时,确定当前烹饪阶段的食物状态的变化程度为一级程度;
所述第二确定单元,用于在确定所述比较值小于所述预设值时,确定当前烹饪阶段的食物状态的变化程度为二级程度。
在一个实施例中,所述第二确定子模块包括第一提取单元、第二提取单元、第三确定单元和第四确定单元;
所述第一提取单元,用于在确定当前烹饪阶段的食物状态的变化程度为一级程度时,在所述当前烹饪阶段对应的子视频中提取至少一个第二关键帧;所述第二关键帧与所述第一关键帧为不同的关键帧;
所述第三确定单元,用于将所述多个第一关键帧和所述至少一个第二关键帧确定为所述目标关键帧;
所述第二提取单元,用于在当前烹饪阶段的食物状态的变化程度为二级程度时,在所述当前烹饪阶段对应的子视频中提取至少一个第三关键帧;所述第三关键帧与所述第一关键帧为不同的关键帧,且所述第三关键帧的数量小于所述第二关键帧的数量;
所述第四确定单元,用于将所述多个第一关键帧和所述至少一个第三关键帧确定为所述目标关键帧。
在一个实施例中,所述烹饪视频中携带有至少一个操控标记;所述操控标记为获取操控指令时在所述烹饪视频中添加的与所述操控指令对应的标识;所述第一确定子模块还包括第五确定单元、获取单元和第六确定单元;
所述第五确定单元,用于根据所述操控标记确定与每个所述操控指令对应的烹饪阶段;
所述获取单元,用于从所述多个第一关键帧中获取每个烹饪阶段内的关键帧;
所述第六确定单元,用于将每个烹饪阶段内的关键帧进行比较,确定所述食物状态的变化程度。
在一个实施例中,所述确定模块还包括第一获取子模块、第二提取子模块和第三确定子模块;
所述第一获取子模块,用于获取关注时间段;
所述第二提取子模块,用于从所述烹饪视频中提取所述关注时间段内的至少一个第四关键帧;
所述第三确定子模块,用于将所述多个第一关键帧和所述至少一个第四关键帧确定为所述目标关键帧。
在一个实施例中,所述提取模块包括第二获取子模块、第四确定子模块和第三提取子模块;所述确定模块还包括第五确定子模块;
所述第二获取子模块,用于获取目标烹饪类型;
所述第四确定子模块,用于在预先存储的烹饪类型与帧提取规则的对应关系中,确定与所述目标烹饪类型对应的目标帧提取规则;所述帧提取规则为根据所述烹饪类型对应的烹饪状态变化预先设定的提取规则;
所述第三提取子模块,用于根据所述目标帧提取规则在所述烹饪视频中提取多个所述第一关键帧;
所述第五确定子模块,用于将所述多个第一关键帧确定为所述目标关键帧。
根据本公开实施例的第三方面,提供一种烹饪视频生成装置,包括:
处理器;
用于存储处理器可执行指令的存储器;
其中,所述处理器被配置为:
获取烹饪视频;所述烹饪视频为在烹饪过程中拍摄的食物视频;
在所述烹饪视频中提取多个第一关键帧;所述多个第一关键帧用于表征烹饪过程中每个烹饪阶段食物状态的变化;
根据所述多个第一关键帧确定目标关键帧;
根据所述目标关键帧生成目标视频。
应当理解的是,以上的一般描述和后文的细节描述仅是示例性和解释性的,并不能限制本公开。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分,示出了符合本公开的实施例,并与说明书一起用于解释本公开的原理。
图1是根据一示例性实施例示出的烹饪视频生成方法的流程图。
图2是根据一示例性实施例示出的烹饪视频生成方法的流程图。
图3是根据一示例性实施例示出的烹饪视频生成方法的流程图。
图4a是根据一示例性实施例示出的烹饪视频生成装置的结构示意图。
图4b是根据一示例性实施例示出的烹饪视频生成装置的结构示意图。
图4c是根据一示例性实施例示出的烹饪视频生成装置的结构示意图。
图4d是根据一示例性实施例示出的烹饪视频生成装置的结构示意图。
图4e是根据一示例性实施例示出的烹饪视频生成装置的结构示意图。
图4f是根据一示例性实施例示出的烹饪视频生成装置的结构示意图。
图4g是根据一示例性实施例示出的烹饪视频生成装置的结构示意图。
图5是根据一示例性实施例示出的烹饪视频生成装置的框图。
具体实施方式
这里将详细地对示例性实施例进行说明,其示例表示在附图中。下面的描述涉及附图时,除非另有表示,不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本公开相一致的所有实施方式。相反,它们仅是与如所附权利要求书中所详述的、本公开的一些方面相一致的装置和方法的例子。
本公开实施例提供的技术方案涉及烹饪器具或者移动终端,该烹饪器具可以为智能烤箱、智能电饭煲、智能蒸箱等烹饪器具,该移动终端为用户使用的手机、平板电脑、笔记本电脑等设备,本公开实施例对此不做限定。相关技术中,烹饪器具内设有摄像头,在烹饪过程中,摄像头能够拍摄食物从烹饪开始至烹饪结束的全部状态,使得用户能够根据摄像头拍摄的视频看到食物的整个烹饪过程。但上述摄像头拍摄的视频是整个烹饪过程中的视频,视频较长,用户需要花费大量时间观看才能够获知整个食物的变化状态,这样,不仅浪费用户时间,还导致视频占用的存储空间较大。本公开实施例提供的技术方案中,在烹饪视频中提取用于表征烹饪过程中食物状态的变化的多个第一关键帧,再根据多个第一关键帧生成目标视频。这样,生成的目标视频既能够反映整个烹饪过程中食物状态的变化,又缩短了视频长度,从而节省了用户的观看时间,还缩小了目标视频占用的存储空间。
图1是根据一示例性实施例示出的一种烹饪视频生成方法的流程图,该方法应用于烹饪器具或者移动终端,如图1所示,该烹饪视频生成方法包括以下步骤101至步骤104:
在步骤101中,获取烹饪视频。
其中,所述烹饪视频为在烹饪过程中拍摄的食物视频,即食物视频为食物烹饪过程视频;该烹饪视频可以为整个烹饪过程中的一个视频,也可以为每个烹饪阶段的子视频。
示例的,烹饪器具内部设有摄像头,在烹饪视频为整个烹饪过程中的一个视频,在烹饪开始时,烹饪器具内的处理器控制摄像头进行拍摄,在烹饪结束时,处理器控制摄像头停止拍摄,摄像头将拍摄得到的烹饪视频发送至处理器,使得烹饪器具获取到烹饪视频,在烹饪视频为每个烹饪阶段的子视频时,烹饪器具可在每获取一个操控指令时,控制摄像头开始拍摄,在获取到下一个操控指令时,结束当前视频的拍摄,进行下一个视频的拍摄,从而可以获取到每个烹饪过程的子视频;若该方法应用于移动终端时,则烹饪器具与移动终端建立无线连接,烹饪器具将获取到的烹饪视频发送至移动终端,使得移动终端获取到烹饪视频。
在步骤102中,在所述烹饪视频中提取多个第一关键帧。
其中,所述多个第一关键帧用于表征烹饪过程中每个烹饪阶段食物状态的变化。
可选的,在获取到烹饪视频时,可以按照预设时间间隔在烹饪视频中提取若干个第一关键帧,使得获取到的若干个第一关键帧包括烹饪过程中每个烹饪阶段的食物的关键帧,能够反应出食物状态的变化。其中,预设时间间隔可以是10秒或者1分钟等,具体可根据需求自行设定。
还可以根据提取算法随机在烹饪视频中提取若干个第一关键帧,例如,烹饪视频的时长为120分钟,则根据提取算法提取的若干个第一关键帧可以为1分钟时对应的关键帧、8分钟时对应的关键帧、20分钟时对应的关键帧、30分钟时对应的关键帧、35分钟时对应的关键帧、60分钟对应的关键帧等等。
还可以获取目标烹饪类型;在预先存储的烹饪类型与帧提取规则的对应关系中,确定与所述目标烹饪类型对应的目标帧提取规则;再根据所述目标帧提取规则在所述烹饪视频中提取多个所述第一关键帧。
其中,所述帧提取规则为根据所述烹饪类型对应的烹饪状态变化预先设定的提取规则;烹饪类型包括焖煎、蒸煮、爆炒、烘焙等各种烹饪方式。
示例的,假设烹饪类型为烤面包,开发人员可根据经验设定烤面包对应的帧提取规则,例如烤面包的整个过程包括发酵、烘焙和上色,其中发酵时间为2小时,烘焙时间为30分钟,上色时间为5分钟,则根据烤面包的经验可知,在发酵的2个小时内,前30分钟面团会迅速膨胀,而剩余90分钟面团的形状变化不大;在烘焙的30分钟内,前10分钟变色比较慢、后20分钟的变色比较快;在上色的5分钟内面包的变化很快;这样,开发人员就可以根据烤面包的整个过程预先设定关于烤面包的帧提取规则,例如,烤面包的帧提取规则为:发酵阶段,前30分钟内每隔2分钟提取一个关键帧,在发酵的后90分钟内每隔10分钟提取一个关键帧;烘焙阶段,前10分钟内每隔2.5分钟提取一个关键帧,后20分钟每隔1分钟提取一个关键帧;上色阶段,每隔30秒提取一个关键帧。由此可以看出,根据预先设定的烤面包对应的帧提取规则提取出的多个第一关键帧就可以很好地反应出烤面包的整个过程中面包的状态变化。
另外,在烹饪视频为每个烹饪阶段的子视频时,可在每个烹饪阶段的子视频中分别提取多个第一关键帧。
在步骤103中,根据所述多个第一关键帧确定目标关键帧。
在步骤104中,根据所述目标关键帧生成目标视频。
示例的,若多个第一关键帧是根据预设时间间隔在烹饪视频中提取得到的,则可以直接将多个第一关键帧确定为目标关键帧;若多个第一关键帧是根据帧提取规则提取得到的,由于根据帧提取规则得到的多个第一关键帧能够很好地反应出烹饪的整个过程中食物的状态变化,所以,也可以直接将多个第一关键帧确定为目标关键帧。
在获取到目标关键帧时,将多个第一关键帧按照时间顺序进行合成,得到目标视频,若执行主体为烹饪器具,则烹饪器具将得到的目标视频发送至移动终端,由移动终端将接收到的目标视频发布在社交网络应用程序上,实现视频的共享;若执行主体为移动终端,则移动终端直接将生成的目标视频发布在社交网络应用程序上,实现视频的共享;当然,执行主体还可以为服务器,烹饪器具将获取到的食物视频发送至服务器,由服务器根据上述方法在烹饪视频中提取多个第一关键帧,并生成目标视频,再将目标视频发布在社交网络应用程序上,实现视频的共享。
本公开实施例提供一种烹饪视频生成方法,在烹饪视频中提取用于表征烹饪过程中食物状态的变化的多个第一关键帧,再根据多个第一关键帧生成目标视频。这样,生成的目标视频既能够反映整个烹饪过程中食物状态的变化,又缩短了视频长度,从而节省了用户的观看时间,还缩小了目标视频占用的存储空间。
可选的,如图2所示,在根据提取算法随机在烹饪视频中提取若干个第一关键帧的情况下,步骤103根据所述多个第一关键帧确定目标关键帧具体可通过以下步骤1031和步骤1032来实现:
在步骤1031中,根据所述多个第一关键帧确定每个烹饪阶段食物状态的变化程度。
可选的,针对每个烹饪阶段的子视频,将间隔预设时间的两个第一关键帧进行比较,或者,将第一个关键帧分别与除所述第一个关键帧之外的其他关键帧进行比较,得到比较值,在确定所述比较值大于或等于预设值时,确定当前烹饪阶段的食物状态的变化程度为一级程度;在确定所述比较值小于所述预设值时,确定当前烹饪阶段的食物状态的变化程度为二级程度。
其中,该预设时间可根据实际需求自行设定,在此不作限定。
示例的,针对每个烹饪阶段的子视频都获取到多个第一关键帧,将每个烹饪阶段内的每个第一关键帧进行预处理,包括去燥、对比度增强等,然后将预处理后的每个第一关键帧进行图像分割,提取目标区域,再对每个目标区域进行特征分析,提取并分析目标区域的特征信息,具体包括对目标区域的颜色信息的对比分析、目标区域的大小的对比分析以及目标区域的形状的比对分析,这样,参与比较的每两个第一关键帧之间的比较都能够得到一个比较值,再将比较值与预设值进行比较,在确定比较值大于或等于预设值时,则确定参与比较的两个第一关键帧之间的食物状态的变化程度较大,在确定比较值小于预设值时,则确定参与比较的两个第一关键帧之间的食物状态的变化程度较小;按照此方法,对于每个烹饪阶段,可以得到参与比较的两个第一关键帧之间的食物状态的变化程度较大的次数和变化程度较小的次数,当食物状态的变化程度较大的次数大于变化程度较小的次数时,则确定该烹饪阶段食物状态的变化程度为一级程度;当食物状态的变化程度较大的次数小于变化程度较小的次数时,则确定该烹饪阶段食物状态的变化程度为二级程度;从而可以根据此方法确定出每个烹饪阶段的食物状态的变化程度。
需要说明的是,将第一个关键帧分别与除所述第一个关键帧之外的其他关键帧进行比较的方法与将间隔预设时间的两个第一关键帧进行比较类似,具体可参考将相邻的两个第一关键帧进行比较的方法,在此不再赘述。
在步骤1032中,根据每个烹饪阶段所述食物状态的变化程度确定目标关键帧。
可选的,在确定当前烹饪阶段的食物状态的变化程度为一级程度时,在所述当前烹饪阶段对应的子视频中提取至少一个第二关键帧;所述第二关键帧与所述第一关键帧为不同的关键帧;
将所述多个第一关键帧和所述至少一个第二关键帧确定为所述目标关键帧。
示例的,在确定当前烹饪阶段的食物状态的变化程度为一级程度时,说明当前烹饪阶段的食物状态的变化程度比较大,此时,可以根据第一预设规则再在该烹饪阶段对应的子视频中多提取一些第二关键帧,具体第一预设规则可以根据烹饪类型来设定,可以是根据预设间隔时长提取,也可以是均匀提取若干帧。进而将获取到的至少一个第二关键帧和多个第一关键帧均作为目标关键帧,将每个目标关键帧按照每个关键帧的时间点进行排序,然后将排序后的所有关键帧进行组合,生成目标视频,使得目标视频中包含食物状态的变化程度较大的烹饪阶段的多个关键帧,从而能够很好的反应出整个烹饪过程中食物状态的变化。
可选的,在当前烹饪阶段的食物状态的变化程度为二级程度时,在所述当前烹饪阶段对应的子视频中提取至少一个第三关键帧;所述第三关键帧与所述第一关键帧为不同的关键帧,且所述第三关键帧的数量小于所述第二关键帧的数量;
将所述多个第一关键帧和所述至少一个第三关键帧确定为所述目标关键帧。
示例的,在确定当前烹饪阶段的食物状态的变化程度为二级程度时,说明当前烹饪阶段的食物状态的变化程度比较小,此时,可以将获取的多个第一关键帧直接作为目标关键帧,也可以根据第二预设规则再在该烹饪阶段对应的子视频中少提取一些第三关键帧,具体第二预设规则可以根据烹饪类型来设定,可以是根据预设间隔时长提取,也可以是均匀提取若干帧。进而将获取到的至少一个第三关键帧和多个第一关键帧均作为目标关键帧,将每个目标关键帧按照每个关键帧的时间点进行排序,然后将排序后的所有关键帧进行组合,生成目标视频,使得目标视频中包含食物状态的变化程度较大的烹饪阶段的多个关键帧,还包含食物状态的变化程度较小的烹饪阶段的少量关键帧,这样,既能够很好的反应出整个烹饪过程中食物状态的变化,又能够缩短目标视频的整体长度,减小了目标视频所占用的存储空间。
示例的,若烹饪类型为烤面包,假设发酵时间为2小时,在这2小时内,前30分钟的烹饪阶段内面团会迅速膨胀,其他90分钟的烹饪阶段内面团的形状变化不大,则第一预设规则可以为在发酵的前30分钟提取N个关键帧,在发酵的后90分钟提取M个关键帧,其中,N大于M,且N和M均为大于等于1的整数;第一预设规则还可以为在发酵的前30分钟和后90分钟内提取相同数量的关键帧,其中,在发酵的前30分钟内均匀提取一定数量的关键帧,在发酵的后90分钟内均匀提取一定数量的关键帧。
再例如,面团在发酵后,进入烘焙阶段,在烘焙过程中,面包会逐渐变色,变色的程度可能不是匀速变化的,对于快速变色的阶段,可以多提取几个关键帧,对于其他时间段可以少提取几个关键帧。
需要说明的是,在确定当前烹饪阶段的食物状态的变化程度为二级程度时,说明当前烹饪阶段的食物状态的变化程度比较小时,还可以在该烹饪阶段提取的多个第一关键帧中删除几个帧,以缩短最终生成的目标视频的长度。
可选的,在烹饪视频包括每个烹饪阶段的子视频;其中,每个烹饪阶段的子视频是指在每次获取烹饪温度时,相邻两个烹饪温度之间的视频的情况下;还可以在获取到每个烹饪阶段的子视频中的多个第一关键帧时,获取在烹饪过程中记录的每个烹饪温度以及每个烹饪温度对应的获取时间,此时,步骤1031包括:将相邻两个烹饪温度的差值与预设温度值进行比较,在确定相邻两个烹饪温度的差值大于或等于预设温度值时,则确定该烹饪阶段食物状态的变化程度为一级程度;在确定相邻两个烹饪温度的差值小于预设温度值时,则确定该烹饪阶段食物状态的变化程度为二级程度。
可选的,在所述烹饪视频中携带有至少一个操控标记的情况下,其中,所述操控标记为获取操控指令时在所述烹饪视频中添加的与所述操控指令对应的标识;步骤1031还可通过以下方法来实现:
根据所述操控标记确定与每个所述操控指令对应的烹饪阶段;从所述多个第一关键帧中获取每个烹饪阶段内的关键帧;将每个烹饪阶段内的关键帧进行比较,确定所述食物状态的变化程度。
示例的,烹饪器具的处理器在烹饪开始或者烹饪过程中都需要获取操控指令,该操控指令用于指示相关元部件执行对应操作,在每次获取到操控指令时,处理器同时记录获取操控指令的时间,待摄像头将拍摄好的烹饪视频发送至处理器时,若该方法应用于烹饪器具,则烹饪器具的处理器根据记录的每个获取操控指令的时间在烹饪视频中添加与每个操控指令对应的操控标记;若该方法应用于移动终端,则烹饪器具将获取到的烹饪视频和记录的每个获取操作时间的时间发送至移动终端,由移动终端根据接收到的每个获取操控指令的时间在烹饪视频中添加与每个操控指令对应的操控标记,从而得到携带有操控标记的烹饪视频;每次操控指令的获取都对应一个操控标记,所以烹饪视频中携带有多个操控标记。
在获取到携带有操控标记的烹饪视频时,根据操控标记将多个第一关键帧进行分类,两个操控标记之间的关键帧属于同一操控指令对应的烹饪阶段的关键帧,将属于同一操控指令对应的烹饪阶段的关键帧划分为同一类关键帧,按照此方法可以确定出每个操控指令对应的烹饪阶段的一类关键帧,即从多个第一关键帧中确定出每个烹饪阶段内的关键帧。
在确定出每个烹饪阶段内的关键帧时,通过每个烹饪阶段内的多个关键帧之间的变化来确定该烹饪阶段食物状态的变化程度,具体确定食物状态的变化程度的方法可参考上述方法,在此不再赘述。
需要说明的是,上述操控指令用于设定烹饪参数和/或烹饪功能;烹饪参数包括烹饪温度、烹饪火力、烹饪压力、烹饪风力和烹饪时长等;烹饪功能包括加热功能、发酵功能、烘焙功能等,具体烹饪功能和烹饪参数可根据具体的烹饪器具来设定,例如,烹饪器具为智能烤箱,则烹饪功能可以为打开上加热棒、关闭下加热棒等,烹饪参数可以为烹饪温度、烹饪火力、发酵时长、烘焙时长和上色时长等;每次烹饪参数或者烹饪功能的设定便是一次操控指令的获取。
示例的,假设烹饪参数为烹饪温度,则操控标记为每个烹饪温度对应的标记,可以根据操控标记获取记录标记的时间,然后根据该时间获取在烹饪过程中记录的对应的烹饪温度,进而根据获取的每个烹饪温度和对应的时间确定烹饪过程中的温度变化曲线,根据对温度变化曲线的分析可以确定出每个烹饪温度对应的烹饪阶段,再从多个第一关键帧中获取每个烹饪阶段内的关键帧,将每个烹饪阶段内的关键帧进行比较,确定食物状态的变化程度。
需要说明的是,根据所述多个第一关键帧确定每个烹饪阶段食物状态的变化程度还可以通过以下方法来实现:
预先存储有预设图像样品与食物状态信息的对应关系,其中,食物状态信息可以为食物的形状信息、食物的颜色信息以及食物的尺寸信息等,在获取到每个烹饪阶段的多个第一关键帧时,针对每个烹饪阶段,将每个第一关键帧分别与预设图像样品进行匹配,若有与预设图像样品匹配的关键帧,则将该预设图像样品对应的食材状态信息确定为与预设图像样品匹配的关键帧的食物状态信息,再将相邻两个关键帧的食物状态信息进行比较,确定出相邻两个关键帧的食物状态的变化程度,进而确定该烹饪阶段内的食物状态的变化程度。
可选的,如图3所示,步骤103还可通过以下步骤1033至步骤1035来实现:
在步骤1033中,获取关注时间段。
在步骤1034中,从所述烹饪视频中提取所述关注时间段内的至少一个第四关键帧。
在步骤1035中,将所述多个第一关键帧和所述至少一个第四关键帧确定为所述目标关键帧。
其中,烹饪视频中携带视频时间轴,所述关注时间段为用户关注的整个烹饪过程中的某个时间段,该关注时间段可以是用户输入,也可以是预先存储。
示例的,在获取到用户设定的关注时间段时,在烹饪视频中定位该关注时间段,并将定位的该关注时间段对应的视频进行截取,再在截取的视频中以预设时间间隔提取至少一个第四关键帧,最后将多个第一关键帧和至少一个第四关键帧都确定为目标关键帧,将目标关键帧按照时间点进行排序,合成目标视频。这样,能够根据用户需求获取到用户所关注的目标视频,提高了用户体验。
本公开实施例提供一种烹饪视频生成方法,在烹饪视频中提取用于表征烹饪过程中食物状态的变化的多个第一关键帧,然后根据多个第一关键帧确定每个烹饪阶段食物状态的变化程度,再根据每个烹饪阶段食物状态的变化程度的大小提取一定数量的第二关键帧或者第三关键帧,再根据多个第一关键帧和第二关键帧或者多个第一关键帧和第三关键帧生成目标视频。这样,生成的目标视频既能够反映整个烹饪过程中食物状态的变化,又缩短了视频长度,从而节省了用户的观看时间,还缩小了目标视频占用的存储空间。
下述为本公开装置实施例,可以用于执行本公开方法实施例。
图4a是根据一示例性实施例示出的一种烹饪视频生成装置40的结构示意图,该装置40可以通过软件、硬件或者两者的结合实现成为电子设备的部分或者全部。如图4a所示,该烹饪视频生成装置40包括获取模块401,提取模块402,确定模块403和生成模块404。
其中,获取模块401,用于获取烹饪视频;所述烹饪视频为在烹饪过程中拍摄的食物视频。
提取模块402,用于在所述烹饪视频中提取多个第一关键帧;所述多个第一关键帧用于表征烹饪过程中每个烹饪阶段食物状态的变化。
确定模块403,用于根据所述多个第一关键帧确定目标关键帧。
生成模块404,用于根据所述目标关键帧生成目标视频。
在一个实施例中,如图4b所示,所述确定模块403包括第一确定子模块4031和第二确定子模块4032。
所述第一确定子模块4031,用于根据所述多个第一关键帧确定每个烹饪阶段食物状态的变化程度。
所述第二确定子模块4032,用于根据每个烹饪阶段所述食物状态的变化程度确定目标关键帧。
在一个实施例中,如图4c所示,所述烹饪视频包括每个烹饪阶段的子视频;所述提取模块402包括第一提取子模块4021,所述第一确定子模块4031包括比较单元40311、第一确定单元40312和第二确定单元40313。
其中,所述第一提取子模块4021,用于在每个烹饪阶段的子视频中分别提取多个第一关键帧。
所述比较单元40311,用于针对每个烹饪阶段的子视频,将间隔预设时间的两个第一关键帧进行比较,或者,将第一个关键帧分别与除所述第一个关键帧之外的其他关键帧进行比较,得到比较值。
所述第一确定单元40312,用于在确定所述比较值大于或等于预设值时,确定当前烹饪阶段的食物状态的变化程度为一级程度。
所述第二确定单元40313,用于在确定所述比较值小于所述预设值时,确定当前烹饪阶段的食物状态的变化程度为二级程度。
在一个实施例中,如图4d所示,所述第二确定子模块4032包括第一提取单元40321、第二提取单元40322、第三确定单元40323和第四确定单元40324。
其中,所述第一提取单元40321,用于在确定当前烹饪阶段的食物状态的变化程度为一级程度时,在所述当前烹饪阶段对应的子视频中提取至少一个第二关键帧;所述第二关键帧与所述第一关键帧为不同的关键帧。
所述第三确定单元40322,用于将所述多个第一关键帧和所述至少一个第二关键帧确定为所述目标关键帧。
所述第二提取单元40323,用于在当前烹饪阶段的食物状态的变化程度为二级程度时,在所述当前烹饪阶段对应的子视频中提取至少一个第三关键帧;所述第三关键帧与所述第一关键帧为不同的关键帧,且所述第三关键帧的数量小于所述第二关键帧的数量。
所述第四确定单元40324,用于将所述多个第一关键帧和所述至少一个第三关键帧确定为所述目标关键帧。
在一个实施例中,如图4e所示,所述烹饪视频中携带有至少一个操控标记;所述操控标记为获取操控指令时在所述烹饪视频中添加的与所述操控指令对应的标识;所述第一确定子模块4031还包括第五确定单元40313、获取单元40314和第六确定单元40315。
其中,所述第五确定单元40313,用于根据所述操控标记确定与每个所述操控指令对应的烹饪阶段。
所述获取单元40314,用于从所述多个第一关键帧中获取每个烹饪阶段内的关键帧。
所述第六确定单元40315,用于将每个烹饪阶段内的关键帧进行比较,确定所述食物状态的变化程度。
在一个实施例中,如图4f所示,所述确定模块403还包括第一获取子模块4033、第二提取子模块4034和第三确定子模块4035。
其中,所述第一获取子模块4033,用于获取关注时间段。
所述第二提取子模块4034,用于从所述烹饪视频中提取所述关注时间段内的至少一个第四关键帧。
所述第三确定子模块4035,用于将所述多个第一关键帧和所述至少一个第四关键帧确定为所述目标关键帧。
在一个实施例中,如图4g所示,所述提取模块402包括第二获取子模块4021、第四确定子模块4022和第三提取子模块4023;所述确定模块403还包括第五确定子模块4036。
其中,所述第二获取子模块4021,用于获取目标烹饪类型。
所述第四确定子模块4022,用于在预先存储的烹饪类型与帧提取规则的对应关系中,确定与所述目标烹饪类型对应的目标帧提取规则;所述帧提取规则为根据所述烹饪类型对应的烹饪状态变化预先设定的提取规则。
所述第三提取子模块4023,用于根据所述目标帧提取规则在所述烹饪视频中提取多个所述第一关键帧。
所述第五确定子模块4036,用于将所述多个第一关键帧确定为所述目标关键帧。
本公开实施例提供一种烹饪视频生成装置,在烹饪视频中提取用于表征烹饪过程中食物状态的变化的多个第一关键帧,然后根据多个第一关键帧确定每个烹饪阶段食物状态的变化程度,再根据每个烹饪阶段食物状态的变化程度的大小提取一定数量的第二关键帧或者第三关键帧,再根据多个第一关键帧和第二关键帧或者多个第一关键帧和第三关键帧生成目标视频。这样,生成的目标视频既能够反映整个烹饪过程中食物状态的变化,又缩短了视频长度,从而节省了用户的观看时间,还缩小了目标视频占用的存储空间。
本公开实施例提供一种烹饪视频生成装置,该烹饪视频生成装置包括:
处理器;
用于存储处理器可执行指令的存储器;
其中,处理器被配置为:
获取烹饪视频;所述烹饪视频为在烹饪过程中拍摄的食物视频;
在所述烹饪视频中提取多个第一关键帧;所述多个第一关键帧用于表征烹饪过程中每个烹饪阶段食物状态的变化;
根据所述多个第一关键帧确定目标关键帧;
根据所述目标关键帧生成目标视频。
在一个实施例中,上述处理器还可被配置为:
根据所述多个第一关键帧确定每个烹饪阶段食物状态的变化程度;
根据每个烹饪阶段所述食物状态的变化程度确定目标关键帧。
在一个实施例中,上述处理器还可被配置为:
所述烹饪视频包括每个烹饪阶段的子视频;
在每个烹饪阶段的子视频中分别提取多个第一关键帧;
针对每个烹饪阶段的子视频,将间隔预设时间的两个第一关键帧进行比较,或者,将第一个关键帧分别与除所述第一个关键帧之外的其他关键帧进行比较,得到比较值;
在确定所述比较值大于或等于预设值时,确定当前烹饪阶段的食物状态的变化程度为一级程度;
在确定所述比较值小于所述预设值时,确定当前烹饪阶段的食物状态的变化程度为二级程度。
在一个实施例中,上述处理器还可被配置为:
在确定当前烹饪阶段的食物状态的变化程度为一级程度时,在所述当前烹饪阶段对应的子视频中提取至少一个第二关键帧;所述第二关键帧与所述第一关键帧为不同的关键帧;
将所述多个第一关键帧和所述至少一个第二关键帧确定为所述目标关键帧。
在一个实施例中,上述处理器还可被配置为:
在当前烹饪阶段的食物状态的变化程度为二级程度时,在所述当前烹饪阶段对应的子视频中提取至少一个第三关键帧;所述第三关键帧与所述第一关键帧为不同的关键帧,且所述第三关键帧的数量小于所述第二关键帧的数量;
将所述多个第一关键帧和所述至少一个第三关键帧确定为所述目标关键帧。
在一个实施例中,上述处理器还可被配置为:
所述烹饪视频中携带有至少一个操控标记;所述操控标记为获取操控指令时在所述烹饪视频中添加的与所述操控指令对应的标识;
根据所述操控标记确定与每个所述操控指令对应的烹饪阶段;
从所述多个第一关键帧中获取每个烹饪阶段内的关键帧;
将每个烹饪阶段内的关键帧进行比较,确定所述食物状态的变化程度。
在一个实施例中,上述处理器还可被配置为:
获取关注时间段;
从所述烹饪视频中提取所述关注时间段内的至少一个第四关键帧;
将所述多个第一关键帧和所述至少一个第四关键帧确定为所述目标关键帧。
在一个实施例中,上述处理器还可被配置为:
获取目标烹饪类型;
在预先存储的烹饪类型与帧提取规则的对应关系中,确定与所述目标烹饪类型对应的目标帧提取规则;所述帧提取规则为根据所述烹饪类型对应的烹饪状态变化预先设定的提取规则;
根据所述目标帧提取规则在所述烹饪视频中提取多个所述第一关键帧;
将所述多个第一关键帧确定为所述目标关键帧。
关于上述实施例中的装置,其中各个模块执行操作的具体方式已经在有关该方法的实施例中进行了详细描述,此处将不做详细阐述说明。
图5是根据一示例性实施例示出的一种烹饪视频生成装置50的结构框图,该装置50适用于移动终端。例如,装置50可以是移动电话,计算机,数字广播终端,消息收发设备,游戏控制台,平板设备,医疗设备,健身设备,个人数字助理等。
装置50可以包括以下一个或多个组件:处理组件502,存储器504,电源组件506,多媒体组件508,音频组件510,输入/输出(I/O)的接口512,传感器组件514,以及通信组件516。
处理组件502通常控制装置50的整体操作,诸如与显示,电话呼叫,数据通信,相机操作和记录操作相关联的操作。处理元件502可以包括一个或多个处理器520来执行指令,以完成上述的方法的全部或部分步骤。此外,处理组件502可以包括一个或多个模块,便于处理组件502和其他组件之间的交互。例如,处理部件502可以包括多媒体模块,以方便多媒体组件508和处理组件502之间的交互。
存储器504被配置为存储各种类型的数据以支持在装置50的操作。这些数据的示例包括用于在装置50上操作的任何应用程序或方法的指令,联系人数据,电话簿数据,消息,图片,视频等。存储器504可以由任何类型的易失性或非易失性存储设备或者它们的组合实现,如静态随机存取存储器(SRAM),电可擦除可编程只读存储器(EEPROM),可擦除可编程只读存储器(EPROM),可编程只读存储器(PROM),只读存储器(ROM),磁存储器,快闪存储器,磁盘或光盘。
电力组件506为装置50的各种组件提供电力。电力组件506可以包括电源管理系统,一个或多个电源,及其他与为装置50生成、管理和分配电力相关联的组件。
多媒体组件508包括在所述装置50和用户之间的提供一个输出接口的屏幕。在一些实施例中,屏幕可以包括液晶显示器(LCD)和触摸面板(TP)。如果屏幕包括触摸面板,屏幕可以被实现为触摸屏,以接收来自用户的输入信号。触摸面板包括一个或多个触摸传感器以感测触摸、滑动和触摸面板上的手势。所述触摸传感器可以不仅感测触摸或滑动动作的边界,而且还检测与所述触摸或滑动操作相关的持续时间和压力。在一些实施例中,多媒体组件508包括一个前置摄像头和/或后置摄像头。当装置50处于操作模式,如拍摄模式或视频模式时,前置摄像头和/或后置摄像头可以接收外部的多媒体数据。每个前置摄像头和后置摄像头可以是一个固定的光学透镜系统或具有焦距和光学变焦能力。
音频组件510被配置为输出和/或输入音频信号。例如,音频组件510包括一个麦克风(MIC),当装置50处于操作模式,如呼叫模式、记录模式和语音识别模式时,麦克风被配置为接收外部音频信号。所接收的音频信号可以被进一步存储在存储器504或经由通信组件516发送。在一些实施例中,音频组件510还包括一个扬声器,用于输出音频信号。
I/O接口512为处理组件502和外围接口模块之间提供接口,上述外围接口模块可以是键盘,点击轮,按钮等。这些按钮可包括但不限于:主页按钮、音量按钮、启动按钮和锁定按钮。
传感器组件514包括一个或多个传感器,用于为装置50提供各个方面的状态评估。例如,传感器组件514可以检测到装置50的打开/关闭状态,组件的相对定位,例如所述组件为装置50的显示器和小键盘,传感器组件514还可以检测装置50或装置50一个组件的位置改变,用户与装置50接触的存在或不存在,装置50方位或加速/减速和装置50的温度变化。传感器组件514可以包括接近传感器,被配置用来在没有任何的物理接触时检测附近物体的存在。传感器组件514还可以包括光传感器,如CMOS或CCD图像传感器,用于在成像应用中使用。在一些实施例中,该传感器组件514还可以包括加速度传感器,陀螺仪传感器,磁传感器,压力传感器或温度传感器。
通信组件516被配置为便于装置50和其他设备之间有线或无线方式的通信。装置50可以接入基于通信标准的无线网络,如WiFi,2G或3G,或它们的组合。在一个示例性实施例中,通信部件516经由广播信道接收来自外部广播管理系统的广播信号或广播相关信息。在一个示例性实施例中,所述通信部件516还包括近场通信(NFC)模块,以促进短程通信。例如,在NFC模块可基于射频识别(RFID)技术,红外数据协会(IrDA)技术,超宽带(UWB)技术,蓝牙(BT)技术和其他技术来实现。
在示例性实施例中,装置50可以被一个或多个应用专用集成电路(ASIC)、数字信号处理器(DSP)、数字信号处理设备(DSPD)、可编程逻辑器件(PLD)、现场可编程门阵列(FPGA)、控制器、微控制器、微处理器或其他电子元件实现,用于执行上述方法。
在示例性实施例中,还提供了一种包括指令的非临时性计算机可读存储介质,例如包括指令的存储器504,上述指令可由装置50的处理器520执行以完成上述方法。例如,所述非临时性计算机可读存储介质可以是ROM、随机存取存储器(RAM)、CD-ROM、磁带、软盘和光数据存储设备等。
本公开实施例提供一种非临时性计算机可读存储介质,当所述存储介质中的指令由移动终端的处理器执行时,使得移动终端能够执行上述烹饪视频生成方法,所述方法包括:
获取烹饪视频;所述烹饪视频为在烹饪过程中拍摄的食物视频;
在所述烹饪视频中提取多个第一关键帧;所述多个第一关键帧用于表征烹饪过程中每个烹饪阶段食物状态的变化;
根据所述多个第一关键帧确定目标关键帧;
根据所述目标关键帧生成目标视频。
在一个实施例中,所述根据所述多个第一关键帧确定目标关键帧包括:
根据所述多个第一关键帧确定每个烹饪阶段食物状态的变化程度;
根据每个烹饪阶段所述食物状态的变化程度确定目标关键帧。
在一个实施例中,所述烹饪视频包括每个烹饪阶段的子视频;
所述在所述烹饪视频中提取多个第一关键帧包括:
在每个烹饪阶段的子视频中分别提取多个第一关键帧;
所述根据所述多个第一关键帧确定每个烹饪阶段食物状态的变化程度包括:
针对每个烹饪阶段的子视频,将间隔预设时间的两个第一关键帧进行比较,或者,将第一个关键帧分别与除所述第一个关键帧之外的其他关键帧进行比较,得到比较值;
在确定所述比较值大于或等于预设值时,确定当前烹饪阶段的食物状态的变化程度为一级程度;
在确定所述比较值小于所述预设值时,确定当前烹饪阶段的食物状态的变化程度为二级程度。
在一个实施例中,所述根据每个烹饪阶段所述食物状态的变化程度确定目标关键帧包括:
在确定当前烹饪阶段的食物状态的变化程度为一级程度时,在所述当前烹饪阶段对应的子视频中提取至少一个第二关键帧;所述第二关键帧与所述第一关键帧为不同的关键帧;
将所述多个第一关键帧和所述至少一个第二关键帧确定为所述目标关键帧。
在一个实施例中,还包括:
在当前烹饪阶段的食物状态的变化程度为二级程度时,在所述当前烹饪阶段对应的子视频中提取至少一个第三关键帧;所述第三关键帧与所述第一关键帧为不同的关键帧,且所述第三关键帧的数量小于所述第二关键帧的数量;
将所述多个第一关键帧和所述至少一个第三关键帧确定为所述目标关键帧。
在一个实施例中,所述烹饪视频中携带有至少一个操控标记;所述操控标记为获取操控指令时在所述烹饪视频中添加的与所述操控指令对应的标识;
所述根据所述多个第一关键帧确定每个烹饪阶段食物状态的变化程度包括:
根据所述操控标记确定与每个所述操控指令对应的烹饪阶段;
从所述多个第一关键帧中获取每个烹饪阶段内的关键帧;
将每个烹饪阶段内的关键帧进行比较,确定所述食物状态的变化程度。
在一个实施例中,所述根据所述多个第一关键帧确定目标关键帧包括:
获取关注时间段;
从所述烹饪视频中提取所述关注时间段内的至少一个第四关键帧;
将所述多个第一关键帧和所述至少一个第四关键帧确定为所述目标关键帧。
在一个实施例中,所述在所述烹饪视频中提取多个第一关键帧包括:
获取目标烹饪类型;
在预先存储的烹饪类型与帧提取规则的对应关系中,确定与所述目标烹饪类型对应的目标帧提取规则;所述帧提取规则为根据所述烹饪类型对应的烹饪状态变化预先设定的提取规则;
根据所述目标帧提取规则在所述烹饪视频中提取多个所述第一关键帧;
所述根据所述多个第一关键帧确定目标关键帧包括:
将所述多个第一关键帧确定为所述目标关键帧。
本领域技术人员在考虑说明书及实践这里公开的公开后,将容易想到本公开的其它实施方案。本申请旨在涵盖本公开的任何变型、用途或者适应性变化,这些变型、用途或者适应性变化遵循本公开的一般性原理并包括本公开未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的,本公开的真正范围和精神由下面的权利要求指出。
应当理解的是,本公开并不局限于上面已经描述并在附图中示出的精确结构,并且可以在不脱离其范围进行各种修改和改变。本公开的范围仅由所附的权利要求来限制。

Claims (16)

1.一种烹饪视频生成方法,其特征在于,包括:
获取烹饪视频;所述烹饪视频为在烹饪过程中拍摄的食物视频;
在所述烹饪视频中提取多个第一关键帧;所述多个第一关键帧用于表征烹饪过程中每个烹饪阶段食物状态的变化;
根据所述多个第一关键帧确定目标关键帧;
根据所述目标关键帧生成目标视频。
2.根据权利要求1所述的方法,其特征在于,所述根据所述多个第一关键帧确定目标关键帧包括:
根据所述多个第一关键帧确定每个烹饪阶段食物状态的变化程度;
根据每个烹饪阶段所述食物状态的变化程度确定目标关键帧。
3.根据权利要求2所述的方法,其特征在于,所述烹饪视频包括每个烹饪阶段的子视频;
所述在所述烹饪视频中提取多个第一关键帧包括:
在每个烹饪阶段的子视频中分别提取多个第一关键帧;
所述根据所述多个第一关键帧确定每个烹饪阶段食物状态的变化程度包括:
针对每个烹饪阶段的子视频,将间隔预设时间的两个第一关键帧进行比较,或者,将第一个关键帧分别与除所述第一个关键帧之外的其他关键帧进行比较,得到比较值;
在确定所述比较值大于或等于预设值时,确定当前烹饪阶段的食物状态的变化程度为一级程度;
在确定所述比较值小于所述预设值时,确定当前烹饪阶段的食物状态的变化程度为二级程度。
4.根据权利要求3所述的方法,其特征在于,所述根据每个烹饪阶段所述食物状态的变化程度确定目标关键帧包括:
在确定当前烹饪阶段的食物状态的变化程度为一级程度时,在所述当前烹饪阶段对应的子视频中提取至少一个第二关键帧;所述第二关键帧与所述第一关键帧为不同的关键帧;
将所述多个第一关键帧和所述至少一个第二关键帧确定为所述目标关键帧。
5.根据权利要求4所述的方法,其特征在于,还包括:
在当前烹饪阶段的食物状态的变化程度为二级程度时,在所述当前烹饪阶段对应的子视频中提取至少一个第三关键帧;所述第三关键帧与所述第一关键帧为不同的关键帧,且所述第三关键帧的数量小于所述第二关键帧的数量;
将所述多个第一关键帧和所述至少一个第三关键帧确定为所述目标关键帧。
6.根据权利要求2所述的方法,其特征在于,所述烹饪视频中携带有至少一个操控标记;所述操控标记为获取操控指令时在所述烹饪视频中添加的与所述操控指令对应的标识;
所述根据所述多个第一关键帧确定每个烹饪阶段食物状态的变化程度包括:
根据所述操控标记确定与每个所述操控指令对应的烹饪阶段;
从所述多个第一关键帧中获取每个烹饪阶段内的关键帧;
将每个烹饪阶段内的关键帧进行比较,确定所述食物状态的变化程度。
7.根据权利要求1所述的方法,其特征在于,所述根据所述多个第一关键帧确定目标关键帧包括:
获取关注时间段;
从所述烹饪视频中提取所述关注时间段内的至少一个第四关键帧;
将所述多个第一关键帧和所述至少一个第四关键帧确定为所述目标关键帧。
8.根据权利要求1所述的方法,其特征在于,所述在所述烹饪视频中提取多个第一关键帧包括:
获取目标烹饪类型;
在预先存储的烹饪类型与帧提取规则的对应关系中,确定与所述目标烹饪类型对应的目标帧提取规则;所述帧提取规则为根据所述烹饪类型对应的烹饪状态变化预先设定的提取规则;
根据所述目标帧提取规则在所述烹饪视频中提取多个所述第一关键帧;
所述根据所述多个第一关键帧确定目标关键帧包括:
将所述多个第一关键帧确定为所述目标关键帧。
9.一种烹饪视频生成装置,其特征在于,包括:
获取模块,用于获取烹饪视频;所述烹饪视频为在烹饪过程中拍摄的食物视频;
提取模块,用于在所述烹饪视频中提取多个第一关键帧;所述多个第一关键帧用于表征烹饪过程中每个烹饪阶段食物状态的变化;
确定模块,用于根据所述多个第一关键帧确定目标关键帧;
生成模块,用于根据所述目标关键帧生成目标视频。
10.根据权利要求9所述的装置,其特征在于,所述确定模块包括第一确定子模块和第二确定子模块;
所述第一确定子模块,用于根据所述多个第一关键帧确定每个烹饪阶段食物状态的变化程度;
所述第二确定子模块,用于根据每个烹饪阶段所述食物状态的变化程度确定目标关键帧。
11.根据权利要求10所述的装置,其特征在于,所述烹饪视频包括每个烹饪阶段的子视频;所述提取模块包括第一提取子模块,所述第一确定子模块包括比较单元、第一确定单元和第二确定单元;
所述第一提取子模块,用于在每个烹饪阶段的子视频中分别提取多个第一关键帧;
所述比较单元,用于针对每个烹饪阶段的子视频,将间隔预设时间的两个第一关键帧进行比较,或者,将第一个关键帧分别与除所述第一个关键帧之外的其他关键帧进行比较,得到比较值;
所述第一确定单元,用于在确定所述比较值大于或等于预设值时,确定当前烹饪阶段的食物状态的变化程度为一级程度;
所述第二确定单元,用于在确定所述比较值小于所述预设值时,确定当前烹饪阶段的食物状态的变化程度为二级程度。
12.根据权利要求11所述的装置,其特征在于,所述第二确定子模块包括第一提取单元、第二提取单元、第三确定单元和第四确定单元;
所述第一提取单元,用于在确定当前烹饪阶段的食物状态的变化程度为一级程度时,在所述当前烹饪阶段对应的子视频中提取至少一个第二关键帧;所述第二关键帧与所述第一关键帧为不同的关键帧;
所述第三确定单元,用于将所述多个第一关键帧和所述至少一个第二关键帧确定为所述目标关键帧;
所述第二提取单元,用于在当前烹饪阶段的食物状态的变化程度为二级程度时,在所述当前烹饪阶段对应的子视频中提取至少一个第三关键帧;所述第三关键帧与所述第一关键帧为不同的关键帧,且所述第三关键帧的数量小于所述第二关键帧的数量;
所述第四确定单元,用于将所述多个第一关键帧和所述至少一个第三关键帧确定为所述目标关键帧。
13.根据权利要求10所述的装置,其特征在于,所述烹饪视频中携带有至少一个操控标记;所述操控标记为获取操控指令时在所述烹饪视频中添加的与所述操控指令对应的标识;所述第一确定子模块还包括第五确定单元、获取单元和第六确定单元;
所述第五确定单元,用于根据所述操控标记确定与每个所述操控指令对应的烹饪阶段;
所述获取单元,用于从所述多个第一关键帧中获取每个烹饪阶段内的关键帧;
所述第六确定单元,用于将每个烹饪阶段内的关键帧进行比较,确定所述食物状态的变化程度。
14.根据权利要求9所述的装置,其特征在于,所述确定模块还包括第一获取子模块、第二提取子模块和第三确定子模块;
所述第一获取子模块,用于获取关注时间段;
所述第二提取子模块,用于从所述烹饪视频中提取所述关注时间段内的至少一个第四关键帧;
所述第三确定子模块,用于将所述多个第一关键帧和所述至少一个第四关键帧确定为所述目标关键帧。
15.根据权利要求9所述的装置,其特征在于,所述提取模块包括第二获取子模块、第四确定子模块和第三提取子模块;所述确定模块还包括第五确定子模块;
所述第二获取子模块,用于获取目标烹饪类型;
所述第四确定子模块,用于在预先存储的烹饪类型与帧提取规则的对应关系中,确定与所述目标烹饪类型对应的目标帧提取规则;所述帧提取规则为根据所述烹饪类型对应的烹饪状态变化预先设定的提取规则;
所述第三提取子模块,用于根据所述目标帧提取规则在所述烹饪视频中提取多个所述第一关键帧;
所述第五确定子模块,用于将所述多个第一关键帧确定为所述目标关键帧。
16.一种烹饪视频生成装置,其特征在于,包括:
处理器;
用于存储处理器可执行指令的存储器;
其中,所述处理器被配置为:
获取烹饪视频;所述烹饪视频为在烹饪过程中拍摄的食物视频;
在所述烹饪视频中提取多个第一关键帧;所述多个第一关键帧用于表征烹饪过程中每个烹饪阶段食物状态的变化;
根据所述多个第一关键帧确定目标关键帧;
根据所述目标关键帧生成目标视频。
CN201911394270.4A 2019-12-30 2019-12-30 烹饪视频生成方法及装置 Active CN111083537B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201911394270.4A CN111083537B (zh) 2019-12-30 2019-12-30 烹饪视频生成方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201911394270.4A CN111083537B (zh) 2019-12-30 2019-12-30 烹饪视频生成方法及装置

Publications (2)

Publication Number Publication Date
CN111083537A true CN111083537A (zh) 2020-04-28
CN111083537B CN111083537B (zh) 2022-02-01

Family

ID=70319578

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201911394270.4A Active CN111083537B (zh) 2019-12-30 2019-12-30 烹饪视频生成方法及装置

Country Status (1)

Country Link
CN (1) CN111083537B (zh)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112929736A (zh) * 2021-01-22 2021-06-08 宁波方太厨具有限公司 烹饪视频智能化生成方法、电子设备及可读存储介质
CN113676706A (zh) * 2021-08-26 2021-11-19 广东美的厨房电器制造有限公司 烹饪视频生成方法、装置、服务器及控制系统
CN115460434A (zh) * 2022-07-22 2022-12-09 广东美的厨房电器制造有限公司 一种视频生成方法、及其系统、计算机设备和存储介质
US11856287B2 (en) 2020-09-25 2023-12-26 Samsung Electronics Co., Ltd. Cooking apparatus and controlling method thereof
CN117894012A (zh) * 2024-03-12 2024-04-16 西安大业食品有限公司 基于机器视觉的大批量糕点烘焙阶段识别方法
CN117894012B (zh) * 2024-03-12 2024-05-31 西安大业食品有限公司 基于机器视觉的大批量糕点烘焙阶段识别方法

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110311135A1 (en) * 2009-02-06 2011-12-22 Bertrand Chupeau Method for two-step temporal video registration
CN103942751A (zh) * 2014-04-28 2014-07-23 中央民族大学 一种视频关键帧提取方法
CN107241246A (zh) * 2017-06-30 2017-10-10 广东美的厨房电器制造有限公司 烹饪状态的监控方法、装置、智能终端和烹饪设备
JP6416429B1 (ja) * 2018-05-17 2018-10-31 クックパッド株式会社 情報処理装置、情報処理方法、情報処理プログラム及びコンテンツ配信システム
CN108989746A (zh) * 2018-07-02 2018-12-11 广东格兰仕集团有限公司 一种用于家用电器的智能拍摄装置生成视频方法
CN109151501A (zh) * 2018-10-09 2019-01-04 北京周同科技有限公司 一种视频关键帧提取方法、装置、终端设备及存储介质
CN109618184A (zh) * 2018-12-29 2019-04-12 北京市商汤科技开发有限公司 视频处理方法及装置、电子设备和存储介质
CN110234040A (zh) * 2019-05-10 2019-09-13 九阳股份有限公司 一种烹饪设备的食材图像获取方法以及烹饪设备
CN110324721A (zh) * 2019-08-05 2019-10-11 腾讯科技(深圳)有限公司 一种视频数据处理方法、装置及存储介质
CN110488672A (zh) * 2019-06-21 2019-11-22 广东格兰仕集团有限公司 烹饪设备的控制方法、装置、烹饪设备和存储介质

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110311135A1 (en) * 2009-02-06 2011-12-22 Bertrand Chupeau Method for two-step temporal video registration
CN103942751A (zh) * 2014-04-28 2014-07-23 中央民族大学 一种视频关键帧提取方法
CN107241246A (zh) * 2017-06-30 2017-10-10 广东美的厨房电器制造有限公司 烹饪状态的监控方法、装置、智能终端和烹饪设备
JP6416429B1 (ja) * 2018-05-17 2018-10-31 クックパッド株式会社 情報処理装置、情報処理方法、情報処理プログラム及びコンテンツ配信システム
CN108989746A (zh) * 2018-07-02 2018-12-11 广东格兰仕集团有限公司 一种用于家用电器的智能拍摄装置生成视频方法
CN109151501A (zh) * 2018-10-09 2019-01-04 北京周同科技有限公司 一种视频关键帧提取方法、装置、终端设备及存储介质
CN109618184A (zh) * 2018-12-29 2019-04-12 北京市商汤科技开发有限公司 视频处理方法及装置、电子设备和存储介质
CN110234040A (zh) * 2019-05-10 2019-09-13 九阳股份有限公司 一种烹饪设备的食材图像获取方法以及烹饪设备
CN110488672A (zh) * 2019-06-21 2019-11-22 广东格兰仕集团有限公司 烹饪设备的控制方法、装置、烹饪设备和存储介质
CN110324721A (zh) * 2019-08-05 2019-10-11 腾讯科技(深圳)有限公司 一种视频数据处理方法、装置及存储介质

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
王晗等: ""针对用户兴趣的视频精彩片段提取"", 《中国图象图形学报》 *

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11856287B2 (en) 2020-09-25 2023-12-26 Samsung Electronics Co., Ltd. Cooking apparatus and controlling method thereof
CN112929736A (zh) * 2021-01-22 2021-06-08 宁波方太厨具有限公司 烹饪视频智能化生成方法、电子设备及可读存储介质
CN113676706A (zh) * 2021-08-26 2021-11-19 广东美的厨房电器制造有限公司 烹饪视频生成方法、装置、服务器及控制系统
CN113676706B (zh) * 2021-08-26 2023-09-12 广东美的厨房电器制造有限公司 烹饪视频生成方法、装置、服务器及控制系统
CN115460434A (zh) * 2022-07-22 2022-12-09 广东美的厨房电器制造有限公司 一种视频生成方法、及其系统、计算机设备和存储介质
CN115460434B (zh) * 2022-07-22 2024-04-26 广东美的厨房电器制造有限公司 一种视频生成方法、及其系统、计算机设备和存储介质
CN117894012A (zh) * 2024-03-12 2024-04-16 西安大业食品有限公司 基于机器视觉的大批量糕点烘焙阶段识别方法
CN117894012B (zh) * 2024-03-12 2024-05-31 西安大业食品有限公司 基于机器视觉的大批量糕点烘焙阶段识别方法

Also Published As

Publication number Publication date
CN111083537B (zh) 2022-02-01

Similar Documents

Publication Publication Date Title
CN111083537B (zh) 烹饪视频生成方法及装置
CN111481049B (zh) 烹饪设备控制方法、装置、烹饪设备和存储介质
US10110395B2 (en) Control method and control device for smart home device
EP3301521A2 (en) Method and apparatus for controlling device
CN107025419B (zh) 指纹模板录入方法及装置
CN105069073B (zh) 联系人信息推荐方法及装置
WO2015143880A1 (zh) 智能家电控制方法、装置及终端
CN110677734B (zh) 视频合成方法、装置、电子设备及存储介质
CN107908144B (zh) 一种控制抽烟机的方法、装置及存储介质
CN111695382A (zh) 指纹采集区域确定方法和指纹采集区域确定装置
CN109639964A (zh) 图像处理方法、处理装置和计算机可读存储介质
CN112312016B (zh) 拍摄处理方法、装置、电子设备和可读存储介质
CN107426489A (zh) 拍摄图像时的处理方法、装置及终端
CN103997686B (zh) 基于智能电视的播放管理方法和装置
CN104811904B (zh) 联系人设置方法及装置
CN111128148B (zh) 语音点餐的方法、装置、系统、计算机可读存储介质
CN106292316B (zh) 工作模式切换方法和装置
EP3404503B1 (en) Method and apparatus for prompting remaining service life of cooking device
CN105100622B (zh) 变焦实现方法及装置、电子设备
CN109104633A (zh) 视频截图方法、装置、存储介质及移动终端
CN111028835B (zh) 资源置换方法、装置、系统、计算机可读存储介质
CN112669233A (zh) 图像处理方法、装置、电子设备、存储介质及程序产品
CN105847654A (zh) 信息处理方法及装置
CN107479444B (zh) 保温方法及装置
CN110769282A (zh) 短视频生成方法、终端及服务器

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
CB02 Change of applicant information
CB02 Change of applicant information

Address after: 201203 Shanghai Pudong New Area chunmi Technology (Shanghai) Co., Ltd

Applicant after: Chunmi Technology (Shanghai) Co.,Ltd.

Address before: Room 01-04, 1st floor, Lane 60, Naxian Road, Pudong New Area, Shanghai, 201203

Applicant before: SHANGHAI CHUNMI ELECTRONICS TECHNOLOGY Co.,Ltd.

GR01 Patent grant
GR01 Patent grant