CN112764845A - 视频处理方法及装置、电子设备和计算机可读存储介质 - Google Patents

视频处理方法及装置、电子设备和计算机可读存储介质 Download PDF

Info

Publication number
CN112764845A
CN112764845A CN202011609158.0A CN202011609158A CN112764845A CN 112764845 A CN112764845 A CN 112764845A CN 202011609158 A CN202011609158 A CN 202011609158A CN 112764845 A CN112764845 A CN 112764845A
Authority
CN
China
Prior art keywords
image
style
switching
area
preset
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202011609158.0A
Other languages
English (en)
Other versions
CN112764845B (zh
Inventor
杨舒云
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Zitiao Network Technology Co Ltd
Original Assignee
Beijing Zitiao Network Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Zitiao Network Technology Co Ltd filed Critical Beijing Zitiao Network Technology Co Ltd
Priority to CN202011609158.0A priority Critical patent/CN112764845B/zh
Publication of CN112764845A publication Critical patent/CN112764845A/zh
Priority to EP21913648.8A priority patent/EP4242840A4/en
Priority to AU2021415514A priority patent/AU2021415514A1/en
Priority to KR1020237019199A priority patent/KR102655049B1/ko
Priority to JP2023535289A priority patent/JP7395070B1/ja
Priority to PCT/CN2021/133179 priority patent/WO2022142906A1/zh
Application granted granted Critical
Publication of CN112764845B publication Critical patent/CN112764845B/zh
Priority to US18/332,318 priority patent/US11954781B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T13/00—Animation
    • G06T13/80—2D [Two Dimensional] animation, e.g. using sprites
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44—Arrangements for executing specific programs
    • G06F9/451—Execution arrangements for user interfaces
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/012—Head tracking input arrangements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04845—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/0485—Scrolling or panning
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/01—Social networking
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T13/00—Animation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T13/00—Animation
    • G06T13/20—3D [Three Dimensional] animation
    • G06T13/40—3D [Three Dimensional] animation of characters, e.g. humans, animals or virtual beings
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00—Geometric image transformations in the plane of the image
    • G06T3/04—Context-preserving transformations, e.g. by using an importance map
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/70—Arrangements for image or video recognition or understanding using pattern recognition or machine learning
    • G06V10/82—Arrangements for image or video recognition or understanding using pattern recognition or machine learning using neural networks
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/174—Facial expression recognition
    • G06V40/175—Static expression
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/20—Movements or behaviour, e.g. gesture recognition

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Software Systems (AREA)
  • Business, Economics & Management (AREA)
  • Computing Systems (AREA)
  • Multimedia (AREA)
  • Tourism & Hospitality (AREA)
  • Marketing (AREA)
  • Primary Health Care (AREA)
  • Strategic Management (AREA)
  • Human Resources & Organizations (AREA)
  • General Business, Economics & Management (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Economics (AREA)
  • Psychiatry (AREA)
  • Social Psychology (AREA)
  • Evolutionary Computation (AREA)
  • Artificial Intelligence (AREA)
  • Databases & Information Systems (AREA)
  • Medical Informatics (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Processing Or Creating Images (AREA)
  • Studio Devices (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Studio Circuits (AREA)
  • Traffic Control Systems (AREA)
  • Signal Processing For Digital Recording And Reproducing (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

一种视频处理方法、视频处理装置、电子设备和计算机可读存储介质。该视频处理方法包括：显示初始图像，初始图像包括第一风格图像；响应于第一触发事件，显示图像切换动画，图像切换动画用于展示从初始图像切换到目标图像的动态过程，目标图像包括第二风格图像；响应于图像切换动画显示完毕，显示目标图像，图像切换动画中的切换图像包括第一图像区域、第二图像区域和第三图像区域，第一图像区域在动态过程中通过位置移动分时覆盖图像切换动画的整个图像区域并在位置移动的过程中发生形状变化。该方法可以降低用户准备不同图像风格的视频片段的繁琐性，使得不同图像风格视频片段之间的切换更加流畅，提供了一种新的视频片段切换方式，提高了用户体验。

Description

视频处理方法及装置、电子设备和计算机可读存储介质
技术领域
本公开的实施例涉及一种视频处理方法及装置、电子设备和计算机可读存储介质。
背景技术
随着科学技术和经济的快速发展，视频应用逐渐进入人们的生活，甚至成为了人们生活中的一部分。例如，用户可以随时随地地拍摄视频，并将拍摄的视频分享到社交网站上，以通过视频分享生活，进行交友互动，增加生活的趣味性。
发明内容
提供该发明内容部分以便以简要的形式介绍构思，这些构思将在后面的具体实施方式部分被详细描述。该发明内容部分并不旨在标识要求保护的技术方案的关键特征或必要特征，也不旨在用于限制所要求的保护的技术方案的范围。
本公开至少一个实施例提供一种视频处理方法，包括：显示初始图像，，初始图像包括第一风格图像，第一风格图像是基于拍摄图像所得到的图像；响应于第一触发事件，显示图像切换动画，图像切换动画用于展示从初始图像切换到目标图像的动态过程，目标图像包括第二风格图像，第二风格图像是基于拍摄图像得到的图像，第一风格图像与第二风格图像是不同风格的图像；响应于图像切换动画显示完毕的情况下，显示目标图像，图像切换动画中的切换图像包括第一图像区域、第二图像区域和第三图像区域，第一图像区域位于第二图像区域与第三图像区域之间，第一图像区域在动态过程中通过位置移动分时覆盖图像切换动画的整个图像区域并在位置移动的过程中发生形状变化，第一图像区域用于展示切换素材，第二图像区域用于展示初始图像位于第二图像区域所在位置上的部分图像，第三图像区域用于展示目标图像位于第三图像区域所在位置上的部分图像。
例如，在本公开一实施例提供的视频处理方法中，第一触发事件包括：检测到拍摄图像中目标对象呈现预设肢体动作、检测到拍摄图像中目标对象呈现预设面部动作以及接收到预设语音中的至少一种。
例如，在本公开一实施例提供的视频处理方法中，第一图像区域在动态过程中位置移动的位移速度和形状变化的形变速度基于第一触发事件确定。
例如，在本公开一实施例提供的视频处理方法中，若第一触发事件包括检测到拍摄图像中目标对象呈现预设肢体动作，第一图像区域在动态过程中位置移动的位移速度和形状变化的形变速度基于预设肢体动作的动作幅度确定；若第一触发事件包括检测到拍摄图像中目标对象呈现预设面部动作，第一图像区域在动态过程中位置移动的位移速度和形状变化的形变速度基于预设面部动作的形变幅度确定；若第一触发事件包括接收到预设语音，第一图像区域在动态过程中位置移动的位移速度和形状变化的形变速度基于预设语音的语速、预设语音的音量或者预设语音中的内容中的至少一种确定。
例如，在本公开一实施例提供的视频处理方法中，第一风格图像为拍摄图像，第二风格图像为对拍摄图像进行风格迁移得到的图像。
例如，在本公开一实施例提供的视频处理方法中，第二风格图像是通过将拍摄图像输入到风格迁移模型而得到的风格迁移模型输出的图像；风格迁移模型是通过样本图像对机器学习模型进行训练得到的，样本图像包括原始图像和迁移图像，原始图像是对样本对象进行拍摄得到的图像，迁移图像是对样本对象进行风格创作得到的图像。
例如，在本公开一实施例提供的视频处理方法中，还包括响应于在图像切换动画的显示过程中出现第二触发事件，控制动态过程停止，并显示图像切换动画在动态过程停止处的图像。
例如，在本公开一实施例提供的视频处理方法中，初始图像还包括第一预设图像，第一预设图像环绕第一风格图像；目标图像还包括第二预设图像，第二预设图像环绕第二风格图像。
例如，在本公开一实施例提供的视频处理方法中，图像切换动画通过在第一画布图层、第二画布图层和第三画布图层上进行图像渲染来显示，，第二画布图层比第一画布图层更靠近显示侧，第三画布图层比第二画布图层更靠近显示侧；切换素材渲染在第三画布图层上，初始图像位于第二图像区域所在位置上的部分图像渲染在第二画布图层上，目标图像位于第三图像区域所在位置上的部分图像渲染在第一画布图层上；第一画布图层、第二画布图层和第三画布图层中未进行渲染显示的区域是透明的。
本公开至少一个实施例提供一种视频处理装置，包括：显示单元，配置为显示初始图像，初始图像包括第一风格图像，第一风格图像是基于拍摄图像所得到的图像；切换单元，配置为响应于第一触发事件，显示图像切换动画，图像切换动画用于展示从初始图像切换到目标图像的动态过程，目标图像包括第二风格图像，第二风格图像是基于拍摄图像得到的图像，第一风格图像与第二风格图像是不同风格的图像；显示单元还配置为响应于图像切换动画显示完毕，显示目标图像，图像切换动画中的切换图像包括第一图像区域、第二图像区域和第三图像区域，第一图像区域位于第二图像区域与第三图像区域之间，第一图像区域在动态过程中通过位置移动分时覆盖图像切换动画的整个图像区域并在位置移动的过程中发生形状变化，第一图像区域用于展示切换素材，第二图像区域用于展示初始图像位于第二图像区域所在位置上的部分图像，第三图像区域用于展示目标图像位于第三图像区域所在位置上的部分图像。
本公开至少一个实施例提供一种电子设备，包括处理器；存储器，包括一个或多个计算机程序模块；一个或多个计算机程序模块被存储在存储器中并被配置为由处理器执行，一个或多个计算机程序模块包括用于实现本公开任一实施例提供的视频处理方法的指令。
本公开至少一个实施例提供一种计算机可读存储介质，用于存储非暂时性计算机可读指令，当非暂时性计算机可读指令由计算机执行时可以实现本公开任一实施例提供的视频处理方法。
附图说明
为了更清楚地说明本公开实施例的技术方案，下面将对实施例的附图作简单地介绍，显而易见地，下面描述中的附图仅仅涉及本公开的一些实施例，而非对本公开的限制。
图1A示出了本公开至少一实施例提供的一种视频处理方法的流程图；
图1B示出了图1A中通过步骤S10显示初始图像的示意图；
图1C示出了本公开至少一实施例提供的图像切换动画的切换图像的示意图；
图1D示出了本公开至少一实施例提供的目标图像的示意图；
图2示出了本公开至少一实施例提供的另一种视频处理方法的流程图；
图3示出了本公开至少一实施例提供的图像切换动画在动态过程停止处的图像示意图；
图4示出了本公开至少一实施例提供的图像切换动画的渲染图层的示意图；
图5示出了本公开至少一实施例提供的第一图像区域位置移动并在位置移动的过程中发生形状变化的原理示意图；
图6A示出了本公开至少一实施例提供的另一种视频处理方法的流程图；
图6B示出了本公开至少一实施例提供的一种实现视频处理方法的链路示意图；
图6C示出了本公开至少一实施例提供的初始化的流程图；
图7示出了本公开至少一个实施例提供的一种视频处理装置的示意框图；
图8A示出了本公开至少一个实施例提供的一种电子设备的示意框图；
图8B示出了本公开至少一个实施例提供的另一种电子设备的示意框图；以及
图9示出了本公开至少一个实施例提供的一种计算机可读存储介质的示意图。
具体实施方式
为使本公开实施例的目的、技术方案和优点更加清楚，下面将结合本公开实施例的附图，对本公开实施例的技术方案进行清楚、完整地描述。显然，所描述的实施例是本公开的一部分实施例，而不是全部的实施例。基于所描述的本公开的实施例，本领域普通技术人员在无需创造性劳动的前提下所获得的所有其他实施例，都属于本公开保护的范围。
应当理解，本公开的方法实施方式中记载的各个步骤可以按照不同的顺序执行，和/或并行执行。此外，方法实施方式可以包括附加的步骤和/或省略执行示出的步骤。本公开的范围在此方面不受限制。
本文使用的术语“包括”及其变形是开放性包括，即“包括但不限于”。术语“基于”是“至少部分地基于”。术语“一个实施例”表示“至少一个实施例”；术语“另一实施例”表示“至少一个另外的实施例”；术语“一些实施例”表示“至少一些实施例”。其他术语的相关定义将在下文描述中给出。
需要注意，本公开中提及的“第一”、“第二”等概念仅用于对不同的装置、模块或单元进行区分，并非用于限定这些装置、模块或单元所执行的功能的顺序或者相互依存关系。
需要注意，本公开中提及的“一个”、“多个”的修饰是示意性而非限制性的，本领域技术人员应当理解，除非在上下文另有明确指出，否则应该理解为“一个或多个”。
发明人发现，在使用视频应用的过程中，用户经常想获得包含多种不同图像风格的视频，并且该视频中包含多种不同图像风格的视频片段。在相关技术中，如果用户想要获得包含多种不同图像风格的视频，往往需要用户分别准备不同图像风格的视频片段，然后再通过视频编辑软件将这些不同图像风格的视频片段组合为一个视频。
上述相关技术不仅需要用户提前准备视频片段，而且由一种图像风格的视频片段切换到另一种图像风格的视频片段之间的切换过程比较生硬，不流畅，这降低了用户体验。
本公开至少一个实施例提供一种视频处理方法、视频处理装置、电子设备和计算机可读存储介质。该视频处理方法包括：显示初始图像，初始图像包括第一风格图像，第一风格图像是基于拍摄图像所得到的图像；响应于第一触发事件，显示图像切换动画，图像切换动画用于展示从初始图像切换到目标图像的动态过程，目标图像包括第二风格图像，第二风格图像是基于拍摄图像得到的图像，第一风格图像与第二风格图像是不同风格的图像；响应于图像切换动画显示完毕，显示目标图像，图像切换动画的图像包括第一图像区域、第二图像区域和第三图像区域，第一图像区域位于第二图像区域与第三图像区域之间，第一图像区域在动态过程中通过位置移动分时覆盖图像切换动画的整个图像区域并在位置移动的过程中发生形状变化，第一图像区域用于展示切换素材，第二图像区域用于展示初始图像位于第二图像区域所在位置上的部分图像，第三图像区域用于展示目标图像位于第三图像区域所在位置上的部分图像。该视频处理方法可以降低用户准备不同图像风格的视频片段的繁琐性，并且使得不同图像风格视频片段之间的切换更加流畅，而且提供了一种新的视频片段切换方式，提高了用户体验。
需要说明的是，本公开实施例提供的视频处理方法可被至少部分应用于适当的电子设备上，例如，在一些实施例中，该视频处理方法可以通过电子设备中安装的应用程序或者通过例如云服务器下载的非安装的应用程序(例如行业中存在的小程序、快应用等)在本地实现。电子设备可以是包括个人计算机、移动终端等，该移动终端可以是手机、平板电脑、可穿戴电子设备、智能家居设备等设备。例如，在一些实施例中，视频处理方法也可以通过服务器实现，或者视频处理方法中的一部分步骤可以通过服务器(例如云服务器)实现而另一部分步骤可以通过电子设备在本地实现，电子设备例如通过网络(例如无线或有线通信网络)彼此通信，从而获得处理后的视频。
图1A示出了本公开至少一实施例提供的一种视频处理方法的流程图。
如图1A所示，该方法可以包括步骤S10～S30。
步骤S10：显示初始图像，初始图像包括第一风格图像。
步骤S20：响应于第一触发事件，显示图像切换动画，图像切换动画用于展示从初始图像切换到目标图像的动态过程，目标图像包括第二风格图像。
步骤S30：响应于图像切换动画显示完毕，显示目标图像。
例如，图像切换动画的切换图像包括第一图像区域、第二图像区域和第三图像区域，第一图像区域位于第二图像区域与第三图像区域之间。第一图像区域在动态过程中通过位置移动覆盖图像切换动画的整个图像区域并在位置移动的过程中发生形状变化，第一图像区域用于展示切换素材，第二图像区域用于展示初始图像位于第二图像区域所在位置上的部分图像，第三图像区域用于展示目标图像位于第三图像区域所在位置上的部分图像。
该方法能够降低用户准备不同图像风格的视频片段的繁琐性，并且通过图像切换动画使得不同图像风格视频片段之间的切换更加流畅，而且提供了一种新的视频片段切换方式，提高了用户体验。
对于步骤S10，在本公开的一些实施例中，第一风格图像是基于拍摄图像所得到的图像。拍摄图像例如可以是拍摄器件在不同时刻拍摄到的图像，拍摄器件在不同时刻拍摄到的图像可以是不同的，所以不同时间得到的初始图像，以及在不同时间基于初始图像得到的目标图像也可以是不同的。例如，拍摄器件可以为摄像头。
例如，第一风格图像可以是实时拍摄图像，该实时拍摄图像可以是影像拍摄装置实时拍摄到并实时显示在显示屏的图像。例如，影像拍摄装置可以为前述的拍摄器件，可以为摄像头。实时显示在显示屏的图像可以是未对影像拍摄装置实时拍摄到图像进行处理的实景图像，例如原始实景图像，或者实时显示在显示屏的图像也可以是对影像拍摄装置实时拍摄到实景图像进行实时地滤波、平滑、填充等处理而得到的具有第一风格的图像。
当然，在本公开的另一些实施例中，第一风格图像也可以不是影像拍摄装置实时拍摄到的图像，例如第一风格图像可以是从本地存储器直接获取的拍摄图像，也可以是从云端下载得到的拍摄图像。
在本公开的一些实施例中，初始图像不仅包括第一风格图像还可以包括第一预设图像，第一预设图像环绕第一风格图像。第一预设图像例如可以是贴图、动图等。
图1B示出了图1A中通过步骤S10显示初始图像的示意图。
如图1B所示，例如可以在电子设备的显示屏上显示该初始图像100，该初始图像100可以包括第一风格图像101(虚线框内部)和第一预设图像102(虚线框外部)。
第一风格图像101例如可以是影像拍摄装置拍摄目标对象而得到的拍摄图像。第一预设图像102例如可以是日历贴图。例如，当使用影像拍摄装置实时拍摄视频时，显示屏上实时显示连续的多帧初始图像。
对于步骤S20，第一触发事件例如可以是检测到拍摄图像中目标对象呈现预设肢体动作、检测到拍摄图像中目标对象呈现预设面部动作以及接收到预设语音中的至少一种。
预设肢体动作，例如可以是目标对象的肢体在显示屏上滑动，或者是在影像拍摄装置的视野范围内滑动。肢体例如可以是用户的头部、手部等。预设面部动作，例如可以是用户的嘴部发生形变，或者眨眼等。
例如，可以通过多种方式来检测视频中的肢体动作，即动作检测。动作检测任务类似于目标检测任务，都是需要先定位目标，然后识别目标。示例性的方法包括SCNN(多阶段网络)、TURN(单元回归网络)、TAG(时序动作分组)、CDC网络(Convolutional-De-Convolutional Networks)方法、SSN(结构化分段网络)、CBR(级联的边界回归网络)等等，本公开的实施例不限于某一特定的动作检测方法。
响应于第一触发事件，显示图像切换动画，以通过图像切换动画展示从初始图像切换到目标图像的动态过程。该图像切换动画例如可以包括连续的多帧切换图像，切换图像例如可以包括第一图像区域、第二图像区域和第三图像区域。第一图像区域位于第二图像区域与第三图像区域之间。第一图像区域用于展示切换素材，第二图像区域用于展示初始图像位于第二图像区域所在位置上的部分图像，第三图像区域用于展示目标图像位于第三图像区域所在位置上的部分图像。
图1C示出了本公开至少一实施例提供的图像切换动画的切换图像的示意图。
需要理解的是，图1C所示的切换图像仅仅是图像切换动画中的一帧切换图像，图像切换动画可以是由多帧不同的切换图像组成的动画。而且，图1C仅为一种示例，并不对本公开的实施例有限定作用。
如图1C所示，该切换图像可以包括第一图像区域103、第二图像区域104和第三图像区域105。第一图像区域103位于第二图像区域104与第三图像区域105之间。
第一图像区域103用于展示切换素材。如图1C所示，切换素材例如可以是一个白色的纯色填充图像。当然，切换素材也可以是具有图案的图像，图1C中所示的切换素材仅为一种示例，并不意味着切换素材只能是白色的纯色填充图像。
第二图像区域104用于展示初始图像位于第二图像区域104所在位置上的部分图像。该初始图像例如可以是实时拍摄到的图像。如图1B所示，例如，初始图像100在第二图像区域104所在的位置上的部分图像可以是目标对象的头顶、目标对象所处的部分环境形成的背景以及日历贴图。因此，第二图像区域104展示初始图像100在第二图像区域104所在的位置上的部分图像可以包括展示目标对象的头顶、目标对象所处的部分环境形成的背景以及日历贴图。
第三图像区域105用于展示目标图像位于第三图像区域105所在位置上的部分图像。目标图像包括第二风格图像。第二风格图像是基于拍摄图像得到的图像，第一风格图像与第二风格图像是不同风格的图像。在本公开的一些实施例中，第二风格图像为对拍摄图像进行风格迁移得到的图像。拍摄图像例如可以是影像拍摄装置实时拍摄到的图像。
在本公开的一些实施例中，第二风格图像是通过将拍摄图像输入到风格迁移模型而得到的风格迁移模型输出的图像。例如，第二风格图像例如可以是对影像拍摄装置拍摄目标对象而得到的拍摄图像进行风格迁移得到的图像。例如，可以将拍摄图像输入到风格迁移模型中，从而得到从风格迁移模型输出的具有港漫风格的图像。
风格迁移模型可以是通过样本图像对机器学习模型进行训练得到的。样本图像包括原始图像和迁移图像，原始图像是对样本对象进行拍摄得到的图像，迁移图像是对样本对象进行风格创作得到的图像。
迁移图像例如可以是港漫风格的图像、油画风格的图像或素描图像等。例如，将原始图像作为机器学习模型的输入，迁移图像作为机器学习模型的输出，从而训练得到风格迁移模型。
例如，可以将拍摄图像输入到风格迁移模型中，从而得到风格迁移模型输出的具有港漫风格的图像(即，第二风格图像)，或者也可以根据用户的选择来确定风格迁移模型输出的图像具有哪种风格。例如，用户可以在应用程序中选择“油画风格”、“国画风格”等，则风格迁移模型对拍摄图像进行风格迁移而输出具有油画风格、国画风格等的第二风格图像。在该情形中，可以采用多个风格迁移模型，各个风格迁移模型所输出的图像具有不同的风格，因此基于用户的选择将拍摄图像输入对应的风格迁移模型，从而得到对应风格的图像。
需要说明的是，在第三图像区域105展示目标图像位于第三图像区域105所在位置上的部分图像时，第二图像区域104展示初始图像位于第二图像区域104所在位置上的部分图像，此时的初始图像与该目标图像在同一时刻所得到的图像，只不过初始图像与目标图像的风格不同。也就是说，初始图像和目标图像都可以是基于实时的拍摄图像而得到的不同风格的图像。
如图1C所示，第三图像区域105例如可以展示目标图像位于第三图像区域105所在位置上的部分图像。如图1D所示，例如目标图像位于第三图像区域105所在位置上的部分图像可以包括目标对象的脸部的左下部和头发的尾部，则在切换图像的第三图像区域105中显示该部分图像。
在本公开的一些实施例中，第一图像区域103在动态过程中通过位置移动覆盖图像切换动画的整个图像区域并在位置移动的过程中发生形状变化。可以理解的是，在图像切换动画的开始时刻，切换图像可以只有第二图像区域，即，显示屏上显示第一风格图像而不显示第二风格图像。例如第一图像区域可以从左下角开始向右侧和上方移动，第一图像区域通过位置移动来覆盖整个图像区域。并且在第一图像区域的位置移动过程中，第一图像区域发生形状变化。例如第一图像区域可以按照翻页的规律来进行位置移动和形状变化，使得图像切换动画可以呈现出翻页的效果。下文结合图4和图5说明图像切换动画的渲染图层以及第一图像区域位置移动并在位置移动的过程中发生形状变化的原理，在此不再赘述。
需要说明的是，第一图像区域也可以从左上角开始向右侧和下方移动，或者也可以从右上角开始向左侧和下方移动，总之本公开对第一图像区域的移动方式不做限定。
对于步骤S30，例如可以是在第一图像区域在动态过程中通过位置移动分时覆盖到图像切换动画的整个图像区域时(例如分时覆盖可以是指不同时刻覆盖不同的部分，而非在同一时刻完全覆盖整个图像区域)，图像切换动画显示完毕。
在本公开的一些实施例中，在图像切换动画显示完毕的情况下，例如可以在显示屏上显示该时刻对应的目标图像。
在本公开的一些实施例中，例如，在图像切换动画显示完毕的情况下，如果使用影像拍摄装置继续实时拍摄视频，显示屏上可以实时显示连续的多帧具有第二风格图像的目标图像。
图1D示出了本公开至少一实施例提供的目标图像的示意图。
如图1D所示，例如可以在显示屏上显示该目标图像200，该目标图像200可以包括第二风格图像106(虚线框内部)和第二预设图像107。在本公开的一些实施例中，目标图像不仅可以包括第二风格图像106还可以包括第二预设图像107(虚线框外部)，第二预设图像107环绕第二风格图像。第二预设图像，例如可以是贴图、动图等。第二预设图像可以与第一预设图像相同也可以不相同。
第二风格图像106例如可以是对影像拍摄装置拍摄目标对象而得到的拍摄图像进行风格迁移得到的图像。例如，可以将实时拍摄到的拍摄图像输入到风格迁移模型中得到具有港漫风格的图像。
第二预设图像107例如可以是日历贴图。如图1D和1B所示，第二预设图像107和第一预设图像102可以不相同，例如可以是示出不同日期的日历贴图，也即是，日历贴图上的日期发生变化。
可以理解的是，在图像切换动画的开始时刻，切换图像可以只有第二图像区域，即，显示第一风格图像而不显示第二风格图像。在图像切换动画的结束时刻，切换图像可以只有第三图像区域，即，显示第二风格图像而不显示第一风格图像。
在本公开的一些实施例中，第一图像区域在动态过程中位置移动的位移速度和形状变化的形变速度基于第一触发事件确定。也就是说，可以基于第一触发事件确定第一图像区域在动态过程中位置移动的位移速度和形状变化的形变速度。该实施例提供了一种可以控制图像切换动画的位移速度和形变速度的方法，从而提高了该视频处理方法的趣味性和丰富了视频处理方法的功能，提高了用户体验。
在本公开的一些实施例中，若第一触发事件包括检测到拍摄图像中目标对象呈现预设肢体动作，第一图像区域在动态过程中位置移动的位移速度和形状变化的形变速度基于预设肢体动作的动作幅度确定。
例如，第一触发事件包括检测到拍摄图像中目标对象的手指在滑动，则可以根据手指滑动的距离来确定第一图像区域在动态过程中位置移动的位移速度和形状变化的形变速度。例如，在一些示例中，手指滑动的距离越长，则第一图像区域在动态过程中位置移动的位移速度和形状变化的形变速度越快。
在本公开的一些实施例中，若第一触发事件包括检测到拍摄图像中目标对象呈现预设面部动作，第一图像区域在动态过程中位置移动的位移速度和形状变化的形变速度基于预设面部动作的形变幅度确定。例如，在一些示例中，预设面部动作的形变幅度越大，则第一图像区域在动态过程中位置移动的位移速度和形状变化的形变速度越快。
例如，第一触发事件包括检测到拍摄图像中目标对象的面部动作由不微笑变成了微笑，则可以根据嘴巴的形变幅度确定第一图像区域在动态过程中位置移动的位移速度和形状变化的形变速度。
在本公开的一些实施例中，若第一触发事件包括接收到预设语音，第一图像区域在动态过程中位置移动的位移速度和形状变化的形变速度基于预设语音的语速、预设语音的音量或者预设语音中的内容中的至少一种确定。
例如，第一触发事件包括接收到预设语音“撕掉过去，迎接未来”，则可以根据接收到的预设语音“撕掉过去，迎接未来”的语速来确定第一图像区域在动态过程中位置移动的位移速度和形状变化的形变速度。例如，在一些示例中，预设语音的语速越快，则第一图像区域在动态过程中位置移动的位移速度和形状变化的形变速度越快。
图2示出了本公开至少一实施例提供的另一种视频处理方法的流程图。
如图2所示，该视频处理方法在前述实施例的基础上还可以包括步骤S40。步骤S40例如可以在步骤S20之后并且在步骤S30之前执行。
步骤S40：响应于在图像切换动画的显示过程中出现第二触发事件，控制动态过程停止，并显示图像切换动画在动态过程停止处的图像。
第二触发事件例如可以包括检测到拍摄图像中目标对象呈现暂停肢体动作、暂停面部动作、语音输入中的至少一种。
暂停肢体动作例如可以是目标对象通过手指朝向显示屏点击的动作。暂停面部动作例如可以是目标对象伸出舌头的动作。语音输入例如可以是输入语音“暂停”。
图3示出了一种本公开至少一实施例提供的图像切换动画在动态过程停止处的图像示意图。
如图3所示，例如图像切换动画显示切换图像300，响应于出现第二触发事件，则控制图像切换动画停止，并且显示切换图像300。
在本公开的一些实施例中，响应于图像切换动画的动态过程停止，则可以在切换图像300上显示暂停指示键301。
如果第一触发事件包括预设肢体动作，第二触发事件包括暂停肢体动作，那么预设肢体动作和暂停肢体动作可以是不同的肢体动作，以便可以根据肢体动作确定显示图像切换动画还是使正在播放的图像切换动画暂停。当然，预设肢体动作和暂停肢体动作也可以是相同的肢体动作。例如，如果在未播放图像切换动画时检测到肢体动作，则可以确定该肢体动作为预设肢体动作，则显示图像切换动画。如果在播放图像切换动画的过程中检测到该肢体动作，则可以确定该肢体动作为暂停肢体动作。类似地，如果第一触发事件包括预设面部动作，第二触发事件包括暂停面部动作，那么预设面部动作和暂停面部动作可以是不同的面部动作，也可以是相同的面部动作。
图4示出了本公开至少一实施例提供的图像切换动画的渲染图层的示意图。
如图4所示，图像切换动画通过在第一画布图像401、第二画布图层402和第三画布图层403上进行图像渲染来显示。第二画布图层402比第一画布图层401更靠近显示侧，第三画布图层403比第二画布图层402更靠近显示侧。这里，显示侧例如是指显示该图像切换动画的装置的显示屏朝向用户的一侧。
切换素材渲染在第三画布图层上，初始图像位于第二图像区域所在位置上的部分图像渲染在第二画布图层上，目标图像位于第三图像区域所在位置上的部分图像渲染在第一画布图层上。第一画布图层、第二画布图层和第三画布图层中未进行渲染显示的区域是透明的。
例如，在图1B～图1D所示的情景中，切换素材103渲染在第三画布图层403上，初始图像位于第二图像区域104所在位置上的部分图像渲染在第二画布图像402上，目标图像位于第三图像区域105所在位置上的部分图像渲染在第一画布图层上401上。
图5示出了本公开至少一实施例提供的第一图像区域位置移动并在位置移动的过程中发生形状变化的原理示意图。
如图5所示，在该原理示意图中，假如第一图像500的一个边角D被翻起，边角D被翻起后落到C点的位置，线段AB可以是边角D被翻起所形成的折痕，那么可以计算出C点、A点和B点的坐标，从而可以得到第一图像区域501、第二图像区域502和第三图像区域503。第二图像区域502显示初始图像位于第二图像区域502所在位置上的部分图像。第三图像区域503显示目标图像位于第三图像区域503所在位置上的部分图像。
在本公开的一个实施例中，例如可以通过翻页曲线来获取C点随时间变化的坐标。该翻页曲线例如可以是本领域技术人员通过拟合得到的。例如，可以确定C点的起始点和终点，从而可以根据起始点和终点以及翻页的角度来拟合出翻页曲线。而A点和B的坐标例如可以通过A点、B点以及C点之间的位置关系来计算得到。
图6A示出了本公开至少一实施例提供的另一视频处理方法的流程图。
如图6A所示，该视频处理方法的流程图可以包括步骤S602～S607。
步骤S602：在显示屏上显示包括真人风格的初始图像。该真人风格即为第一风格图像。例如可以执行上文参考图1A描述的步骤S10，在此不再赘述。
步骤S603：判断是否检测到微笑动作。如果检测到微笑动作，则执行步骤S604，检测到微笑动作即为检测到第一触发事件。如果没有检测到微笑动作，则执行步骤S607。
步骤S604：响应于检测到微笑动作，则根据实时的真人图像实时生成具有港漫风格的目标图像。此时，显示屏上显示的图像包括港漫风格的目标图像的一部分以及真人风格的初始图像的一部分。
步骤S605：展示翻页特效，该翻页特效即为上文描述的图像切换动画。例如可以执行上文参考图1A描述的步骤S20，在此不再赘述。
步骤S606：在翻页特效显示完毕的情况下，显示具有港漫风格的目标图像。例如可以执行上文参考图1A描述的步骤S30，在此不再赘述。
步骤S607：显示真人风格图像。即如果没有检测到微笑动作，则显示真人风格图像。
图6B示出了本公开至少一实施例提供的一种实现视频处理方法的链路示意图。
如图6B所示，该链路可以包括道具包、渲染工具包、视频编辑器(video editor)和操作系统。
道具包例如可以是用于实现该道具具有的功能的程序包。该道具具有的功能例如可以是展示翻页效果。
渲染工具包例如可以对道具包处理过的视频进行渲染，并将渲染后的结果传递给视频编辑器。视频编辑器例如可以对渲染后的结果进行编辑处理，使得处理后的视频与操作系统适配，以便通过运行在该操作系统中的应用程序展示该翻页效果。
在本公开的一些实施例中，视频处理方法还可以包括：响应于接收到拍摄结束指令或拍摄暂停指令，进行视频处理参数初始化。
图6C示出了本公开至少一实施例提供的初始化的流程图。
如图6C所示，初始化操作可以包括步骤S620～S670。
步骤S620：判断是否开始拍摄。开始拍摄例如可以是指用户点击拍摄按钮而使影像拍摄装置进入拍摄状态。
如果没有开始拍摄则执行步骤S630。如果开始了拍摄，则执行步骤S670～S680。
步骤S630：判断拍摄状态是否为结束拍摄或者暂停拍摄。
如果拍摄状态为结束拍摄或者暂停拍摄，则执行步骤S640～S680。如果拍摄状态不是结束拍摄或者暂停拍摄，则执行步骤S680。
步骤S640：发送重置道具包和渲染工具包的初始化消息，使得道具包和渲染工具包中的视频处理参数被初始化。
步骤S650：视频编辑器进行重置。例如可以将视频编辑器中的视频处理参数初始化。
步骤S660：应用程序进行重置。例如可以将应用程序重置为展示真人风格的图像的状态。
步骤S670：更新拍摄状态。例如，如果步骤S620为“是”，则可以进入拍摄状态，响应于第一触发事件，展示翻页效果。如果步骤S620为“否”，并且步骤S630为“是”，执行步骤S640～S660之后，将拍摄状态更新为暂停拍摄或者结束拍摄。
图7示出了本公开至少一个实施例提供的一种视频处理装置700的示意框图。
例如，如图7所示，该视频处理装置700包括显示单元710和切换单元720。
显示单元710配置为显示初始图像，例如，初始图像包括第一风格图像，第一风格图像是基于拍摄图像所得到的图像。显示单元710例如可以执行上文参考图1A中的步骤S10。
切换单元720配置为响应于第一触发事件，显示图像切换动画，图像切换动画用于展示从初始图像切换到目标图像的动态过程。例如，目标图像包括第二风格图像，第二风格图像是基于拍摄图像得到的图像，第一风格图像与第二风格图像是不同风格的图像。切换单元720例如可以执行上文参考图1A中的步骤S20。
显示单元710还配置为响应于图像切换动画显示完毕，显示目标图像。显示单元710例如还可以执行上文参考图1A中的步骤S30。
图像切换动画中的切换图像包括第一图像区域、第二图像区域和第三图像区域，第一图像区域位于第二图像区域与第三图像区域之间，第一图像区域在动态过程中通过位置移动分时覆盖图像切换动画的整个图像区域并在位置移动的过程中发生形状变化。第一图像区域用于展示切换素材，第二图像区域用于展示初始图像位于第二图像区域所在位置上的部分图像，第三图像区域用于展示目标图像位于第三图像区域所在位置上的部分图像。
例如，显示单元710和切换单元720可以为硬件、软件、固件以及它们的任意可行的组合。例如，显示单元710和切换单元720可以为专用或通用的电路、芯片或装置等，也可以为处理器和存储器的结合。关于上述各个单元的具体实现形式，本公开的实施例对此不作限制。
需要说明的是，本公开的实施例中，视频处理装置700的各个单元与前述的视频处理方法的各个步骤对应，关于视频处理装置700的具体功能可以参考关于视频处理方法的相关描述，此处不再赘述。图7所示的视频处理装置700的组件和结构只是示例性的，而非限制性的，根据需要，该视频处理装置700还可以包括其他组件和结构。
本公开的至少一个实施例还提供了一种电子设备，该电子设备包括处理器和存储器，存储器包括一个或多个计算机程序模块。一个或多个计算机程序模块被存储在存储器中并被配置为由处理器执行，一个或多个计算机程序模块包括用于实现上述的视频处理方法的指令。该电子设备可以降低用户准备不同图像风格的视频片段的繁琐性，并且使得不同图像风格视频片段之间的切换更加流畅，提供了一种新的视频片段切换方式，提高了用户体验。
图8A为本公开一些实施例提供的一种电子设备的示意框图。如图8A所示，该电子设备800包括处理器810和存储器820。存储器820用于存储非暂时性计算机可读指令(例如一个或多个计算机程序模块)。处理器810用于运行非暂时性计算机可读指令，非暂时性计算机可读指令被处理器810运行时可以执行上文所述的视频处理方法中的一个或多个步骤。存储器820和处理器810可以通过总线系统和/或其它形式的连接机构(未示出)互连。
例如，处理器810可以是中央处理单元(CPU)、图形处理单元(GPU)或者具有数据处理能力和/或程序执行能力的其它形式的处理单元。例如，中央处理单元(CPU)可以为X86或ARM架构等。处理器810可以为通用处理器或专用处理器，可以控制电子设备800中的其它组件以执行期望的功能。
例如，存储器820可以包括一个或多个计算机程序产品的任意组合，计算机程序产品可以包括各种形式的计算机可读存储介质，例如易失性存储器和/或非易失性存储器。易失性存储器例如可以包括随机存取存储器(RAM)和/或高速缓冲存储器(cache)等。非易失性存储器例如可以包括只读存储器(ROM)、硬盘、可擦除可编程只读存储器(EPROM)、便携式紧致盘只读存储器(CD-ROM)、USB存储器、闪存等。在计算机可读存储介质上可以存储一个或多个计算机程序模块，处理器810可以运行一个或多个计算机程序模块，以实现电子设备800的各种功能。在计算机可读存储介质中还可以存储各种应用程序和各种数据以及应用程序使用和/或产生的各种数据等。
需要说明的是，本公开的实施例中，电子设备800的具体功能和技术效果可以参考上文中关于视频处理方法的描述，此处不再赘述。
图8B为本公开一些实施例提供的另一种电子设备的示意框图。该电子设备900例如适于用来实施本公开实施例提供的视频处理方法。电子设备900可以是终端设备等。需要注意的是，图8B示出的电子设备900仅仅是一个示例，其不会对本公开实施例的功能和使用范围带来任何限制。
如图8B所示，电子设备900可以包括处理装置(例如中央处理器、图形处理器等)910，其可以根据存储在只读存储器(ROM)920中的程序或者从存储装置980加载到随机访问存储器(RAM)930中的程序而执行各种适当的动作和处理。在RAM 930中，还存储有电子设备900操作所需的各种程序和数据。处理装置910、ROM 920以及RAM930通过总线940彼此相连。输入/输出(I/O)接口950也连接至总线940。
通常，以下装置可以连接至I/O接口950：包括例如触摸屏、触摸板、键盘、鼠标、摄像头、麦克风、加速度计、陀螺仪等的输入装置960；包括例如液晶显示器(LCD)、扬声器、振动器等的输出装置970；包括例如磁带、硬盘等的存储装置980；以及通信装置990。通信装置990可以允许电子设备900与其他电子设备进行无线或有线通信以交换数据。虽然图8B示出了具有各种装置的电子设备900，但应理解的是，并不要求实施或具备所有示出的装置，电子设备900可以替代地实施或具备更多或更少的装置。
例如，根据本公开的实施例，上述视频处理方法可以被实现为计算机软件程序。例如，本公开的实施例包括一种计算机程序产品，其包括承载在非暂态计算机可读介质上的计算机程序，该计算机程序包括用于执行上述视频处理方法的程序代码。在这样的实施例中，该计算机程序可以通过通信装置990从网络上被下载和安装，或者从存储装置980安装，或者从ROM 920安装。在该计算机程序被处理装置910执行时，可以实现本公开实施例提供的视频处理方法中限定的功能。
本公开的至少一个实施例还提供了一种计算机可读存储介质，该计算机可读存储介质用于存储非暂时性计算机可读指令，当非暂时性计算机可读指令由计算机执行时可以实现上述的视频处理方法。利用该计算机可读存储介质，可以降低用户准备不同图像风格的视频片段的繁琐性，并且使得不同图像风格视频片段之间的切换更加流畅，提供了一种新的视频片段切换方式，提高了用户体验。
图9为本公开一些实施例提供的一种存储介质的示意图。如图9所示，存储介质1000用于存储非暂时性计算机可读指令1010。例如，当非暂时性计算机可读指令1010由计算机执行时可以执行根据上文所述的视频处理方法中的一个或多个步骤。
例如，该存储介质1000可以应用于上述电子设备800中。例如，存储介质1000可以为图8A所示的电子设备800中的存储器820。例如，关于存储介质1000的相关说明可以参考图8A所示的电子设备800中的存储器820的相应描述，此处不再赘述。
需要说明的是，在本公开的上下文中，计算机可读介质可以是有形的介质，其可以包含或存储以供指令执行系统、装置或设备使用或与指令执行系统、装置或设备结合地使用的程序。计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质或者是上述两者的任意组合。计算机可读存储介质例如可以是，但不限于：电、磁、光、电磁、红外线、或半导体的系统、装置或器件，或者任意以上的组合。计算机可读存储介质的更具体的例子可以包括但不限于：具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机访问存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本公开中，计算机可读存储介质可以是任何包含或存储程序的有形介质，该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。而在本公开中，计算机可读信号介质可以包括在基带中或者作为载波一部分传播的数据信号，其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式，包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读信号介质还可以是计算机可读存储介质以外的任何计算机可读介质，该计算机可读信号介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。计算机可读介质上包含的程序代码可以用任何适当的介质传输，包括但不限于：电线、光缆、RF(射频)等等，或者上述的任意合适的组合。
在一些实施方式中，客户端、服务器可以利用诸如HTTP(HyperText TransferProtocol，超文本传输协议)之类的任何当前已知或未来研发的网络协议进行通信，并且可以与任意形式或介质的数字数据通信(例如，通信网络)互连。通信网络的示例包括局域网(“LAN”)，广域网(“WAN”)，网际网(例如，互联网)以及端对端网络(例如，ad hoc端对端网络)，以及任何当前已知或未来研发的网络。
上述计算机可读介质可以是上述电子设备中所包含的；也可以是单独存在，而未装配入该电子设备中。
可以以一种或多种程序设计语言或其组合来编写用于执行本公开的操作的计算机程序代码，上述程序设计语言包括但不限于面向对象的程序设计语言，诸如Java、Smalltalk、C++，还包括常规的过程式程序设计语言，诸如“C”语言或类似的程序设计语言。程序代码可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或服务器上执行。在涉及远程计算机的情形中，远程计算机可以通过任意种类的网络(，包括局域网(LAN)或广域网(WAN))连接到用户计算机，或者，可以连接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。
附图中的流程图和框图，图示了按照本公开各种实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上，流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分，该模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意，在有些作为替换的实现中，方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如，两个接连地表示的方框实际上可以基本并行地执行，它们有时也可以按相反的顺序执行，这依所涉及的功能而定。也要注意的是，框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合，可以用执行规定的功能或操作的专用的基于硬件的系统来实现，或者可以用专用硬件与计算机指令的组合来实现。
描述于本公开实施例中所涉及到的单元可以通过软件的方式实现，也可以通过硬件的方式来实现。其中，单元的名称在某种情况下并不构成对该单元本身的限定。
本文中以上描述的功能可以至少部分地由一个或多个硬件逻辑部件来执行。例如，非限制性地，可以使用的示范类型的硬件逻辑部件包括：现场可编程门阵列(FPGA)、专用集成电路(ASIC)、专用标准产品(ASSP)、片上系统(SOC)、复杂可编程逻辑设备(CPLD)等等。
有以下几点需要说明：
(1)本公开实施例附图只涉及到本公开实施例涉及到的结构，其他结构可参考通常设计。
(2)在不冲突的情况下，本公开的实施例及实施例中的特征可以相互组合以得到新的实施例。
以上所述，仅为本公开的具体实施方式，但本公开的保护范围并不局限于此，本公开的保护范围应以所述权利要求的保护范围为准。

Claims (12)

1.一种视频处理方法，包括：
显示初始图像，其中，所述初始图像包括第一风格图像，所述第一风格图像是基于拍摄图像所得到的图像；
响应于第一触发事件，显示图像切换动画，其中，所述图像切换动画用于展示从所述初始图像切换到目标图像的动态过程，所述目标图像包括第二风格图像，所述第二风格图像是基于拍摄图像得到的图像，所述第一风格图像与所述第二风格图像是不同风格的图像；
响应于所述图像切换动画显示完毕，显示所述目标图像；
其中，所述图像切换动画中的切换图像包括第一图像区域、第二图像区域和第三图像区域，所述第一图像区域位于所述第二图像区域与所述第三图像区域之间，所述第一图像区域在所述动态过程中通过位置移动分时覆盖所述图像切换动画的整个图像区域并在位置移动的过程中发生形状变化，
所述第一图像区域用于展示切换素材，所述第二图像区域用于展示所述初始图像位于所述第二图像区域所在位置上的部分图像，所述第三图像区域用于展示所述目标图像位于所述第三图像区域所在位置上的部分图像。
2.根据权利要求1所述的方法，其中，所述第一触发事件包括：检测到所述拍摄图像中目标对象呈现预设肢体动作、检测到所述拍摄图像中目标对象呈现预设面部动作以及接收到预设语音中的至少一种。
3.根据权利要求2所述的方法，其中，所述第一图像区域在所述动态过程中位置移动的位移速度和形状变化的形变速度基于所述第一触发事件确定。
4.根据权利要求3所述的方法，其中，
若所述第一触发事件包括检测到所述拍摄图像中目标对象呈现预设肢体动作，所述第一图像区域在所述动态过程中位置移动的位移速度和形状变化的形变速度基于所述预设肢体动作的动作幅度确定；
若所述第一触发事件包括检测到所述拍摄图像中目标对象呈现预设面部动作，所述第一图像区域在所述动态过程中位置移动的位移速度和形状变化的形变速度基于所述预设面部动作的形变幅度确定；
若所述第一触发事件包括接收到预设语音，所述第一图像区域在所述动态过程中位置移动的位移速度和形状变化的形变速度基于所述预设语音的语速、所述预设语音的音量或者所述预设语音的内容中的至少一种确定。
5.根据权利要求1所述的方法，其中，所述第一风格图像为所述拍摄图像，所述第二风格图像为对所述拍摄图像进行风格迁移得到的图像。
6.根据权利要求5所述的方法，其中，所述第二风格图像是通过将所述拍摄图像输入到风格迁移模型而得到的所述风格迁移模型输出的图像；
所述风格迁移模型是通过样本图像对机器学习模型进行训练得到的，所述样本图像包括原始图像和迁移图像，所述原始图像是对样本对象进行拍摄得到的图像，所述迁移图像是对所述样本对象进行风格创作得到的图像。
7.根据权利要求1所述的方法，还包括：
响应于在所述图像切换动画的显示过程中出现第二触发事件，控制所述动态过程停止，并显示所述图像切换动画在所述动态过程停止处的图像。
8.根据权利要求1所述的方法，其中，所述初始图像还包括第一预设图像，所述第一预设图像环绕所述第一风格图像；
所述目标图像还包括第二预设图像，所述第二预设图像环绕所述第二风格图像。
9.根据权利要求1所述的方法，其中，所述图像切换动画通过在第一画布图层、第二画布图层和第三画布图层上进行图像渲染来显示，所述第二画布图层比所述第一画布图层更靠近显示侧，所述第三画布图层比所述第二画布图层更靠近显示侧；
所述切换素材渲染在所述第三画布图层上，所述初始图像位于所述第二图像区域所在位置上的部分图像渲染在所述第二画布图层上，所述目标图像位于所述第三图像区域所在位置上的部分图像渲染在所述第一画布图层上；
所述第一画布图层、所述第二画布图层和所述第三画布图层中未进行渲染显示的区域是透明的。
10.一种视频处理装置，包括：
显示单元，配置为显示初始图像，其中，所述初始图像包括第一风格图像，所述第一风格图像是基于拍摄图像所得到的图像；
切换单元，配置为响应于第一触发事件，显示图像切换动画，其中，所述图像切换动画用于展示从所述初始图像切换到目标图像的动态过程，所述目标图像包括第二风格图像，所述第二风格图像是基于拍摄图像得到的图像，所述第一风格图像与所述第二风格图像是不同风格的图像；
所述显示单元还配置为响应于所述图像切换动画显示完毕，显示所述目标图像，
其中，所述图像切换动画中的切换图像包括第一图像区域、第二图像区域和第三图像区域，所述第一图像区域位于所述第二图像区域与所述第三图像区域之间，所述第一图像区域在所述动态过程中通过位置移动分时覆盖所述图像切换动画的整个图像区域并在位置移动的过程中发生形状变化，
所述第一图像区域用于展示切换素材，所述第二图像区域用于展示所述初始图像位于所述第二图像区域所在位置上的部分图像，所述第三图像区域用于展示所述目标图像位于所述第三图像区域所在位置上的部分图像。
11.一种电子设备，包括：
处理器；
存储器，包括一个或多个计算机程序模块；
其中，所述一个或多个计算机程序模块被存储在所述存储器中并被配置为由所述处理器执行，所述一个或多个计算机程序模块包括用于实现权利要求1-9任一项所述的视频处理方法的指令。
12.一种计算机可读存储介质，用于存储非暂时性计算机可读指令，当所述非暂时性计算机可读指令由计算机执行时可以实现权利要求1-9任一项所述的视频处理方法。
CN202011609158.0A 2020-12-30 2020-12-30 视频处理方法及装置、电子设备和计算机可读存储介质 Active CN112764845B (zh)

Priority Applications (7)

Application Number Priority Date Filing Date Title
CN202011609158.0A CN112764845B (zh) 2020-12-30 2020-12-30 视频处理方法及装置、电子设备和计算机可读存储介质
EP21913648.8A EP4242840A4 (en) 2020-12-30 2021-11-25 VIDEO PROCESSING METHOD AND APPARATUS AND ELECTRONIC DEVICE AND COMPUTER-READABLE STORAGE MEDIUM
AU2021415514A AU2021415514A1 (en) 2020-12-30 2021-11-25 Video processing method and apparatus, and electronic device and computer-readable storage medium
KR1020237019199A KR102655049B1 (ko) 2020-12-30 2021-11-25 비디오 처리 방법, 장치, 전자 디바이스 및 컴퓨터 판독가능 저장 매체
JP2023535289A JP7395070B1 (ja) 2020-12-30 2021-11-25 ビデオ処理方法及び装置、電子設備及びコンピュータ読み取り可能な記憶媒体
PCT/CN2021/133179 WO2022142906A1 (zh) 2020-12-30 2021-11-25 视频处理方法及装置、电子设备和计算机可读存储介质
US18/332,318 US11954781B2 (en) 2020-12-30 2023-06-09 Video processing method and apparatus, and electronic device and computer-readable storage medium

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202011609158.0A CN112764845B (zh) 2020-12-30 2020-12-30 视频处理方法及装置、电子设备和计算机可读存储介质

Publications (2)

Publication Number Publication Date
CN112764845A true CN112764845A (zh) 2021-05-07
CN112764845B CN112764845B (zh) 2022-09-16

Family

ID=75697586

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202011609158.0A Active CN112764845B (zh) 2020-12-30 2020-12-30 视频处理方法及装置、电子设备和计算机可读存储介质

Country Status (7)

Country Link
US (1) US11954781B2 (zh)
EP (1) EP4242840A4 (zh)
JP (1) JP7395070B1 (zh)
KR (1) KR102655049B1 (zh)
CN (1) CN112764845B (zh)
AU (1) AU2021415514A1 (zh)
WO (1) WO2022142906A1 (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114428573A (zh) * 2021-12-30 2022-05-03 北京字跳网络技术有限公司 特效图像处理方法、装置、电子设备及存储介质
WO2022142906A1 (zh) * 2020-12-30 2022-07-07 北京字跳网络技术有限公司 视频处理方法及装置、电子设备和计算机可读存储介质
CN115484488A (zh) * 2022-08-23 2022-12-16 惠州拓邦电气技术有限公司 一种动画控制方法、装置及电器
WO2024002317A1 (zh) * 2022-06-30 2024-01-04 北京字跳网络技术有限公司 一种直播视频处理方法、装置、设备及介质
WO2024065761A1 (zh) * 2022-09-30 2024-04-04 京东方科技集团股份有限公司 显示装置以及显示方法

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105404489A (zh) * 2015-11-30 2016-03-16 天脉聚源（北京）科技有限公司 切换显示图像的方法和装置
CN109035374A (zh) * 2018-07-13 2018-12-18 青岛海信电器股份有限公司 颜色渐变动画效果的实现方法及装置
CN110825286A (zh) * 2019-10-30 2020-02-21 北京字节跳动网络技术有限公司 图像处理方法、装置和电子设备
CN111277893A (zh) * 2020-02-12 2020-06-12 北京字节跳动网络技术有限公司 视频处理方法、装置、可读介质及电子设备
CN111738910A (zh) * 2020-06-12 2020-10-02 北京百度网讯科技有限公司 一种图像处理方法、装置、电子设备和存储介质

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101655766B (zh) * 2008-08-22 2012-03-28 鸿富锦精密工业（深圳）有限公司 可体现电子文档翻页效果的电子装置及其方法
JP2012027687A (ja) 2010-07-23 2012-02-09 Casio Comput Co Ltd 画像処理装置及びプログラム
CN101923435B (zh) * 2010-08-24 2012-11-21 福州瑞芯微电子有限公司 电子书模拟真实翻页效果的方法
US9922439B2 (en) * 2014-07-25 2018-03-20 Samsung Electronics Co., Ltd. Displaying method, animation image generating method, and electronic device configured to execute the same
DK179948B1 (en) * 2017-05-16 2019-10-22 Apple Inc. Recording and sending Emoji
US10318889B2 (en) 2017-06-26 2019-06-11 Konica Minolta Laboratory U.S.A., Inc. Targeted data augmentation using neural style transfer
KR20240027845A (ko) * 2018-04-18 2024-03-04 스냅 인코포레이티드 증강 표현 시스템
CN108765278B (zh) 2018-06-05 2023-04-07 Oppo广东移动通信有限公司 一种图像处理方法、移动终端及计算机可读存储介质
DK201970530A1 (en) * 2019-05-06 2021-01-28 Apple Inc Avatar integration with multiple applications
CN110135349A (zh) 2019-05-16 2019-08-16 北京小米智能科技有限公司 识别方法、装置、设备及存储介质
CN112764845B (zh) * 2020-12-30 2022-09-16 北京字跳网络技术有限公司 视频处理方法及装置、电子设备和计算机可读存储介质

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105404489A (zh) * 2015-11-30 2016-03-16 天脉聚源（北京）科技有限公司 切换显示图像的方法和装置
CN109035374A (zh) * 2018-07-13 2018-12-18 青岛海信电器股份有限公司 颜色渐变动画效果的实现方法及装置
CN110825286A (zh) * 2019-10-30 2020-02-21 北京字节跳动网络技术有限公司 图像处理方法、装置和电子设备
CN111277893A (zh) * 2020-02-12 2020-06-12 北京字节跳动网络技术有限公司 视频处理方法、装置、可读介质及电子设备
CN111738910A (zh) * 2020-06-12 2020-10-02 北京百度网讯科技有限公司 一种图像处理方法、装置、电子设备和存储介质

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2022142906A1 (zh) * 2020-12-30 2022-07-07 北京字跳网络技术有限公司 视频处理方法及装置、电子设备和计算机可读存储介质
US11954781B2 (en) 2020-12-30 2024-04-09 Beijing Zitiao Network Technology Co., Ltd. Video processing method and apparatus, and electronic device and computer-readable storage medium
EP4242840A4 (en) * 2020-12-30 2024-05-15 Beijing Zitiao Network Technology Co Ltd VIDEO PROCESSING METHOD AND APPARATUS AND ELECTRONIC DEVICE AND COMPUTER-READABLE STORAGE MEDIUM
CN114428573A (zh) * 2021-12-30 2022-05-03 北京字跳网络技术有限公司 特效图像处理方法、装置、电子设备及存储介质
CN114428573B (zh) * 2021-12-30 2024-03-08 北京字跳网络技术有限公司 特效图像处理方法、装置、电子设备及存储介质
WO2024002317A1 (zh) * 2022-06-30 2024-01-04 北京字跳网络技术有限公司 一种直播视频处理方法、装置、设备及介质
CN115484488A (zh) * 2022-08-23 2022-12-16 惠州拓邦电气技术有限公司 一种动画控制方法、装置及电器
CN115484488B (zh) * 2022-08-23 2023-08-04 惠州拓邦电气技术有限公司 一种动画控制方法、装置及电器
WO2024065761A1 (zh) * 2022-09-30 2024-04-04 京东方科技集团股份有限公司 显示装置以及显示方法

Also Published As

Publication number Publication date
KR20230093337A (ko) 2023-06-27
US11954781B2 (en) 2024-04-09
JP7395070B1 (ja) 2023-12-08
CN112764845B (zh) 2022-09-16
JP2023552591A (ja) 2023-12-18
EP4242840A1 (en) 2023-09-13
US20230316625A1 (en) 2023-10-05
WO2022142906A1 (zh) 2022-07-07
AU2021415514A1 (en) 2023-06-29
KR102655049B1 (ko) 2024-04-04
EP4242840A4 (en) 2024-05-15

Similar Documents

Publication Publication Date Title
CN112764845B (zh) 视频处理方法及装置、电子设备和计算机可读存储介质
WO2020186935A1 (zh) 虚拟对象的显示方法、装置、电子设备和计算机可读存储介质
EP3713212A1 (en) Image capture method, apparatus, terminal, and storage medium
CN112199016B (zh) 图像处理方法、装置、电子设备及计算机可读存储介质
US20190278426A1 (en) Inputting information using a virtual canvas
JP7181375B2 (ja) 目標対象の動作認識方法、装置及び電子機器
CN111970571B (zh) 视频制作方法、装置、设备及存储介质
KR102061867B1 (ko) 이미지 생성 장치 및 그 방법
EP4343580A1 (en) Media file processing method and apparatus, device, readable storage medium, and product
US11102397B2 (en) Method for capturing images, terminal, and storage medium
WO2023169305A1 (zh) 特效视频生成方法、装置、电子设备及存储介质
CN111352560B (zh) 分屏方法、装置、电子设备和计算机可读存储介质
CN112906553B (zh) 图像处理方法、装置、设备及介质
CN117244249A (zh) 多媒体数据生成方法、装置、可读介质及电子设备
WO2024027819A1 (zh) 图像处理方法、装置、设备及存储介质
JP2023510443A (ja) ラベリング方法及び装置、電子機器並びに記憶媒体
US11810336B2 (en) Object display method and apparatus, electronic device, and computer readable storage medium
CN109472873B (zh) 三维模型的生成方法、装置、硬件装置
KR20140089069A (ko) 재생 가능 객체를 생성하는 사용자 단말 장치 및 그 인터렉션 방법
CN110070600B (zh) 三维模型的生成方法、装置、硬件装置
US20240163392A1 (en) Image special effect processing method and apparatus, and electronic device and computer readable storage medium
WO2023185968A1 (zh) 相机功能页面切换方法、装置、电子设备及存储介质
CN116630487A (zh) 视频图像处理方法、装置、电子设备及存储介质
CN115623254A (zh) 视频效果的添加方法、装置、设备及存储介质
CN117376630A (zh) 特效处理方法、装置、电子设备及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant