CN116939303A - 一种视频生成方法、系统及电子设备 - Google Patents

一种视频生成方法、系统及电子设备 Download PDF

Info

Publication number
CN116939303A
CN116939303A CN202210331790.6A CN202210331790A CN116939303A CN 116939303 A CN116939303 A CN 116939303A CN 202210331790 A CN202210331790 A CN 202210331790A CN 116939303 A CN116939303 A CN 116939303A
Authority
CN
China
Prior art keywords
electronic device
video
request information
image
electronic equipment
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202210331790.6A
Other languages
English (en)
Inventor
王骅
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Huawei Technologies Co Ltd
Original Assignee
Huawei Technologies Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Huawei Technologies Co Ltd filed Critical Huawei Technologies Co Ltd
Priority to CN202210331790.6A priority Critical patent/CN116939303A/zh
Publication of CN116939303A publication Critical patent/CN116939303A/zh
Pending legal-status Critical Current

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/458Scheduling content for creating a personalised stream, e.g. by combining a locally stored advertisement with an incoming stream; Updating operations, e.g. for OS modules ; time-related management operations

Landscapes

  • Engineering & Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Telephone Function (AREA)

Abstract

本申请实施例提供一种视频生成方法、系统及电子设备,涉及电子技术领域。该系统包括:第一电子设备在检测到用户的第一操作时,开启第一功能,并和第二电子设备建立连接;第一电子设备在确定所处地标属于第一类别时,向第二电子设备发送第一请求信息,第一请求信息用于请求第二电子设备拍摄视频;第二电子设备根据第一请求信息,拍摄视频,并将视频发送给第一电子设备;第一电子设备接收并保存视频。

Description

一种视频生成方法、系统及电子设备
技术领域
本发明涉及电子设备技术领域,尤其涉及到一种视频生成方法、系统及电子设备。
背景技术
随着万物互联的推广及各类设备的智能化,越来越多的设备都配备了摄像头及相机软件,支持拍摄照片或视频,在有趣的场景拍摄视频成为用户的常见行为。驾车出游时,用户很难在遇到有趣的场景、地标时及时拿出手机进行拍摄,行车记录仪虽然也具有摄影功能,但是行车记录仪拍摄的视频较长,用户也很难从行车记录仪拍摄的长视频中找到关键的片段。
发明内容
本申请提供一种视频生成方法、系统及电子设备,第一电子设备可以通过第二电子设备拍摄一个或多个视频,并通过第一电子设备的能力将任意一个或多个视频合成一个视频,提升了用户的视频拍摄体验。
第一方面,本申请提供一种系统,该系统包括第一电子设备和第二电子设备,其中,第一电子设备,用于在检测到用户的第一操作时,开启第一功能,并和第二电子设备建立连接;第一电子设备,用于在确定所处地标属于第一类别时,向第二电子设备发送第一请求信息,第一请求信息用于请求第二电子设备拍摄视频;第二电子设备,用于根据第一请求信息,拍摄视频,并将视频发送给第一电子设备;第一电子设备,用于接收并保存视频。由于第一电子设备检测到用户到达具有标志意义的路标时,可以自动请求第二电子设备拍摄视频,而不需要依靠用户进行操作,可以使第二电子设备及时记录用户想记录的事物(例如标志性建筑),简化了用户的操作,提升了用户的体验。
结合第一方面,本申请实施例中,上述第一电子设备,用于在检测到所处地标属于第一类别时,向第二电子设备发送第一请求信息,具体包括:第一电子设备查询POI数据,当第一电子设备根据POI数据确定所处地标属于第一类别,向第二电子设备发送第一请求信息。由于第一电子设备可以通过查询POI数据检测用户是否到达具有标志意义的路标,可以在用户到达具有标志意义的路标时自动请求第二电子设备拍摄视频,而不需要依靠用户进行操作,可以使第二电子设备及时记录用户想记录的事物(例如标志性建筑),简化了用户的操作,提升了用户的体验。
结合第一方面,本申请实施例中,第一电子设备,还用于在检测到用户的第一操作时,向第二电子设备发送第二请求信息,第二请求信息用于请求第二电子设备拍摄图像;第二电子设备,还用于根据第二请求信息,拍摄图像,并将图像发送给第一电子设备;第一电子设备,还用于接收图像,当第一电子设备检测到图像属于第二类别,第一电子设备向第二电子设备发送第一请求信息,第一请求信息用于请求第二电子设备拍摄所述视频;第二电子设备,用于根据第一请求信息,拍摄视频,并将视频发送给第一电子设备;第一电子设备,用于接收并保存视频。由于第一电子设备检测到当前画面具备美学特征时,可以自动请求第二电子设备拍摄视频,而不需要依靠用户进行操作,可以使第二电子设备及时记录用户想记录的事物(例如美景),简化了用户的操作,提升了用户的体验。
在一些实施例中,上述第一电子设备,还用于在检测到用户的第一操作时,向第二电子设备发送第二请求信息,具体包括:第一电子设备,还用于在检测到用户的第一操作时,周期性地向第二电子设备发送第二请求信息。由于第一电子设备可以周期性地请求第二电子设备拍摄图像,可以使第一电子设备更快地检测到当前画面具备美学特征,并可以自动请求第二电子设备拍摄视频,而不需要依靠用户进行操作,可以使第二电子设备可以更及时记录用户想记录的事物(例如美景),简化了用户的操作,提升了用户的体验。
在一些实施例中,上述第一电子设备,还用于接收图像,当第一电子设备检测到图像属于第二类别,第一电子设备向第二电子设备发送第一请求信息,具体包括:第一电子设备,还用于接收图像,第一电子设备检测图像与前一次接收的图像之间的相关性;当相关性不大于第一预设阈值,第一电子设备检测图像的类别;当第一电子设备检测到图像属于第二类别,第一电子设备向第二电子设备发送第一请求信息。由于第一电子设备可以计算该图像与上一次收到的图像的相关性,当图像的相关性不大于第一预设阈值,第一电子设备可以将图像作为预处理模块的输入;当图像的相关性大于第一预设阈值,第一电子设备不将该图像输入预处理模块,避免第一电子设备频繁地将同一类型的图像输入图像分类模块,可以减少图像分类模块不必要的运行。
结合第一方面,本申请实施例中,第一电子设备,还用于检测到用户的第二操作时,向第二电子设备发送第一请求信息,第一请求信息用于请求第二电子设备拍摄视频;第二电子设备,用于根据第一请求信息,拍摄视频,并视频发送给第一电子设备;第一电子设备,用于接收并保存视频。由于第一电子设备检测检测到用户的第二操作时,可以请求第二电子设备拍摄视频,可以使第二电子设备拍摄用户需要拍摄的视频,提升了用户的体验。
结合第一方面,本申请实施例中,第一电子设备,还用于保存视频时,查询并保存POI数据,第一电子设备将POI数据作为视频的POI标签;第一电子设备,还用于基于预设的视频模板,选择保存的任意一个或多个视频生成第一视频;第一电子设备,还用于将任意一个或多个视频的POI标签作为第一视频的字幕。由于第一电子设备可以将视频数据对应的POI标签作为第一视频的字幕,可以增强第一视频的趣味性。
结合第一方面,本申请实施例中,第一电子设备,还用于向用户提示第一视频。
第二方面,本申请提供一种视频生成方法,该方法应用于第一电子设备,该方法具体包括:第一电子设备在检测到用户的第一操作时,开启第一功能,并和第二电子设备建立连接;第一电子设备在确定所处地标属于第一类别时,向第二电子设备发送第一请求信息,第一请求信息用于请求第二电子设备拍摄视频;第一电子设备接收并保存视频。由于第一电子设备检测到用户到达具有标志意义的路标时,可以自动请求第二电子设备拍摄视频,而不需要依靠用户进行操作,可以使第二电子设备及时记录用户想记录的事物(例如标志性建筑),简化了用户的操作,提升了用户的体验。
结合第二方面,本申请实施例中,上述第一电子设备在检测到所处地标属于第一类别时,向第二电子设备发送第一请求信息,包括:第一电子设备查询POI数据,当第一电子设备根据POI数据确定所处地标属于第一类别,向第二电子设备发送所述第一请求信息。由于第一电子设备可以通过查询POI数据检测用户是否到达具有标志意义的路标,可以在用户到达具有标志意义的路标时自动请求第二电子设备拍摄视频,而不需要依靠用户进行操作,可以使第二电子设备及时记录用户想记录的事物(例如标志性建筑),简化了用户的操作,提升了用户的体验。由于第一电子设备检测到当前画面具备美学特征时,可以自动请求第二电子设备拍摄视频,而不需要依靠用户进行操作,可以使第二电子设备及时记录用户想记录的事物(例如美景),简化了用户的操作,提升了用户的体验。
结合第二方面,本申请实施例中,第一电子设备在检测到用户的第一操作时,向第二电子设备发送第二请求信息,第二请求信息用于请求第二电子设备拍摄图像;第一电子设备接收图像,当第一电子设备检测到图像属于第二类别,第一电子设备向第二电子设备发送第一请求信息,第一请求信息用于请求第二电子设备拍摄视频;第一电子设备接收并保存视频。由于第一电子设备检测到当前画面具备美学特征时,可以自动请求第二电子设备拍摄视频,而不需要依靠用户进行操作,可以使第二电子设备及时记录用户想记录的事物(例如美景),简化了用户的操作,提升了用户的体验。
在一些实施例中,上述第一电子设备在检测到用户的第一操作时,向第二电子设备发送第二请求信息,具体包括:第一电子设备在检测到用户的第一操作时,周期性地向第二电子设备发送第二请求信息。由于第一电子设备可以周期性地请求第二电子设备拍摄图像,可以使第一电子设备更快地检测到当前画面具备美学特征,并可以自动请求第二电子设备拍摄视频,而不需要依靠用户进行操作,可以使第二电子设备可以更及时记录用户想记录的事物(例如美景),简化了用户的操作,提升了用户的体验。
在一些实施例中,上述第一电子设备接收图像,当第一电子设备检测到图像属于第二类别,第一电子设备向第二电子设备发送第一请求信息,具体包括:第一电子设备接收图像,第一电子设备检测图像与前一次接收的图像之间的相关性;当相关性小于第一预设阈值,第一电子设备检测图像的类别;当第一电子设备检测到图像属于第二类别,第一电子设备向第二电子设备发送第一请求信息。由于第一电子设备可以计算该图像与上一次收到的图像的相关性,当图像的相关性不大于第一预设阈值,第一电子设备可以将图像作为预处理模块的输入;当图像的相关性大于第一预设阈值,第一电子设备不将该图像输入预处理模块,避免第一电子设备频繁地将同一类型的图像输入图像分类模块,可以减少图像分类模块不必要的运行。
结合第二方面,本申请实施例中,第一电子设备检测到用户的第二操作时,向第二电子设备发送第一请求信息,第一请求信息用于请求第二电子设备拍摄视频;第一电子设备接收并保存视频。由于第一电子设备检测检测到用户的第二操作时,可以请求第二电子设备拍摄视频,可以使第二电子设备拍摄用户需要拍摄的视频,提升了用户的体验。
结合第二方面,本申请实施例中,第一电子设备保存视频时,查询并保存POI数据,第一电子设备将POI数据作为视频的POI标签;第一电子设备基于预设的视频模板,选择保存的任意一个或多个视频生成第一视频;第一电子设备将任意一个或多个视频的POI标签作为第一视频的字幕。由于第一电子设备可以将视频数据对应的POI标签作为第一视频的字幕,可以增强第一视频的趣味性。
在一些实施例中,第一电子设备向用户提示第一视频。
第三方面,本申请提供一种视频生成方法,该方法应用于第二电子设备,该方法具体包括:第二电子设备接收第一电子设备发送的第一请求信息,第一请求信息用于请求第二电子设备拍摄视频;第二电子设备拍摄视频,并将视频发送给第一电子设备;第二电子设备接收第一电子设备发送的第二请求信息,第二请求信息用于请求第二电子设备拍摄图像;第二电子设备拍摄图像,并将图像发送给第一电子设备。由于第二电子设备检测到第一电子设备的请求时,可以拍摄视频和图像,并发送给第一电子设备,避免在第一电子设备不能用于拍摄视频时,用户无法记录当前想记录的事物(例如美景),提升了用户的体验。
第四方面,本申请提供一种电子设备,包括:一个或多个处理器;一个或多个存储器;一个或多个存储器存储有一个或者多个计算机程序,一个或者多个计算机程序包括指令。当所述指令被一个或多个处理器执行时,使得电子设备执行如上述第二方面中任一项可能的实现方法。
第五方面,本申请提供一种电子设备,包括:一个或多个处理器;一个或多个存储器;一个或多个存储器存储有一个或者多个计算机程序,一个或者多个计算机程序包括指令。当所述指令被一个或多个处理器执行时,使得电子设备执行如上述第三方面中任一项可能的实现方法。
第六方面,本申请提供一种计算机可读存储介质,包括计算机指令,当计算机指令在电子设备上运行时,使得电子设备执行如上述第二方面中任一项可能的实现方法;或当所述计算机指令在电子设备上运行时,使得所述电子设备执行如上述第三方面中任一项所述的方法。
附图说明
图1为本申请实施例提供的一种电子设备的结构示意图
图2为本申请实施例提供的一种电子设备的软件结构框图
图3为本申请实施例提供的一种视频生成方法的方法流程图
图4为本申请实施例提供的一组图形用户界面
图5为本申请实施例提供的另一种视频生成方法的方法流程图
图6为本申请实施例提供的另一种视频生成方法的方法流程图
图7为本申请实施例提供的一种系统架构的示意图
具体实施方式
下面将结合附图进行进一步地详细描述。其中,在本申请实施例的描述中,除非另有说明,“/”表示或的意思,例如,A/B可以表示A或B;文本中的“和/或”仅仅是一种描述关联对象的关联关系,表示可以存在三种关系,例如,A和/或B,可以表示:单独存在A,同时存在A和B,单独存在B这三种情况,另外,术语“第一”、“第二”仅用于描述目的,而不能理解为暗示或暗示相对重要性或者隐含指明所指示的技术特征的数量。
首先对本申请实施例涉及的电子设备的结构进行介绍。
电子设备100可以是搭载iOS、Android、Microsoft或者其它操作系统的电子设备,可以包括手机、可折叠电子设备、平板电脑、桌面型计算机、膝上型计算机、手持计算机、笔记本电脑、超级移动个人计算机(ultra-mobile personal computer,UMPC)、上网本、蜂窝电话、掌上电脑(Personal Digital Assistant,PDA)、AR设备、VR设备、人工智能设备、可穿戴式设备、车载设备、智能家居设备、智慧城市设备中的至少一种。本申请实施例对电子设备100的类型不作特殊限制。
如图1所示为一种电子设备的结构示意图,电子设备100可以包括处理器110,内部存储器121,USB连接器130,充电管理模块140,电源管理模块141,电池142,天线1,天线2,移动通信模块150,无线通信模块160,音频模块170,扬声器170A,受话器170B,麦克风170C,耳机连接器170D,传感器模块180,按键190,马达191,指示器192,摄像头193,显示屏194,存储卡连接器120,以及SIM卡接口195等。其中传感器模块180可以包括压力传感器180A,陀螺仪传感器180B,气压传感器180C,磁传感器180D,加速度传感器180E,距离传感器180F,接近光传感器180G,指纹传感器180H,温度传感器180J,触摸传感器180K,环境光传感器180L,骨传导传感器180M等。
本申请实施例示意的结构并不构成对电子设备100的限定。在本申请另一些实施例中,电子设备100可以包括比图示更多或更少的部件。图示的部件可以以硬件,软件或软件和硬件的组合实现。
处理器110可以包括一个或多个处理单元,例如:处理器110可以包括应用处理器,调制解调处理器,图形处理器(graphics processing unit,GPU),图像信号处理器(imagesignal processor,ISP),控制器,视频编解码器,数字信号处理器(digital signalprocessor,DSP),基带处理器,和/或神经网络处理器(neural-network processing unit,NPU)等。其中,不同的处理单元可以是独立的器件,也可以集成在一个或多个处理器中。
处理器110可以根据指令操作码和时序信号,产生操作控制信号,完成取指令和执行指令的控制。
处理器110中还可以设置存储器,用于存储指令和数据。在一些实施例中,处理器110中的存储器可以为高速缓冲存储器。该存储器可以保存处理器110用过或使用频率较高的指令或数据。
在一些实施例中,处理器110可以包括一个或多个接口。接口可以包括集成电路I2C接口,I2S接口,PCM接口,UART接口,MIPI,GPIO接口,SIM接口,和/或USB接口等。处理器110可以通过以上至少一种接口连接触摸传感器、音频模块、无线通信模块、显示屏、或摄像头等模块。
可以理解的是,本申请实施例示意的各模块间的接口连接关系,只是示意性说明,并不构成对电子设备100的限定。在本申请另一些实施例中,电子设备100也可以采用上述实施例中不同的接口连接方式,或多种接口连接方式的组合。
USB连接器130是一种符合USB标准规范的连接器,可以用于连接电子设备100和外围设备。USB连接器130可以是Mini-USB连接器,Micro-USB连接器,USB Type-C连接器等。USB连接器130可以用于连接充电器,通过充电器为该电子设备100充电。也可以用于连接其他电子设备,实现电子设备100与其他电子设备之间传输数据。也可以用于连接耳机,通过耳机输出电子设备中存储的音频。该连接器还可以用于连接其他电子设备,例如VR设备等。
充电管理模块140用于接收充电器的充电输入。其中,充电器可以是无线充电器,也可以是有线充电器。在一些有线充电的实施例中,充电管理模块140可以通过USB连接器130接收有线充电器的充电输入。在一些无线充电的实施例中,充电管理模块140可以通过无线充电线圈接收无线充电输入。充电管理模块140为电池142充电的同时,还可以通过电源管理模块141为电子设备100供电。电池142可以包括至少一组电极端子,每组电极端子至少包括一个正极端子。在一种实施方式中,当电池包括两组电极端子,电子设备可以设置两条有线充电路径或两条无线充电路径,每条有线或无线充电路径连接至少一组电极端子,通过多条充电路径同时为电池142充电,提升充电功率,降低温升。在另一种实施方式中,当电池包括两组电极端子,一组电极端子用于有线充电,另一组电极端子用于无线充电,充电电路布局更灵活。基于相同的设计构思,本领域技术人员可以根据设计需要设置两组以上电极端子以及两条以上充电路径。
电源管理模块141用于连接电池142,充电管理模块140与处理器110。电源管理模块141接收电池142和/或充电管理模块140的输入,为处理器110,内部存储器121,显示屏194,摄像头193等供电。电源管理模块141还可以用于监测电池容量,电池循环次数,电池健康状态(漏电,阻抗)等参数。在其他一些实施例中,电源管理模块141也可以设置于处理器110中。在另一些实施例中,电源管理模块141和充电管理模块140也可以设置于同一个器件中。
电子设备100的无线通信功能可以通过天线1,天线2,移动通信模块150,无线通信模块160,调制解调处理器以及基带处理器等实现。
天线1和天线2用于发射和接收电磁波信号。电子设备100中的每个天线可用于覆盖单个或多个通信频带。不同的天线还可以复用,以提高天线的利用率。例如:可以将天线1复用为无线局域网的分集天线。在另外一些实施例中,天线可以和调谐开关结合使用。
移动通信模块150可以提供应用在电子设备100上的包括2G、3G、4G、5G、或6G中至少一个无线通信的解决方案。移动通信模块150可以包括至少一个滤波器,开关,功率放大器,低噪声放大器等。移动通信模块150可以对天线1接收的电磁波进行滤波,放大等处理,传送至调制解调处理器进行解调。移动通信模块150还可以对经调制解调处理器调制后的信号放大,经天线1转为电磁波辐射出去。在一些实施例中,移动通信模块150的至少部分功能模块可以被设置于处理器110中。在一些实施例中,移动通信模块150的至少部分功能模块可以与处理器110的至少部分模块被设置在同一个器件中。
调制解调处理器可以包括调制器和解调器。其中,调制器用于将待发送的低频基带信号调制成中高频信号。解调器用于将接收的电磁波信号解调为低频基带信号。随后解调器将解调得到的低频基带信号传送至基带处理器处理。低频基带信号经基带处理器处理后,被传递给应用处理器。应用处理器通过音频设备(不限于扬声器170A,受话器170B等)输出声音信号,或通过显示屏194显示图像或视频。在一些实施例中,调制解调处理器可以是独立的器件。在另一些实施例中,调制解调处理器可以独立于处理器110,与移动通信模块150或其他功能模块设置在同一个器件中。
无线通信模块160可以提供应用在电子设备100上的包括无线局域网模块,蓝牙模块,BLE模块,超宽带(ultra wide band,UWB)模块,全球导航卫星系统(global navigationsatellite system,GNSS)模块,FM模块,近距离无线通信(near field communication,NFC)模块,或红外模块等。无线通信模块160可以是集成至少一个通信处理模块的一个或多个器件。无线通信模块160经由天线2接收电磁波,将电磁波信号调频以及滤波处理,将处理后的信号发送到处理器110。无线通信模块160还可以从处理器110接收待发送的信号,对其进行调频,放大,经天线2转为电磁波辐射出去。
在一些实施例中,电子设备100的天线1和移动通信模块150耦合,天线2和无线通信模块160耦合,使得电子设备100可以通过无线通信技术和其他电子设备通信。该无线通信技术可以包括GSM,GPRS,CDMA,WCDMA,TD-SCDMA,LTE,BT,GNSS,WLAN,NFC,FM,和/或IR技术等。该GNSS可以包括GPS,全球导航卫星系统(global navigation satellite system,GLONASS),北斗卫星导航系统(beidou navigation satellite system,BDS),准天顶卫星系统(quasi-zenith satellite system,QZSS)和/或星基增强系统(satellite basedaugmentation systems,SBAS)。
电子设备100可以通过GPU,显示屏194,以及应用处理器等实现显示功能。GPU为图像处理的微处理器,连接显示屏194和应用处理器。GPU用于执行数学和几何计算以及图形渲染。处理器110可包括一个或多个GPU,其执行程序指令以生成或改变显示信息。
显示屏194用于显示图像,视频等。在一些实施例中,电子设备100可以包括一个或多个显示屏194。显示屏194可以是LCD,OLED显示屏,AMOLED显示屏,FLED显示屏,Miniled显示屏,MicroLed显示屏,Micro-oLed显示屏,量子点发光二极管(quantum dot light-emitting diode,QLED)显示屏等中的至少一种。
电子设备100可以通过摄像模组193,ISP,视频编解码器,GPU,显示屏194以及应用处理器AP、神经网络处理器NPU等实现摄像功能。
摄像模组193可用于采集拍摄对象的彩色图像数据以及深度数据。ISP可用于处理摄像模组193采集的彩色图像数据。例如,拍照时,打开快门,光线通过镜头传递到摄像头感光元件上,光信号转换为电信号,摄像头感光元件将该电信号传递给ISP处理,转化为肉眼可见的图像。ISP还可以对图像的噪点,亮度,肤色进行算法优化。ISP还可以对拍摄场景的曝光,色温等参数优化。
在一些实施例中,ISP可以设置在摄像模组193中。
在一些实施例中,摄像模组193可以由彩色摄像模组和3D感测模组组成。
在一些实施例中,彩色摄像模组的摄像头的感光元件可以包括CCD、或CMOS光电晶体管。感光元件把光信号转换成电信号,之后将电信号传递给ISP转换成数字图像信号。ISP将数字图像信号输出到DSP加工处理。
在一些实施例中,3D感测模组可以是结构光3D感测模块。结构光3D感测模组可包括红外线发射器、红外相机模块等。结构光3D感测模组先对被拍摄物体发射特定图案的光斑,再接收该物体表面上的光斑图案编码,进而比对与原始投射光斑的异同,确定物体的三维坐标。该三维坐标中可以包括电子设备100距离被拍摄物体的距离。3D感测模组可以通过红外线折返的时间得到3D感测模组与被拍摄物体之间的距离(即深度),以得到3D景深图。
结构光3D感测模组还可应用于人脸识别、体感游戏机、工业用机器视觉检测等领域。3D感测模组还可应用于游戏机、AR、VR等领域。
在另一些实施例中,摄像模组193还可以由两个或更多个摄像头构成。这两个或更多个摄像头可包括彩色摄像头,彩色摄像头可用于采集被拍摄物体的彩色图像数据。这两个或更多个摄像头可采用立体视觉技术来采集被拍摄物体的深度数据。
在一些实施例中,电子设备100可以包括一个或多个摄像模组193。电子设备100可以包括1个前置摄像模组193以及1个后置摄像模组193。其中,前置摄像模组193可用于采集拍摄者的彩色图像数据以及深度数据,后置摄像模组可用于采集拍摄者所面对的拍摄对象(如人物、风景等)的彩色图像数据以及深度数据。
在一些实施例中,处理器110中的CPU或GPU或NPU可以对摄像模组193所采集的彩色图像数据和深度数据进行处理。在一些实施例中,NPU可以通过骨骼点识别技术所基于的神经网络算法,例如卷积神经网络算法(CNN),来识别摄像模组193所采集的彩色图像数据,以确定被拍摄人物的骨骼点。CPU或GPU也可用来运行神经网络算法以实现根据彩色图像数据确定被拍摄人物的骨骼点。在一些实施例中,CPU或GPU或NPU还可用于根据摄像模组193(可以是3D感测模组)所采集的深度数据和已识别出的骨骼点来确认被拍摄人物的身材(如身体比例、骨骼点之间的身体部位的胖瘦情况),并可以进一步确定针对该被拍摄人物的美化参数,最终根据该身体美化参数对被拍摄人物的拍摄图像进行处理,以使得该拍摄图像中该被拍摄人物的体型被美化。
视频编解码器用于对数字视频压缩或解压缩。电子设备100可以支持一种或多种视频编解码器。这样,电子设备100可以播放或录制多种编码格式的视频,例如:MPEG1,MPEG2,MPEG3,MPEG4等。
NPU为神经网络(neural-network,NN)计算处理器,通过借鉴生物神经网络结构,例如借鉴人脑神经元之间传递模式,对输入信息快速处理,还可以不断的自学习。通过NPU可以实现电子设备100的智能认知等应用,例如:图像识别,人脸识别,语音识别,文本理解等。
存储卡连接器120可以用于连接存储卡,例如Micro SD卡、Nano SD卡,实现扩展电子设备100的存储能力。存储卡通过存储卡连接器120与处理器110通信,实现数据存储功能。在一些实施方式中,存储卡和SIM卡可以分时共用同一个连接器,电子设备可以识别设置于连接器的卡是存储卡或SIM卡,实现相应的功能。或者存储卡和SIM卡可以同时设置在同一个连接器中,分别与电子设备100的不同弹片电连接,分别实现存储功能和SIM功能。
内部存储器121可以用于存储计算机可执行程序代码,该可执行程序代码包括指令。内部存储器121可以包括存储程序区和存储数据区。其中,存储程序区可存储操作系统,至少一个功能(比如声音播放功能,图像播放功能等)所需的应用程序等。存储数据区可存储电子设备100使用过程中所创建的数据(比如音频数据,电话本等)等。此外,内部存储器121可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件,闪存器件,通用闪存存储器(universal flash storage,UFS)等。处理器110通过运行存储在内部存储器121的指令,和/或存储在设置于处理器中的存储器的指令,执行电子设备100的各种功能方法或数据处理。
电子设备100可以通过音频模块170,扬声器170A,受话器170B,麦克风170C,耳机连接器170D,以及应用处理器等实现音频功能。例如音乐播放,录音等。
音频模块170用于将数字音频信息转换成模拟音频信号输出,也用于将模拟音频输入转换为数字音频信号。音频模块170还可以用于对音频信号编码和解码。在一些实施例中,音频模块170可以设置于处理器110中,或将音频模块170的部分功能模块设置于处理器110中。
扬声器170A,也称“喇叭”,用于将音频电信号转换为声音信号。电子设备100可以通过扬声器170A收听音乐,或输出免提通话的音频信号。
受话器170B,也称“听筒”,用于将音频电信号转换成声音信号。当电子设备100接听电话或语音信息时,可以通过将受话器170B靠近人耳接听语音。
麦克风170C,也称“话筒”,“传声器”,用于将声音信号转换为电信号。当拨打电话或发送语音信息时,用户可以靠近麦克风170C发声,将声音信号输入到麦克风170C。电子设备100可以设置至少一个麦克风170C。在另一些实施例中,电子设备100可以设置两个以上麦克风170C,除了采集声音信号,还可以实现降噪功能。在另一些实施例中,电子设备100还可以利用麦克风识别声音来源,实现定向录音功能等。
耳机连接器170D用于连接有线耳机。耳机连接器170D可以是USB连接器130,也可以是3.5mm的符合开放移动电子设备平台(open mobile terminal platform,OMTP)标准的连接器,符合美国蜂窝电信工业协会(cellular telecommunications industryassociation of the USA,CTIA)标准的连接器。
压力传感器180A用于感受压力信号,可以将压力信号转换成电信号。在一些实施例中,压力传感器180A可以设置于显示屏194。压力传感器180A的种类很多,如电阻式压力传感器,电感式压力传感器,电容式压力传感器等。电容式压力传感器可以包括至少两个具有导电材料的平行板。当有力作用于压力传感器180A,电极之间的电容改变。电子设备100根据电容的变化确定压力的强度。当有触摸操作作用于显示屏194,电子设备100根据压力传感器180A检测该触摸操作强度。电子设备100也可以根据压力传感器180A的检测信号计算触摸的位置。在一些实施例中,作用于相同触摸位置,但不同触摸操作强度的触摸操作,可以对应不同的操作指令。例如:当有触摸操作强度小于第一压力阈值的触摸操作作用于短消息应用图标时,执行查看短消息的指令。当有触摸操作强度大于或等于第一压力阈值的触摸操作作用于短消息应用图标时,执行新建短消息的指令。
陀螺仪传感器180B可以用于确定电子设备100的运动姿态。在一些实施例中,可以通过陀螺仪传感器180B确定电子设备100围绕三个轴(即,x,y和z轴)的角速度。陀螺仪传感器180B可以用于拍摄防抖。示例性的,当按下快门,陀螺仪传感器180B检测电子设备100抖动的角度,根据角度计算出镜头模组需要补偿的距离,控制镜头反向运动抵消电子设备100的抖动,实现防抖。陀螺仪传感器180B还可以用于导航,体感游戏场景。
气压传感器180C用于测量气压。在一些实施例中,电子设备100根据气压传感器180C测得的气压值计算海拔高度,辅助定位和导航。
磁传感器180D包括霍尔传感器。电子设备100可以利用磁传感器180D检测翻盖皮套的开合。当电子设备为可折叠电子设备,磁传感器180D可以用于检测电子设备的折叠或展开,或折叠角度。在一些实施例中,当电子设备100是翻盖机时,电子设备100可以根据磁传感器180D检测翻盖的开合。进而根据检测到的皮套的开合状态或翻盖的开合状态,设置翻盖自动解锁等特性。
加速度传感器180E可检测电子设备100在各个方向上(一般为三轴)加速度的大小。当电子设备100静止时可检测出重力的大小及方向。还可以用于识别电子设备姿态,应用于横竖屏切换,计步器等应用。
距离传感器180F,用于测量距离。电子设备100可以通过红外或激光测量距离。在一些实施例中,拍摄场景,电子设备100可以利用距离传感器180F测距以实现快速对焦。
接近光传感器180G可以包括例如发光二极管和光检测器,例如光电二极管。发光二极管可以是红外发光二极管。电子设备100通过发光二极管向外发射红外光。电子设备100使用光电二极管检测来自附近物体的红外反射光。当检测到的反射光的强度大于阈值时,可以确定有物体靠近电子设备100。当检测到的反射光的强度小于阈值时,电子设备100可以确定没有物体靠近电子设备100。电子设备100可以利用接近光传感器180G检测用户手持电子设备100贴近耳朵通话,以便自动熄灭屏幕达到省电的目的。接近光传感器180G也可用于皮套模式,口袋模式自动解锁与锁屏。
环境光传感器180L可以用于感知环境光亮度。电子设备100可以根据感知的环境光亮度自适应调节显示屏194亮度。环境光传感器180L也可用于拍照时自动调节白平衡。环境光传感器180L还可以与接近光传感器180G配合,检测电子设备100是否被遮挡,例如电子设备在口袋里。当检测到电子设备被遮挡或在口袋里,可以使部分功能(例如触控功能)处于禁用状态,以防误操作。
指纹传感器180H用于采集指纹。电子设备100可以利用采集的指纹特性实现指纹解锁,访问应用锁,指纹拍照,指纹接听来电等。
温度传感器180J用于检测温度。在一些实施例中,电子设备100利用温度传感器180J检测的温度,执行温度处理策略。例如,当通过温度传感器180J检测的温度超过阈值,电子设备100执行降低处理器的性能,以便降低电子设备的功耗以实施热保护。在另一些实施例中,当通过温度传感器180J检测的温度低于另一阈值时,电子设备100对电池142加热。在其他一些实施例中,当温度低于又一阈值时,电子设备100可以对电池142的输出电压升压。
触摸传感器180K,也称“触控器件”。触摸传感器180K可以设置于显示屏194,由触摸传感器180K与显示屏194组成触摸屏,也称“触控屏”。触摸传感器180K用于检测作用于其上或附近的触摸操作。触摸传感器可以将检测到的触摸操作传递给应用处理器,以确定触摸事件类型。可以通过显示屏194提供与触摸操作相关的视觉输出。在另一些实施例中,触摸传感器180K也可以设置于电子设备100的表面,与显示屏194所处的位置不同。
骨传导传感器180M可以获取振动信号。在一些实施例中,骨传导传感器180M可以获取人体声部振动骨块的振动信号。骨传导传感器180M也可以接触人体脉搏,接收血压跳动信号。在一些实施例中,骨传导传感器180M也可以设置于耳机中,结合成骨传导耳机。音频模块170可以基于该骨传导传感器180M获取的声部振动骨块的振动信号,解析出语音信号,实现语音功能。应用处理器可以基于该骨传导传感器180M获取的血压跳动信号解析心率信息,实现心率检测功能。
按键190可以包括开机键,音量键等。按键190可以是机械按键。也可以是触摸式按键。电子设备100可以接收按键输入,产生与电子设备100的用户设置以及功能控制有关的键信号输入。
马达191可以产生振动提示。马达191可以用于来电振动提示,也可以用于触摸振动反馈。例如,作用于不同应用(例如拍照,音频播放等)的触摸操作,可以对应不同的振动反馈效果。作用于显示屏194不同区域的触摸操作,马达191也可对应不同的振动反馈效果。不同的应用场景(例如:时间提醒,接收信息,闹钟,游戏等)也可以对应不同的振动反馈效果。触摸振动反馈效果还可以支持自定义。
指示器192可以是指示灯,可以用于指示充电状态,电量变化,也可以用于指示消息,未接来电,通知等。
SIM卡接口195可以是硬件模块,用于连接SIM卡。SIM卡可以通过插入SIM卡接口195,或从SIM卡接口195拔出,实现和电子设备100的接触和分离。电子设备100可以支持一个或多个SIM卡接口。SIM卡接口195可以支持Nano SIM卡,Micro SIM卡,SIM卡等。同一个SIM卡接口195可以同时插入多张卡。多张卡的类型可以相同,也可以不同。SIM卡接口195也可以兼容不同类型的SIM卡。SIM卡接口195也可以兼容存储卡。电子设备100通过SIM卡和网络交互,实现通话以及数据通信等功能。在一些实施例中,电子设备100采用eSIM,即:嵌入式SIM卡。eSIM卡可以嵌在电子设备100中,不能和电子设备100分离。
电子设备100的软件系统可以采用分层架构、事件驱动架构、微核架构、微服务架构或云架构等。示例性地,电子设备100的软件系统包括但不限于 或者其它操作系统。本申请实施例以分层架构的Android系统为例,示例性说明电子设备100的软件结构。
电子设备100的软件系统可以采用分层架构,事件驱动架构,微核架构,微服务架构,或云架构。本申请实施例以分层架构的Android系统为例,示例性说明电子设备100的软件结构。
图2是本申请实施例的电子设备100的软件结构框图。
分层架构将软件分成若干个层,每一层都有清晰的角色和分工。层与层之间通过软件接口通信。在一些实施例中,将Android系统分为五层,从上至下分别为应用程序层,应用程序框架层,安卓运行时(Android runtime,ART)和原生C/C++库,硬件抽象层以及内核层。
应用程序层可以包括一系列应用程序包。
如图2所示,应用程序包可以包括相机,图库,日历,通话,地图,导航,WLAN,蓝牙,音乐,视频,短信息等应用程序。
应用程序框架层为应用程序层的应用程序提供应用编程接口(applicationprogramming interface,API)和编程框架。应用程序框架层包括一些预先定义的函数。
如图2所示,应用程序框架层可以包括窗口管理器,内容提供器,视图系统,资源管理器,通知管理器,活动管理器,输入管理器等。
窗口管理器提供窗口管理服务(window manager service,WMS),WMS可以用于窗口管理、窗口动画管理、surface管理以及作为输入系统的中转站。
内容提供器用来存放和获取数据,并使这些数据可以被应用程序访问。该数据可以包括视频,图像,音频,拨打和接听的电话,浏览历史和书签,电话簿等。内容提供器为应用程序间的数据访问提供支持。
视图系统包括可视控件,例如显示文字的控件,显示图片的控件等。视图系统可用于构建应用程序。显示界面可以由一个或多个视图组成。例如,包括短信通知图标的显示界面,可以包括显示文字的视图以及显示图片的视图。
资源管理器为应用程序提供各种资源,比如本地化字符串,图标,图片,布局文件,视频文件等等。
通知管理器使应用程序可以在状态栏中显示通知信息,可以用于传达告知类型的消息,可以短暂停留后自动消失,无需用户交互。比如通知管理器被用于告知下载完成,消息提醒等。通知管理器还可以是以图表或者滚动条文本形式出现在系统顶部状态栏的通知,例如后台运行的应用程序的通知,还可以是以对话窗口形式出现在屏幕上的通知。例如在状态栏提示文本信息,发出提示音,电子设备振动,指示灯闪烁等。
活动管理器可以提供活动管理服务(activity manager service,AMS),AMS可以用于系统组件(例如活动、服务、内容提供者、广播接收器)的启动、切换、调度以及应用进程的管理和调度工作。
输入管理器可以提供输入管理服务(input manager service,IMS),IMS可以用于管理系统的输入,例如触摸屏输入、按键输入、传感器输入等。IMS从输入设备节点取出事件,通过和WMS的交互,将事件分配至合适的窗口。
安卓运行时包括核心库和安卓运行时。安卓运行时负责将源代码转换为字节码,将字节码转换为机器码,以及运行机器码。在编译技术上,安卓运行时支持提前(ahead ortime,AOT)编译技术和及时(just in time,JIT)编译技术,其中AOT在应用程序安装期间,将字节码转换成机器码并存储在存储器上;JIT在应用程序运行时实时将一部分字节码转换成机码。
核心库主要用于提供基本的Java类库的功能,例如基础数据结构、数学、IO、工具、数据库、网络等库。核心库为用户进行安卓应用开发提供了API。
原生C/C++库可以包括多个功能模块。例如:表面管理器(surface manager),媒体框架(media framework),libc,OpenGL ES、SQLite、Webkit等。其中,表面管理器用于对显示子系统进行管理,并且为多个应用程序提供了2D和3D图层的融合。媒体框架支持多种常用的音频,视频格式回放和录制,以及静态图像文件等。媒体库可以支持多种音视频编码格式,例如:MPEG4,H.264,MP3,AAC,AMR,JPG,PNG等。libc提供标准C函数库。OpenGL ES提供应用程序中2D图形和3D图形的绘制和操作。SQLite为应用程序提供轻量级关系型数据库。Webkit提供游览器内核的支持。
应用程序框架层中的模块使用Java语言编写,原生C/C++库中的模块使用C/C++语言编写,两者之间的通信可以通过Java本地接口(Java native interface,JNI)实现。
硬件抽象层运行于用户空间(user space),对内核层驱动进行封装,向上层提供调用接口,可以包含显示模块、摄像头模块、音频模块、蓝牙模块。
内核层是硬件和软件之间的层。内核层可以包含显示驱动,摄像头驱动,音频驱动,蓝牙驱动,还可以包括其他传感器驱动。内核层在提供硬件驱动外,还支持内存管理、系统进程管理、文件系统管理、电源管理等功能。
现有的行车记录仪拍摄的视频较长,且可以持续地拍摄视频,然而,用户很难从行车记录仪拍摄的长视频中找到关键的片段,且行车记录仪无法对视频进行处理。本申请实施例提供一种视频生成方法,所述方法中,第一电子设备可以请求第二电子设备拍摄视频并发送给第一电子设备,第一电子设备可以保存接收的视频数据并生成短视频。
下面对本申请实施例提供的视频生成方法进行详细介绍,首先,需要说明的是,本申请实施例中所述第一操作、第二操作中的任意一个可以为用户的触控操作(例如点击操作、长按操作、上滑操作、下滑操作或侧滑操作),也可以为非接触操作(例如隔空手势),还可以为用户的语音指令,本申请实施例对此不做具体限制。
如图3所示为本申请实施例提供的一种视频生成方法的方法流程图,该方法包括但不限于步骤S101至S103。下面对该视频生成方法的方法流程进行详细介绍。
S101、当第一电子设备检测到用户的第一操作,响应于第一操作,第一电子设备开启第一功能,第一电子设备和第二电子设备建立连接;第二电子设备拍摄图像并发送给第一电子设备。
示例性的,如图4所示为本申请实施例提供的第一电子设备的一组图形用户界面(graphical user interface,GUI)的示意图,如图4中的(a)所示,第一电子设备可以包括显示区110,显示区110可以包括地图应用图标111,当用户选择地图应用图标111,示例性的,如图4中的(b)所示,第一电子设备可以打开地图应用,第一电子设备的显示区110可以显示地图应用的界面。
如图4中的(b)所示为本申请实施例提供的另一种GUI。第一电子设备可以包括显示区110,显示区110可以包括第一图标112,当第一电子设备检测到用户的第一操作,其中,第一操作可以为用户选择第一图标112,响应于用户的第一操作,第一电子设备开启第一功能。
如图4中的(c)所示为本申请实施例提供的另一种GUI。当第一电子设备开启第一功能,第一电子设备和第二电子设备可通过有线或无线的方式建立连接。基于建立的连接,第一电子设备和第二电子设备可配合一起使用。第一电子设备还可以向第二电子设备发送第二请求信息,该第二请求信息用于请求第二电子设备拍摄图像,响应于该第一请求消息,第二电子设备可以拍摄图像并将拍摄的图像发送给第一电子设备。
本申请实施例中,第一电子设备可以周期性地向第二电子设备发送第二请求信息以请求第二电子设备拍摄图像,当第二电子设备接收到该第二请求信息,可以拍摄图像并将拍摄的图像发送给第一电子设备。由于第一电子设备可以周期性地请求第二电子设备拍摄图像,可以使第一电子设备更快地检测到当前画面具备美学特征,并可以自动请求第二电子设备拍摄视频,而不需要依靠用户进行操作,可以使第二电子设备可以更及时记录用户想记录的事物(例如美景),简化了用户的操作,提升了用户的体验。
在一些实施例中,当第一电子设备和第二电子设备建立连接,第二电子设备可以周期性地拍摄图像,第二电子设备可以将图像发送给第一电子设备。
本申请实施例中,第一电子设备和第二电子设备采用无线方式建立连接时采用的无线通信协议可以为无线保真(wireless fidelity,Wi-Fi)协议、蓝牙(Bluetooth)协议、ZigBee协议、近距离无线通信(Near Field Communication,NFC)协议,各种蜂窝网协议等,在此不做具体限制。
S102、当第一电子设备检测到图像属于第二类别,第一电子设备可以向第二电子设备发送第一请求信息,响应于第一请求信息,第二电子设备拍摄视频并发送给第一电子设备。
本申请实施例中,当第一电子设备检测到图像分类模块输出的图像类别为第二类别,第一电子设备可以向第二电子设备发送第一请求信息,该第一请求信息用于请求第二电子设备拍摄视频,第二电子设备接收到该第一请求信息后,可以启动摄像头拍摄视频,第二电子设备可以将拍摄的视频发送给第一电子设备。
在一些实施例中,当第二电子设备接收到第一请求信息,第二电子设备可以周期性地拍摄视频,并发送给第一电子设备。
如图3中的(b)所示为本申请实施例提供的一种图像分类框架,该框架包括预处理模块和图像分类模块。第一电子设备可以将图像输入预处理模块进行处理,预处理模块可以对上述图像进行下采样和裁剪;第一电子设备可以将预处理后的图像作为图像分类模块的输入,图像分类模块可以通过训练好的神经网络模型1对图像进行分类,图像分类模块可以输出图像的类别。
示例性的,图3中的(b)所示的神经网络模型1的训练过程可以包括:首先获取神经网络模型1的已标注的训练数据,生成groundtruth图;其中,训练数据为常用应用场景下的大量图像,每个图像的标注为该图像所属的类别。将训练数据和训练数据对应的groundtruth图输入卷积神经网络模型,利用有监督的深度学习方法对上述基础网络模型进行训练,从而得到训练好的用于图像分类的神经网络模型1。这样,利用训练好的神经网络模型1,第一电子设备可以对图像进行分类。
本申请实施例中,具备美学特征的图像(例如晴天图像、风景图像、建筑图像等)可以作为第二类别,不具备美学特征的图像(例如堵车图像、灰霾天图像等)可以作为其他类别,将图像和图像对应的第二类别标注或其他类别标注输入神经网络模型1进行训练,可以使训练后的神经网络模型1可以识别具备美学特征的第二类别的图像。当神经网络模型1的输出为第二类别,说明此时第一电子设备检测到第二电子设备拍摄的画面具备美学特征,由于在当前画面具备美学特征时第一电子设备才请求第二电子设备拍摄视频,可以使第二电子设备拍摄画面具备美学特征的视频。
本申请实施例中,如图3中的(b)所示,第一电子设备还可以将图像分类模块的输出的图像信息和类别作为输入,再次输入神经网络模型1,从而实现在对摄像头采集的图像进行分类的同时,也会对图像信息和类别进行传播,由于神经网络模型1可以获取到新的图像信息和类别的对应关系进行训练,可以使神经网络模型1的分类结果更准确。
本申请实施例中,当第一电子设备接收到第二电子设备发送的图像,第一电子设备可以计算该图像与上一次收到的图像的相关性,当图像的相关性不大于第一预设阈值,第一电子设备可以将图像作为预处理模块的输入;当图像的相关性大于第一预设阈值,第一电子设备不将该图像输入预处理模块,避免第一电子设备频繁地将同一类型的图像输入图像分类模块,可以减少图像分类模块不必要的运行。
S103、当第一电子设备接收到第二电子设备发送的视频,第一电子设备保存视频数据。
本申请实施例中,当第一电子设备接收到第二电子设备发送的视频,第一电子设备可以保存视频数据,第一电子设备还可以通过地图应用查询并保存信息点(Point ofInterest,POI)数据,并将POI数据作为该视频数据的POI标签。
在一些实施例中,第一电子设备可以具有视频合成能力,第一电子设备可以存储有预设的视频模板,当第一电子设备接收到第二电子设备发送的视频,第一电子设备可以基于视频合成能力和预设的视频模板在保存的视频数据中选择任意一个或多个视频数据生成短视频。
在一些实施例中,用户也可以手动选择第一电子设备中保存的视频数据,当用户选择第一电子设备中保存的视频数据,第一电子设备可以通过预设的视频模板生成短视频。
在一些实施例中,生成短视频时,第一电子设备可以将视频数据对应的POI标签作为短视频的字幕,可以增强短视频的趣味性。
在一些实施例中,用户可以对生成的短视频进行修改,使用户可以合成用户所需要的短视频。
在一些实施例中,第一电子设备还可以向用户提示短视频,示例性的,第一电子设备可以将短视频显示在显示区110。
上述实施例中,当第一电子设备检测到第二电子设备拍摄的画面具备美学特征,第一电子设备请求第二电子设备拍摄视频,可以使第二电子设备拍摄画面具备美学特征的视频。由于第一电子设备检测到当前画面具备美学特征时,可以自动请求第二电子设备拍摄视频,而不需要依靠用户进行操作,可以使第二电子设备及时记录用户想记录的事物(例如美景),简化了用户的操作,提升了用户的体验。
如图5所示为本申请实施例提供的另一种视频生成方法的方法流程图,该方法包括但不限于步骤S201至S203。下面对该视频生成方法的方法流程进行详细介绍。
S201、当第一电子设备检测到用户的第一操作,响应于第一操作,第一电子设备开启第一功能,第一电子设备和第二电子设备建立连接。
示例性的,如图4所示为本申请实施例提供的第一电子设备的一组GUI的示意图,如图4中的(a)所示,第一电子设备可以包括显示区110,显示区110可以包括地图应用图标111,当用户选择地图应用图标111,示例性的,如图4中的(b)所示,第一电子设备可以打开地图应用,第一电子设备的显示区110可以显示地图应用的界面。
如图4中的(b)所示为本申请实施例提供的另一种GUI。第一电子设备可以包括显示区110,显示区110可以包括第一图标112,当第一电子设备检测到用户的第一操作,其中,第一操作可以为用户选择第一图标112,响应于用户的第一操作,第一电子设备开启第一功能。
如图4中的(c)所示为本申请实施例提供的另一种GUI。当第一电子设备开启第一功能,第一电子设备和第二电子设备可通过有线或无线的方式建立连接。需要说明的是,第一电子设备和第二电子设备建立连接的方式参见上述其他实施例的具体描述,此处不再赘述。
S202、当第一电子设备确定所处的地标属于第一类别,第一电子设备可以向第二电子设备发送第一请求信息,响应于第一请求信息,第二电子设备拍摄视频并发送给第一电子设备。
本申请实施例中,当第一电子设备检测到所处的地标属于第一类别,第一电子设备可以向第二电子设备发送第一请求信息,该第一请求信息用于请求第二电子设备拍摄视频,第二电子设备接收到该第一请求信息后,可以启动摄像头拍摄视频,第二电子设备可以将拍摄的视频发送给第一电子设备。
在一些实施例中,当第二电子设备接收到第一请求信息,第二电子设备可以周期性地拍摄视频发送给第一电子设备。
如图5中的(b)所示为本申请实施例提供的一种地标分类框架,该框架包括地标分类模块。当第一电子设备和第二电子设备建立连接,第一电子设备可以通过地图应用查询当前的POI数据,第一电子设备可以将POI数据作为地标分类模块的输入,地标分类模块可以通过训练好的神经网络模型2对POI数据进行分类,地标分类模块可以输出POI数据对应的地标类别。
示例性的,图5中的(b)所示的神经网络模型1的训练过程可以包括:首先获取神经网络模型2的已标注的训练数据,生成groundtruth图;其中,训练数据为POI数据,每个POI数据的标注为该POI数据对应的地标类型。将训练数据和训练数据对应的groundtruth图输入卷积神经网络模型,利用有监督的深度学习方法对上述基础网络模型进行训练,从而得到训练好的用于地标分类的神经网络模型2。这样,利用训练好的神经网络模型2,第一电子设备可以对POI数据进行分类。
本申请实施例中,将具有标志意义的路标(例如隧道口、桥梁、城市入口、风景区入口、关键路牌等)可以作为第一类别,其他路标可以作为其他类别。将POI数据和POI数据对应的第一类别标注或其他类别标注输入神经网络模型2进行训练,可以使训练后的神经网络模型2可以识别属于第二类别的POI数据。当第一电子设备通过地标分类框架检测到当前的POI数据对应的地标类别属于第一类别,说明此时用户到达的路标具有标志意义,第一电子设备可以请求第二电子设备拍摄视频,可以使第二电子设备拍摄具有标志性意义的视频。
S203、当第一电子设备接收到第二电子设备发送的视频,第一电子设备保存视频数据。
具体参见S103的相关描述,此处不再赘述。
上述实施例中,当第一电子设备检测到用户到达具有标志意义的路标,第一电子设备可以请求第二电子设备拍摄视频,可以使第二电子设备拍摄具有标志性意义的视频。由于第一电子设备检测到用户到达具有标志意义的路标时,可以自动请求第二电子设备拍摄视频,而不需要依靠用户进行操作,可以使第二电子设备及时记录用户想记录的事物(例如标志性建筑),简化了用户的操作,提升了用户的体验。
如图6所示为本申请实施例提供的另一种视频生成方法的方法流程图,该方法包括但不限于步骤S301至S303。下面对该视频生成方法的方法流程进行详细介绍。
S301、当第一电子设备检测到用户的第一操作,响应于第一操作,第一电子设备开启第一功能,第一电子设备和第二电子设备建立连接。
示例性的,如图4所示为本申请实施例提供的第一电子设备的一组GUI的示意图,如图4中的(a)所示,第一电子设备可以包括显示区110,显示区110可以包括地图应用图标111,当用户选择地图应用图标111,示例性的,如图4中的(b)所示,第一电子设备可以打开地图应用,第一电子设备的显示区110可以显示地图应用的界面。
如图4中的(b)所示为本申请实施例提供的另一种GUI。第一电子设备可以包括显示区110,显示区110可以包括第一图标112,当第一电子设备检测到用户的第一操作,其中,第一操作可以为用户选择第一图标112,响应于用户的第一操作,第一电子设备开启第一功能。
如图4中的(c)所示为本申请实施例提供的另一种GUI。当第一电子设备开启第一功能,第一电子设备和第二电子设备可通过有线或无线的方式建立连接。需要说明的是,第一电子设备和第二电子设备建立连接的方式参见上述其他实施例的具体描述,此处不再赘述。
S302、当第一电子设备检测到用户的第二操作,响应于第二操作,第一电子设备可以向第二电子设备发送第一请求信息,响应于第一请求信息,第二电子设备拍摄视频并发送给第一电子设备。
示例性的,如图4中的(c)所示的GUI,第一电子设备可以包括显示区110,显示区110可以包括第一图标112和第二图标113,当第一电子设备检测到用户的第二操作,其中,第二操作可以为用户选择第二图标113的操作,响应于第二操作,第一电子设备可以向第二电子设备发送第一请求信息,该第一请求信息用于请求第二电子设备拍摄视频,响应该第一请求信息,第二电子设备可以拍摄视频并将拍摄的视频发送给第一电子设备。
S303、当第一电子设备接收到第二电子设备发送的视频,第一电子设备保存视频数据。
具体参见S103的相关描述,此处不再赘述。
上述实施例中,当第一电子设备检测到用户选择第二图标113,第一电子设备可以请求第二电子设备拍摄视频。由于第一电子设备检测检测到用户选择第二图标113时,可以请求第二电子设备拍摄视频,可以使第二电子设备拍摄用户需要拍摄的视频,提升了用户的体验。
基于上述实施例中的视频生成方法,第一电子设备可以请求第二电子设备拍摄视频数据,当第二电子设备将拍摄的一个或多个视频数据发送给第一电子设备,第一电子设备可以保存该一个或多个视频数据,使用户在使用第一电子设备时,还可以通过第二电子设备拍摄视频数据,避免在第一电子设备不能用于拍摄视频时,用户无法记录当前想记录的事物(例如美景),提升了用户的体验。第一电子设备还可以基于第一电子设备的视频模板,在该视频数据中选择任意一个或多个视频数据合成短视频。由于在第二电子设备不具有生成短视频的能力时,第一电子设备可以利用第一电子设备的视频模板将第二电子设备拍摄的视频数据生成短视频,提升了用户的视频拍摄体验。
如图7所示为本申请实施例提供的一种系统架构的示意图。
示例性的,第一电子设备可以包括应用程序层和内部模块,其中,应用程序层可以包括地图应用等;内部模块可以包括网络连接模块、事件处理模块、图像分析模块、数据库和视频生成模块。第二电子设备可以包括应用程序层和内部模块,其中,应用程序层可以包括相机应用等;内部模块可以包括网络连接模块、事件处理模块和数据库。第一电子设备和第二电子设备可以通过网络连接模块建立通信连接;事件处理模块可以用于生成相应的事件,第一电子设备的事件处理模块可以通过网络连接模块将第一电子设备生成的事件发送给第二电子设备,第一电子设备的事件处理模块也可以通过网络连接模块接收第二电子设备生成的事件和/或对事件的处理结果;数据库可以存储电子设备的数据,例如图像、视频、音频、文档等数据。
本申请实施例中,第一电子设备的地图应用可以调用事件处理模块生成“图像拍摄事件”,并通过网络连接模块将该事件发送给第二电子设备,当第二电子设备接收到该事件,第二电子设备可以通过相机应用拍摄图像并通过网络连接模块发送给第一电子设备,第一电子设备的图像分析模块可以对该图像进行分析(例如对图像进行分类)。
本申请实施例中,第一电子设备的图像分析模块可以调用事件处理模块生成“视频拍摄事件”,并通过网络连接模块将该事件发送给第二电子设备,当第二电子设备接收到该事件,第二电子设备可以通过相机应用拍摄视频并通过网络连接模块将拍摄的视频发送给第一电子设备,第一电子设备接收到视频数据后,可以将视频数据保存至数据库,第一电子设备的视频生成模块可以基于预设的视频模板在数据库的视频数据中选择至少部分视频数据生成视频。
在一些实施例中,第一电子设备接收到视频数据后,第一电子设备可以通过地图应用查询并保存POI数据,并将POI数据作为该视频数据的POI标签,第一电子设备可以将该POI标签和视频数据一起保存至数据库。
本申请实施例提供了一种电子设备。该电子设备包括:一个或多个处理器,一个或多个存储器,该一个或多个存储器存储存储有一个或多个计算机程序,该一个或多个计算机程序包括指令。当该指令被所述一个或多个处理器运行时,使得第一电子设备或者第二电子设备执行上述实施例中的技术方案。
本申请实施例提供了一种系统,包括第一电子设备和第二电子设备,该系统用于执行上述实施例中的技术方案。其实现原理和技术效果与上述方法相关实施例类似,此处不再赘述。
本申请实施例提供一种计算机程序产品,当所述计算机程序产品在第一电子设备运行时,使得第一电子设备执行上述实施例中的技术方案。其实现原理和技术效果与上述方法相关实施例类似,此处不再赘述。
本申请实施例提供一种计算机程序产品,当所述计算机程序产品在第二电子设备运行时,使得第二电子设备执行上述实施例中的技术方案。其实现原理和技术效果与上述方法相关实施例类似,此处不再赘述。
本申请实施例提供一种可读存储介质,所述可读存储介质包含指令,当所述指令在第一电子设备运行时,使得所述第一电子设备执行上述实施例的技术方案。其实现原理和技术效果类似,此处不再赘述。
本申请实施例提供一种可读存储介质,所述可读存储介质包含指令,当所述指令在第二电子设备运行时,使得所述第二电子设备执行上述实施例的技术方案。其实现原理和技术效果类似,此处不再赘述。
本申请实施例提供一种芯片,所述芯片用于执行指令,当所述芯片运行时,执行上述实施例中的技术方案。其实现原理和技术效果类似,此处不再赘述。
本领域普通技术人员可以意识到,结合本文中所公开的实施例描述的各示例的单元及算法步骤,能够以电子硬件、或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本申请的范围。
还需要说明的是,在本发明实施例中,诸如第一、第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或者操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者任何其他涵盖非排他性的包含,从而使得包括一系列要素的方法或者设备不仅仅包括那些要素,而且还包括没有明确列出的其他要素,或者还包括为这种方法或者设备所固有的要素。在没有更多限制的情况下,由语句“包括…”、“包含…”限定的要素,并不排除在包括所述要素的方法或者设备中还存在另外的相同要素。
以上所述,仅为本实施例的具体实施方式,但本实施例的保护范围并不局限于此,任何在本实施例揭露的技术范围内的变化或替换,都应涵盖在本实施例的保护范围之内。因此,本实施例的保护范围应以所述权利要求的保护范围为准。

Claims (20)

1.一种系统,所述系统包括第一电子设备和第二电子设备,其特征在于,
所述第一电子设备,用于在检测到用户的第一操作时,开启第一功能,并和所述第二电子设备建立连接;
所述第一电子设备,用于在确定所处地标属于第一类别时,向所述第二电子设备发送第一请求信息,所述第一请求信息用于请求所述第二电子设备拍摄视频;
所述第二电子设备,用于根据所述第一请求信息,拍摄所述视频,并将所述视频发送给所述第一电子设备;
所述第一电子设备,用于接收并保存所述视频。
2.根据权利要求1所述的系统,其特征在于,
所述第一电子设备,用于在检测到所处地标属于第一类别时,向所述第二电子设备发送第一请求信息,包括:所述第一电子设备查询信息点(Point of Interest,POI)数据,当所述第一电子设备根据所述POI数据确定所处地标属于所述第一类别,向所述第二电子设备发送所述第一请求信息。
3.根据权利要求1所述的系统,其特征在于,
所述第一电子设备,还用于在检测到用户的所述第一操作时,向所述第二电子设备发送第二请求信息,所述第二请求信息用于请求所述第二电子设备拍摄图像;
所述第二电子设备,还用于根据所述第二请求信息,拍摄所述图像,并将所述图像发送给所述第一电子设备;
所述第一电子设备,还用于接收所述图像,当所述第一电子设备检测到所述图像属于第二类别,所述第一电子设备向所述第二电子设备发送所述第一请求信息,所述第一请求信息用于请求所述第二电子设备拍摄所述视频;
所述第二电子设备,用于根据所述第一请求信息,拍摄所述视频,并将所述视频发送给所述第一电子设备;
所述第一电子设备,用于接收并保存所述视频。
4.根据权利要求3所述的系统,其特征在于,
所述第一电子设备,还用于在检测到用户的所述第一操作时,向所述第二电子设备发送第二请求信息,包括:所述第一电子设备,还用于在检测到用户的所述第一操作时,周期性地向所述第二电子设备发送所述第二请求信息。
5.根据权利要求3所述的系统,其特征在于,
所述第一电子设备,还用于接收所述图像,当所述第一电子设备检测到所述图像属于第二类别,所述第一电子设备向所述第二电子设备发送所述第一请求信息,包括:所述第一电子设备,还用于接收所述图像,所述第一电子设备检测所述图像与前一次接收的图像之间的相关性;当所述相关性不大于第一预设阈值,所述第一电子设备检测所述图像的类别;当所述第一电子设备检测到所述图像属于所述第二类别,所述第一电子设备向所述第二电子设备发送所述第一请求信息。
6.根据权利要求1所述的系统,其特征在于,
所述第一电子设备,还用于检测到用户的第二操作时,向所述第二电子设备发送所述第一请求信息,所述第一请求信息用于请求所述第二电子设备拍摄所述视频;
所述第二电子设备,用于根据所述第一请求信息,拍摄所述视频,并将所述视频发送给所述第一电子设备;
所述第一电子设备,用于接收并保存所述视频。
7.根据权利要求1至6任一项所述的系统,其特征在于,
所述第一电子设备,还用于保存所述视频时,查询并保存所述POI数据,所述第一电子设备将所述POI数据作为所述视频的POI标签;
所述第一电子设备,还用于基于预设的视频模板,选择保存的任意一个或多个所述视频生成第一视频;
所述第一电子设备,还用于将任意一个或多个所述视频的所述POI标签作为所述第一视频的字幕。
8.根据权利要求7所述的系统,其特征在于,
所述第一电子设备,还用于向用户提示所述第一视频。
9.一种视频生成方法,所述方法应用于所述第一电子设备,其特征在于,所述方法包括:
所述第一电子设备在检测到用户的第一操作时,开启第一功能,并和第二电子设备建立连接;
所述第一电子设备在确定所处地标属于第一类别时,向所述第二电子设备发送第一请求信息,所述第一请求信息用于请求所述第二电子设备拍摄视频;
所述第一电子设备接收并保存所述视频。
10.根据权利要求9所述的方法,其特征在于,
所述第一电子设备在检测到所处地标属于第一类别时,向所述第二电子设备发送第一请求信息,包括:所述第一电子设备查询POI数据,当所述第一电子设备根据所述POI数据确定所处地标属于所述第一类别,向所述第二电子设备发送所述第一请求信息。
11.根据权利要求9所述的方法,其特征在于,
所述第一电子设备在检测到用户的所述第一操作时,向所述第二电子设备发送第二请求信息,所述第二请求信息用于请求所述第二电子设备拍摄图像;
所述第一电子设备接收所述图像,当所述第一电子设备检测到所述图像属于第二类别,所述第一电子设备向所述第二电子设备发送所述第一请求信息,所述第一请求信息用于请求所述第二电子设备拍摄所述视频;
所述第一电子设备接收并保存所述视频。
12.根据权利要求11所述的方法,其特征在于,
所述第一电子设备在检测到用户的所述第一操作时,向所述第二电子设备发送第二请求信息,包括:所述第一电子设备在检测到用户的所述第一操作时,周期性地向所述第二电子设备发送所述第二请求信息。
13.根据权利要求11所述的方法,其特征在于,
所述第一电子设备接收所述图像,当所述第一电子设备检测到所述图像属于第二类别,所述第一电子设备向所述第二电子设备发送所述第一请求信息,包括:所述第一电子设备接收所述图像,所述第一电子设备检测所述图像与前一次接收的图像之间的相关性;当所述相关性小于第一预设阈值,所述第一电子设备检测所述图像的类别;当所述第一电子设备检测到所述图像属于所述第二类别,所述第一电子设备向所述第二电子设备发送所述第一请求信息。
14.根据权利要求9所述的方法,其特征在于,
所述第一电子设备检测到用户的第二操作时,向所述第二电子设备发送所述第一请求信息,所述第一请求信息用于请求所述第二电子设备拍摄视频;
所述第一电子设备接收并保存所述视频。
15.根据权利要求9至14任一项所述的方法,其特征在于,
所述第一电子设备保存所述视频时,查询并保存所述POI数据,所述第一电子设备将所述POI数据作为所述视频的POI标签;
所述第一电子设备基于预设的视频模板,选择保存的任意一个或多个所述视频生成第一视频;
所述第一电子设备将任意一个或多个所述视频的所述POI标签作为所述第一视频的字幕。
16.根据权利要求15所述的方法,其特征在于,
所述第一电子设备向用户提示所述第一视频。
17.一种视频生成方法,所述方法应用于所述第二电子设备,其特征在于,所述方法包括:
所述第二电子设备接收第一电子设备发送的第一请求信息,所述第一请求信息用于请求所述第二电子设备拍摄视频;
所述第二电子设备拍摄所述视频,并将所述视频发送给所述第一电子设备;
所述第二电子设备接收所述第一电子设备发送的第二请求信息,所述第二请求信息用于请求所述第二电子设备拍摄图像;
所述第二电子设备拍摄所述图像,并将所述图像发送给所述第一电子设备。
18.一种电子设备,其特征在于,包括:
一个或多个处理器;
一个或多个存储器;
所述一个或多个存储器存储有一个或者多个计算机程序,所述一个或者多个计算机程序包括指令,当所述指令被所述一个或多个处理器执行时,使得所述电子设备执行如权利要求9至16中任一项所述的方法。
19.一种电子设备,其特征在于,包括:
一个或多个处理器;
一个或多个存储器;
所述一个或多个存储器存储有一个或者多个计算机程序,所述一个或者多个计算机程序包括指令,当所述指令被所述一个或多个处理器执行时,使得所述电子设备执行如权利要求17所述的方法。
20.一种计算机可读存储介质,其特征在于,包括计算机指令,当所述计算机指令在电子设备上运行时,使得所述电子设备执行如权利要求9至16中任一项所述的方法;或
当所述计算机指令在电子设备上运行时,使得所述电子设备执行如权利要求17中所述的方法。
CN202210331790.6A 2022-03-30 2022-03-30 一种视频生成方法、系统及电子设备 Pending CN116939303A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202210331790.6A CN116939303A (zh) 2022-03-30 2022-03-30 一种视频生成方法、系统及电子设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210331790.6A CN116939303A (zh) 2022-03-30 2022-03-30 一种视频生成方法、系统及电子设备

Publications (1)

Publication Number Publication Date
CN116939303A true CN116939303A (zh) 2023-10-24

Family

ID=88391064

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210331790.6A Pending CN116939303A (zh) 2022-03-30 2022-03-30 一种视频生成方法、系统及电子设备

Country Status (1)

Country Link
CN (1) CN116939303A (zh)

Similar Documents

Publication Publication Date Title
CN112231025B (zh) Ui组件显示的方法及电子设备
CN111316333B (zh) 一种信息提示方法及电子设备
CN115866121B (zh) 应用界面交互方法、电子设备和计算机可读存储介质
US20220262035A1 (en) Method, apparatus, and system for determining pose
CN113887264B (zh) 扫码方法、系统及相关装置
CN110138999B (zh) 一种用于移动终端的证件扫描方法及装置
WO2021170129A1 (zh) 一种位姿确定方法以及相关设备
CN115914461B (zh) 位置关系识别方法和电子设备
CN114842069A (zh) 一种位姿确定方法以及相关设备
CN115147451A (zh) 目标跟踪方法及其装置
CN114090140A (zh) 基于指向操作的设备之间的交互方法及电子设备
CN115032640B (zh) 手势识别方法和终端设备
CN112416984A (zh) 一种数据处理方法及其装置
CN114338642B (zh) 一种文件传输方法和电子设备
CN111339513B (zh) 数据分享的方法和装置
CN116939303A (zh) 一种视频生成方法、系统及电子设备
CN116048236B (zh) 通信方法及相关装置
WO2022222705A1 (zh) 设备控制方法和电子设备
CN116048681B (zh) 图标显示方法、电子设备和计算机可读存储介质
CN114942741B (zh) 数据传输方法及电子设备
WO2023116669A1 (zh) 视频生成系统、方法及相关装置
WO2024114785A1 (zh) 一种图像处理方法、电子设备及系统
WO2022222702A1 (zh) 屏幕解锁方法和电子设备
CN118175438A (zh) 一种图像生成方法及电子设备
CN117762279A (zh) 控制方法、电子设备、存储介质及程序产品

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination