CN112188115B - 一种图像处理方法、电子设备及存储介质 - Google Patents

一种图像处理方法、电子设备及存储介质 Download PDF

Info

Publication number
CN112188115B
CN112188115B CN202011048128.7A CN202011048128A CN112188115B CN 112188115 B CN112188115 B CN 112188115B CN 202011048128 A CN202011048128 A CN 202011048128A CN 112188115 B CN112188115 B CN 112188115B
Authority
CN
China
Prior art keywords
image
input
target
audio
audio information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202011048128.7A
Other languages
English (en)
Other versions
CN112188115A (zh
Inventor
李琳
钟彬
张弛
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
China Mobile Communications Group Co Ltd
MIGU Culture Technology Co Ltd
Original Assignee
China Mobile Communications Group Co Ltd
MIGU Culture Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by China Mobile Communications Group Co Ltd, MIGU Culture Technology Co Ltd filed Critical China Mobile Communications Group Co Ltd
Priority to CN202011048128.7A priority Critical patent/CN112188115B/zh
Publication of CN112188115A publication Critical patent/CN112188115A/zh
Application granted granted Critical
Publication of CN112188115B publication Critical patent/CN112188115B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment
    • H04N5/262Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects

Abstract

本发明实施例提供一种图像处理方法、电子设备及存储介质,涉及图像处理技术领域,以解决图像中未携带音频信息的问题。该方法包括:通过确定图像中插入音频信息的目标位置,所述目标位置为所述图像的存储数据序列中的位置,然后将所述音频信息插入所述目标位置,获得目标图像,以将音频信息插入至图像中,使得目标图像携带音频信息,便于后续在使用目标图像时,可以使用目标图像携带的音频信息,增加了图像的展现形式。

Description

一种图像处理方法、电子设备及存储介质
技术领域
本发明涉及图像处理领域,尤其涉及一种图像处理方法、电子设备及存储介质。
背景技术
随着视频制作的兴起,人们常常在录制或者编辑时,向视频中添加贴纸,贴纸可为静态图像,或者动态图像,但是目前,向视频中添加的贴纸包括的信息简单,贴纸的展现形式单一。
发明内容
本发明实施例提供一种图像处理方法、电子设备及存储介质,以解决现有技术中向视频中添加的贴纸包括的信息简单,贴纸的展现形式单一的问题。
本发明实施例是这样实现的:
第一方面,本发明实施例提供了一种图像处理方法,包括:
确定图像中插入音频信息的目标位置,所述目标位置为所述图像的存储数据序列中的位置;
将所述音频信息插入所述目标位置,获得目标图像。
第二方面,本发明实施例还提供一种图像携带音频的实现装置,包括:
确定模块,用于确定图像中插入音频信息的目标位置,所述目标位置为所述图像的存储数据序列中的位置;
获取模块,用于将所述音频信息插入所述目标位置,获得目标图像。
第三方面,本发明实施例还提供一种电子设备,包括处理器、存储器及存储在所述存储器上并可在所述处理器上运行的计算机程序,所述计算机程序被所述处理器执行时实现如第一方面所述的图像处理方法的步骤。
第四方面,本发明实施例还提供一种计算机可读存储介质,所述计算机可读存储介质上存储有计算机程序,所述计算机程序被处理器执行时实现上述第一方面所述的图像处理方法的步骤。
在本发明实施例中,电子设备通过确定图像中插入音频信息的目标位置,所述目标位置为所述图像的存储数据序列中的位置,然后将所述音频信息插入所述目标位置,获得目标图像,以将音频信息插入至图像中,使得目标图像携带音频信息,便于后续在使用目标图像时,可以使用目标图像携带的音频信息,增加了图像的展现形式。
附图说明
图1是本发明实施例提供的图像处理方法的流程图;
图2是本发明实施例提供的在静态图像中圈选第一区域的示意图;
图3是本发明实施例提供的模拟球触地的动态图像的各帧示意图;
图4是本发明实施例提供的电子设备的实现装置的结构图;
图5是本发明实施例提供的电子设备的结构图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
参见图1,图1是本发明实施例提供的图像处理方法的流程图,如图1所示,本实施例提供一种图像处理方法,应用于电子设备,包括以下步骤:
步骤101、确定图像中插入音频信息的目标位置,所述目标位置为所述图像的存储数据序列中的位置。
图像可为静态图像或者动态图像,若图像为静态图像,则图像包括一帧图片,若图像为动态图像,则图像包括多帧图片。图像的存储数据序列可为图像的二进制数据序列,图像存储在存储介质中时,可以二进制数据序列进行存储。
在本步骤中,确定插入音频信息的目标位置,即确定音频信息插入到图像的存储数据序列中的位置,此处的音频信息可理解为音频的存储数据序列,音频的存储数据序列可为音频的二进制数据序列,音频存储在存储介质中时,可以二进制数据序列进行存储。
目标位置可为图像的存储数据序列的起始位置、中间位置或者结束位置等等,中间位置可为图像的任意一个像素点在存储数据序列中的位置。
步骤102、将所述音频信息插入所述目标位置,获得目标图像。
将音频信息插入图像的存储数据序列中,获得插入音频信息的目标图像。例如,若音频信息对应的二进制数据序列为01001001,图像对应的二进制数据序列为01110001,将音频信息插入图像的存储数据序列的结束位置,获得的二进制数据序列为0111000101001001,该二进制数据序列为目标图像的存储数据序列。上述音频信息和图像的二进制数据序列为简化描述所举的例子,并不代表实际情况,实际上的音频信息和图像的二进制数据序列更长。
向图像的存储数据序列中插入的音频信息可为一个或多个,多个音频信息插入的目标位置可相同也可不同。若多个音频信息插入的目标位置相同,则这多个音频信息依次插入,例如,第一个音频信息插入至目标位置,第二音频信息插入至第一个音频信息的结束位置后,第三音频信息插入至第二个音频信息的结束位置后,以此类推,在此不做赘述。
本实施例中,电子设备通过确定图像中插入音频信息的目标位置,所述目标位置为所述图像的存储数据序列中的位置,然后将所述音频信息插入所述目标位置,获得目标图像,以将音频信息插入至图像中,使得目标图像携带音频信息,便于后续在使用目标图像时,也可以使用目标图像携带的音频信息,增加了图像的展现形式,例如,在显示图像时,对携带的音频进行播放,使得图像可满足更多的应用场景。
在本申请一个实施例中,若所述图像为静态图像,步骤101、确定图像中插入音频信息的目标位置,包括:
接收针对所述图像的第一输入;
响应所述第一输入,在所述图像中确定第一区域;
根据所述第一区域,确定所述目标位置。
具体的,根据第一输入确定第一区域,第一输入可为滑动输入或点击输入。若第一输入为滑动输入,且滑动输入的轨迹构成一封闭图形。进一步的,若滑动输入的轨迹不构成一封闭图形,且滑动输入的起始位置与结束位置之间的距离小于或等于预设距离,预设距离可根据实际情况进行设置,在此不做限定,预设距离应该较小,此种情况下,电子设备可将起始位置与结束位置进行连接,构成一封闭图形。根据滑动输入确定一封闭图形,封闭图形圈定的区域即为第一区域。
若第一输入为点击输入,则根据点击输入确定第一区域,例如,用户点击图像时,图像的多个像素点被点击,这多个像素点所在的区域即为第一区域。
根据第一区域确定目标位置时,可从第一区域包括的多个像素点中确定一个像素点,该一个像素点的位置即为目标位置。
第一区域可为圆形区域,椭圆形区域,多边形区域或者不规则区域等等。
本实施例中,通过接收针对所述图像的第一输入;响应所述第一输入,在所述图像中确定第一区域;根据所述第一区域,确定所述目标位置。通过基于用户输入来确定目标位置,可按照用户需求进行设置,提高了设置目标位置的灵活性。
在本申请一个实施例中,上述根据所述第一区域,确定所述目标位置,包括:
获取所述第一区域的中心位置点;
获取所述中心位置点对应的像素点在所述存储数据序列中的参照位置;
根据所述存储数据序列中所述参照位置确定所述目标位置。
例如,若一副静态图像中有一只狗和一只猫,先需要将猫叫的音频信息和狗叫的音频信息插入至静态图像中。如图2所示,静态图像11中已圈出猫和狗的位置,其中,图中A所示为根据第一输入圈出的猫的位置,B所示为根据第一输入圈出的狗的位置。根据圈出的位置计算音频信息需要插入的目标位置。
根据圈选形状确定形状边缘的路径,根据路径确定出圈选区域(即第一区域)的中心位置点,然后确定中心位置点对应的像素点。
静态图像可视为由多个像素点组成的像素矩阵,将静态图像左上角的像素点所在的位置确定为坐标原点(0,0),计算中心位置点相对于坐标原点的距离,若静态图像的尺寸信息是960像素×640像素,A所示的中心位置点坐标为(120,156),B所示的中心位置点坐标为(790,485)。
若静态图像在存储时,是按照行进行存储,即依次存储第一行像素、第二行像素、第三行像素,直到第640行像素。A所示的中心位置点坐标为(120,156),即该中心位置点对应第156行第120个像素点,该像素点在静态图像的存储数据序列中为第(156-1)×960+120个像素点的位置,该位置即为参照位置。
同样的,B所示的中心位置点坐标为(790,485),即该中心位置点对应第485行第790个像素点,该像素点在静态图像的存储数据序列中为第(485-1)×960+790个像素点的位置,该位置即为参照位置。
在根据参照位置确定目标位置时,可将参照位置作为目标位置,也可以将存储数据序列中所述参照位置的下一位置或者上一位置确定为所述目标位置,所述参照位置的下一位置与所述参照位置相邻,且位于所述参照位置之后,所述参照位置的上一位置与所述参照位置相邻,且位于所述参照位置之前。
例如,在确定目标位置之后,按照从上到下,从左到右的方式逐一读取静态图像的像素数据,当读到猫叫的音频信息需要插入的像素点的位置时,在这个像素点的数据存储位置插入一个猫叫的音频信息,若猫叫的音频信息为2kb数据大小的文件,则将这2kb的数据进行插入。
继续解析静态图像,当解析到狗叫的音频信息需要插入的像素点的位置时,在这个像素点的数据存储位置插入一个狗叫的音频信息,若狗叫的音频信息为4kb数据大小的文件,则将这4kb的数据进行插入。
即,将猫叫的音频信息插入至静态图像的存储数据序列中的第(156-1)×960+120个像素点的数据存储位置,将狗叫的音频信息插入至静态图像的存储数据序列中的第(485-1)×960+790个像素点的数据存储位置。
上述这种确定目标位置的方式,可基于用户输入来确定目标位置,提高了目标位置设置的灵活性。
在将音频信息插入目标位置,获得目标图像之后,在使用目标图像时,包括:
显示所述目标图像;
接收针对所述目标图像的第二输入;
响应所述第二输入,获得输入位置;
若所述输入位置位于所述音频信息的响应范围内,则播放所述音频信息对应的音频,所述响应范围根据所述第一区域确定。
在本实施例中,显示目标图像时,可对目标图像包括的像素点进行显示,并不对目标图像中包括的音频信息进行播放。在显示目标图像之后,接收用户的第二输入,此处第二输入可为针对目标图像的点击输入。根据点击输入可确定一输入位置,例如,点击的位置即为输入位置。
判断输入位置是否位于音频信息的响应范围内,若输入位置位于音频信息的响应范围内,则播放所述音频信息对应的音频;若输入位置未位于音频信息的响应范围内,则不播放所述音频信息对应的音频。
音频信息的响应范围可以根据第一区域确定,例如,响应范围可与第一区域相同,也可采用如下方式进行确定:若第一输入为滑动输入,且滑动输入的轨迹构成一封闭图形,或者,若滑动输入的轨迹不构成一封闭图形,且滑动输入的起始位置与结束位置之间的距离小于或等于预设距离,电子设备将起始位置与结束位置进行连接,构成一封闭图形。封闭图形圈定的区域即为第一区域。
确定封闭图形中心位置点,然后确定封闭图形上距离中心位置点距离最近的点和距离最远的点,通过这两个点计算出一个最远半径R1和最近半径R2,然后根据平均算法确定响应半径:
响应半径r=(R1+R2)/2;
或者,获取封闭图形上距离中心位置点距离最近的点,将该点与中心位置点之间的距离作为响应半径,或者获取封闭图形上距离中心位置点距离最远的点,将该点与中心位置点之间的距离作为响应半径。
响应范围即以中心位置点为圆心,响应半径为半径的圆形区域,上述实现方式中,响应半径可根据第一区域确定。
若输入位置位于音频信息的响应范围内,则播放所述音频信息对应的音频;若输入位置未位于音频信息的响应范围内,则不播放所述音频信息对应的音频。用户可通过第二输入,控制目标图像携带的音频的播放,增强用户与目标图像之间的交互性,提高趣味性。
另外,由于在静态图像中添加了音频信息,还需要对静态图像的头信息进行修改,写入音频信息的标记信息和音频信息的位置。进一步的,所述静态图像的头信息包括音频标记信息、响应半径、所述目标位置以及所述音频的文件长度。头信息新添加的信息如表1所示,其中,头信息中增加一位(bit),用于标记是否携带音频信息,其中,1表示携带,0表示不携带,1或0即为音频标记信息。
头信息中增加4个字段,分别用于存储与音频信息有关的内容,例如,目标位置的坐标(x,y),响应半径r,音频信息的大小(即音频的文件长度)l。如表1所示,表1中存储有2个音频信息,每个音频信息均采用4个字段进行存储,包括响应半径、所述目标位置以及所述音频的文件长度,其中,目标位置包括横坐标和纵坐标,采用两个字段进行存储。为这4个字段分配的存储空间可相同也可不同,例如,为存储目标位置的字段分配4个字节,为存储响应半径的字段分配3个字节,为存储音频的文件长度的字段分配4个字节,具体可根据实际情况进行灵活设置,在此不做限定。
表1
在本申请中,还提供另一种情况下的实施例,即若所述图像为动态图像,所述确定图像中插入音频信息的目标位置,包括:
显示所述动态图像的多帧图片;
接收针对所述多帧图片中的第一图片的第二输入;
响应所述第二输入,确定所述目标图片;
确定所述目标图片中插入所述音频信息的所述目标位置,所述目标位置为所述目标图片的存储数据序列中的位置。
动态图像包括多帧图片,在显示这多帧图片时,可依次对这多帧图片进行显示,例如,先显示第一帧图片,在用户的控制下,再显示下一帧图片;或者,同时显示这多帧图片,例如,在电子设备的显示屏上按照多帧图片在动态图像中的先后显示顺序,从左至右依次显示这多帧图片。
第二输入为针对第一图片的输入,第一图片可为多帧图片中的一张或多张图片。第二输入可为选中第一图片的输入,例如点击目标图片,以选中目标图片。在确定目标图片之后,将音频信息插入至目标图片的目标位置,目标位置可默认为目标图片的存储数据序列中的起始位置或者结束位置。
目标图片的确定方式还可以所述响应所述第二输入,确定所述目标图片,包括:
响应所述第一子输入,确定目标对象;
对所述多帧图片中的所述目标对象进行标记;
接收针对所述标记后的所述多帧图片的第二图片的第二子输入;
响应所述第二子输入,确定所述目标图片,所述第二输入包括所述第一子输入和所述第二子输入。
上述第一子输入可为选中目标对象的输入,第一子输入可为滑动输入,通过滑动输入圈选出目标对象,或者,第一子输入为点击输入,通过点击选中目标对象。由于动态图像包括多帧图片,这多帧图片之间具有一定的连贯性,在一帧图片中出现的目标对象,可能在其他帧也会出现,为了便于用户基于目标对象添加音频信息,可通过图片识别技术,将多帧图片中的目标对象进行标记,例如,可以将多帧图片中的目标对象进行高亮显示,或者采用曲线将目标对象标示出来,便于用户查看。
用户可基于标记后的多帧图片进行第二子输入,第二子输入为选中第二图片的输入,具体可为点击输入。第二图片可为多帧图片中的一帧或多帧图片,第二图片优选为包括目标对象的图片,当然,第二图片也可以为不包括目标对象的图片,此处不做限定。
如图3所示为模拟球触地的动态图像,图3中展开显示这9帧图片。该动态图像包括9帧图片,经过三次碰地后停止,碰地对应的帧分别为第3帧、第6帧、第8帧(图片的帧索引从0开始),则可将这三帧确定为目标图片,在目标图片的存储数据序列的结束位置处插入球触地的音频信息。
由于在动态图像中添加了音频信息,还需要对动态图像的头信息进行修改。所述动态图像的头信息包括音频标记信息、音频起始点偏移位置以及音频的文件长度。所述动态图像新添加的头信息如表2所示,其中,头信息中增加一位(bit),用于标记是否携带音频信息,其中,1表示携带,0表示不携带,1或0即为音频标记信息。音频起始点偏移位置可理解为目标位置,即插入音频信息的位置,例如目标图片的起始位置,或者结束位置。
表2
1位 音频信息标记 1表示携带,0表示不携带
第一个音频信息 音频起始点偏移位置 音频文件长度
第二个音频信息 音频起始点偏移位置 音频文件长度
... ... ...
进一步的,在确定目标图片之后,还可以按照对静态图像的处理方式,对目标图片进行处理,例如,确定所述目标图片中插入所述音频信息的所述目标位置,包括:
接收针对所述目标图片的第一输入;
响应所述第一输入,在所述目标图片中确定第一区域;
根据所述第一区域,确定所述目标位置。
进一步的,所述根据所述第一区域,确定所述目标位置,包括:
获取所述第一区域的中心位置点;获取所述中心位置点对应的像素点在所述存储数据序列中的参照位置;根据所述存储数据序列中所述参照位置确定所述目标位置。具体实现方式可参照上述静态图像相关的记载,在此不做赘述。
在解析并播放上述带音频的图像时,如果是静态图像,当电子设备检测到用户点击图像中的音频响应区域,则播放该响应区域的音频文件(即音频信息)对应的音频;如果是动态图像,当动图播放到添加音频文件的帧位置的时候,播放对应的音频文件。
具体过程如下:
对于静态图像:
A1、解析图像头信息,检索出是否携带音频文件(即音频信息),携带音频文件的位置信息列表,以及每个音频文件长度,具体如表1中的定义。
B1、根据头信息将音频信息从文件中解析出来,并通过draw方法将静态图像信息进行展示;
C1、为静态图像增加触摸监听,监听用户触摸位置,并对用户的触摸进行响应;
D1、如果用户触摸点的坐标为(x,y),判断触摸点(x,y)是否在需要播放音频的响应区域内;
计算出触摸点距离音频响应区域的中心点坐标距离,假设计算为r0;
如果r0小于响应半径r,则播放音频文件,如果r0大于响应半径,则说明触摸点在响应区域之外,不需要播放音频文件。其中,音频播放以最近原则为准,如果触摸点同时处在多个音频文件的响应半径内,则计算出触摸点(x,y)距离所有在距离该点半径小于r0内部的位置,找出这些点中与触摸点(x,y)最近的点,该点对应的音频文件则为需要播放的音频。
E1、根据坐标信息从步骤b1中解析出来的音频文件列表中找出需要播放的音频数据,调用系统音频播放器,播放对应的音频数据对应的音频;
F1、通过以上步骤实现携带音频的静态图像的展示及播放。
对于动态图像:
A2、第一步同静态图像一样,解析出头信息中的音频信息。
B2、通过A2中的信息从动态图像中分别解析出音频列表和动图帧列表数据。通过动draw方法及动态图像帧时长信息逐帧绘制每一帧,呈现动图展示。这里的draw方法是指一个绘制方法,通过画笔paint和画布canvas在画布上调用以draw开头的对应的应用程序接口(Application Programming Interface,API)画出对应的帧图片信息;
C2、根据B2步骤播放每一帧,同时根据步骤A2中获取的携带音频信息判断当前是否要播放音频。假设播放到第N帧,则根据A2步骤得到的信息检测到第N帧后需要播放的音频;
D2、如果C2步的检测的N帧需要播放音频,则调用系统播放器播放对应的音频。
E2、通过以上步骤实现携带音频的动态图像的展示及播放。
参见图4,图4是本发明实施例提供的电子设备的结构图,如图4所示,电子设备400,包括:
确定模块401,用于确定图像中插入音频信息的目标位置,所述目标位置为所述图像的存储数据序列中的位置;
获取模块402,用于将所述音频信息插入所述目标位置,获得目标图像。
进一步的,所述图像为静态图像,所述确定模块401,包括:
第一接收子模块,用于接收针对所述图像的第一输入;
第一响应子模块,用于响应所述第一输入,在所述图像中确定第一区域;
第一确定子模块,用于根据所述第一区域,确定所述目标位置。
进一步的,所述第一确定子模块,包括:
第一获取单元,用于获取所述第一区域的中心位置点;
第二获取单元,用于获取所述中心位置点对应的像素点在所述存储数据序列中的参照位置;
确定单元,用于根据所述存储数据序列中所述参照位置确定所述目标位置。
进一步的,电子设备400还包括:
显示模块,用于显示所述目标图像;
接收模块,用于接收针对所述目标图像的第二输入;
响应模块,用于响应所述第二输入,获得输入位置;
播放模块,用于若所述输入位置位于所述音频信息的响应范围内,则播放所述音频信息对应的音频,所述响应范围根据所述第一区域确定。
进一步的,所述静态图像的头信息包括音频标记信息、响应半径、所述目标位置以及所述音频的文件长度,所述响应半径根据所述第一区域确定。
进一步的,所述图像为动态图像,所述确定模块401,包括:
显示子模块,用于显示所述动态图像的多帧图片;
第二接收子模块,用于接收针对所述多帧图片中的第一图片的第二输入;
第二响应子模块,用于响应所述第二输入,确定所述目标图片;
第二确定子模块,用于确定所述目标图片中插入所述音频信息的所述目标位置,所述目标位置为所述目标图片的存储数据序列中的位置。
进一步的,所述第二响应子模块,包括:
第一响应单元,用于响应所述第一子输入,确定目标对象;
显示单元,用于对所述多帧图片中的所述目标对象进行标记;
接收单元,用于接收针对所述标记后的所述多帧图片的第二图片的第二子输入;
第二响应单元,用于响应所述第二子输入,确定所述目标图片,所述第二输入包括所述第一子输入和所述第二子输入。
进一步的,所述动态图像的头信息包括音频标记信息、音频起始点偏移位置以及音频的文件长度。
电子设备400能够实现图1方法实施例中电子设备实现的各个过程,为避免重复,这里不再赘述。
本发明实施例的电子设备400,通过确定图像中插入音频信息的目标位置,所述目标位置为所述图像的存储数据序列中的位置,然后将所述音频信息插入所述目标位置,获得目标图像,以将音频信息插入至图像中,使得目标图像携带音频信息,便于后续在使用目标图像时,也可以使用目标图像携带的音频信息,增加了图像的展现形式,例如,在显示图像时,对携带的音频进行播放,使得图像可满足更多的应用场景。
图5为实现本发明各个实施例的一种电子设备的硬件结构示意图,如图5所示,该电子设备700包括但不限于:射频单元701、网络模块702、音频输出单元703、输入单元704、传感器705、显示单元706、用户输入单元707、接口单元708、存储器709、处理器710、以及电源711等部件。本领域技术人员可以理解,图5中示出的电子设备结构并不构成对电子设备的限定,电子设备可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。在本发明实施例中,电子设备包括但不限于手机、平板电脑、笔记本电脑、掌上电脑、车载电子设备、可穿戴设备、以及计步器等。
其中,处理器710,用于确定图像中插入音频信息的目标位置,所述目标位置为所述图像的存储数据序列中的位置;将所述音频信息插入所述目标位置,获得目标图像。
进一步的,若所述图像为静态图像,输入单元704,用于接收针对所述图像的第一输入;
处理器710,用于响应所述第一输入,在所述图像中确定第一区域;根据所述第一区域,确定所述目标位置。
进一步的,处理器710,还用于获取所述第一区域的中心位置点;获取所述中心位置点对应的像素点在所述存储数据序列中的参照位置;根据所述存储数据序列中所述参照位置确定所述目标位置。
进一步的,显示单元706,用于显示所述目标图像;
输入单元704,用于接收针对所述目标图像的第二输入;
处理器710,用于响应所述第二输入,获得输入位置;
音频输出单元703,用于若所述输入位置位于所述音频信息的响应范围内,则播放所述音频信息对应的音频,所述响应范围根据所述第一区域确定。
进一步的,所述静态图像的头信息包括音频标记信息、响应半径、所述目标位置以及所述音频的文件长度,所述响应半径根据所述第一区域确定。
进一步的,若所述图像为动态图像,显示单元706,用于显示所述动态图像的多帧图片;
输入单元704,用于接收针对所述多帧图片中的第一图片的第二输入;
处理器710,用于响应所述第二输入,确定所述目标图片;确定所述目标图片中插入所述音频信息的所述目标位置,所述目标位置为所述目标图片的存储数据序列中的位置。
进一步的,处理器710,用于响应所述第一子输入,确定目标对象;
显示单元706,用于对所述多帧图片中的所述目标对象进行标记;
输入单元704,用于接收针对所述标记后的所述多帧图片的第二图片的第二子输入;
处理器710,还用于响应所述第二子输入,确定所述目标图片,所述第二输入包括所述第一子输入和所述第二子输入。
进一步的,所述动态图像的头信息包括音频标记信息、音频起始点偏移位置以及音频的文件长度。
电子设备700能够实现前述实施例中电子设备实现的各个过程,为避免重复,这里不再赘述。
本发明实施例的电子设备700,通过确定图像中插入音频信息的目标位置,所述目标位置为所述图像的存储数据序列中的位置,然后将所述音频信息插入所述目标位置,获得目标图像,以将音频信息插入至图像中,使得目标图像携带音频信息,便于后续在使用目标图像时,也可以使用目标图像携带的音频信息,增加了图像的展现形式,例如,在显示图像时,对携带的音频进行播放,使得图像可满足更多的应用场景。
应理解的是,本发明实施例中,射频单元701可用于收发信息或通话过程中,信号的接收和发送,具体的,将来自基站的下行数据接收后,给处理器710处理;另外,将上行的数据发送给基站。通常,射频单元701包括但不限于天线、至少一个放大器、收发信机、耦合器、低噪声放大器、双工器等。此外,射频单元701还可以通过无线通信系统与网络和其他设备通信。
电子设备通过网络模块702为用户提供了无线的宽带互联网访问,如帮助用户收发电子邮件、浏览网页和访问流式媒体等。
音频输出单元703可以将射频单元701或网络模块702接收的或者在存储器709中存储的音频数据转换成音频信号并且输出为声音。而且,音频输出单元703还可以提供与电子设备700执行的特定功能相关的音频输出(例如,呼叫信号接收声音、消息接收声音等等)。音频输出单元703包括扬声器、蜂鸣器以及受话器等。
输入单元704用于接收音频或视频信号。输入单元704可以包括图形处理器(Graphics Processing Unit,GPU)7041和麦克风7042,图形处理器7041对在视频捕获模式或图像捕获模式中由图像捕获装置(如摄像头)获得的静态图片或视频的图像数据进行处理。处理后的图像帧可以显示在显示单元706上。经图形处理器7041处理后的图像帧可以存储在存储器709(或其它存储介质)中或者经由射频单元701或网络模块702进行发送。麦克风7042可以接收声音,并且能够将这样的声音处理为音频数据。处理后的音频数据可以在电话通话模式的情况下转换为可经由射频单元701发送到移动通信基站的格式输出。
电子设备700还包括至少一种传感器707,比如光传感器、运动传感器以及其他传感器。具体地,光传感器包括环境光传感器及接近传感器,其中,环境光传感器可根据环境光线的明暗来调节显示面板7061的亮度,接近传感器可在电子设备700移动到耳边时,关闭显示面板7061和/或背光。作为运动传感器的一种,加速计传感器可检测各个方向上(一般为三轴)加速度的大小,静止时可检测出重力的大小及方向,可用于识别电子设备姿态(比如横竖屏切换、相关游戏、磁力计姿态校准)、振动识别相关功能(比如计步器、敲击)等;传感器707还可以包括指纹传感器、压力传感器、虹膜传感器、分子传感器、陀螺仪、气压计、湿度计、温度计、红外线传感器等,在此不再赘述。
显示单元706用于显示由用户输入的信息或提供给用户的信息。显示单元706可包括显示面板7061,可以采用液晶显示器(Liquid Crystal Display,LCD)、有机发光二极管(Organic Light-Emitting Diode,OLED)等形式来配置显示面板7061。
用户输入单元707可用于接收输入的数字或字符信息,以及产生与电子设备的用户设置以及功能控制有关的键信号输入。具体地,用户输入单元707包括触控面板7071以及其他输入设备7072。触控面板7071,也称为触摸屏,可收集用户在其上或附近的触摸操作(比如用户使用手指、触笔等任何适合的物体或附件在触控面板7071上或在触控面板7071附近的操作)。触控面板7071可包括触摸检测装置和触摸控制器两个部分。其中,触摸检测装置检测用户的触摸方位,并检测触摸操作带来的信号,将信号传送给触摸控制器;触摸控制器从触摸检测装置上接收触摸信息,并将它转换成触点坐标,再送给处理器710,接收处理器710发来的命令并加以执行。此外,可以采用电阻式、电容式、红外线以及表面声波等多种类型实现触控面板7071。除了触控面板7071,用户输入单元707还可以包括其他输入设备7072。具体地,其他输入设备7072可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆,在此不再赘述。
进一步的,触控面板7071可覆盖在显示面板7061上,当触控面板7071检测到在其上或附近的触摸操作后,传送给处理器710以确定触摸事件的类型,随后处理器710根据触摸事件的类型在显示面板7061上提供相应的视觉输出。虽然在图5中,触控面板7071与显示面板7061是作为两个独立的部件来实现电子设备的输入和输出功能,但是在某些实施例中,可以将触控面板7071与显示面板7061集成而实现电子设备的输入和输出功能,具体此处不做限定。
接口单元708为外部装置与电子设备700连接的接口。例如,外部装置可以包括有线或无线头戴式耳机端口、外部电源(或电池充电器)端口、有线或无线数据端口、存储卡端口、用于连接具有识别模块的装置的端口、音频输入/输出(I/O)端口、视频I/O端口、耳机端口等等。接口单元708可以用于接收来自外部装置的输入(例如,数据信息、电力等等)并且将接收到的输入传输到电子设备700内的一个或多个元件或者可以用于在电子设备700和外部装置之间传输数据。
存储器709可用于存储软件程序以及各种数据。存储器709可主要包括存储程序区和存储数据区,其中,存储程序区可存储操作系统、至少一个功能所需的应用程序(比如声音播放功能、图像播放功能等)等;存储数据区可存储根据手机的使用所创建的数据(比如音频数据、电话本等)等。此外,存储器709可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。
处理器710是电子设备的控制中心,利用各种接口和线路连接整个电子设备的各个部分,通过运行或执行存储在存储器709内的软件程序和/或模块,以及调用存储在存储器709内的数据,执行电子设备的各种功能和处理数据,从而对电子设备进行整体监控。处理器710可包括一个或多个处理单元;优选的,处理器710可集成应用处理器和调制解调处理器,其中,应用处理器主要处理操作系统、用户界面和应用程序等,调制解调处理器主要处理无线通信。可以理解的是,上述调制解调处理器也可以不集成到处理器710中。
电子设备700还可以包括给各个部件供电的电源711(比如电池),优选的,电源711可以通过电源管理系统与处理器710逻辑相连,从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。
另外,电子设备700包括一些未示出的功能模块,在此不再赘述。
优选的,本发明实施例还提供一种电子设备,包括处理器710,存储器709,存储在存储器709上并可在所述处理器710上运行的计算机程序,该计算机程序被处理器710执行时实现上述图像处理方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
本发明实施例还提供一种计算机可读存储介质,计算机可读存储介质上存储有计算机程序,该计算机程序被处理器执行时实现上述图1所示图像处理方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。其中,所述的计算机可读存储介质,如只读存储器(Read-Only Memory,简称ROM)、随机存取存储器(Random AccessMemory,简称RAM)、磁碟或者光盘等。
需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中,包括若干指令用以使得一台终端(可以是手机,计算机,服务器,空调器,或者网络设备等)执行本发明各个实施例所述的方法。
上面结合附图对本发明的实施例进行了描述,但是本发明并不局限于上述的具体实施方式,上述的具体实施方式仅仅是示意性的,而不是限制性的,本领域的普通技术人员在本发明的启示下,在不脱离本发明宗旨和权利要求所保护的范围情况下,还可做出很多形式,均属于本发明的保护之内。

Claims (7)

1.一种图像处理方法,应用于电子设备,其特征在于,包括:
确定图像中插入音频信息的目标位置,所述目标位置为所述图像的存储数据序列中的位置,若所述图像为静态图像,所述确定图像中插入音频信息的目标位置包括:接收针对所述静态图像的第一输入;响应所述第一输入,在所述静态图像中确定第一区域;获取所述第一区域的中心位置点;获取所述中心位置点对应的像素点在所述存储数据序列中的参照位置;根据所述存储数据序列中所述参照位置确定所述目标位置;
将所述音频信息插入所述目标位置,获得目标图像;
对静态图像的头信息进行修改,修改之后的所述静态图像的头信息包括:音频标记信息、响应半径、所述目标位置以及音频的文件长度;
其中,所述音频标记信息用于标记所述静态图像是否携带音频信息,所述响应半径根据所述第一区域确定;所述第一区域是:若第一输入为滑动输入,且滑动输入的轨迹构成一封闭图形,则所述封闭图形所圈定的区域为第一区域;或者,所述第一区域是:若滑动输入的轨迹不构成一封闭图形,且滑动输入的起始位置与结束位置之间的距离小于或等于预设距离,电子设备将起始位置与结束位置进行连接,构成一封闭图形,所述封闭图形所圈定的区域为第一区域。
2.根据权利要求1所述的方法,其特征在于,在所述将所述音频信息插入所述目标位置,获得目标图像之后,还包括:
显示所述目标图像;
接收针对所述目标图像的第二输入;
响应所述第二输入,获得输入位置;
若所述输入位置位于所述音频信息的响应范围内,则播放所述音频信息对应的音频,所述响应范围根据所述第一区域确定。
3.根据权利要求1所述的方法,其特征在于,若所述图像为动态图像,所述确定图像中插入音频信息的目标位置,包括:
显示所述动态图像的多帧图片;
接收针对所述多帧图片中的第一图片的第二输入;
响应所述第二输入,确定目标图片;
确定所述目标图片中插入所述音频信息的所述目标位置,所述目标位置为所述目标图片的存储数据序列中的位置。
4.根据权利要求3所述的方法,其特征在于,所述响应所述第二输入,确定目标图片,包括:
响应第一子输入,确定目标对象;
对所述多帧图片中的所述目标对象进行标记;
接收针对所述标记后的所述多帧图片的第二图片的第二子输入;
响应所述第二子输入,确定所述目标图片,所述第二输入包括所述第一子输入和所述第二子输入。
5.根据权利要求3所述的方法,其特征在于,所述动态图像的头信息包括音频标记信息、音频起始点偏移位置以及音频的文件长度。
6.一种电子设备,其特征在于,包括处理器、存储器及存储在所述存储器上并可在所述处理器上运行的计算机程序,所述计算机程序被所述处理器执行时实现如权利要求1至5中任一项所述的图像处理方法的步骤。
7.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质上存储有计算机程序,所述计算机程序被处理器执行时实现如权利要求1至5中任一项所述的图像处理方法的步骤。
CN202011048128.7A 2020-09-29 2020-09-29 一种图像处理方法、电子设备及存储介质 Active CN112188115B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202011048128.7A CN112188115B (zh) 2020-09-29 2020-09-29 一种图像处理方法、电子设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202011048128.7A CN112188115B (zh) 2020-09-29 2020-09-29 一种图像处理方法、电子设备及存储介质

Publications (2)

Publication Number Publication Date
CN112188115A CN112188115A (zh) 2021-01-05
CN112188115B true CN112188115B (zh) 2023-10-17

Family

ID=73946919

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202011048128.7A Active CN112188115B (zh) 2020-09-29 2020-09-29 一种图像处理方法、电子设备及存储介质

Country Status (1)

Country Link
CN (1) CN112188115B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112863481B (zh) * 2021-02-27 2023-11-03 腾讯音乐娱乐科技(深圳)有限公司 一种音频生成方法及设备

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107871000A (zh) * 2017-11-07 2018-04-03 广东欧珀移动通信有限公司 音频播放方法、装置、存储介质及电子设备
CN107871001A (zh) * 2017-11-07 2018-04-03 广东欧珀移动通信有限公司 音频播放方法、装置、存储介质及电子设备
CN107885430A (zh) * 2017-11-07 2018-04-06 广东欧珀移动通信有限公司 一种音频播放方法、装置、存储介质及电子设备
CN107895006A (zh) * 2017-11-07 2018-04-10 广东欧珀移动通信有限公司 音频播放方法、装置、存储介质及电子设备
CN109474801A (zh) * 2018-09-20 2019-03-15 太平洋未来科技(深圳)有限公司 一种交互对象的生成方法、装置及电子设备
CN111246283A (zh) * 2020-01-17 2020-06-05 北京达佳互联信息技术有限公司 视频播放方法、装置、电子设备及存储介质

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20190272094A1 (en) * 2018-03-01 2019-09-05 Jack M. MINSKY System for multi-tagging images

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107871000A (zh) * 2017-11-07 2018-04-03 广东欧珀移动通信有限公司 音频播放方法、装置、存储介质及电子设备
CN107871001A (zh) * 2017-11-07 2018-04-03 广东欧珀移动通信有限公司 音频播放方法、装置、存储介质及电子设备
CN107885430A (zh) * 2017-11-07 2018-04-06 广东欧珀移动通信有限公司 一种音频播放方法、装置、存储介质及电子设备
CN107895006A (zh) * 2017-11-07 2018-04-10 广东欧珀移动通信有限公司 音频播放方法、装置、存储介质及电子设备
CN109474801A (zh) * 2018-09-20 2019-03-15 太平洋未来科技(深圳)有限公司 一种交互对象的生成方法、装置及电子设备
CN111246283A (zh) * 2020-01-17 2020-06-05 北京达佳互联信息技术有限公司 视频播放方法、装置、电子设备及存储介质

Also Published As

Publication number Publication date
CN112188115A (zh) 2021-01-05

Similar Documents

Publication Publication Date Title
CN110913132B (zh) 对象跟踪方法及电子设备
CN108966004B (zh) 一种视频处理方法及终端
CN110109593B (zh) 一种截屏方法及终端设备
CN107977652B (zh) 一种屏幕显示内容的提取方法及移动终端
CN109240577B (zh) 一种截屏方法及终端
CN107943390B (zh) 一种文字复制方法及移动终端
CN109857494B (zh) 一种消息提示方法及终端设备
US11895069B2 (en) Message sending method and mobile terminal
CN108257104B (zh) 一种图像处理方法及移动终端
CN111401463B (zh) 检测结果输出的方法、电子设备及介质
CN110096203B (zh) 一种截图方法及移动终端
CN109753202B (zh) 一种截屏方法和移动终端
CN111031178A (zh) 一种视频流裁剪方法及电子设备
WO2021083091A1 (zh) 截图方法及终端设备
CN108600544B (zh) 一种单手控制方法及终端
CN111464428A (zh) 音频处理方法、服务器、电子设备及计算机可读存储介质
CN111158815B (zh) 一种动态壁纸模糊方法、终端和计算机可读存储介质
CN108628534B (zh) 一种字符展示方法及移动终端
CN110795188A (zh) 一种消息交互方法及电子设备
CN112188115B (zh) 一种图像处理方法、电子设备及存储介质
CN108093119B (zh) 一种陌生来电号码的标记方法及移动终端
CN110740265B (zh) 图像处理方法及终端设备
CN111061407B (zh) 视频程序的操作控制方法、电子设备及存储介质
WO2020192662A1 (zh) 操作方法及终端设备
CN110647506B (zh) 一种图片删除方法及终端设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant