CN105407282A - 一种照相和回放的实现方法 - Google Patents

Abstract

本发明所提供的一种照相的实现方法，包括步骤：A、在拍照指令下达前，根据用户选择的录音或录像的录制启动指令启动录制进程，并实时缓存录制的数据；B、监听拍照指令，并在监听到该拍照指令时创建照片并缓存；C、判断是否监听所述录制进程被终止的指令，若是则将缓存的录制的数据与缓存的照片结合生成照片文件并保存，否则返回步骤B。对应的，还提供一种照相的回放方法，能够在照相时，依据用户拍下的照片以及在拍照前后的录制，自动给不同照片加入不定长的大数据量信息，并且能够在观看照片时能够展示所述信息。

Description

一种照相和回放的实现方法

技术领域

本发明涉及图像处理技术领域，特别涉及一种照相和回放的实现方法。

背景技术

随着诸如手机之类的智能设备中照相类的应用的普遍应用，为心怡的事物及美丽的大自然风景留下美好的记忆，随手拍照已经成为用户日常的生活行为。拍照的特点是主要注重图像的质量，分辩率会很高，但主要以图片格式，如jpg等格式存在，除图像数据外，所包含的其他的信息量很小，例如，有的手机上的拍照应用会在所生成的图像文件的属性信息中，加入时间、地址等字节数很小的数据。这种信息的加入，通常是在图像文件的属性信息的描述中，提前为所要加入的时间、地址预留字节。并且，都是在文件创建之后，才将所述信息加入的。

而实际的应用过程中，存在着用户希望在照片信息中加入不定长的、且数据量很大的信息的情况。例如，用户在观看某展览进行录音或录像过程中(如实时录制导览员的讲解音频)，希望能同时对关键的内容进行拍照(以发挥拍照的高分辨率的优势)，并将正在进行的录音或录像内容同时加入到照片中，从而，当用户在回放图片时，能够同时播放出对应的录音或录像。而这些需求，则通过上述现有的通过定长、预留的字节的方式是无法实现的，而若通过预先分别录制音频/视频和拍摄照片，再通过后期通过增加链接等方式进行整合，则即耽误时间，又需要用户有一定编辑能力，且还可能会错过照相的时机。

发明内容

有鉴于此，本发明的主要目的在于，提供一种照相的实现方法，

包括步骤：

A、在拍照指令下达前，根据用户选择的录音或录像的录制启动指令启动录制进程，并实时缓存录制的数据；

B、监听拍照指令，并在监听到该拍照指令时创建照片并缓存；

C、判断是否监听所述录制进程被终止的指令，若是则将缓存的录制的数据与缓存的照片结合生成照片文件并保存，否则返回步骤B。

由上，能够在照相时，依据用户拍下的照片以及在拍照前后的录制，自动给不同照片加入不定长的大数据量信息。

可选的，当监听到所述录制进程被终止的指令之前监听到所述拍照指令不少于两个时，步骤C所述将缓存的录制的数据与缓存的照片结合生成照片文件的步骤包括：

各个所述拍照指令对应的缓存的照片对应所述录制的数据的各个阶段分别结合生成各个照片文件；

所述录制的数据根据各个所述拍照指令被监听到的时刻分割为各个阶段。

可选的，还包括：

所述录制的数据的各个阶段包含的数据还包括：对应拍照指令被监听到的时刻的前后一定时间的数据同时归属于前后两个阶段。

由上，可以使录制数据有一定重复的添加到相邻照片中去，避免了录制数据丢失的情况。

可选的，还包括：

判断相邻拍照指令对应的缓存的相邻照片相似度高于阈值时，将相邻拍照指令对应的录制的相邻阶段的数据作为一整体阶段的数据，与所述相邻照片分别或择一的结合生成照片。

由上，当识别出相邻拍摄出的照片在内容上近似时，即可以择一进行录制数据的添加，便于回看时的完整性。

可选的，当监听到所述录制进程被终止的指令之前监听到所述拍照指令不少于两个时，步骤C所述将缓存的录制的数据与缓存的照片结合生成照片文件的步骤包括：

各个所述拍照指令对应的缓存的照片中的至少一个，对应所述录制的数据结合生成各个照片文件。

可选的，所述录制为录像时，还包括：

将所述缓存的照片对应录像数据要求的像素进行处理后，根据所述拍照指令被监听到的时刻插入到录像数据的对应时刻的帧位置。

由上，由于在视频录制时，可能出现由于中间进行了拍照而造成视频在相应的帧出现黑点而破坏视频的连贯性，将拍出了照片降像素处理后，添加回视频，则解决了上述问题。

可选的，步骤C所述结合包括：

查找在缓存的照片中可用于数据扩展的数据块；

在可扩展数据块中确定出空余数据块，将录制的数据写入空余数据块中。

可选的，将录制的数据写入空余数据块前，还包括：对所录制的数据进行压缩的步骤。

由上，可以实现节省数据块空间。

可选的，步骤C所述结合后还包括：

将结合后的照片进行远程存储的步骤；和，

将结合后的照片通过网络分享的步骤。

对应所述照相的实现方法，本发明还提供一种展示上述照相出的照片的回放方法，包括步骤：

显示所述照片，并解析与照片所合成的录制数据；

播放所述照片中的录制数据。

由上，以及能够在观看照片时能够展示所述信息。

附图说明

图1为本发明流程图。

具体实施方式

为克服现有技术存在的缺陷，本发明提供了一种照相和回放的方法，以应用于诸如触屏手机等移动终端的照相应用(如安卓系统的apk格式，ios系统的ipa格式，WindowsPhone系统的xap格式的照相应用)上，如无特殊说明，本发明下述的具体实施方式中，以触屏手机为例，且以在照相中对所生成的照片进行录音数据的扩展为例，对本发明进行详细说明。

为更好的实现本发明，照相应用中可加入新的虚拟按键，例如可包括用于触发录音的开始和结束的虚拟按键，用于触发录音暂停和恢复的虚拟按键。不难理解，可以设置其他虚拟按键以触发诸如录像的开始和结束、暂停和恢复等，关于虚拟键如何设置非本发明关注内容，故不再赘述。

参考图1示出的照相的实现方法，当用户开启照相应用后于手机上显示照相应用的界面，本发明的照相的实现方法包括以下步骤：

步骤S10：在照相应用的界面上，当所述触发录音开始的虚拟按键被用户触控后，调用录音进程开始录音并实时进行缓存。

相应的可以在该照相应用的界面上显示“正在为相片添加录音”的状态提示。

步骤S20：同时启动一进程，对照相快门虚拟按键进行监控，如果在未检测到照相快门虚拟按键被按下情况下，录音进程被终止，则结束本流程；否则执行下一步。

其中，下述情况视为录音进程被终止：该录音进程超过了设定的时长，或者录音结束的虚拟按键被触控。对于录音暂停虚拟按键被触控不视为录音进程被终止。

相应的，当录音进程被终止时，所缓存的录音可以仅作为录音文件保存，或被清除。

其中，上述设定时长的目的，是为了控制所述录音文件的大小，并非必须的条件，该时长用户可预先设定。

步骤S30：判断出照相快门虚拟按键被按下时，创建对应的图像文件并缓存，继续监听录音进程是否被终止。

如果监听到录音进程被终止，则将缓存的录音数据作为所缓存的所述图像文件的扩展部分，生成最终图像文件，并存储。其中，最终图像文件的创建过程具体参见后文。

如果在未监听到录音进程被终止时，判断出照相快门虚拟按键再次被按下时，则创建对应的第二图像文件并缓存。此时，监听录音进程仍然继续。如此，当监听到录音进程被终止时，可能会创建并缓存出多个图像文件。在这种情况下，最终图像文件的生成可以包括以下几种方式：

1、所述录音数据作为所指定的缓存的多个图像中的选定的一个或多个的扩展部分，与该缓存的图像生成最终图像文件，例如设定是归属于预设的第一个缓存的图像文件，或是用户选择的一个或几个。

2、所述录音数据作为所指定的缓存的各个图像中的各个扩展部分，与该缓存的各个图像分别生成最终图像文件。

3、所述录音数据以所述快门被按下的时间(即缓存图像的创建时间)为依据，并将该时间前或后n秒内的录音数据都划分为对应的录音子数据块内容(相邻子数据块内容有重叠)分别创建录音子数据块，分别与对应的缓冲的图像生成各个最终图像文件。

例如，用户在游览或者听讲座过程中，导游或讲师对景点或者知识点A、B、C进行讲解，此过程中，用户连贯录音，录音总时长为20秒，并分别在第5、10、15秒拍摄了三张照片。则此时，将录音按用户的拍照次序将照片剪切成四段，分别为第0～5秒、5～10秒、10～15秒及15～20，第一、二段录音与第一照片结合，第二、三段录音与第二照片结合，第三、四段录音与第三照片结合。从而使后续的回放过程中所拍摄的照片与所录制的音频在结合上有较好的连贯性，不会造成丢录音数据的情况。

上述情况是在拍摄多张照片时其间隔时间相同的特例情况，针对拍摄照片间隔不同的情况，可采用以下方式处理。录音总时长仍然为20秒，用户分别在分别在第5、8、15秒拍摄了三张照片。仍将录音按用户的拍照次序将照片剪切成四段，分别为0～5秒、5～8秒、8～15秒及15～20，结合过程中，针对拍照间隔时间较长的第三端录音，可以将其进行一分为二处理，即将8～11.5秒的音频与第二张照片结合，第11.5～15秒的音频与第三张照片结合。其原因在于，针对不同的讲解内容，用户在不同时间段拍照，若仅按照拍照将录音内容分割，有可能造成在当前照片中还保存有大量的与前一张照片相关的音频内容，基于此，在拍照间隔时间不同时，对要扩展的音频进行二次分割处理。

又例如，在上述处理方式的基础上，还包括增加识别所拍摄的照片的步骤。即对所拍摄的前后两张照片数据进行相似度判断，具体可采用图像二值化处理，并比对前后两张照片各个像素的RGB分量进行比对，当超过一定数量的像素RGB分量都相同(例如，两张照片80％的像素的RGB分量都相同)，即认为所拍摄的前后两张照片近似。基于此，针对这种情况，两张照片可择一进行录音音频的存储，或均存储所述录音音频。

另外，用户也可通过虚拟按键对于各个照片进行扩展的录音段进行剪裁，以确定最合适的录音长度。

下面以对一副JPEG格式的图片扩展为例进行说明，详细介绍图像的创建过程。

当监听到录音进程被终止后，确定该JPEG格式图片的空余数据块，从而进行扩展创建。

所有的JPEG格式以字符串“0xFFD8”开头，并以字符串“0xFFD9”结束，在上述两字符串中间，有一系列“0xFF？？”格式的字符串，称为“标识”，用来标记JPEG文件的不同数据段。具体的，上述“0xFF？？”格式的字符串包括0xFFF0～0xFFFF。在JPEG格式图像中，以这些字符串所标识的数据段通常没有被利用，因此，本实施例中采用上述数据段作为扩展使用，从而进行扩展。

其次，在上述数据块中，确定未被使用的数据块。确定方式包括采用查找存储标志位的方式，例如，若该数据块中已存储有图像数据，则其存储标志位为0x01，若该数据块中已存储有视频数据，则其存储标志位为0x02，若该数据块中已存储有音频数据，则其存储标志位为0x03等等，不再赘述。

执行写命令，将所录制的音频数据写入JPEG格式的图片的空余数据块中。存储后，在已存储的数据块中加入存储标志位数据。进一步的，还包括对于录制的音频数据进行压缩的步骤。

S40：将创建后的照片发送至云端。

对扩展后的照片进行调制处理，发送至云端服务器，并保存云端的存放地址。进一步的，还可以将所存储的扩展照片进行链接分享。

S50：展示创建后的照片。

首先依据步骤S40中的存放地址查询到创建后照片的存储位置，以进行下载。其次，依据存储标志位查询音频数据所存储的数据块的偏移量以及数据类型，本实施例是音频数据，故存储标志位是0x03。最终，通过音频解码，在展示照片的同时，播放音频。

上面是以录音为例进行说明，当为录像时，区别包括：

由于录像与拍照需共用摄像头，在录像中进行图片拍摄需要极短的暂停录像从而使用摄像头的过程。由此会因为丢帧从而导致在所拍摄的视频中出现画面的顿挫。本发明中，采用以下方式克服上述缺陷：将在摄像视频过程中所拍摄的图片进行降像素处理，使其与拍摄像素一致，并将降像素处理后的图片插入到所录像的缓存文件对应帧位置，从而可以避免录像播放的顿挫。其他相同。

以上所述仅为本发明的较佳实施例而已，并不用以限制本发明。例如，还可对已扩展的照片进行二次扩展。即确定出剩余空余数据块的偏移量，再针对所述的剩余数据块进行其他数据的二次扩展。又或者，还包括对于已扩展数据的删除。总之，凡在本发明的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。

Claims (10)

1.一种照相的实现方法，其特征在于，包括步骤：

A、在拍照指令下达前，根据用户选择的录音或录像的录制启动指令启动录制进程，并实时缓存录制的数据；

B、监听拍照指令，并在监听到该拍照指令时创建照片并缓存；

C、判断是否监听所述录制进程被终止的指令，若是则将缓存的录制的数据与缓存的照片结合生成照片文件并保存，否则返回步骤B。

2.根据权利要求1所述的方法，其特征在于，当监听到所述录制进程被终止的指令之前监听到所述拍照指令不少于两个时，步骤C所述将缓存的录制的数据与缓存的照片结合生成照片文件的步骤包括：

各个所述拍照指令对应的缓存的照片对应所述录制的数据的各个阶段分别结合生成各个照片文件；

所述录制的数据根据各个所述拍照指令被监听到的时刻分割为各个阶段。

3.根据权利要求2所述的方法，其特征在于，还包括：

所述录制的数据的各个阶段包含的数据还包括：对应拍照指令被监听到的时刻的前后一定时间的数据同时归属于前后两个阶段。

4.根据权利要求2或3所述的方法，其特征在于，还包括：

判断相邻拍照指令对应的缓存的相邻照片相似度高于阈值时，将相邻拍照指令对应的录制的相邻阶段的数据作为一整体阶段的数据，与所述相邻照片分别或择一的结合生成照片。

5.根据权利要求1所述的方法，其特征在于，当监听到所述录制进程被终止的指令之前监听到所述拍照指令不少于两个时，步骤C所述将缓存的录制的数据与缓存的照片结合生成照片文件的步骤包括：

各个所述拍照指令对应的缓存的照片中的至少一个，对应所述录制的数据结合生成各个照片文件。

6.根据权利要求1所述的方法，其特征在于，所述录制为录像时，还包括：

将所述缓存的照片对应录像数据要求的像素进行处理后，根据所述拍照指令被监听到的时刻插入到录像数据的对应时刻的帧位置。

7.根据权利要求1所述的方法，其特征在于，步骤C所述结合包括：

查找在缓存的照片中可用于数据扩展的数据块；

在可扩展数据块中确定出空余数据块，将录制的数据写入空余数据块中。

8.根据权利要求7所述的方法，其特征在于，将录制的数据写入空余数据块前，还包括：对所录制的数据进行压缩的步骤。

9.根据权利要求1所述的方法，其特征在于，步骤C所述结合后还包括：

将结合后的照片进行远程存储的步骤；和，

将结合后的照片通过网络分享的步骤。

10.一种基于权利要求1-9所述照相方法的回放方法，其特征在于，包括步骤：

显示所述照片，并解析与照片所合成的录制数据；

播放所述照片中的录制数据。