CN102547298B - 图像信息输出方法、装置及终端 - Google Patents

Abstract

本发明公开了一种图像信息输出方法、装置及终端，该方法包括步骤：终端获得当前时间点需输出的图像信息和音频信息；根据获得的音频信息，对获得的图像信息进行图像处理，生成与获得的音频信息相关联的关联图像信息；将获得的音频信息和生成的关联图像信息同步输出。采用本发明技术方案，能够实现用户通过终端播放的音乐和浏览的图片相关联。

Description

图像信息输出方法、装置及终端

技术领域

本发明涉及图像处理技术领域，尤其涉及一种图像信息输出方法、装置及终端。

背景技术

声音和图像作为信息的主要来源，在人们的日常生活中占据了重要地位，越来越多的终端能够为用户提供图片浏览功能和音乐播放功能，例如，用户可以通过个人计算机(PC，Personal Computer)、移动电话、个人数字助理(PDA，Personal Digital Assistance)或者电子相框浏览图片，若终端中存储有图片，用户可以选择某个图片作为终端的壁纸。用户也可以通过上述终端来播放音乐，例如播放存储在终端中的某一首歌曲。

现有技术中，用户在使用终端浏览图片的同时，还可以通过终端播放音乐，用户一般会将音乐播放器的界面最小化，然后再浏览图片。但是此时浏览的图片和播放的音乐实质上是不相关的，也就是说浏览的图片并不能反映出当前播放的音乐的音律或音频等特点。

由上可见，现有技术还没有提出将用户通过终端播放的音乐和浏览的图片相关联的方法。

发明内容

本发明实施例提供一种图像信息输出方法、装置及终端，以使用户通过终端播放的音乐和浏览的图片相关联。

本发明实施例技术方案如下：

一种图像信息输出方法，该方法包括步骤：终端获得当前时间点需输出的图像信息和音频信息；根据获得的音频信息，对获得的图像信息进行图像处理，生成与获得的音频信息相关联的关联图像信息；将获得的音频信息和生成的关联图像信息同步输出。

一种图像信息输出装置，包括：获得单元，用于获得当前时间点需输出的图像信息和音频信息；生成单元，用于根据获得单元获得的音频信息，对获得单元获得的图像信息进行图像处理，生成与获得单元获得的音频信息相关联的关联图像信息；输出单元，用于将获得单元获得的音频信息和生成单元生成的关联图像信息同步输出。

本发明实施例技术方案中，终端获得当前时间点需输出的图像信息和音频信息，然后根据获得的音频信息，对获得的图像信息进行图像处理，生成与获得的音频信息相关联的关联图像信息，将获得的音频信息和生成的关联图像信息同步输出，由上可见，由于生成的关联图像信息是与当前需要输出的音频信息相关联的，因此用户通过终端播放的音乐和浏览的图片能够关联输出。

附图说明

图1为本发明实施例中，图像信息输出方法流程示意图；

图2为本发明实施例中，确定子图像信息的流程示意图；

图3为本发明实施例中，进行边缘检测处理得到的图像边缘信息示意图；

图4为本发明实施例中，包含图像边缘信息S_i的网格示意图；

图5为本发明实施例中，子图像示意图；

图6为本发明实施例中，确定子图像信息的流程示意图；

图7为本发明实施例中，确定关联子图像信息的流程示意图；

图8为本发明实施例中，子图像示意图；

图9为本发明实施例中，关联函数的关联规则示意图；

图10为本发明实施例中，拉伸后的子图像示意图；

图11为本发明实施例中，图像信息输出装置结构示意图。

具体实施方式

下面结合各个附图对本发明实施例技术方案的主要实现原理、具体实施方式及其对应能够达到的有益效果进行详细地阐述。

如图1所示，为本发明实施例中图像信息输出方法流程图，其具体处理流程如下：

步骤11，终端获得当前时间点需输出的图像信息和音频信息；

若用户通过终端播放音频文件，则将开始播放该音频文件的时间点作为开始时间点，结束播放该音频文件的时间点作为结束时间点，在开始时间点和结束时间点之间，设置多个获取时间点，每相邻两个获取时间点之间间隔的时间长度相等，例如设置为10毫秒，每到达一个获取时间点，终端就获取当前时间点需输出的音频信息，此外还需要获取当前时间点需输出的图像信息，其中可以将终端当前设置的壁纸作为需输出的图像信息，也可以将用户当前通过终端浏览的图片作为需输出的图像信息。

步骤12，根据获得的音频信息，对获得的图像信息进行图像处理，生成与获得的音频信息相关联的关联图像信息；

其中，生成与获得的音频信息相关联的关联图像信息的具体步骤可以但不限于为下述：

首先根据获得的图像信息，确定各子图像信息，然后根据获得的音频信息，对确定出的每个子图像信息分别进行图像处理，生成与获得的音频信息相关联的各关联子图像信息，再根据生成的各关联子图像信息，生成关联图像信息。

由于获得的图像信息中，可能只需要将其中的某一部分或某几部分与音频信息关联，这些部分即为各子图像信息，这些子图像信息与音频信息进行关联后，会生成对应的关联变化后的关联子图像信息，因此在得到的关联图像信息中，各关联子图像信息与原来的图像信息中的各子图像信息不同，是经过关联变化后得到的。

本发明实施例提出，可以但不限于采用下述两种方式确定各子图像信息，具体为：

第一种方式的流程如图2所示，其具体处理过程如下：

步骤21，首先对获得的图像信息进行边缘检测处理，得到至少一个图像边缘信息，其中图像边缘信息之间是相互独立的，即任意一个图像边缘信息对应的边缘与另外一个图像边缘信息对应的边缘，均是不相连的，对每个图像进行边缘检测，可能检测到一个图像边缘，也可能检测到多个图像边缘，若需输出的图像为图像A，对该图像进行边缘检测处理得到了多个图像边缘，其中第i个图像边缘如图3所示，将该图像边缘称为S_i；

步骤22，将图像A划分为N×N个网格，其中N的值可以根据图像分辨率进行设置，每个网格可以包含规定数目个像素点；

步骤23，针对图像边缘S_i，遍历整个图像A，识别出图像边缘S_i经过的网格，即包含图像边缘S_i的网格，识别出的网格如图4所示，可以按照网格之间的距离，为识别出的每个网格编号；

步骤24，针对图像边缘S_i，选取M个随机数，分别为R₁、R₂、......、R_M，其中R₁+R₂+......+R_M＝B_i，B_i为图像边缘S_i的宽度对应的网格的数量；

步骤25，根据选取的随机数，构建出M个子图像，每个子图像的宽度由随机数确定，高度由识别出的包含图像边缘S_i的网格确定，若M＝3，R₁＝3，R₂＝5，R₂＝2，则如图5所示，针对图像边缘S_i可以构建出3个子图像，第1个子图像的宽度为3个网格的宽度，第2个子图像的宽度为5个网格的宽度，第3个子图像的宽度为2个网格的宽度。

第二种方式的流程如图6所示，其具体处理过程如下：

步骤61，确定获得的图像信息中每个像素点的颜色值；

步骤62，预先定义多个子图像分别对应的颜色值的范围；

针对彩色图像，可以但不限于定义7个子图像，分别为红色子图像、橙色子图像、黄色子图像、绿色子图像、青色子图像、蓝色子图像和紫色子图像，其中针对每个子图像分别定义对应的颜色值范围，可以但不限于如表1所示：

表1：

子图像	颜色值范围
		红色子图像	FF0000，FF0A00，FF 1E00，FF2800，FF3200
橙色子图像	FF9600，FFA000，FFAA00，FFB400，FFBE00
		黄色子图像	FFFF00，FFF000，FFE600，F0FF00，E6FF00
绿色子图像	96FF00，8CFF00，82FF00，78FF00，6EFF00
		青色子图像	00FFFF，00FFE6，00FFD2，00F0FF，00E6FF
蓝色子图像	0000FF，1400FF，0014FF，2800FF，0028FF
		紫色子图像	FF00FF，FF10FF，FF14FF，FF28FF，FF3CFF

针对单色图像，可以但不限于定义7个子图像，分别为层级1子图像、层级2子图像、层级3子图像、层级4子图像、层级5子图像、层级6子图像和层级7子图像，其中针对每个子图像分别定义对应的颜色值范围，可以但不限于如表2所示：

表2：

子图像	颜色值范围
		层级1子图像	0A0A0A，141414，1E1E1E，282828
层级2子图像	3C3C3C，464646，505050，5A5A5A
		层级3子图像	6E6E6E，787878，828282，8C8C8C
层级4子图像	A0A0A0，AAAAAA，B4B4B4，BEBEBE
		层级5子图像	D2D2D2，DCDCDC，E6E6E6，F0F0F0
层级6子图像	0F0F0F，191919，232323，2D2D2D
		层级7子图像	373737，414141，4B4B4B，555555

步骤63，针对每个子图像，确定在对应的颜色值范围内的像素点；

步骤64，根据确定出的像素点，构建各个子图像。

针对上述第一种方式，如图7所示，可以但不限于通过下述方式生成与获得的音频信息相关联的各关联子图像信息，具体为：

步骤71，对获得的、当前时间点需输出的音频信息进行数据转换，可以但不限于通过下述方式进行转换：

$F\left(t\right)=\frac{\mathrm{Nc}\×[f\left(t\right)-20]}{1800}$

其中，F(t)为转换后的音频信息，f(t)为获得的音频信息，Nc为变形参数，可以根据需要进行设置。

上述步骤71的目的是控制图像信息进行关联变化的幅度，提高了图像信息输出的灵活性。其中该步骤是一个可选步骤，即可以不对音频信息进行数据转换，直接进行步骤72的处理。

步骤72，根据转换后的音频信息，生成对应的关联函数；

其中，将子图像信息与音频信息进行关联，实质上是将子图像根据音频信息进行变化，可以但不限于包含下述几种关联方式：拉伸-压缩、旋转角度、凸起等。每种关联方式都对应一个关联函数，每个关联函数又与转换规则对应，基于转换规则，可以将音频信息转换为相应的关联函数Fsimg(x，y)。若关联方式为拉伸-压缩，则关联函数指的是对子图像施加的拉伸力，若关联方式为旋转角度，则关联函数指的子图像的旋转角度。

步骤73，确定每个子图像信息在所述关联函数的作用下生成的关联子图像信息。

首先应确定关联函数作用的方向，以关联方式为拉伸-压缩为例，将子图像中图像边缘的起点和图像边缘的终点之间的连线的垂直方向，作为拉伸-压缩的变化方向，即关联函数作用的方向。

对于新生成的关联子图像，其中部分像素点是由原来的子图像的像素点在关联函数的作用下，发生位置移动而产生的，这类像素点的颜色值就是原来的子图像中发生位置移动的像素点的颜色值；除了这类像素点之外，关联子图像中也存在由于关联函数的作用而新生成的像素点，对于这类像素点，可以用插值的方法求出颜色值。

下面举例说明如何生成关联子图像。

若子图像如图8所示，子图像包含9个像素点，其中包含7个空白像素点和2个非空白像素点，将2个非空白像素点标识为像素点1和像素点2，而关联函数Fsimg(x，y)的关联规则如图9所示，具体为：该子图像的第1列像素点在关联函数Fsimg(x，y)作用下应上拉2个像素点，该子图像的第2列像素点在关联函数Fsimg(x，y)作用下应上拉3个像素点，该子图像的第3列像素点在关联函数Fsimg(x，y)作用下应上拉2个像素点。拉伸后的子图像如图10所示，其中像素点1上拉了2个像素点，上拉到像素点1′，像素点2上拉了3个像素点，上拉到像素点2′。

在图10中，像素点1′和像素点2′分别为图9中的像素点1和像素点2发生位置移动而产生的，因此颜色值分别为像素点1和像素点2的颜色值；

在图10中，像素点5、像素点6和像素点7是图9中的像素点2在关联函数Fsimg(x，y)的作用下发生位置移动而新生成的像素点，因此像素点5、像素点6和像素点7的颜色值可以由像素点2′的颜色值和像素点8的颜色值进行插值计算得到；

在图10中，像素点3和像素点4是图9中的像素点1在关联函数Fsimg(x，y)的作用下发生位置移动而新生成的像素点，在图10中，若子图像不位于整个图像的最下方，即像素点4下方存在像素点，则此时像素点3和像素点4的颜色值可以由像素点1′的颜色值和像素点4下方的像素点的颜色值进行插值计算得到；

在图10中，若子图像位于整个图像的最下方，即像素点4下方不存在像素点，则此时像素点3和像素点4的颜色值可以与像素点1′的颜色值相同；

在图10中，若子图像位于整个图像的最下方，即像素点4下方不存在像素点，则此时像素点3和像素点4的颜色值可以由像素点1′的颜色值和空白像素点的颜色值进行插值计算得到。

针对上述第二种方式，可以但不限于根据当前时间点需输出的音频信息，来确定对哪些子图像进行关联变化，例如：

当音频为20Hz～3000Hz时，红色子图像或层级1子图像凸起；

当音频为3000Hz～6000Hz时，橙色子图像或层级2子图像凸起

当音频为6000Hz～9000Hz时，黄色子图像或层级3子图像凸起；

当音频为9000Hz～12000Hz时，绿色子图像或层级4子图像凸起；

当音频为12000Hz～15000Hz时，青色子图像或层级5子图像凸起；

当音频为15000Hz～18000Hz时，蓝色子图像或层级6子图像凸起；

当音频为18000Hz～20000Hz时，紫色子图像或层级7子图像凸起。

步骤13，将获得的音频信息和生成的关联图像信息同步输出。

其中，终端通过扬声器等输出设备输出获得的、当前时间点需输出的音频信息，通过屏幕等输出设备输出生成的关联图像信息。

由上述处理过程可知，本发明实施例技术方案中，终端获得当前时间点需输出的图像信息和音频信息，然后根据获得的音频信息，对获得的图像信息进行图像处理，生成与获得的音频信息相关联的关联图像信息，将获得的音频信息和生成的关联图像信息同步输出，由上可见，由于生成的关联图像信息是与当前需要输出的音频信息相关联的，因此用户通过终端播放的音乐和浏览的图片能够关联输出。

由于本发明实施例中需输出的图像信息可以为用户在终端中设置的壁纸，因此本发明实施例可以实现基于音频频率动态变化的动态壁纸。

现有技术中，随着终端技术的发展，越来越多的用户不再满足移动终端的基本功能，而是追求更多的娱乐功能和使用效果，因此基于音乐频率动态变化的动态壁纸已经是移动终端娱乐功能的一种象征。

现有的基于音乐频率动态变化的动态壁纸主要通过两个方式获得，第一种方式为提前预置在移动终端中，第二种方式为用户从专门的动态壁纸库中下载，这两种方式均存在下述问题：

首先，都需要独立开发动态壁纸，都需要特别制作动画图片来实现能够随着音频动态变化的壁纸；其次，能够动态变化的壁纸图片样式单一，目前只能够实现简单的形状根据音乐频率动态变化；再次，用户不能自己定制动态壁纸，只能在现有的动态壁纸源中选择。

本发明技术方案中，终端在播放音乐时，根据音乐的音频信息，对设置的壁纸进行图像处理，生成与音频信息相关联的关联图像，然后将需播放的音乐和生成的关联图像同步输出，此时用户不但可以通过终端收听音乐，也可能看到随着音乐的音频动态变化的动态壁纸，这就弥补了现有技术中动态壁纸的局限性，提高了终端的娱乐功能，同时解决了现有技术在实现基于音乐频率动态变化的动态壁纸时，壁纸图片单一，不能适用所有图片的问题，使得用户能够简单的将终端中任意一张图片变成随着音乐频率动态变化的动态壁纸。

相应的，本发明实施例还提供一种图像信息输出装置，其结构如图11所示，包括获得单元111、生成单元112和输出单元113，其中：

获得单元111，用于获得当前时间点需输出的图像信息和音频信息；

生成单元112，用于根据获得单元111获得的音频信息，对获得单元111获得的图像信息进行图像处理，生成与获得单元111获得的音频信息相关联的关联图像信息；

输出单元113，用于将获得单元111获得的音频信息和生成单元112生成的关联图像信息同步输出。

较佳地，生成单元112具体包括确定子单元、第一生成子单元和第二生成子单元，其中：

确定子单元，用于根据获得单元111获得的图像信息，确定各子图像信息；

第一生成子单元，用于根据获得单元111获得的音频信息，对确定子单元确定出的每个子图像信息分别进行图像处理，生成与获得单元111获得的音频信息相关联的各关联子图像信息；

第二生成子单元，用于根据第一生成子单元生成的各关联子图像信息，生成关联图像信息。

更佳地，确定子单元具体包括第一确定模块和第二确定模块，其中：

第一确定模块，用于对获得单元111获得的图像信息进行边缘检测处理，确定至少一个图像边缘信息；

第二确定模块，用于根据第一确定模块确定出的每个图像边缘信息，确定对应的子图像信息。

更佳地，确定子单元具体包括第三确定模块和第四确定模块，其中：

第三确定模块，用于确定获得单元111获得的图像信息中每个像素点的颜色值；

第四确定模块，用于根据第三确定模块确定出各像素点的颜色值，确定各个子图像信息。

更佳地，第一生成子单元具体包括生成模块和第五确定模块，其中：

生成模块，用于根据获得单元111获得的音频信息，生成对应的关联函数；

第五确定模块，用于确定每个子图像信息在所述关联函数的作用下生成的关联子图像信息。

本发明实施例还提供一种终端，包括上述图像信息输出装置，其中上述图像信息输出装置可以但不限于置于上述终端中。本发明实施例提出的终端可以但不限于为PC、移动电话、PDA以及电子相框。

显然，本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样，倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内，则本发明也意图包含这些改动和变型在内。

Claims (9)

1.一种图像信息输出方法，其特征在于，包括：

终端获得当前时间点需输出的图像信息和音频信息；

根据获得的音频信息，对获得的图像信息进行图像处理，生成与获得的音频信息相关联的关联图像信息；

将获得的音频信息和生成的关联图像信息同步输出；

生成与获得的音频信息相关联的关联图像信息，具体包括：

根据获得的图像信息，确定各子图像信息；

根据获得的音频信息，对确定出的每个子图像信息分别进行图像处理，生成与获得的音频信息相关联的各关联子图像信息；

根据生成的各关联子图像信息，生成关联图像信息。

2.如权利要求1所述的图像信息输出方法，其特征在于，确定各子图像信息，具体包括：

对获得的图像信息进行边缘检测处理，确定至少一个图像边缘信息；

根据确定出的每个图像边缘信息，确定对应的子图像信息。

3.如权利要求1所述的图像信息输出方法，其特征在于，确定各子图像信息，具体包括：

确定获得的图像信息中每个像素点的颜色值；

根据确定出各像素点的颜色值，确定各个子图像信息。

4.如权利要求1～3任一所述的图像信息输出方法，其特征在于，生成与获得的音频信息相关联的各关联子图像信息，具体包括：

根据获得的音频信息，生成对应的关联函数；

确定每个子图像信息在所述关联函数的作用下生成的关联子图像信息。

5.一种图像信息输出装置，其特征在于，包括：

获得单元，用于获得当前时间点需输出的图像信息和音频信息；

生成单元，用于根据获得单元获得的音频信息，对获得单元获得的图像信息进行图像处理，生成与获得单元获得的音频信息相关联的关联图像信息；

输出单元，用于将获得单元获得的音频信息和生成单元生成的关联图像信息同步输出；

生成单元具体包括：

确定子单元，用于根据获得单元获得的图像信息，确定各子图像信息；

第一生成子单元，用于根据获得单元获得的音频信息，对确定子单元确定出的每个子图像信息分别进行图像处理，生成与获得单元获得的音频信息相关联的各关联子图像信息；

第二生成子单元，用于根据第一生成子单元生成的各关联子图像信息，生成关联图像信息。

6.如权利要求5所述的图像信息输出装置，其特征在于，确定子单元具体包括：

第一确定模块，用于对获得单元获得的图像信息进行边缘检测处理，确定至少一个图像边缘信息；

第二确定模块，用于根据第一确定模块确定出的每个图像边缘信息，确定对应的子图像信息。

7.如权利要求5所述的图像信息输出装置，其特征在于，确定子单元具体包括：

第三确定模块，用于确定获得单元获得的图像信息中每个像素点的颜色值；

第四确定模块，用于根据第三确定模块确定出各像素点的颜色值，确定各个子图像信息。

8.如权利要求5～7任一所述的图像信息输出装置，其特征在于，第一生成子单元具体包括：

生成模块，用于根据获得单元获得的音频信息，生成对应的关联函数；

第五确定模块，用于确定每个子图像信息在所述关联函数的作用下生成的关联子图像信息。

9.一种终端，其特征在于，包括权利要求5～8任一权利要求所述的图像信息输出装置。