CN1822645A

CN1822645A - 可摘要提供活动影像的移动通信终端及其摘要提供方法

Info

Publication number: CN1822645A
Application number: CNA2005101126008A
Authority: CN
Inventors: 韩智石
Original assignee: LG Electronics China Research and Development Center Co Ltd
Current assignee: Inspur LG Digital Mobile Communications Co Ltd
Priority date: 2005-02-15
Filing date: 2005-10-12
Publication date: 2006-08-23
Anticipated expiration: 2025-10-12
Also published as: KR20060091563A; KR100681017B1; CN100399804C

Abstract

本发明公开了一种可摘要提供活动影像的移动通信终端及其摘要提供方法，向移动通信终端用户提供根据系统分析的喜好度计算的活动影像剪辑。所述终端包括：特征提取部，提取所述活动影像的视频特征，按意义特征分割活动影像；活动影像分割部，如果所述特征提取部提取的意义特征满足设置的算法临界值，则它对邻近提取的意义特征的帧进行分割或合并，形成活动影像剪辑；活动影像剪辑存储部，对所述活动影像分割部形成的活动影像剪辑进行保存。本发明在通过上述移动通信终端输入的活动影像中，只提取用户喜好的特定场面，摘要保存为活动影像剪辑，根据需要有选择地进行提供，从而使用户可以更迅速地获得需要的影像信息。

Description

可摘要提供活动影像的移动通信终端及其摘要提供方法

技术领域

本发明涉及移动通信终端，尤其涉及一种在通过移动通信终端输入的活动影像中，只提取和提供用户喜好的特定部分的可摘要提供活动影像的移动通信终端及其摘要提供方法。

背景技术

通常而言，移动通信终端是指用户移动并执行通话的装置。对于出于这种目的开发的移动通信终端，其用户迅速增加，在社会的方方面面实现了信息化，每个用户要求的信息的量也在日益增加。与这种趋势相适应，信息通信区域的技术也在迅速发展，作为新一代移动通信方法，被称为IMT-2000的新移动通信技术的开发如火如荼。这种新一代移动通信为满足用户的信息需求而倾注了大量努力，在这种情况下，已经发展到可以利用移动通信终端实现用户间的视频通信。

另一方面，使用移动通信终端的用户希望移动通信终端不仅提供单纯的信息传输功能，还提供更多的附加功能。因此，许多制造移动通信终端的公司力图能够在移动通信终端中使用更多附加功能。对于从这种角度出发，通过新一代移动通信终端提供的活动影像服务而言，由于没有考虑到用户的关注事项或喜好，即使自己不需要的场面，用户也必须观看，存在浪费时间的问题。

因此，用户希望在通过移动通信终端提供的活动影像服务中，根据用户的喜好，只提取特定影像进行观看。

发明内容

本发明所要解决的技术问题在于提供一种可摘要提供活动影像的移动通信终端及其摘要提供方法，在通过移动通信终端提供的活动影像中，根据用户喜好度，只提取特定场面，进行分割提供，从而能够在较短时间内只观看需要的影像。

为实现上述目的，针对提供活动影像显示功能的移动通信终端，本发明的特征是：在通过上述移动通信终端输入的活动影像中，只提取用户喜好的特定场面，摘要保存为活动影像剪辑，根据需要有选择地进行提供。上述把输入的活动影像摘要成剪辑的移动通信终端的特征是包括如下几个部分：特征提取部，提取上述活动影像的视频特征，按意义特征分割活动影像；活动影像分割部，如果上述特征提取部提取的意义特征满足设置的算法临界值，则它对邻近提取的意义特征的帧进行分割或合并，形成活动影像剪辑；活动影像剪辑存储部，对上述活动影像分割部形成的活动影像剪辑进行保存。

本发明的另一特征是：上述特征提取部从上述活动影像中，从动作强度、HSV颜色信息或均质质感方面提取视频特征，利用上述视频特征，把活动影像分割成事件或场面。

另外，为实现上述目的，针对提供活动影像显示功能的移动通信终端的活动影像摘要提供方法，本发明的特征是：在通过上述移动通信终端输入的活动影像中，只提取用户喜好的特定场面，摘要保存为活动影像剪辑，根据需要有选择地进行提供。

上述以剪辑形式摘要提供通过移动通信终端输入的活动影像的方法由如下几个步骤构成：步骤(a)，提取输入的活动影像的视频特征，按意义特征分割活动影像；步骤(b)，如果上述提取的意义特征满足设置的算法临界值，则对邻近提取的意义特征的帧进行分割或合并，形成活动影像剪辑；步骤(c)，保存上述形成的活动影像剪辑，只显示提取的特定部分。

本发明的另一特征是：上述(a)步骤是从输入的活动影像的动作强度、颜色饱和价值(HSV(Hue色度，Saturation饱和度，Value纯度))信息或均质质感方面提取视频特征，利用上述视频特征，把活动影像分割成事件或场面。

因此，用户可在短时间内观看活动影像的主要场面，很容易地获得所需的信息。

本发明在通过移动通信终端接收的活动影像中，只提取、提供用户喜好的事件或场面，因此可以更迅速地获得影像信息。

附图说明

图1是本发明可摘要提供活动影像的移动通信终端的构成框图；

图2是显示本发明移动通信终端的活动影像摘要提供步骤的顺序图；

图3是本发明的在活动影像中分割成具有内容意义的事件或特定场面的视频剪辑的流程图。

其中，附图标记：

10：移动通信终端 11：活动影像接收部

12：活动影像存储部 13：特征提取部

14：活动影像分割部 15：活动影像剪辑存储部

16：显示部

具体实施方式

下面参照附图，详细说明本发明的有益实施例的可摘要保存活动影像的移动通信终端及其保存方法。

图1是本发明可摘要提供活动影像的移动通信终端的构成框图。

如图1所示，可摘要提供活动影像的移动通信终端10由活动影像接收部11、活动影像存储部12、特征提取部13、活动影像分割部14、活动影像剪辑存储部15、显示部16构成。

活动影像接收部11接收通过移动通信终端10接收的广播内容等活动影像，将其保存到活动影像存储部12，或按照控制信号向用户实时提供接收的活动影像。

特征提取部13利用细分的音频及视频特征值，对活动影像内容的意义特征进行分割(segmentation)、提取，即，分割、提取事件或场面，并包括有关提取的事件或场面的叙述内容及关键词信息。例如，当是体育类的内容时，针对足球比赛的射门场面、进球场面、罚球场面、精彩场面等进行分割，并可包含各场面的标题、参与球员姓名等叙述。

其中，所谓意义特征，是指活动影像内容的高级意义，即指根据人的认识所区分的活动影像内容所具有的特定事件及场面视频剪辑。

如果特征提取部13提取的意义特征满足设置的算法临界值，活动影像分割部14则对邻近提取的意义特征的帧进行分割或合并，形成活动影像剪辑。

活动影像剪辑存储部15对活动影像分割部14摘要编辑的活动影像进行保存。

显示部16对活动影像剪辑存储部15摘要保存的活动影像剪辑进行显示。

于是，用户可以在短时间内只观看需要的影像，可以节省时间，通过选择提供用户(观众)喜好的一般事件或场面，可以更容易获得活动影像信息。

具有这种构成的移动通信终端的活动影像摘要提供方法由如下几个步骤构成：步骤(a)，提取输入的活动影像的视频特征，按意义特征分割活动影像；步骤(b)，如果上述提取的意义特征满足设置的算法临界值，则对邻近提取的意义特征的帧进行分割或合并，形成活动影像剪辑；步骤(c)，保存上述形成的活动影像剪辑，只显示提取的特定部分。

下面进一步详细说明如上构成的本发明的作用。

如图2所示，移动通信终端把服务提供商提供的活动影像(步骤S100)保存到活动影像存储部12，或通过特征提取部13，对实时接收的活动影像进行意义特征分割(步骤S110)。

特征提取部13从输入的活动影像的动作强度、HSV颜色信息或均质质感方面提取视频特征，利用视频特征，把活动影像分割成事件或场面。

活动影像分割部14判断特征提取部13提取的意义特征是否满足设置的算法临界值(步骤S120)。设置的算法值是通过一般用户的喜好度信息判断的项目，包括活动影像的内容类型、标题、时间、主人公、主要场面。

然后，对邻近这样提取的意义特征的帧进行分割或合并，形成活动影像剪辑(步骤S130)，保存到活动影像剪辑存储部15(步骤S140)。之后把摘要保存的活动影像剪辑显示于显示部16。

下面参照图3，详细说明这种通过特征提取部13及活动影像分割部14提取活动影像特征的方法。

图3是本发明的在活动影像中把具有内容意义的事件或特定场面分割成视频剪辑的流程图。

如图3所示，移动通信终端10的特征提取部13为了生成符合一般用户要求的视频摘要而提取关于各个内容的意义特征。首先，活动影像内容输入(步骤S200)后，针对全部内容进行V帧检测(这种方法比较普通，在此省略。)(步骤S210)。然后，对帧进行检测，如果相邻两帧间的特征值差异超过临界值，则判断为出现场景变化。

然后，为了按帧单位对场面或事件进行分类而提取各帧的细分的音频及视频特征(步骤S220)。提取的音频特征包含基频(fundamental frequency)、音频功率(audio power)、音频波谱偏差(audio spectrum deviation)、谐波波谱中心值(harmonic spectrum centroid)、谐波波谱偏差值(harmonicspectrum deviation)。提取的视频特征包括动作强度(motion activity)、HSV颜色信息(HSV color)、均质(homogeneous texture)以及摄像机动作(cameramotion)值。

以音频特征值为基础，在连续的帧中，把具有类似音频特征值的帧集成为一个帧。

把相邻帧集成为一个帧的方法比较普通，在此省略。

在相邻帧之间音频特征值的差异低于临界值时，视为一个帧进行合并。即，在相邻两帧之间，如果音频特征值的差异低于既定值，则判断为两帧之间具有类似的音频信息，把两帧规定为一个事件或场面，合并相邻的帧成一个帧(步骤S230)。

输入活动影像的类型种类和提取的帧长度信息和细分的音频及视频特征，通过基于内容的分类器(classifier)，检测各帧相应的事件或场面，基于内容的分类器对各个类型不同的事件或场面进行检测。各分类器拥有针对预先设置的事件或场面的特征值，通过输入的特征值与欧氏距离测量，检测出最近的事件或场面。

通过这些步骤，输出关于接收的活动影像的特征，形成活动影像剪辑，然后保存到活动影像剪辑存储部(步骤S240)。

如上所述，移动通信终端摘要提供活动影像，从而能够迅速获得影像信息，具有节省时间的效果。

综上所述，本发明在通过移动通信终端接收的活动影像中，只提取、提供用户喜好的事件或场面，因此可以更迅速地获得影像信息。

当然，本发明还可有其它多种实施例，在不背离本发明精神及其实质的情况下，熟悉本领域的技术人员当可根据本发明作出各种相应的改变和变形，但这些相应的改变和变形都应属于本发明所附的权利要求的保护范围。

Claims

1.一种可摘要提供活动影像的移动通信终端，针对提供活动影像显示功能的移动通信终端，其特征是：在通过所述移动通信终端输入的活动影像中，只提取用户喜好的特定场面，摘要保存为活动影像剪辑，根据需要有选择地进行提供。

2.根据权利要求1所述的可摘要提供活动影像的移动通信终端，其特征是：所述把输入的活动影像摘要成剪辑的移动通信终端包括如下几个部分：

特征提取部，提取所述活动影像的视频特征，按意义特征分割活动影像；

活动影像分割部，如果所述特征提取部提取的意义特征满足设置的算法临界值，则它对邻近提取的意义特征的帧进行分割或合并，形成活动影像剪辑；

活动影像剪辑存储部，对所述活动影像分割部形成的活动影像剪辑进行保存。

3.根据权利要求2所述的可摘要提供活动影像的移动通信终端，其特征是：所述特征提取部从所述活动影像中，从动作强度、颜色饱和价值信息或均质质感方面提取视频特征，利用所述视频特征，把活动影像分割成事件或场面。

4.一种移动通信终端的活动影像摘要提供方法，针对提供活动影像显示功能的移动通信终端的活动影像摘要提供方法，其特征是：在通过所述移动通信终端输入的活动影像中，只提取用户喜好的特定场面，摘要保存为活动影像剪辑，根据需要有选择地进行提供。

5.根据权利要求4所述的移动通信终端的活动影像摘要提供方法，其特征是：所述以剪辑形式摘要提供通过移动通信终端输入的活动影像的方法包括如下几个步骤：

步骤(a)，提取输入的活动影像的视频特征，把活动影像分割成意义特征；

步骤(b)，如果所述提取的意义特征满足设置的算法临界值，则对邻近提取的意义特征的帧进行分割或合并，形成活动影像剪辑；

步骤(c)，保存所述形成的活动影像剪辑，只显示提取的特定部分。

6.根据权利要求5所述的移动通信终端的活动影像摘要提供方法，其特征是：所述步骤(a)是从输入的活动影像的动作强度、颜色饱和价值信息或均质质感方面提取视频特征，利用所述视频特征，把活动影像分割成事件或场面。