CN100493128C - 基于多媒体消息服务的面相图像处理系统和方法 - Google Patents

基于多媒体消息服务的面相图像处理系统和方法 Download PDF

Info

Publication number
CN100493128C
CN100493128C CNB2005100236867A CN200510023686A CN100493128C CN 100493128 C CN100493128 C CN 100493128C CN B2005100236867 A CNB2005100236867 A CN B2005100236867A CN 200510023686 A CN200510023686 A CN 200510023686A CN 100493128 C CN100493128 C CN 100493128C
Authority
CN
China
Prior art keywords
user
face
phase images
image processing
face phase
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CNB2005100236867A
Other languages
English (en)
Other versions
CN1816090A (zh
Inventor
张颖峰
范小波
赵松林
Original Assignee
FAN XIAOBO ZHANG YINGFENG
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by FAN XIAOBO ZHANG YINGFENG filed Critical FAN XIAOBO ZHANG YINGFENG
Priority to CNB2005100236867A priority Critical patent/CN100493128C/zh
Publication of CN1816090A publication Critical patent/CN1816090A/zh
Application granted granted Critical
Publication of CN100493128C publication Critical patent/CN100493128C/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Abstract

本发明揭示了一种基于MMS(Multimedia Messaging Service,多媒体消息服务)的面相图像处理系统和方法。在CDMA、GPRS、EDGE或3G通讯协议技术的基础上,本发明通过MMS传递面相图片和声音、文本信息,并结合网络传输和信息编辑技术,利用专用图像处理管理系统,可对面相图像进行快速面相图像处理,包括面相检测、面相识别、面相变形、面相合成、面相图像中添加文字声音信息,提取面相特征创建新的面相图像等,同时可对面相图像进行管理。本发明主要解决基于MMS协议目前的技术尚无对面相图像可进行快速处理、持有面相图像的人无法随时随地快速获得对面相图像进行面相检测、面相识别、面相图像处理以及对面相图像进行直接管理等不足。

Description

基于多媒体消息服务的面相图像处理系统和方法
技术领域
本发明涉及移动通信技术和图像处理技术,更具体的说,涉及一种基于MMS(Multimedia Messaging Service,多媒体消息服务)的面相图像处理系统和方法。
背景技术
在现实生活中,越来越多的人希望将用数码相机或者可拍照手机所拍摄的照片尽快分发给家人或者朋友,与他们一起分享。一般的做法是把照片在传统的冲印店将照片冲印后邮寄给对方或者是将数码照片传送到计算机里用电子邮件的方式发送到对方的电子邮箱。然而,这样做一方面会花费较多的时间,另一方面也很难使人们对照片中的部分图像,如背景、面相进行图像处理从而达到特殊的效果,从而很难满足人们在移动中希望随时对这些图片做出处理的需求。
发明内容
本发明的目的在于提供一种快速便捷、使用方便的可双向交流且价格便宜的面相图像处理方法。
本发明的另一个目的在于提供一种基于移动通讯网络和多媒体消息服务的成本低廉、使用方便、应用范围广的可快速进行面相检测、面相识别、面相变形、面相合成、面相图像中添加文字声音信息,提取面相特征创建新的面相图像等图像处理的面相图像处理系统。
根据本发明的一个方面,提供一种基于多媒体消息服务的面相图像处理方法,包括如下步骤:
用户注册步骤;
面相图像处理请求步骤,所述经注册的用户可请求进行面相图像处理;
面相图像上传步骤,所述经注册的用户上传欲处理的面相图像;
面相图像处理/管理步骤,所述面相图像通过图像处理/管理装置进行经用户确认的处理及管理;所述图像处理/管理装置包括用于人脸的识别检测的人脸检测引擎模块以及分别实现面相检测、面相识别、面相变形、面相合成、面相图像中添加文字声音信息、提取面相特征创建新的面相图像的图像子模块,所述面相图像处理/管理步骤包括:
a.从所述图像处理/管理装置的接收队列中取一个消息;
b.从所述消息中取出用户指定的图像处理类型;
c.确定需要采用的图像子模块;
d.从消息中取图片送入人脸检测引擎模块;
e.判断所述图片中是否存在人脸,如所述图片中存在人脸,则输出人脸定位信息,进行指定的图像处理,然后输出最终效果图片到所述图像处理/管理装置的发送队列;
发送步骤,所述处理后的面相图像经网关发送到用户的移动终端或电子信箱,用户确认后接收。
其中,该方法可通过Web网页或WAP网页在线或使用移动终端直接完成,其中用户端包括以下步骤:
用户登陆,图像处理/管理装置将为初次登陆的用户开辟一个永久
MMS存储管理空间;
用户将面相图像传送到图像处理/管理装置;
用户将需要用于进行面相图像处理的信息元素传送到图像处理/管理装置;
用户选择需要图像处理/管理装置进行的图像处理/管理操作;
用户可选择是否进行再处理;
用户预览并确认经处理后的面相图像,通过用户确认则接收,否则返回。
该方法中的网络端可包括以下步骤:
图像处理/管理装置接收来自Web站点,WAP站点,PC客户端或网关传递过来的面相图像处理请求;
图像处理/管理装置将接收到的面相图像处理请求放置于一接收队列;
图像处理/管理装置从接收队列中选取面相图像处理请求并确定需要调用的图像处理模块;
图像处理/管理装置调用相应的图像处理模块进行用户所需要的图像处理;
图像处理/管理装置将生成的结果送入发送队列;
图像处理/管理装置从发送队列中取得数据发送给网关。
上述方法中,用户传送需要用于进行面相图像处理的信息元素的步骤包括:
编辑一个MMS消息;
发送该MMS消息至一特定识别号;
用户接收到面相图像处理的帮助信息;
用户按照所接收的帮助信息,填写回复内容,所述回复内容表示要求对图像进行的处理;
用户收到经需要的处理后的面相图像。
其中编辑一个MMS消息包括:
用户选择和确定需要进行处理的面相图像;
用户选择和确定需要进行面相图像处理的类型和类别;
用户编辑用于选择和确定进行面相图像处理类型的文字。上述方法中的面相图像处理/管理步骤中包括:
面相图像中一个或多个面相的检测;
面相图像中一个或多个面相的识别;
面相图像中的面相变形;
面相图像中的面相合成;
面相图像中的面相和需要用于进行面相图像处理的信息元素的合成;
新的面相图像的生成;
面相图像的管理。
根据本发明的另一方面,提供一种基于多媒体消息服务的面相图像处理系统,包括多个个人移动通讯设备和多个网络终端计算机、一WAP站点、一Web站点、一MMS服务中心装置,其中,所述WAP站点、Web站点、MMS服务中心装置通过互联网、网关、局域网以及专用数据链路相连,
还包括一图像处理/管理装置,该图像处理/管理装置包括收发模块、任务调度模块、图像处理模块、人脸检测引擎模块、图像管理模块;所述收发模块包括接收线程单元、发送线程单元、发送队列单元和接收队列单元,用于跟站点用户或者移动终端用户进行并发式交互;所述任务调度模块负责从接收队列单元中取出任务然后根据用户所需要定制的类型分别将任务分发到图像处理模块中,以及将所述图像处理模块返回的结果放入到发送队列单元中;图像处理模块由数个可扩展的子模块构成,所述子模块分别实现面相检测、面相识别、面相变形、面相合成、面相图像中添加文字声音信息及提取面相特征创建新的面相图像;人脸检测引擎模块用于人脸检测;图像管理模块用于将所处理过的面相图像数据根据不同所属用户分别进行管理,包括对已有处理过的面相图像进行查看,编辑,删除和转发到用户指定的电子邮件地址;该图像处理/管理装置通过互联网、网关以及局域网与系统中的其他设备相连;其中,
所述Web站点或WAP站点通过互联网与所述图像处理管理装置连接;用户在初次访问Web站点或WAP站点时完成用户注册;之后用户登陆所述Web站点或WAP站点并将面相图像传送至所述图像处理管理装置;
所述图像处理管理装置可对用户传送的面相图像进行图像处理,包括面相检测、面相变形、面相识别、面相合成、面相图像中添加文字声音信息,提取面相特征创建新的面相图像,同时可对面相图像进行删除、存储;
所述图像处理管理装置与所述网关通过局域网连接,所述网关与所述MMS服务中心装置通过所述专用数据链路连接;MMS服务中心装置可将处理后的面相图像发送给用户;所述网关也与一互联网连接,将面相图像转发到用户指定的电子邮件系统或直接通过WAP PUSH发送给用户,所述WAPPUSH为一经由互联网直接到用户移动终端的通讯方式。
采用上述技术方案,本发明的有益效果是使人们可以方便地进行面相图像的面相检测、面相识别、面相合成、面相修复等复杂特殊图像处理,而且可以把处理后的面相图像及时便捷地通过移动终端的方式进行发送和接收,这样省去了传统的耗时耗力的图像分发过程,使得在功能上得以显著提升。本专利的另一有益效果是能够为用户提供多种新颖独特的面相图像处理方法。
附图说明
本发明的上述的和其他的特征、性质和优势将在下面结合附图和实施例的描述之后变的更加明显,附图中相同的标记表示相同的特征,其中,
图1表示用户用Web站点、Wap站点或用PC客户端进行面相图像的发送、接收、图像处理、管理的系统框图;
图2表示用户直接用移动终端进行面相图像的发送、接收、图像处理、管理的系统框图;
图3表示图像处理管理装置软件部分的系统框图;
图4表示图像处理管理装置收发线程流程图;
图5表示图像处理管理装置图像处理引擎程序流程图;
图6表示本发明一实例中用Web站点、WAP站点、PC客户端进行面相图像上传、面相图像处理、发送/接收的过程框图;
图7本发明一实例中用移动终端设备进行面相图像上传、面相图像处理、发送/接收的过程框图;
图8表示本发明一实例中对面相图像进行管理的过程方框图;
图9表示本发明一实例中用户通过Web站点、WAP站点或PC客户端对已有面相图像进行管理的过程框图。
具体实施方式
下面结合附图和实施例进一步说明本发明的技术方案。
首先参考图1,图1是表示用户用Web站点、Wap站点或用PC客户端进行面相图像的发送、接收、图像处理、管理的系统框图。图1中示出了按照本发明的一个实施例的系统100的结构图,其包括多个个人移动通讯设备102和多个网络终端计算机104、一WAP站点106、一Web站点108、一MMS服务中心装置110、一图像处理管理装置112。其中WAP站点106、Web站点108、MMS服务中心装置110和图像处理/管理装置112通过互联网114、网关116、局域网以及专用数据链路(图中未示出这两个部件)互相连接。
在图1所示的系统中,Web站点108或WAP站点106通过互联网114跟图像处理/管理装置112连接。用户必须登陆Web站点108或WAP站点106并将面相图像传送至图像处理/管理装置112,方能对面相图像进行处理和使用。用户在初次访问Web站点108或WAP站点106时必须填写必要信息,完成用户注册,以后则可根据注册信息登陆。此外,用户也可以通过下载专用PC客户端软件或专用移动终端软件,使用专用软件完成上述任务。
个人移动通讯设备102可以是移动电话、PDA或无线上网设备。如图2所示,用户也可以用个人移动通讯设备102发送面相图像处理请求。
图像处理/管理装置112为一网络服务器,与网关116通过局域网连接,并通过接收来自Web或WAP站点用户的请求或者来自移动终端用户的请求进行图像处理。图像处理/管理装置112可分为五个模块:收发模块,任务调度模块,图像处理模块,人脸检测引擎模块和图像管理模块。收发模块由收发线程和收发队列构成,用于跟站点用户或者移动终端用户进行并发式交互;任务调度模块负责从接收队列中取出任务然后根据用户所需要定制的类型分别将任务分发到图像处理模块中,以及将图像处理模块返回的结果放入到发送队列中;图像处理模块由数个可扩展的子模块构成,可分别实现诸如面相检测、面相识别、面相变形、面相合成、面相图像中添加文字声音信息、提取面相特征创建新的面相图像等图像处理,且可以根据需求由开发人员进行快速的定制和部署;人脸检测引擎模块用于高检测率的人脸检测;图像管理模块用于将所处理过的面相图像数据根据不同所属用户分别进行管理,包括对已有处理过的面相图像进行查看,编辑,删除和转发到用户指定的电子邮件地址等功能。
网关116与MMS服务中心装置112通过专用数据链路连接。MMS服务中心装置可将处理后的面相图像发送到终端用户,其中所使用的通讯协议为CDMA、GPRS、EDGE或者3G通信协议。
所述网关还和互联网直接相连,可根据站点用户或者移动终端用户的需求将面相图像转发到用户指定的电子邮件地址或直接通过WAP PUSH发送给移动终端用户,所述WAP PUSH为一经由互联网直接到用户移动终端的通讯方式。
本发明的一个重要的特点是独特的面相检测和面相识别技术,处理过的面相图像以MMS(Multimedia Messaging Service,多媒体信息服务)的形式进行承载、即其承载的信息为图像、声音、视频、文本的组合。本发明采用的移动通信技术为CDMA、GPRS、EDGE或3G通信协议技术。本发明的面相图像处理技术可实现下列的功能:
1)本发明可以对现有的面相图像进行快速地面相检测、面相识别、面相变形、面相合成、面相图像中添加文字声音信息,提取面相特征创建新的面相图像、面相修正等面相图像处理;
2)传统的面相图像经过本专利处理后,可以图像、声音、视频、文本方式的组合传送到用户的移动终端;
3)在图像处理/管理装置中,可进行大量用户的海量面相图像的图像处理;
4)在图像处理/管理装置中,可对每一用户开辟一个存储空间。用户可对自己的大量面相图像进行相应的管理,包括面相图像的查看、编辑、删除等;
7)面相图像可以发送到用户指定的电子信箱;
8)面相图像可扩展为面相图像相册。
本发明提供了一种基于MMS(Multimedia Messaging Service,多媒体消息服务)的面相图像处理管理系统。
该系统可以实现在CDMA、GPRS、EDGE或3G通信协议技术的基础上,通过多媒体消息服务传递面相图像和声音、文本等信息,并结合网络传输和信息编辑技术,可对面相图像进行面相检测、面相识别、面相合成、面相变形等图像处理,也可将处理后的面相图像结合文字信息、声音信息所生成的新的图像信息进行快速传输,同时可进行网络或移动用户终端的管理,包括面相图像的图像查看、编辑和删除等。
用户也可以用设备个人移动通讯设备,如移动电话、PDA、无线上网设备编辑包含面相图像的MMS消息,发送至一特服号、通过所述MMS服务中心装置,向所述图像处理管理装置进行图像处理请求。此时,该系统200的结构框图如图2所示,包括图像处理/管理装置112、网关116、MMS服务中心装置110以及多个移动通讯终端102。其中图像处理/管理装置112与网关116通过局域网连接,通过接收来自Web或WAP站点用户的请求或者来自移动终端用户的请求进行图像处理,并可将处理后的图像发送至网关。
图像处理/管理装置112的模块框图如图3所示,考虑到并发处理和可扩展性的要求,图像处理管理装置可分为收发模块、任务调度模块、图像处理模块、人脸检测引擎模块、图像管理模块五个模块。在图3中的显示为,收发模块包括接收线程302、接收消息队列304、发送消息队列306和发送线程308;任务调度模块310;图像处理模块312可进一步分成图像子模块312a、312b、312c等等;人脸检测引擎模块314;图像管理模块316,还包括一存储空间318。图像处理管理装置为每个用户都分配了永久性的存储空间,以方便用户对自己的面相图像进行管理。
收发模块由收发线程(302、308)和收发队列(304、306)构成,用于确保来自站点用户和移动终端用户可能的大规模并发请求和并发发送。每个单独的接收线程和发送线程在后台以Dameon(“精灵线程”)的形式运行,线程安全的接收消息队列和发送消息队列可以缓存暂时无法处理的请求。接收队列和发送队列均为线程安全的FIFO(先入先出)队列,队列的大小可以根据并发的规模进行定制。
来自Web站点,WAP站点,PC客户端和移动终端用户的请求指令包括:图像处理指令、上传指令,查看指令,编辑指令,删除指令,转发指令等。其中上传指令用于用户上传面相图像、查看指令用于查看用户已有的面相图像、编辑指令用于对用户已有的面相图像进行选择性的编辑、删除指令用于用户删除指定的面相图像、转发指令用于将用户的MMS面相图像数据转发到用户指定的电子邮件地址。接收消息队列可针对不同的请求指令进行分类,图像处理指令和上传请求直接送入任务调度模块,由其针对图像处理指令和用户所上传的图片,文字,音乐等多媒体资源调用相应的图像处理子模块进行处理,其他类的用户请求则送入图像管理模块进行处理。发送消息队列则可将处理后的图像数据传送至所述网关进行传输。
收发模块中的接收和发送线程(302、308)的工作流程如图4所示。在启动接收和发送线程后,接收线程在接收到用户的请求后,即将用户的请求放至接收队列,以做后续处理。发送线程发现发送队列中有用户请求存在,则发送线程根据用户的发送请求类型(发送至站点、发送至电子邮箱、发送至移动终端等)进行相关的处理。
任务调度模块310、图像处理模块312和人脸检测引擎模块314共同构成了图像处理管理装置的图像处理引擎。
人脸检测引擎模块314是图像处理引擎的核心模块。为了提高人脸检测的速度和准确率,人脸检测引擎使用了如下检测方法:在图像预处理阶段进行肤色检测,光照补偿和肤色分割进行人脸的预提取,把处理后的图像送入一个基于统计模型的子分类器中,采用Boosting,局域特征分析等基于子空间的算法进行多姿态人脸检测,检测出的结果进行数据后处理,包括利用人脸前额封闭性、人脸核心区域封闭性、人脸核心区域特征分布进行人脸验证,所得到的最终结果可达到针对灰度图像和彩色图像中不同光线背景不同尺寸人脸多种姿态头像的面部高检测率。
图像处理模块312由数个可扩展的子模块312a、312b、312c等构成。在人脸检测引擎模块314输出结果的基础上,各个子模块可分别实现面相变形、面相合成、面相图像中添加文字声音信息、提取面相特征创建新的面相图像等图像处理功能。图像处理模块的输出结果可供任务调度模块调用。图像处理模块的数量和功能可以根据实际需求由开发人员进行快速的定制和部署。
任务调度模块310用于从接收队列中取出任务然后根据用户所需要定制的类型分别将任务分发到不同的图像处理子模块中,以及将图像处理子模块返回的处理结果放入到发送队列中。
图像处理引擎的工作流程如图5所示。
图像管理模块316由存储子模块和消息处理子模块两个功能子模块构成。存储子模块用于存储用户生成的面相图像处理结果。该子模块可对发送消息队列进行监控和过滤,从中提取图像数据和用户数据并存储到后台的数据库中。消息处理子模块可从接收队列中过滤需要由图像管理模块处理的各类请求,如查看请求、编辑请求、删除请求、转发请求等,并针对不同的请求做相应的处理。若用户请求为查看图像请求,消息处理子模块将从接收队列中提取用户信息然后从永久性存储空间中提取图片数据,封装好用户信息之后送入发送队列,由发送线程直接返回到Web站点,WAP站点,PC客户端或者通过网关返回给移动终端用户;若用户请求为编辑图像请求,消息处理子模块将从接收队列中提取用户信息然后从永久性存储空间中提取用户所要编辑的图片,封装好之后继续送入接收队列,此时的请求信息将跟用户上传图片的请求格式没有任何区别,因此它将被任务调度模块所处理并将最终结果发送到发送队列;若用户请求为删除图像请求,消息处理子模块将从接收队列中提取用户信息然后在永久性存储空间中找到对应的用户数据,做出删除操作之后通过发送队列返回给用户提示信息;若用户请求为转发请求,图像处理子模块将从接收队列中提取用户数据然后在永久性存储空间中找到对应的用户数据,连同用户指定的电子邮件地址一起封装好信息送入发送队列,此时由发送线程将该信息送交至网关,由网关跟互联网连接的端口针对该信息生成电子邮件格式并发到对应地址。当然,也可以按照图3所示的那样,将存储子模块作为独立的存储空间318独立出来。
网关116与MMS服务中心装置110通过专用数据链路连接。MMS服务中心装置可将处理后的面相图像发送到终端用户(诸如移动电话、PDA、无线上网设备等的用户),MMS服务中心装置和移动终端设备交互过程中所使用的通讯协议为CDMA、GPRS、EDGE或者3G通信协议。另外,所述网关还和互联网直接相连,可根据站点用户或者移动终端用户的需求将面相图像转发到用户指定的电子邮件地址或直接通过WAP PUSH发送给移动终端用户,所述WAP PUSH为一经由互联网直接到用户移动终端的通讯方式。
本发明还提供一种基于多媒体消息服务的面相图像处理方法,包括如下步骤,参考图6所示:
S11.用户注册步骤;
S12.面相图像处理请求步骤,所述经注册的用户可请求进行面相图像处理;面相图像处理请求步骤可通过Web网页在线完成、通过专用软件在用户PC机上在线完成、通过WAP网页在线完成、或者通过用户的移动终端操作完成。
S13.面相图像上传步骤,所述经注册的用户上传欲处理的面相图像;面相图像上传步骤可通过Web网页在线上传、通过专用软件在用户PC机上在线上传、通过WAP网页在线上传、或者通过用户的移动终端操作发送。
S14.面相图像处理/管理步骤,所述面相图像通过图像处理/管理装置进行经用户确认的处理及管理;其中,对于面相图像可进行如下的处理:
面相图像中一个或多个面相的检测;
面相图像中一个或多个面相的识别;
面相图像中的面相变形;
面相图像中的面相合成;
面相图像中的面相和需要用于进行面相图像处理的信息元素的合成;
新的面相图像的生成;
面相图像的管理。
S15.发送步骤,所述处理后的面相图像经网关发送到用户的移动终端或电子信箱,用户确认后接收。
本发明的方法可通过Web网页或WAP网页在线完成,其中用户端包括以下步骤:
S21.用户登陆,图像处理/管理装置将为初次登陆的用户开辟一个永久MMS存储管理空间;
S22.用户将面相图像传送到图像处理/管理装置;用户可使用可通过有线网络(例如Internet)或者无线网络来将图像传送到图像处理/管理装置;
S23.用户将需要用于进行面相图像处理的信息元素传送到图像处理/管理装置;同样,用户可以通过有线网络(例如Internet)或者无线网络来将信息元素传送到图像处理/管理装置;此处所述的信息元素载体支持以下的类型:
文本:Unicode;
视频:ITU-T H.263、MPEG4;
图像:JPEG、GIF89a、WBMP;
音频:MP3、MIDI、WAV。
上述的这些信息元素可经由数码相机、移动电话、普通摄影设备、扫描装置、计算机终端等设备形成的图像、声音、文本、动画、视频等多种形式来表现。
S24.用户选择需要图像处理/管理装置进行的图像处理/管理操作;
S25.用户可选择是否进行再处理;
S26.用户预览并确认经处理后的面相图像,通过用户确认则接收,否则返回。
按照本发明的一个实施例,用户可使用MMS消息来传送需要用于进行面相图像处理的信息元素,此时,该步骤包括:
S31.编辑一个MMS消息,包括:
用户选择和确定需要进行处理的面相图像;
用户选择和确定需要进行面相图像处理的类型和类别;
用户编辑用于选择和确定进行面相图像处理类型的文字。
S32.发送该MMS消息至一特定识别号;
S33.用户接收到面相图像处理的帮助信息;
S34.用户按照所接收的帮助信息,填写回复内容,回复内容表示要求对图像进行的处理;
S35.用户收到经需要的处理后的面相图像。
相应的,在网络端,该方法相应地包括以下步骤:
S41.图像处理/管理装置接收来自Web站点,WAP站点,PC客户端或网关传递过来的面相图像处理请求;
S42.图像处理/管理装置将接收到的面相图像处理请求放置于一接收队列;
S43.图像处理/管理装置从接收队列中选取面相图像处理请求并确定需要调用的图像处理模块;
S44.图像处理/管理装置调用相应的图像处理模块进行用户所需要的图像处理;
S45.图像处理/管理装置将生成的结果送入发送队列;
S46.图像处理/管理装置从发送队列中取得数据发送给网关。
按照本发明的一个实施例,将上述方法的步骤进一步具体化,可以包括以下的步骤:
S51.图像处理/管理装置将面相图像按照用户数据存储到为每个用户分配的存储空间;
S52.图像处理/管理装置接收来自Web站点,WAP站点,PC客户端或者移动终端的用户请求指令,如果该请求指令为查看指令,则从存储空间中根据用户的选择提取该用户已有的面相图像数据,送入发送消息队列中返回给Web站点、WAP站点、PC客户端或者移动终端;
S53.图像处理/管理装置接收来自Web站点,WAP站点,PC客户端或者移动终端的用户请求指令,如果该请求指令为编辑指令,则从存储空间中根据用户的选择提取该用户已有的面相图像数据,送入接收消息队列等待任务调度器的处理,处理后的结果送入发送消息队列返回给Web站点、WAP站点、PC客户端或者移动终端;
S54.图像处理/管理装置接收来自Web站点,WAP站点,PC客户端或者移动终端的用户请求指令,如果该请求指令为删除指令,则从存储空间中根据用户的选择删除该用户已有的面相图像数据,并生成提示消息送入发送消息队列返回给Web站点,WAP站点,PC客户端或者移动终端;
S55.图像处理/管理装置接收来自Web站点,WAP站点,PC客户端或者移动终端的用户请求指令,如果该请求指令为转发指令,则从存储空间中根据用户的选择提取该用户已有的面相图像数据,送入发送消息队列,由网关发送到指定的电子邮件地址或直接通过WAP PUSH发送给移动终端用户。
针对上述的系统及方法,为了更清楚地叙述,下面分别以站点、PC客户端、移动用户终端三种操作方式分类,按面相图像的发送/接收操作过程、图像管理操作过程加以描述:
第一,用Web站点、WAP站点或PC客户端进行面相图像的发送、用户进行接收的操作过程,如图7所示,
A.在Web站点、WAP站点进行操作
S701.用用户终端号注册、登陆,所述系统自动为用户开辟一个存储空间进行用户信息的存储
S702.选择希望对面相图像进行处理的类型
S703.用户上传自己的面相图像
S704.选择在待处理的面相图像上添加的文字,或添加用户自己需要的文字
S705.选择音乐,或上传用户自己的音乐
S706.由图像处理管理装置进行用户定制的图像处理
S707.用户选择是否对处理候的图像进行预览
S708.若用户需要预览,则可以收到预览的缩略图
S709.用户选择是否发送处理后的面相图像
S710.用户输入接收面相图像的移动终端号码或电子信箱
S711.用户对发送进行确认
S712.用户打开移动终端设备或电子邮箱以接收面相图像
S713.用户收到系统发送的有未接收的面相图像信息
S714.用户确认进行接收
S715.用户接收到处理后的面相图像
B.在PC客户端操作
下载所述面相图像处理服务商提供的PC客户端专用软件,安装后按A部分中描述的S701-S715操作即可
第二,用移动终端进行面相图像的发送、用户进行接收的操作过程,如图8所示:
S801.打开用户移动终端设备
S802.用户编辑包含面相图像的MMS信息
S803.用户选择面相图像处理类型或供面相图像处理的文字
S804.发送编辑好的MMS信息到所述特服号
S805.用户确认发送
S806.用户打开移动终端设备或电子邮箱以接收面相图像
S807.用户收到系统发送的有未接收的面相图像信息
S808.用户确认进行接收
S809.用户接收到处理后的面相图像
以上所有多媒体信息可经由数码相机、移动电话、普通摄影设备、扫描装置、计算机终端等设备形成的图像、声音、文本、动画、视频等多种形式来表现。
第三,用户通过Web站点、WAP站点或PC客户端对已有面相图像进行管理的操作过程,如图9所示:
A.在Web站点或WAP站点进行操作
S901.用用户终端号登陆
S902.进入管理图像界面
S903.用户选择是否进行查看图像操作,若否则选择是否进行编辑图像操作
S904.用户选择要进行查看的图像
S905.用户查看图像
S906.用户选择是否进行编辑图像操作,若否则选择是否进行删除图像操作
S907.用户选择需要进行编辑再处理的图像
S908.图像处理管理装置对选定的图像进行编辑再处理
S909.用户选择是否进行删除图像操作,若否则选择是否进行转发图像操作进行退出处理
S910.用户选择需要删除的图像
S911.用户确认删除操作用户
S912.用户选择是否进行转发图像操作,若否则进行退出处理
S913.用户选择需要进行转发的图像
S914.用户选择需要对选定的图像进行何种转发,是转发到站点、电子信箱还是移动终端
S915.根据a14的选择类型,用户填写相应的信息
S916.用户确认转发操作,系统自行进行转发
S917.进行退出处理
B.在PC客户端操作
下载所述面相图像处理服务商提供的PC客户端专用软件,安装后按A部分中描述的S701-S717操作即可。
以上叙述仅用于说明本系统而非限制、由于参照较佳实例对本系统进行了详细描述,本领域的普通技术人员可在本发明的同一技术方法及系统的理念之上,进行各种可能的改变和替换,进行功能上的扩展和衍生,而不脱离本系统的精神和范围,均应涵盖在本发明权利要求书的保护范围之内。诸如:
基于MMS的电子相册:以MMS服务为平台,将数字面相图像集合成一个融合语音、文字、动画等多媒体形式的电子相册,可通过移动终端进行查看、管理等;
基于MMS的身份识别:以MMS服务为平台,利用面相检测和面相识别技术,通过移动终端进行身份验证。
采用上述技术方案,本发明的有益效果是使人们可以方便地进行面相图像的面相检测、面相识别、面相合成、面相修复等复杂特殊图像处理,而且可以把处理后的面相图像及时便捷地通过移动终端的方式进行发送和接收,这样省去了传统的耗时耗力的图像分发过程,使得在功能上得以显著提升。本专利的另一有益效果是能够为用户提供多种新颖独特的面相图像处理方法。

Claims (19)

1.一种基于多媒体消息服务的面相图像处理方法,包括如下步骤:
用户注册步骤;
面相图像处理请求步骤,所述经注册的用户可请求进行面相图像处理;
面相图像上传步骤,所述经注册的用户上传欲处理的面相图像;
面相图像处理/管理步骤,所述面相图像通过图像处理/管理装置进行经用户确认的处理及管理;所述图像处理/管理装置包括用于人脸的识别检测的人脸检测引擎模块以及分别实现面相检测、面相识别、面相变形、面相合成、面相图像中添加文字声音信息、提取面相特征创建新的面相图像的图像子模块,所述面相图像处理/管理步骤包括:
a.从所述图像处理/管理装置的接收队列中取一个消息;
b.从所述消息中取出用户指定的图像处理类型;
c.确定需要采用的图像子模块;
d.从消息中取图片送入人脸检测引擎模块;
e.判断所述图片中是否存在人脸,如所述图片中存在人脸,则输出人脸定位信息,进行指定的图像处理,然后输出最终效果图片到所述图像处理/管理装置的发送队列;
发送步骤,所述处理后的面相图像经网关发送到用户的移动终端或电子信箱,用户确认后接收。
2.如权利要求1所述的方法,其特征在于,所述面相图像处理请求步骤通过Web网页在线完成、通过专用软件在用户PC机上在线完成、通过WAP网页在线完成、或者通过用户的移动终端操作完成。
3.如权利要求1所述的方法,其特征在于,所述面相图像上传步骤通过Web网页在线上传、通过专用软件在用户PC机上在线上传、通过WAP网页在线上传、或者通过用户的移动终端操作发送。
4.如权利要求1所述的方法,其特征在于,所述方法通过Web网页或WAP网页在线完成,其中用户端包括以下步骤:
用户登陆,图像处理/管理装置将为初次登陆的用户开辟一个永久MMS存储管理空间;
用户将面相图像传送到图像处理/管理装置;
用户将需要用于进行面相图像处理的信息元素传送到图像处理/管理装置;
用户选择需要图像处理/管理装置进行的图像处理/管理操作;
用户可选择是否进行再处理;
用户预览并确认经处理后的面相图像,通过用户确认则接收,否则返回。
5.如权利要求4所述的方法,其特征在于,用户通过有线网络或者无线网络将面相图像以及进行面相图像处理的信息元素传送到图像处理/管理装置。
6.如权利要求4所述的方法,其特征在于,其中需要用于进行面相图像处理的信息元素载体支持的类型包含如下:
文本:Unicode;
视频:ITU-T H.263、MPEG4;
图像:JPEG、GIF89a、WBMP;
音频:MP3、MIDI、WAV。
7.如权利要求6所述的方法,其特征在于,所述的信息元素经由数码相机、移动电话、普通摄影设备、扫描装置、计算机终端形成的图像、声音、文本、动画、视频来表现。
8.如权利要求5所述的方法,其特征在于,通过无线网络用户利用移动终端传送面相图像以及需要用于进行面相图像处理的信息元素的步骤包括:
编辑一个MMS消息;
发送该MMS消息至一特定识别号;
用户接收到面相图像处理的帮助信息;
用户按照所接收的帮助信息,填写回复内容,所述回复内容表示要求对图像进行的处理;
用户收到经需要的处理后的面相图像。
9.如权利要求8所述的方法,其特征在于,所述编辑一个MMS消息包括:
用户选择和确定需要进行处理的面相图像;
用户选择和确定需要进行面相图像处理的类型和类别;
用户编辑用于选择和确定进行面相图像处理类型的文字。
10.如权利要求1所述的方法,其特征在于,所述方法可通过Web网页或WAP网页在线完成,其中网络端包括以下步骤:
图像处理/管理装置接收来自Web站点,WAP站点,PC客户端或网关传递过来的面相图像处理请求;
图像处理/管理装置将接收到的面相图像处理请求放置于一接收队列;
图像处理/管理装置从接收队列中选取面相图像处理请求并确定需要调用的图像处理模块;
图像处理/管理装置调用相应的图像处理模块进行用户所需要的图像处理;
图像处理/管理装置将生成的结果送入发送队列;
图像处理/管理装置从发送队列中取得数据发送给网关。
11.根据权利要求10所述的方法,其特征在于,网络端具体包括以下步骤:
图像处理/管理装置将面相图像按照用户数据存储到为每个用户分配的存储空间;
图像处理/管理装置接收来自Web站点,WAP站点,PC客户端或者移动终端的用户请求指令,如果该请求指令为查看指令,则从存储空间中根据用户的选择提取该用户已有的面相图像数据,送入发送消息队列中返回给Web站点、WAP站点、PC客户端或者移动终端;
图像处理/管理装置接收来自Web站点,WAP站点,PC客户端或者移动终端的用户请求指令,如果该请求指令为编辑指令,则从存储空间中根据用户的选择提取该用户已有的面相图像数据,送入接收消息队列等待任务调度器的处理,处理后的结果送入发送消息队列返回给Web站点、WAP站点、PC客户端或者移动终端;
图像处理/管理装置接收来自Web站点,WAP站点,PC客户端或者移动终端的用户请求指令,如果该请求指令为删除指令,则从存储空间中根据用户的选择删除该用户已有的面相图像数据,并生成提示消息送入发送消息队列返回给Web站点,WAP站点,PC客户端或者移动终端;
图像处理/管理装置接收来自Web站点,WAP站点,PC客户端或者移动终端的用户请求指令,如果该请求指令为转发指令,则从存储空间中根据用户的选择提取该用户已有的面相图像数据,送入发送消息队列,由网关发送到指定的电子邮件地址。
12.如权利要求1所述的方法,其特征在于,所述面相图像处理/管理步骤中包括:
面相图像中一个或多个面相的检测;
面相图像中一个或多个面相的识别;
面相图像中的面相变形;
面相图像中的面相合成;
面相图像中的面相和需要用于进行面相图像处理的信息元素的合成;
新的面相图像的生成;
面相图像的管理。
13.一种基于多媒体消息服务的面相图像处理系统,包括多个个人移动通讯设备和多个网络终端计算机、一WAP站点、一Web站点、一MMS服务中心装置,一图像处理/管理装置,其中,所述WAP站点、Web站点、MMS服务中心装置通过互联网、网关、局域网以及专用数据链路相连,其特征在于,
所述图像处理/管理装置包括收发模块、任务调度模块、图像处理模块、人脸检测引擎模块、图像管理模块;所述收发模块包括接收线程单元、发送线程单元、发送队列单元和接收队列单元,用于跟站点用户或者移动终端用户进行并发式交互;所述任务调度模块负责从接收队列单元中取出任务然后根据用户所需要定制的类型分别将任务分发到图像处理模块中,以及将所述图像处理模块返回的结果放入到发送队列单元中;图像处理模块由数个可扩展的子模块构成,所述子模块分别实现面相检测、面相识别、面相变形、面相合成、面相图像中添加文字声音信息及提取面相特征创建新的面相图像;人脸检测引擎模块用于人脸检测;图像管理模块用于将所处理过的面相图像数据根据不同所属用户分别进行管理,包括对已有处理过的面相图像进行查看,编辑,删除和转发到用户指定的电子邮件地址;
所述图像处理/管理装置通过互联网、网关以及局域网与系统中的其他设备相连;其中,
所述Web站点或WAP站点通过互联网与所述图像处理管理装置连接;用户在初次访问Web站点或WAP站点时完成用户注册;之后用户登陆所述Web站点或WAP站点并将面相图像传送至所述图像处理管理装置;
所述图像处理管理装置对用户传送的面相图像进行图像处理,包括面相检测、面相变形、面相识别、面相合成、面相图像中添加文字声音信息,提取面相特征创建新的面相图像,同时对面相图像进行删除、存储;
所述图像处理管理装置与所述网关通过局域网连接,所述网关与所述MMS服务中心装置通过所述专用数据链路连接;MMS服务中心装置将处理后的面相图像发送给用户;所述网关也与一互联网连接,将面相图像转发到用户指定的电子邮件系统或直接通过WAP PUSH发送给用户,所述WAPPUSH为一经由互联网直接到用户移动终端的通讯方式。
14.如权利要求13所述的系统,其特征在于,所述用户包括Web用户、WAP用户的网络用户,或者移动电话、PDA、无线上网设备用户的终端用户。
15.如权利要求13所述的系统,其特征在于,MMS服务中心装置将处理后的面相图像发送给用户所使用的通讯协议为CDMA、GPRS、EDGE或者3G通信协议。
16.如权利要求13所述的系统,其特征在于,所述个人移动通讯设备为一移动电话或一个人数字助理或一无线上网设备。
17.如权利要求13所述的系统,其特征在于,所述图像处理/管理装置为一个网络服务器。
18.如权利要求13所述的系统,其特征在于,所述网关为一网络服务器。
19.如权利要求13所述的系统,其特征在于,所述专用数据链路为一TCP/TP数据链路。
CNB2005100236867A 2005-01-31 2005-01-31 基于多媒体消息服务的面相图像处理系统和方法 Expired - Fee Related CN100493128C (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CNB2005100236867A CN100493128C (zh) 2005-01-31 2005-01-31 基于多媒体消息服务的面相图像处理系统和方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CNB2005100236867A CN100493128C (zh) 2005-01-31 2005-01-31 基于多媒体消息服务的面相图像处理系统和方法

Publications (2)

Publication Number Publication Date
CN1816090A CN1816090A (zh) 2006-08-09
CN100493128C true CN100493128C (zh) 2009-05-27

Family

ID=36908029

Family Applications (1)

Application Number Title Priority Date Filing Date
CNB2005100236867A Expired - Fee Related CN100493128C (zh) 2005-01-31 2005-01-31 基于多媒体消息服务的面相图像处理系统和方法

Country Status (1)

Country Link
CN (1) CN100493128C (zh)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102291409A (zh) * 2011-08-17 2011-12-21 韩智纲 一种房屋信息展示系统
CN102841792B (zh) * 2012-09-07 2016-02-17 腾讯科技(深圳)有限公司 Sns应用中的信息编辑方法及装置
US20140281870A1 (en) * 2013-03-14 2014-09-18 Microsoft Corporation Document collaboration and notification of changes using different notification mechanisms
CN105159634B (zh) * 2015-07-10 2018-07-06 深圳市美贝壳科技有限公司 一种照片拼接投射的方法及装置
CN108174237A (zh) * 2017-12-28 2018-06-15 北京奇虎科技有限公司 图像合成方法及装置
US10630622B2 (en) 2017-12-28 2020-04-21 Ebay Inc. Adding images via MMS to a draft document

Also Published As

Publication number Publication date
CN1816090A (zh) 2006-08-09

Similar Documents

Publication Publication Date Title
US6509910B1 (en) Method and system for interfacing with a digital media frame network
US10261743B2 (en) Interactive group content systems and methods
US8190195B2 (en) System and method for data correlation and mobile terminal therefor
US6535228B1 (en) Method and system for sharing images using a digital media frame
CN100493128C (zh) 基于多媒体消息服务的面相图像处理系统和方法
JP3695369B2 (ja) 情報配信システム及び情報配信方法、情報供給装置及び情報供給方法
AU2001277956A1 (en) Method and system for accessing a service available on a second network by a member of a first network
JP2004514983A (ja) 写真サービス・ウェブサイトを統合するためのメタ・アプリケーション・アーキテクチャ
CN102067127A (zh) 标记图像并在标记图像时提供通知的方法和装置
US20050289216A1 (en) Providing personalized services for mobile users
US7346659B2 (en) Information providing system and apparatus and methods therefor
CN100521612C (zh) 一种利用移动终端更新网络相册图片的方法、系统及设备
JP2018506791A (ja) メッセンジャーの会話内容を管理する方法と装置、およびコンピュータプログラム
CA2275840A1 (en) Generalized messaging construct
US7133142B2 (en) Information providing system and apparatus and methods therefor
WO2002003284A1 (en) Video mail service method and system
JP2003050767A (ja) 情報配信システム及び情報配信方法、並びに情報供給装置及び情報供給方法
CN107315830A (zh) 一种智能分析文档的方法及系统
JP2008263385A (ja) 表示システム
CN101589588A (zh) 用于电子邮件网关的方法和装置
CN104144388A (zh) 一种在移动终端中扩展通信业务的方法及移动终端
JP2009020915A (ja) 情報記録装置及び情報配信方法
JP2002189723A (ja) デジタルフォトサービスシステム
TWM608752U (zh) 具有文字及動畫圖像之情境式互動訊息傳遞系統
JP2006067146A (ja) 画像配信サーバおよび画像添付メール中継サーバならびにそれらの動作制御方法

Legal Events

Date Code Title Description
C06 Publication
C41 Transfer of patent application or patent right or utility model
PB01 Publication
TA01 Transfer of patent application right

Effective date of registration: 20060609

Address after: Room 140, No. 155, Lane 201, liming Road, Shanghai

Applicant after: Fan Xiaobo

Co-applicant after: Zhang Yingfeng

Address before: Room 140, No. 155, Lane 201, liming Road, Shanghai

Applicant before: Fan Xiaobo

Co-applicant before: Zhang Yingfeng

Co-applicant before: Zhao Songlin

C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
C17 Cessation of patent right
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20090527

Termination date: 20120131