CN103020173B - 用于移动终端的视频图像信息搜索方法、系统及移动终端 - Google Patents

用于移动终端的视频图像信息搜索方法、系统及移动终端 Download PDF

Info

Publication number
CN103020173B
CN103020173B CN201210493069.3A CN201210493069A CN103020173B CN 103020173 B CN103020173 B CN 103020173B CN 201210493069 A CN201210493069 A CN 201210493069A CN 103020173 B CN103020173 B CN 103020173B
Authority
CN
China
Prior art keywords
image
mobile terminal
video
image object
user
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201210493069.3A
Other languages
English (en)
Other versions
CN103020173A (zh
Inventor
邓雄书
何飞
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Baidu Netcom Science and Technology Co Ltd
Original Assignee
Beijing Baidu Netcom Science and Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Baidu Netcom Science and Technology Co Ltd filed Critical Beijing Baidu Netcom Science and Technology Co Ltd
Priority to CN201210493069.3A priority Critical patent/CN103020173B/zh
Publication of CN103020173A publication Critical patent/CN103020173A/zh
Application granted granted Critical
Publication of CN103020173B publication Critical patent/CN103020173B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Information Transfer Between Computers (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明提出一种用于移动终端的视频图像信息搜索方法、系统及移动终端,其中所述方法包括:移动终端接收用户输入的视频文件中的兴趣图像区域;获取兴趣图像区域中的图像对象,并将图像对象上传至服务器;服务器接收图像对象,并查找与图像对象相关的信息;以及服务器将与图像对象相关的信息返回至移动终端。根据本发明实施例的方法,可以自动将视频文件中用户感兴趣的图像上传至服务器并搜索相关信息返回给用户,无需用户手动搜索,满足了用户在连续观看视频的同时可以随时获取感兴趣的对象的相关信息信息的需求,方便、智能,用户体验好。

Description

用于移动终端的视频图像信息搜索方法、系统及移动终端
技术领域
本发明涉及移动终端制造领域,特别涉及一种用于移动终端的视频图像信息搜索方法、系统及移动终端。
背景技术
用户在观看视频时经常会想要了解视频中感兴趣的事物的相关信息,比如想要了解影片中某个不知名字的演员的,想要知道视频中某个风景秀丽的地方的具体位置,但是很难用文字信息准确的描述这些事物,使得用文字信息搜索这些事物的相关信息非常困难。目前,虽然有利用图像识别技术查找相似图片或者包含相似图片的网页的方法,但是需要开启浏览器手动搜索这些事物的相关信息,不能自动执行搜索,影响了用户观看视频的连续性,用户体验差。
发明内容
本发明的目的旨在至少解决所述技术缺陷之一。
为此,本发明的第一个目的在于提出一种用于移动终端的视频图像信息搜索方法,该方法满足了用户在连续观看视频的同时可以随时获取感兴趣的对象的相关信息信息的需求,方便、智能,用户体验好。
本发明的第二个目的在于提出一种用于移动终端的视频图像信息搜索系统。
本发明的第三个目的在于提出一种移动终端。
为达到所述目的,本发明第一方面的实施例公开了一种用于移动终端的视频图像信息搜索方法,包括以下步骤:移动终端接收用户输入的视频文件中的兴趣图像区域;获取所述兴趣图像区域中的图像对象,并将所述图像对象上传至服务器;所述服务器接收所述图像对象,并查找与所述图像对象相关的信息;以及所述服务器将所述与所述图像对象相关的信息返回至所述移动终端。
根据本发明实施例的用于移动终端的视频图像信息搜索方法,可以自动将视频文件中用户感兴趣的图像上传至服务器并搜索相关信息返回给用户,无需用户手动搜索,满足了用户在连续观看视频的同时可以随时获取感兴趣的对象的相关信息信息的需求,方便、智能,用户体验好。
为达到所述目的,本发明第二方面的实施例公开了一种用于移动终端的视频图像信息搜索系统,包括:移动终端,用于接收用户输入的视频文件中的兴趣图像区域,并获取所述兴趣图像区域中的图像对象,以及上传所述图像对象;以及服务器,用于接收所述移动终端上传的所述图像对象,并查找所述与所述图像对象相关的信息,以及将所述与所述图像对象相关的信息返回至所述移动终端。
根据本发明实施例的用于移动终端的视频图像信息搜索系统,自动将视频文件中用户感兴趣的图像相关信息返回给用户,无需用户手动搜索,并且通过用户输入的辅助信息对图像对象进行区分,分别提取特征值,减少了移动终端对图像对象识别的数据量,提高了对图像对象识别的准确性,方便、智能、快捷,用户体验好。
为达到所述目的,本发明第三方面的实施例公开了一种移动终端,包括:输入模块,用于接收用户输入的视频文件中的兴趣图像区域;获取模块,用于获取所述兴趣图像区域中的图像对象;上传模块,用于将所述图像对象上传至服务器;以及接收模块,用于接收服务器返回的与所述图像对象相关的信息。
根据本发明实施例的移动终端,使用户可以自动将视频文件中用户感兴趣的图像上传至服务器并搜索相关信息返回给用户,无需手动搜索,满足了用户在连续观看视频的同时可以随时获取感兴趣的对象的相关信息信息的需求,使用方便、智能,用户体验好。
本发明附加的方面和优点将在下面的描述中部分给出,部分将从下面的描述中变得明显,或通过本发明的实践了解到。
附图说明
本发明所述的和/或附加的方面和优点从下面结合附图对实施例的描述中将变得明显和容易理解,其中:
图1为根据本发明一个实施例的用于移动终端的视频图像信息搜索方法的流程图;
图2为根据本发明又一个实施例的用于移动终端的视频图像信息搜索方法的流程图;
图3为根据本发明再一个实施例的用于移动终端的视频图像信息搜索方法的流程图;
图4为根据本发明一个具体实施例的用于移动终端的视频图像信息搜索方法的流程图;
图5为根据本发明以实施例的视频图像信息搜索系统的结构框图;
图6为根据本发明一个实施例的移动终端的结构框图。
图7为根据本发明又一个实施例的移动终端的结构框图。
图8为根据本发明再一个实施例的移动终端的结构框图。
图9为根据本发明一个具体实施例的移动终端的结构框图。
具体实施方式
下面详细描述本发明的实施例,所述实施例的示例在附图中示出,其中自始至终相同或类似的标号表示相同或类似的元件或具有相同或类似功能的元件。下面通过参考附图描述的实施例是示例性的,仅用于解释本发明,而不能解释为对本发明的限制。相反,本发明的实施例包括落入所附加权利要求书的精神和内涵范围内的所有变化、修改和等同物。
在本发明的描述中,除非另有说明,“多个”的含义是两个或两个以上。流程图中或在此以其他方式描述的任何过程或方法描述可以被理解为,表示包括一个或更多个用于实现特定逻辑功能或过程的步骤的可执行指令的代码的模块、片段或部分,并且本发明的优选实施方式的范围包括另外的实现,其中可以不按所示出或讨论的顺序,包括根据所涉及的功能按基本同时的方式或按相反的顺序,来执行功能,这应被本发明的实施例所属技术领域的技术人员所理解。
下面参考附图描述根据本发明实施例的用于移动终端的视频图像信息搜索方法、系统和移动终端。
一种用于移动终端的视频图像信息搜索方法,包括以下步骤:移动终端接收用户输入的视频文件中的兴趣图像区域;获取兴趣图像区域中的图像对象,并将图像对象上传至服务器;服务器接收图像对象,并查找与图像对象相关的信息;以及服务器将与图像对象相关的信息返回至移动终端。
图1为根据本发明一个实施例的用于移动终端的视频图像信息搜索方法的流程图。
如图1所示,根据本发明实施例的用于移动终端的视频图像信息搜索方法包括下述步骤。
步骤S101,移动终端接收用户输入的视频文件中的兴趣图像区域。
具体地,用户在观看视频时,看到感兴趣的图像对象,可以暂停视频,用手指或手写笔在屏幕上圈出对象所在的兴趣图像区域,如果用户觉得该对象在当前帧图像不够清晰,可以先通过视频的前进或后退功能找到该对象的清晰图像帧,然后再圈出该对象所在的兴趣图像区域,其中用户感兴趣的对象可以为视频中出现的人、动物、建筑物、交通工具、枪械、风景等。
步骤S102,获取兴趣图像区域中的图像对象,并将图像对象上传至服务器。
步骤S103,服务器接收图像对象,并查找与图像对象相关的信息。
具体地,服务器接收到移动终端发送的图像对象后,查找与图像对象相近或相关的图像,或者包含图像对象的网页。
步骤S104,服务器将与图像对象相关的信息返回至移动终端。
具体地,服务器将查找到的图像或者网页的链接返回给移动终端,便于用户查看。
根据本发明实施例的用于移动终端的视频图像信息搜索方法,可以自动将视频文件中用户感兴趣的图像上传至服务器并搜索相关信息返回给用户,无需用户手动搜索,满足了用户在连续观看视频的同时可以随时获取感兴趣的对象的相关信息信息的需求,方便、智能,用户体验好。
图2为根据本发明又一个实施例的用于移动终端的视频图像信息搜索方法的流程图。
如图2所示,根据本发明实施例的视频文件的搜索排序方法包括下述步骤。
步骤S201,移动终端接收用户输入的缩放请求,并根据缩放请求对视频文件进行预定比例的缩放。
具体地,用户在观看视频时,有可能会根据需要对视频进行缩放,例如,当用户需要全屏观看时,就需要按照一定比例将视频放大至屏幕大小。
步骤S202,接收用户在缩放后的视频文件中输入的兴趣图像区域。
具体地,用户在看到感兴趣的图像对象,可以暂停缩放后的视频,用手指或手写笔在屏幕上圈出对象所在的兴趣图像区域,如果用户觉得该对象在当前帧图像不够清晰,可以先通过视频的前进或后退功能找到该对象的清晰图像帧,然后再圈出该对象所在的兴趣图像区域,其中用户感兴趣的对象可以为视频中出现的人、动物、建筑物、交通工具、枪械、风景等。
步骤S203,根据缩放后的兴趣图像区域在视频文件中按预定比例获取图像对象,并将图像对象上传至服务器。
具体地,对于缩小的兴趣图像区域,则将其按照预定比例放大,然后获取在视频文件中对应的图像对象,对于放大的兴趣图像区域,则将其按照预定比例缩小,然后获取在视频文件中对应的图像对象。
步骤S204,服务器接收图像对象,并查找与图像对象相关的信息。
具体地,服务器接收到移动终端发送的图像对象后,查找与图像对象相近或相关的图像,或者包含图像对象的网页。
步骤S205,服务器将与图像对象相关的信息返回至移动终端。
具体地,服务器将查找到的图像或者网页的链接返回给移动终端,便于用户查看。
根据本发明实施例的用于移动终端的视频图像信息搜索方法,可以对视频文件进行缩放,方便用户获取兴趣图像区域,满足用户观看视频的不同需求,提升用户体验。
图3为根据本发明再一个实施例的用于移动终端的视频图像信息搜索方法的流程图。
如图3所示,根据本发明实施例的视频文件的搜索排序方法包括下述步骤。
步骤S301,移动终端接收用户输入的缩放请求,并根据缩放请求对视频文件进行预定比例的缩放。
具体地,用户在观看视频时,有可能会根据需要对视频进行缩放,例如,当用户需要全屏观看时,就需要按照一定比例将视频放大至屏幕大小。
步骤S302,接收用户在缩放后的视频文件中输入的兴趣图像区域。
具体地,用户在看到感兴趣的图像对象,可以暂停缩放后的视频,用手指或手写笔在屏幕上圈出对象所在的兴趣图像区域,如果用户觉得该对象在当前帧图像不够清晰,可以先通过视频的前进或后退功能找到该对象的清晰图像帧,然后再圈出该对象所在的兴趣图像区域,其中用户感兴趣的对象可以为视频中出现的人、动物、建筑物、交通工具、枪械、风景等。
步骤S303,根据缩放后的兴趣图像区域在视频文件中按预定比例获取图像对象。
具体地,对于缩小的兴趣图像区域,则将其按照预定比例放大,然后获取在视频文件中对应的图像对象,对于放大的兴趣图像区域,则将其按照预定比例缩小,然后获取在视频文件中对应的图像对象。
步骤S304,对图像对象进行特征提取,获得图像对象的特征值,并将图像对象的特征值发送至服务器。
步骤S305,服务器接收特征值,并查找与图像对象的特征值相关的信息。
具体地,服务器接收到移动终端发送的图像对象的特征值后,查找与图像对象的特征值相近或相关的图像,或者包含图像对象的特征值的网页。
步骤S306,服务器将与图像对象的特征值相关的信息返回至移动终端。
具体地,服务器将查找到的图像或者网页的链接返回给移动终端,便于用户查看。
根据本发明实施例的用于移动终端的视频图像信息搜索方法,通过对图像对象进行特征提取,并将图像对象的特征值发送至服务器查找相关信息,减小了网络传输的负荷,也提高了服务器的查找效率,节省图像对象搜索时间,进一步提升用户体验。
图4为根据本发明一个具体实施例的用于移动终端的视频图像信息搜索方法的流程图。
如图4所示,根据本发明实施例的视频文件的搜索排序方法包括下述步骤。
步骤S401,移动终端接收用户输入的缩放请求,并根据缩放请求对视频文件进行预定比例的缩放。
具体地,用户在观看视频时,有可能会根据需要对视频进行缩放,例如,当用户需要全屏观看时,就需要按照一定比例将视频放大至屏幕大小。
步骤S402,接收用户在缩放后的视频文件中输入的兴趣图像区域。
具体地,用户在看到感兴趣的图像对象,可以暂停缩放后的视频,用手指或手写笔在屏幕上圈出对象所在的兴趣图像区域,如果用户觉得该对象在当前帧图像不够清晰,可以先通过视频的前进或后退功能找到该对象的清晰图像帧,然后再圈出该对象所在的兴趣图像区域,其中用户感兴趣的对象可以为视频中出现的人、动物、建筑物、交通工具、枪械、风景等。
步骤S403,根据缩放后的兴趣图像区域在视频文件中按预定比例获取图像对象。
具体地,对于缩小的兴趣图像区域,则将其按照预定比例放大,然后获取在视频文件中对应的图像对象,对于放大的兴趣图像区域,则将其按照预定比例缩小,然后获取在视频文件中对应的图像对象。
步骤S404,接收用户输入的辅助信息,其中辅助信息包括指示图像对象是第一物体还是第二物体,其中第一物体包括人和动物,第二物体包括刚性物体。
具体地,刚性物体可以是风景、建筑、交通工具等物体。
步骤S405,如果图像对象是第一物体,则用生物特征识别技术提取图像对象的gabor特征值。
在本发明的一个实施例中,生物特征识别技术通过基于harr特征提取的adboost级联分类器的检测算法进行检测,并通过基于adboost的gabor特征选择及识别算法进行特征识别,得到gabor特征值。
步骤S406,如果图像对象是第二物体,则用surf特征提取算法提取图像对象的surf特征值。
具体地,surf特征提取算法是一种点检测特征值提取算法,可以对刚性物体进行检测获取其surf特征值。
步骤S407,将图像对象的特征值和辅助信息上传至服务器。
步骤S408,服务器接收图像对象的特征值和辅助信息,并查找与或图像对象的特征值或辅助信息相关的信息。
具体地,服务器接收到移动终端发送的图像对象的特征值和辅助信息后,查找与图像对象的特征值和辅助信息相近或相关的图像,或者包含图像对象的特征值和辅助信息的网页。
步骤S409,服务器将与图像对象的特征值和辅助信息相关的信息返回至移动终端。
具体地,服务器将查找到的图像或者网页的链接返回给移动终端,便于用户查看。
根据本发明实施例的用于移动终端的视频图像信息搜索方法,通过用户输入的辅助信息对图像对象进行区分,分别提取特征值,减少了移动终端对图像对象识别的数据量,既提高了对图像对象识别的准确性,也进一步缩短了图像信息搜索时间。
为了实现上述实施例,本发明还提出一种视频图像信息搜索系统。
一种视频图像信息搜索系统,包括:移动终端,用于接收用户输入的视频文件中的兴趣图像区域,并获取兴趣图像区域中的图像对象,以及上传图像对象;以及服务器,用于接收移动终端上传的图像对象,并查找与图像对象相关的信息,以及将与图像对象相关的信息返回至移动终端。
图5为根据本发明一个实施例的视频图像信息搜索系统的结构框图。
如图5所示,根据本发明实施例的视频图像信息搜索系统包括:移动终端100和服务器200。
具体地,移动终端100用于接收用户输入的视频文件中的兴趣图像区域,并获取兴趣图像区域中的图像对象,以及上传图像对象。
更具体地,用户在观看视频时,看到感兴趣的图像对象,可以暂停视频,用手指或手写笔在屏幕上圈出对象所在的兴趣图像区域,如果用户觉得该对象在当前帧图像不够清晰,可以先通过视频的前进或后退功能找到该对象的清晰图像帧,然后再圈出该对象所在的兴趣图像区域,其中用户感兴趣的对象可以为视频中出现的人、动物、建筑物、交通工具、枪械、风景等。
服务器200用于接收移动终端上传的图像对象,并查找与图像对象相关的信息,以及将与图像对象相关的信息返回至移动终端。
更具体地,服务器接收到移动终端发送的图像对象后,查找与图像对象相近或相关的图像,或者包含图像对象的网页,并将查找到的图像或者网页的链接返回给移动终端,便于用户查看。
在本发明的一个实施例中,移动终端100还用于接收用户输入的缩放请求,根据缩放请求对视频文件进行预定比例的缩放,并接收用户在所述缩放后的视频文件中输入的兴趣图像区域,以及根据缩放后的兴趣图像区域在视频文件中按预定比例获取图像对象。
具体地,用户在观看视频时,有可能会根据需要对视频进行缩放,例如,当用户需要全屏观看时,就需要按照一定比例将视频放大至屏幕大小,如果用户看到感兴趣的图像对象,就可以暂停缩放后的视频,用手指或手写笔在屏幕上圈出对象所在的兴趣图像区域,如果用户觉得该对象在当前帧图像不够清晰,可以先通过视频的前进或后退功能找到该对象的清晰图像帧,然后再圈出该对象所在的兴趣图像区域,其中用户感兴趣的对象可以为视频中出现的人、动物、建筑物、交通工具、枪械、风景等,然后对于缩小的兴趣图像区域,则将其按照预定比例放大,对于放大的兴趣图像区域,则将其按照预定比例缩小,获取并上传兴趣图像区域在视频文件中对应的图像对象。
在本发明的另一个实施例中,移动终端100还用于对图像对象进行特征提取,获取图像对象的特征值。具体地移动终端100用于接收用户输入的辅助信息,其中辅助信息包括指示图像对象是第一物体还是第二物体,其中第一物体包括人和动物,第二物体包括刚性物体,并在辅助信息指示图像对象是第一物体时,用生物特征识别技术提取图像对象的gabor特征值,在辅助信息指示图像对象是第二物体时,用surf特征提取算法提取图像对象的surf特征值,以及上传图像对象的特征值和辅助信息。
更具体地,生物特征识别技术通过基于harr特征提取的adboost级联分类器的检测算法进行检测,并通过基于adboost的gabor特征选择及识别算法进行特征识别,得到gabor特征值。surf特征提取算法是一种点检测特征值提取算法,可以对刚性物体进行检测获取其surf特征值,其中刚性物体可以是风景、建筑、交通工具等物体。
服务器200还用于接收图像对象的特征值和辅助信息,并查找与或图像对象的特征值或辅助信息相关的信息,以及将与图像对象的特征值和辅助信息相关的信息返回至移动终端。具体地,服务器接收到移动终端发送的图像对象的特征值和辅助信息后,查找与图像对象的特征值和辅助信息相近或相关的图像,或者包含图像对象的特征值和辅助信息的网页,并将查找到的图像或者网页的链接返回给移动终端,便于用户查看。
根据本发明实施例的视频文件的搜索排序系统,自动将视频文件中用户感兴趣的图像相关信息返回给用户,无需用户手动搜索,并且通过用户输入的辅助信息对图像对象进行区分,分别提取特征值,减少了移动终端对图像对象识别的数据量,提高了对图像对象识别的准确性,方便、智能、快捷,用户体验好。
为了实现上述实施例,本发明还提出一种移动终端。
一种移动终端,包括:输入模块,用于接收用户输入的视频文件中的兴趣图像区域;获取模块,用于获取兴趣图像区域中的图像对象;上传模块,用于将图像对象上传至服务器;以及接收模块,用于接收服务器返回的与图像对象相关的信息。
图6为根据本发明一个实施例的移动终端的结构框图。
如图6所示,根据本发明实施例的移动终端包括:输入模块110、获取模块120、上传模块130和接收模块140。
具体地,输入模块110用于接收用户输入的视频文件中的兴趣图像区域。更具体地,用户在观看视频时,看到感兴趣的图像对象,可以暂停视频,用手指或手写笔在屏幕上圈出对象所在的兴趣图像区域,如果用户觉得该对象在当前帧图像不够清晰,可以先通过视频的前进或后退功能找到该对象的清晰图像帧,然后再圈出该对象所在的兴趣图像区域,其中用户感兴趣的对象可以为视频中出现的人、动物、建筑物、交通工具、枪械、风景等。
获取模块120用于获取兴趣图像区域中的图像对象。
上传模块130用于将图像对象上传至服务器。
接收模块140用于接收服务器返回的与图像对象相关的信息。更具体地,接收模块接收服务器返回的与图像对象相近或相关的图像的链接。
根据本发明实施例的移动终端,使用户可以自动将视频文件中用户感兴趣的图像上传至服务器并搜索相关信息返回给用户,无需手动搜索,满足了用户在连续观看视频的同时可以随时获取感兴趣的对象的相关信息信息的需求,使用方便、智能,用户体验好。
图7为根据本发明又一个实施例的移动终端的结构框图。
如图7所示,根据本发明实施例的移动终端在图6所示的基础上还包括:缩放模块150。
具体地,缩放模块150用于接收用户输入的缩放请求,并根据所述缩放请求对所述视频文件进行预定比例的缩放,其中输入模块110还用于接收用户在缩放后的视频文件中输入的兴趣图像区域;以及获取模块120还用于根据缩放后的兴趣图像区域在视频文件中按预定比例获取图像对象。
根据本发明实施例的移动终端,通过缩放模块可以对视频文件进行缩放,方便用户获取兴趣图像区域,满足用户观看视频的不同需求,提升用户体验。
图8为根据本发明再一个实施例的移动终端的结构框图。
如图8所示,根据本发明实施例的移动终端在图7所示的基础上还包括特征提取模块160。
具体地,特征提取模块160用于对图像对象进行特征提取,获取图像对象的特征值。其中,上传模块130还用于将特征提取模块160提取的图像对象的特征值上传至服务器。
根据本发明实施例的移动终端,通过特征提取模块对图像对象进行特征提取,并将图像对象的特征值发送至服务器查找相关信息,减小了网络传输的负荷,也提高了服务器的查找效率,节省图像对象搜索时间,进一步提升用户体验。
图9为根据本发明一个具体实施例的移动终端的结构框图。
如图9所示,根据本发明实施例的移动终端包括:输入模块110、获取模块120、上传模块130、接收模块140、缩放模块150、特征提取模块160、接收单元162、第一提取单元162和第二提取单元163,其中特征提取模块包括接收单元162、第一提取单元162和第二提取单元163。
具体地,接收单元161用于接收用户输入的辅助信息,其中辅助信息包括指示图像对象是第一物体还是第二物体,其中第一物体包括人和动物,第二物体包括刚性物体。更具体地,刚性物体可以是风景、建筑、交通工具等物体。
第一提取单元162用于在辅助信息指示图像对象是第一物体时,用生物特征识别技术提取图像对象的gabor特征值。在本发明的一个实施例中,生物特征识别技术通过基于harr特征提取的adboost级联分类器的检测算法进行检测,并通过基于adboost的gabor特征选择及识别算法进行特征识别,得到gabor特征值。
第二提取单元163用于在辅助信息指示图像对象是第二物体时,用surf特征提取算法提取图像对象的surf特征值。更具体地,surf特征提取算法是一种点检测特征值提取算法,可以对刚性物体进行检测获取其surf特征值。
在本发明的实施例中,上传模块130还用于将图像对象的特征值和辅助信息上传至服务器。
根据本发明实施例的移动终端,用户可以通过输入模块输入图像对象的辅助信息区分图像对象,使得终端对把不同的图像对象可以分别提取特征值,减少了移动终端对图像对象识别的数据量,既提高了对图像对象识别的准确性,也进一步缩短了图像信息搜索时间。
应当理解,在本发明的实施例中,移动终端可以是手机、平板电脑、个人数字助理等具有视频播放功能的硬件设备。
在本说明书的描述中,参考术语“一个实施例”、“一些实施例”、“示例”、“具体示例”、或“一些示例”等的描述意指结合该实施例或示例描述的具体特征、结构、材料或者特点包含于本发明的至少一个实施例或示例中。在本说明书中,对所述术语的示意性表述不一定指的是相同的实施例或示例。而且,描述的具体特征、结构、材料或者特点可以在任何的一个或多个实施例或示例中以合适的方式结合。
尽管已经示出和描述了本发明的实施例,对于本领域的普通技术人员而言,可以理解在不脱离本发明的原理和精神的情况下可以对这些实施例进行多种变化、修改、替换和变型,本发明的范围由所附权利要求及其等同限定。

Claims (12)

1.一种用于移动终端的视频图像信息搜索方法,其特征在于,包括以下步骤:
移动终端接收用户输入的缩放请求,并根据缩放请求对视频文件进行预定比例的缩放;
移动终端接收用户在观看视频时圈出的视频图像中的兴趣图像区域,其中,所述用户暂停视频,并在所述移动终端的屏幕上圈出感兴趣的图像对象所在的兴趣图像区域,或者,通过视频的前进或后退功能查找所述图像对象的清晰图像帧,再圈出所述图像对象所在的兴趣图像区域;
根据缩放后的兴趣图像区域在视频文件中按所述预定比例获取所述图像对象,并将所述图像对象上传至服务器;
所述服务器接收所述图像对象,并查找与所述图像对象相关的信息;以及
所述服务器将所述与所述图像对象相关的信息返回至所述移动终端。
2.根据权利要求1所述的方法,其特征在于,还包括以下步骤:
对所述图像对象进行特征提取,获得所述图像对象的特征值。
3.根据权利要求2所述的方法,其特征在于,对所述图像对象进行特征提取,获得所述图像对象的特征值的步骤具体包括以下步骤:
接收所述用户输入的辅助信息,其中所述辅助信息包括指示所述图像对象是第一物体还是第二物体,其中所述第一物体包括人和动物,所述第二物体包括刚性物体;
如果所述图像对象是所述第一物体,则用生物特征识别技术提取所述图像对象的gabor特征值;以及
如果所述图像对象是所述第二物体,则用surf特征提取算法提取所述图像对象的surf特征值。
4.根据权利要求3所述的方法,其特征在于,还包括以下步骤:
将所述图像对象的特征值和所述辅助信息上传至所述服务器。
5.一种视频图像信息搜索系统,其特征在于,包括:
移动终端,用于接收用户输入的缩放请求,并根据缩放请求对视频文件进行预定比例的缩放,并接收用户在观看视频时圈出的视频图像中的兴趣图像区域,并根据缩放后的兴趣图像区域在视频文件中按所述预定比例获取所述图像对象,以及上传所述图像对象,其中,所述用户暂停视频,并在所述移动终端的屏幕上圈出感兴趣的图像对象所在的兴趣图像区域,或者,通过视频的前进或后退功能查找所述图像对象的清晰图像帧,再圈出所述图像对象所在的兴趣图像区域;以及
服务器,用于接收所述移动终端上传的所述图像对象,并查找与所述图像对象相关的信息,以及将所述与所述图像对象相关的信息返回至所述移动终端。
6.根据权利要求5所述的系统,其特征在于,所述移动终端还用于对所述图像对象进行特征提取,获取所述图像对象的特征值。
7.根据权利要求6所述的系统,其特征在于,所述移动终端还用于接收所述用户输入的辅助信息,其中所述辅助信息包括指示所述图像对象是第一物体还是第二物体,其中所述第一物体包括人和动物,所述第二物体包括刚性物体,并在所述辅助信息指示所述图像对象是所述第一物体时,用生物特征识别技术提取所述图像对象的gabor特征值,在所述辅助信息指示所述图像对象是所述第二物体时,用surf特征提取算法提取所述图像对象的surf特征值。
8.根据权利要求7所述的系统,其特征在于,所述移动终端还用于将所述图像对象的特征值和所述辅助信息上传至所述服务器。
9.一种移动终端,其特征在于,包括:
缩放模块,用于接收用户输入的缩放请求,并根据所述缩放请求对视频文件进行预定比例的缩放;
输入模块,用于接收用户在观看视频时圈出的视频图像中的兴趣图像区域,其中,所述用户暂停视频,并在所述移动终端的屏幕上圈出感兴趣的图像对象所在的兴趣图像区域,或者,通过视频的前进或后退功能查找所述图像对象的清晰图像帧,再圈出所述图像对象所在的兴趣图像区域;
获取模块,用于根据缩放后的兴趣图像区域在视频文件中按所述预定比例获取所述图像对象;
上传模块,用于将所述图像对象上传至服务器;以及
接收模块,用于接收服务器返回的与所述图像对象相关的信息。
10.根据权利要求9所述的移动终端,其特征在于,还包括:
特征提取模块,用于对所述图像对象进行特征提取,获取所述图像对象的特征值。
11.根据权利要求10所述的移动终端,其特征在于,所述特征提取模块具体包括:
接收单元,用于接收所述用户输入的辅助信息,其中所述辅助信息包括指示所述图像对象是第一物体还是第二物体,其中所述第一物体包括人和动物,所述第二物体包括刚性物体;
第一提取单元,用于在所述辅助信息指示所述图像对象是所述第一物体时,用生物特征识别技术提取所述图像对象的gabor特征值;以及
第二提取单元,用于在所述辅助信息指示所述图像对象是所述第二物体时,用surf特征提取算法提取所述图像对象的surf特征值。
12.根据权利要求11所述的移动终端,其特征在于,所述上传模块还用于将所述图像对象的特征值和所述辅助信息上传至所述服务器。
CN201210493069.3A 2012-11-27 2012-11-27 用于移动终端的视频图像信息搜索方法、系统及移动终端 Active CN103020173B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201210493069.3A CN103020173B (zh) 2012-11-27 2012-11-27 用于移动终端的视频图像信息搜索方法、系统及移动终端

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201210493069.3A CN103020173B (zh) 2012-11-27 2012-11-27 用于移动终端的视频图像信息搜索方法、系统及移动终端

Publications (2)

Publication Number Publication Date
CN103020173A CN103020173A (zh) 2013-04-03
CN103020173B true CN103020173B (zh) 2017-02-08

Family

ID=47968777

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201210493069.3A Active CN103020173B (zh) 2012-11-27 2012-11-27 用于移动终端的视频图像信息搜索方法、系统及移动终端

Country Status (1)

Country Link
CN (1) CN103020173B (zh)

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104125487B (zh) * 2013-04-28 2016-05-11 腾讯科技(深圳)有限公司 一种上传图像数据的方法和装置
CN105850146A (zh) 2013-12-31 2016-08-10 宇龙计算机通信科技(深圳)有限公司 显示方法和终端
CN103886881B (zh) * 2014-04-14 2018-10-02 福建凯米网络科技有限公司 一种扩展点歌曲库的方法及其系统
CN105373938A (zh) 2014-08-27 2016-03-02 阿里巴巴集团控股有限公司 识别视频图像中的商品和展示其信息的方法、装置及系统
CN105354288A (zh) * 2015-10-30 2016-02-24 百度在线网络技术(北京)有限公司 一种基于视频内容的图像搜索方法和装置
CN107205172A (zh) * 2016-03-18 2017-09-26 百度在线网络技术(北京)有限公司 一种基于视频内容发起搜索的方法及装置
CN108111557B (zh) * 2016-11-24 2021-06-11 杭州海康威视数字技术股份有限公司 一种获取云存储系统中数据的方法及装置
CN108681743B (zh) * 2018-04-16 2019-12-06 腾讯科技(深圳)有限公司 图像对象识别方法和装置、存储介质
CN113315691B (zh) * 2021-05-20 2023-02-24 维沃移动通信有限公司 视频处理方法、装置及电子设备

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101216841A (zh) * 2008-01-14 2008-07-09 南京搜拍信息技术有限公司 交互式图像搜索系统和方法
CN101489139A (zh) * 2009-01-21 2009-07-22 北京大学 基于视觉显著度的视频广告关联方法与系统
CN102232220A (zh) * 2010-10-29 2011-11-02 华为技术有限公司 一种视频兴趣物体提取与关联的方法及系统

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101216841A (zh) * 2008-01-14 2008-07-09 南京搜拍信息技术有限公司 交互式图像搜索系统和方法
CN101489139A (zh) * 2009-01-21 2009-07-22 北京大学 基于视觉显著度的视频广告关联方法与系统
CN102232220A (zh) * 2010-10-29 2011-11-02 华为技术有限公司 一种视频兴趣物体提取与关联的方法及系统

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
《一种基于快速鲁棒特征的图像匹配算法》;王君本;《计算机工程与科学》;20110228;第33卷(第2期);第5页第2段以及图12 *
《基于Gabor小波和PCA的掌纹识别方法比较研究》;向伟;《西南民族大学学报(自然科学版)》;20100531;第36卷(第3期);摘要 *
《看土豆视频,咱选影院播放模式》;王勇;《电脑知识与技术-经验技巧》;20081130;第2008卷(第11期);第1页第1段 *

Also Published As

Publication number Publication date
CN103020173A (zh) 2013-04-03

Similar Documents

Publication Publication Date Title
CN103020173B (zh) 用于移动终端的视频图像信息搜索方法、系统及移动终端
US10198867B2 (en) Display control device, display control method, and program
CN103140862B (zh) 用户界面系统及其操作方法
WO2017087568A1 (en) A digital image capturing device system and method
US8823637B2 (en) Movement and touch recognition for controlling user-specified operations in a digital image processing apparatus
US20120054691A1 (en) Methods, apparatuses and computer program products for determining shared friends of individuals
US20120062595A1 (en) Method and apparatus for providing augmented reality
US20080267521A1 (en) Motion and image quality monitor
EP2420978A2 (en) Apparatus and method for providing object information
US10754888B2 (en) Establishment of an association between an object and a mood media item
US8520967B2 (en) Methods and apparatuses for facilitating generation images and editing of multiframe images
WO2013088637A2 (en) Information processing device, information processing method and program
CN107766403B (zh) 一种相册处理方法、移动终端以及计算机可读存储介质
CN105654039A (zh) 图像处理的方法和装置
US20150033126A1 (en) Video content providing scheme
CN113766299B (zh) 一种视频数据播放方法、装置、设备以及介质
CN109871843A (zh) 字符识别方法和装置、用于字符识别的装置
CN102214222A (zh) 通过手机摄像获取景物资讯的预分类及交互系统和方法
CN111699478A (zh) 图像检索装置、图像检索方法、电子设备及其控制方法
US20130086087A1 (en) Apparatus and method for generating and retrieving location-tagged content in computing device
US20130308864A1 (en) Information processing apparatus, information processing method, computer program, and image display apparatus
US20230154147A1 (en) Layout Analysis Method and Electronic Device
KR20180025754A (ko) 디스플레이장치 및 그 제어방법
CN113608808A (zh) 数据处理方法、移动终端及存储介质
KR20150047694A (ko) 전자장치 및 전자장치의 광고데이터 제공방법

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant