CN107885449A - 一种拍照搜索方法、装置、终端设备和存储介质 - Google Patents
一种拍照搜索方法、装置、终端设备和存储介质 Download PDFInfo
- Publication number
- CN107885449A CN107885449A CN201711096812.0A CN201711096812A CN107885449A CN 107885449 A CN107885449 A CN 107885449A CN 201711096812 A CN201711096812 A CN 201711096812A CN 107885449 A CN107885449 A CN 107885449A
- Authority
- CN
- China
- Prior art keywords
- topic
- target area
- object content
- searching method
- area
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
- G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
- G06F3/04845—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour
Landscapes
- Engineering & Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- User Interface Of Digital Computer (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明涉及电子终端技术领域,提出一种拍照搜索方法、装置、终端设备和计算机存储介质。所述拍照搜索方法包括:在启动拍照搜索应用后,获取目标图像;检测终端触屏上的触点操作;根据检测到的触点的位置确定所述目标图像中的目标区域;对所述目标区域进行识别,得到目标内容;根据所述目标内容进行搜索。可见,在拍摄完图像后,用户只需在触屏上简单地进行触点操作,终端系统即可自动完成目标区域的确定、目标内容的识别以及相关资源的搜索过程,与现有技术中需要用户操控选框从图像中截取出目标区域相比,大大提高了用户的操作效率。
Description
技术领域
本发明涉及电子终端技术领域,尤其涉及一种拍照搜索方法、装置、终端设备和计算机存储介质。
背景技术
目前,电子教育产品的拍照搜索功能越来越受到用户的欢迎。在实际操作中,用户首先打开相关的拍照搜索应用,然后对纸面内容进行拍照;在获得拍摄的图像后,用户通过操控终端界面中显示的选框,从该图像中截取出需要搜索答案的题目;最后终端根据截取出的选框中的图像区域,识别出题目内容并上传服务器,以获得题目的解析。显然,上述操作过程十分复杂,操作效率低。
发明内容
有鉴于此,本发明实施例提供了一种拍照搜索方法、装置、终端设备和计算机存储介质,能够解决拍照搜索的操作效率低的问题。
本发明实施例的第一方面提供了一种拍照搜索方法,包括:
在启动拍照搜索应用后,获取目标图像;
检测终端触屏上的触点操作;
根据检测到的触点的位置确定所述目标图像中的目标区域;
对所述目标区域进行识别,得到目标内容;
根据所述目标内容进行搜索。
本发明实施例的第二方面提供了一种拍照搜索装置,包括:
图像获取模块,用于在启动拍照搜索应用后,获取目标图像;
触点检测模块,用于检测终端触屏上的触点操作;
区域确定模块,用于根据检测到的触点的位置确定所述目标图像中的目标区域;
内容识别模块,用于对所述目标区域进行识别,得到目标内容;
搜索模块,用于根据所述目标内容进行搜索。
本发明实施例的第三方面提供了一种终端设备,包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现如本发明实施例的第一方面提供的拍照搜索方法的步骤。
本发明实施例的第四方面提供了一种计算机可读存储介质,所述计算机可读存储介质存储有计算机程序,所述计算机程序被处理器执行时实现如本发明实施例的第一方面提供的拍照搜索方法的步骤。
在本发明实施例中,在启动拍照搜索应用后,获取目标图像;检测终端触屏上的触点操作;根据检测到的触点的位置确定所述目标图像中的目标区域;对所述目标区域进行识别,得到目标内容;根据所述目标内容进行搜索。可见,在拍摄完图像后,用户只需在触屏上简单地进行触点操作,终端系统即可自动完成目标区域的确定、目标内容的识别以及相关资源的搜索过程,与现有技术中需要用户操控选框从图像中截取出目标区域相比,大大提高了用户的操作效率。
附图说明
为了更清楚地说明本发明实施例中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1是本发明实施例提供的一种拍照搜索方法的第一个实施例的流程图;
图2是本发明实施例提供的一种拍照搜索方法的第二个实施例的流程图;
图3是本发明实施例提供的一种拍照搜索方法的第三个实施例的流程图;
图4是本发明实施例提供的一种拍照搜索装置的一个实施例的结构图;
图5是本发明实施例提供的一种终端设备的示意图。
具体实施方式
以下描述中,为了说明而不是为了限定,提出了诸如特定系统结构、技术之类的具体细节,以便透彻理解本发明实施例。然而,本领域的技术人员应当清楚,在没有这些具体细节的其它实施例中也可以实现本发明。在其它情况中,省略对众所周知的系统、装置、电路以及方法的详细说明,以免不必要的细节妨碍本发明的描述。
本发明实施例提供了一种拍照搜索方法、装置、终端设备和计算机存储介质,能够解决拍照搜索的操作效率低的问题。
请参阅图1,本发明实施例中一种拍照搜索方法的第一个实施例包括:
101、在启动拍照搜索应用后,获取目标图像;
在启动拍照搜索应用后,获取目标图像。在具体操作中,用户可以打开手机、平板电脑或学习机等终端设备的拍照搜索应用软件,然后针对特定的对象 (比如试卷上的习题、英语单词或者书本的条形码等)进行拍照,得到目标图像。
传统的拍照搜索应用的启动主要包括以下步骤:开机、滑屏解锁、选择想要打开的拍照搜索应用、启动该应用。可见,上述操作步骤极为繁琐,用户的操作体验较差。
可选的,为了解决拍照搜索应用启动时操作繁琐的问题,所述启动拍照搜索应用可以包括:
在终端处于黑屏待机状态下,检测由预设的硬件开关产生的启动信号;
若检测到所述启动信号,则启动所述拍照搜索应用。
该硬件开关是终端上预设的一个开关,可以是终端原有的按键或组合键,也可以是专为启动拍照搜索应用而添加的按键或组合键。在终端处于黑屏待机状态下,用户只需按下该硬件开关即可直接启动终端的拍照搜索应用,而无需进行开机、滑屏解锁、选择拍照搜索应用等一系列操作,操作起来十分方便。
102、检测终端触屏上的触点操作;
在获取到目标图像后,检测终端触屏上的触点操作。具体的,用户在终端触屏显示的目标图像上通过触点操作选取一定的区域对象。该触点操作可以是针对一个位置的单次触点操作,可以是同一时间针对多个不同位置的单次触点操作,也可以是针对多个不同位置的具有时间先后顺序的多次触点操作。
103、根据检测到的触点的位置确定所述目标图像中的目标区域;
在检测到触点操作后,根据检测到的触点的位置确定所述目标图像中的目标区域。目标区域即所述目标图像中用户关注的内容所处的区域,比如目标图像为一页练习题,则目标区域为该页练习题中用户关注的一道或多道题目所处的区域。在具体操作时,用户对准目标图像中的具体内容进行点击,系统自动框选出该具体内容所处的区域作为目标区域。
104、对所述目标区域进行识别,得到目标内容;
在确定目标区域之后,对所述目标区域进行识别,得到目标内容。目标区域内的目标内容可以是题目、单词、字词、英文翻译、古诗、文言文和书本条形码等各种内容。
105、根据所述目标内容进行搜索。
在得到目标内容之后,根据所述目标内容进行搜索。终端系统从互联网或者本地的数据资源库中搜索与该目标内容相关的资源,并可以将搜索到的结果展示在终端屏幕上。比如,目标内容为题目,终端系统搜索该题目的答案作为结果展示在屏幕上;目标内容为英文段落,终端系统搜索该英文段落的中文翻译作为结果展示在屏幕上;目标内容为书本的条形码,终端系统搜索该条形码对应的书本内容或者相关视频资料作为结果等等。
具体的,步骤105可以包括:
根据所述目标内容确定需要搜索的资源类型;
以所述目标内容为关键字,搜索与所述资源类型相同的资源。
在识别得到目标内容后,即能根据所述目标内容确定需要搜索的资源类型,比如题目的答案、外文的翻译等。通过这样设置,一方面可以实现单个拍照搜索应用即可搜索多种不同类型的内容,另一方面能够提高检索的针对性,可以快速检索到符合用户需求的资源。
在本发明实施例中,在启动拍照搜索应用后,获取目标图像;检测终端触屏上的触点操作;根据检测到的触点的位置确定所述目标图像中的目标区域;对所述目标区域进行识别,得到目标内容;根据所述目标内容进行搜索。可见,在拍摄完图像后,用户只需在触屏上简单地进行触点操作,终端系统即可自动完成目标区域的确定、目标内容的识别以及相关资源的搜索过程,与现有技术中需要用户操控选框从图像中截取出目标区域相比,大大提高了用户的操作效率。
请参阅图2,本发明实施例中一种拍照搜索方法的第二个实施例包括:
201、在启动拍照搜索应用后,获取目标图像;
202、检测终端触屏上的触点操作;
步骤201至202与步骤101至102相同,具体可参照步骤101至102的相关说明。
203、判断所述触点的位置周围的第一范围区间内是否包含文本;
在检测到触点操作后,判断所述触点的位置周围的第一范围区间内是否包含文本。所述第一范围区间可以为以触点位置为圆心,预设长度为半径的一块圆形区域,该预设长度的具体数值可以根据目标图像中具有的文本内容的大小合理设定,比如可以以目标图像中一个文字的高度作为该预设长度。若所述触点的位置周围的第一范围区间内包含文本,则执行步骤204;若所述触点的位置周围的第一范围区间内不包含文本,则执行步骤205。
204、将所述触点的位置作为基点,并以所述目标图像中的非文本区域为界限将所述基点沿四周方向向外进行延伸,将延伸得到的区域确定为所述目标区域;
若所述触点的位置周围的第一范围区间内包含文本,则说明触点位于文本区域范围内,比如一道题目或者一段英文段落的区域范围内。此时将所述触点的位置作为基点,并以所述目标图像中的非文本区域为界限将所述基点沿四周方向向外进行延伸,将延伸得到的区域确定为所述目标区域。非文本区域即目标图像中不含文本的区域,比如两道试题之间的间隔区域。由于通常情况下试题之间、英文段落或者英文单词之间都留有一定宽度的间隔区域,通过这样设置,能够从目标图像中截取出用户期望得到的目标区域,比如某道试题所在的区域。
205、沿四周方向向外逐渐延伸所述第一范围区间直至所述第一范围区间内包含文本,将所述第一范围区间内包含的文本的所处位置作为基点,并以所述目标图像中的非文本区域为界限将所述基点沿四周方向向外进行延伸,将延伸得到的区域确定为所述目标区域;
若所述触点的位置周围的第一范围区间内不包含文本,则说明该触点位于文本区域范围之外。出现这种情况的原因可能是用户在触屏上点击时不慎点击到文本内容旁边的非文本区域,此时可以沿四周方向向外逐渐延伸所述第一范围区间直至所述第一范围区间内包含文本。在延伸完毕后,第一范围区间内的文本即为与触点的距离最小的文本,因此可认为该文本处于用户期望获取的目标区域内。接下来采用与步骤204相同的方法,将所述第一范围区间内包含的文本的所处位置作为基点,并以所述目标图像中的非文本区域为界限将所述基点沿四周方向向外进行延伸,将延伸得到的区域确定为所述目标区域。通过这样设置,无论用户是点击到文本内容或者是点击到文本内容旁边的非文本区域,都能够检测出用户期望获得的目标区域。
具体的,步骤204或205中的以所述目标图像中的非文本区域为界限将所述基点沿四周方向向外进行延伸,将延伸得到的区域确定为所述目标区域可以包括:
(1)使所述基点沿平面内的各个方向分别向外延伸第一距离,得到第一区域;
(2)根据所述第一区域内非文本区域的分布位置判断所述基点沿所述各个方向的延伸是否均到达非文本区域;
(3)若所述基点沿所述各个方向的延伸均到达非文本区域,则将所述第一区域确定为所述目标区域;
(4)若所述基点沿所述各个方向的延伸不是均到达非文本区域,则根据所述第一区域内非文本区域的分布位置确定所述各个方向中未延伸到达非文本区域的方向,使所述第一区域沿所述未延伸到达非文本区域的方向分别向外延伸所述第一距离,并返回步骤(2)。
对于上述步骤(1),使所述基点沿平面内的各个方向分别向外延伸第一距离得到的圆形区域为第一区域,第一距离可以根据目标图像中文本的高度合理设置,比如设为一个字符的高度。
对于上述步骤(2),根据所述第一区域内非文本区域的分布位置判断所述基点沿所述各个方向的延伸是否均到达非文本区域。比如若第一区域在某个方向上的边缘出现超过一定宽度的非文本区域,则判定该方向的延伸已经到达非文本区域。若判定所有方向的延伸都到达了非文本区域,则执行步骤(3),否则执行步骤(4)。
对于上述步骤(3),若所述基点沿所述各个方向的延伸均到达非文本区域,则说明第一区域的延伸完毕,此时将所述第一区域确定为所述目标区域。
对于上述步骤(4),根据所述第一区域内非文本区域的分布位置确定所述各个方向中未延伸到达非文本区域的方向,使所述第一区域沿所述未延伸到达非文本区域的方向分别向外再延伸所述第一距离(即已延伸到达非文本区域的方向不延伸),然后返回步骤(2)。
206、对所述目标区域进行识别,得到目标内容;
207、根据所述目标内容进行搜索。
步骤206至207与步骤104至105相同,具体可参照步骤104至105的相关说明。
在本发明实施例中,在启动拍照搜索应用后,获取目标图像;检测终端触屏上的触点操作;判断所述触点的位置周围的第一范围区间内是否包含文本;若包含文本,则将所述触点的位置作为基点,并以所述目标图像中的非文本区域为界限将所述基点沿四周方向向外进行延伸,将延伸得到的区域确定为所述目标区域;若不包含文本,则沿四周方向向外逐渐延伸所述第一范围区间直至所述第一范围区间内包含文本,将所述第一范围区间内包含的文本的所处位置作为基点,并以所述目标图像中的非文本区域为界限将所述基点沿四周方向向外进行延伸,将延伸得到的区域确定为所述目标区域;对所述目标区域进行识别,得到目标内容;根据所述目标内容进行搜索。可见,在拍摄完图像后,用户只需在触屏上简单地进行触点操作,终端系统即可自动完成目标区域的确定、目标内容的识别以及相关资源的搜索过程,与现有技术中需要用户操控选框从图像中截取出目标区域相比,大大提高了用户的操作效率。
请参阅图3,本发明实施例中一种拍照搜索方法的第三个实施例包括:
301、在启动拍照搜索应用后,获取目标图像;
302、检测终端触屏上的触点操作;
303、根据检测到的触点的位置确定所述目标图像中的目标区域;
304、对所述目标区域进行识别,得到目标内容;
305、根据所述目标内容进行搜索;
步骤301至305与步骤101至105相同,具体可参照步骤101至105的相关说明。需要指出的是,在本发明实施例中所述目标内容为题目。
306、若检测到用于获取多媒体资源的触屏操作,则从预设的多媒体资源库中获取与所述题目的解析相关的多媒体资源,并在终端屏幕播放所述多媒体资源。
在对题目进行搜索得到该题目的答案后,用户可能无法看懂答案(比如一些综合性较强的题目),此时多媒体资源类型的讲解是非常有效的解决方式,比如视频或者音频的题目讲解,能够将题目涉及的知识点和解答技巧都进行解析,便于用户理解。在具体操作时,用户可以输入预设的用于获取多媒体资源的触屏操作(比如单击触屏、双击触屏等),终端系统若检测到该触屏操作,则从预设的多媒体资源库中获取与所述题目的解析相关的多媒体资源,并在终端屏幕播放所述多媒体资源,使得用户能够理解题目的解答思路,提高难题的解决效果。该多媒体资源库可以设置于服务器端,也可以设置于本地端,可以通过题目中的关键文字信息建立多媒体资源和题目之间的对应关系。
在实际操作中,由于题库中的题目数量庞大,若对每个题都进行多媒体资源的录制,既耗费成本,也不必要,因此必须考虑哪些题目的多媒体资源需要录制。
进一步的,所述多媒体资源库包含的多媒体资源可以通过以下步骤产生:
(1)分别统计各个题目被搜索的次数;
(2)将被搜索的次数大于第一阈值的题目确定为高频题目;
(3)分别统计各个所述高频题目被要求获取多媒体资源的次数;
(4)将被要求获取多媒体资源的次数大于第二阈值的高频题目确定为目标题目;
(5)将录制得到的与所述目标题目的解析相关的多媒体资源存储至所述多媒体资源库中。
对于上述步骤(1)至(2),分别统计各个题目被搜索的次数,将被搜索的次数大于第一阈值的题目确定为高频题目。系统后台或者服务器统计各个题目被用户搜索的次数,将被搜索的次数大于第一阈值(比如1000)的题目确定为高频题目,可以建立一个高频题库记录这些高频题目。
对于上述步骤(3)至(4),分别统计各个所述高频题目被要求获取多媒体资源的次数,将被要求获取多媒体资源的次数大于第二阈值的高频题目确定为目标题目。系统后台或者服务器统计各个高频题目被要求获取多媒体资源的次数,将被要求获取多媒体资源的次数大于第二阈值(比如50)的高频题目确定为目标题目。通过这样设置,目标题目即为大多数用户较难理解的题目,具备录制多媒体资源进行解答的需求。
在步骤(5)中,由有经验的教师等人员对目标题目进行讲解并将该讲解过程录制成多媒体资源,最后将录制得到的与所述目标题目的解析相关的多媒体资源存储至所述多媒体资源库中。通过这样设置,能够针对用户需求最大的题目进行多媒体资源的录制,有效降低了多媒体资源录制的成本。
在本发明实施例中,在启动拍照搜索应用后,获取目标图像;检测终端触屏上的触点操作;根据检测到的触点的位置确定所述目标图像中的目标区域;对所述目标区域进行识别,得到题目;根据所述题目进行搜索;若检测到用于获取多媒体资源的触屏操作,则从预设的多媒体资源库中获取与所述题目的解析相关的多媒体资源,并在终端屏幕播放所述多媒体资源。可见,在拍摄完图像后,用户只需在触屏上简单地进行触点操作,终端系统即可自动完成目标区域的确定、目标内容的识别以及相关资源的搜索过程,与现有技术中需要用户操控选框从图像中截取出目标区域相比,大大提高了用户的操作效率。另外,用户还可以获取与题目的解析相关的多媒体资源,能够有效提高难题的解决效果。
应理解,上述各个实施例中各步骤的序号的大小并不意味着执行顺序的先后,各过程的执行顺序应以其功能和内在逻辑确定,而不应对本发明实施例的实施过程构成任何限定。
上面主要描述了一种拍照搜索方法,下面将对一种拍照搜索装置进行描述。
请参阅图4,本发明实施例中一种拍照搜索装置的一个实施例包括:
图像获取模块401,用于在启动拍照搜索应用后,获取目标图像;
触点检测模块402,用于检测终端触屏上的触点操作;
区域确定模块403,用于根据检测到的触点的位置确定所述目标图像中的目标区域;
内容识别模块404,用于对所述目标区域进行识别,得到目标内容;
搜索模块405,用于根据所述目标内容进行搜索。
本发明实施例还提供一种终端设备,包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现如图1至图3表示的任意一种拍照搜索方法的步骤。
本发明实施例还提供一种计算机可读存储介质,所述计算机可读存储介质存储有计算机程序,所述计算机程序被处理器执行时实现如图1至图3表示的任意一种拍照搜索方法的步骤。
图5是本发明一实施例提供的终端设备的示意图。如图5所示,该实施例的终端设备5包括:处理器50、存储器51以及存储在所述存储器51中并可在所述处理器50上运行的计算机程序52。所述处理器50执行所述计算机程序52 时实现上述各个拍照搜索方法的实施例中的步骤,例如图1所示的步骤101至 105。或者,所述处理器50执行所述计算机程序52时实现上述各装置实施例中各模块/单元的功能,例如图4所示模块401至405的功能。
所述计算机程序52可以被分割成一个或多个模块/单元,所述一个或者多个模块/单元被存储在所述存储器51中,并由所述处理器50执行,以完成本发明。所述一个或多个模块/单元可以是能够完成特定功能的一系列计算机程序指令段,该指令段用于描述所述计算机程序52在所述终端设备5中的执行过程。
所述终端设备5可以是各种类型的手机、桌上型计算机、笔记本、掌上电脑及云端服务器等计算设备。所述终端设备可包括,但不仅限于,处理器50、存储器51。本领域技术人员可以理解,图5仅仅是终端设备5的示例,并不构成对终端设备5的限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件,例如所述终端设备5还可以包括输入输出设备、网络接入设备、总线等。
所称处理器50可以是中央处理单元(Central Processing Unit,CPU),还可以是其他通用处理器、数字信号处理器(Digital Signal Processor,DSP)、专用集成电路(Application Specific Integrated Circuit,ASIC)、现成可编程门阵列 (Field-Programmable Gate Array,FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。
所述存储器51可以是所述终端设备5的内部存储单元,例如终端设备5 的硬盘或内存。所述存储器51也可以是所述终端设备5的外部存储设备,例如所述终端设备5上配备的插接式硬盘,智能存储卡(Smart Media Card,SMC),安全数字(Secure Digital,SD)卡,闪存卡(Flash Card)等。进一步地,所述存储器51还可以既包括所述终端设备5的内部存储单元也包括外部存储设备。所述存储器51用于存储所述计算机程序以及所述终端设备所需的其他程序和数据。所述存储器51还可以用于暂时地存储已经输出或者将要输出的数据。
所属领域的技术人员可以清楚地了解到,为了描述的方便和简洁,仅以上述各功能单元、模块的划分进行举例说明,实际应用中,可以根据需要而将上述功能分配由不同的功能单元、模块完成,即将所述装置的内部结构划分成不同的功能单元或模块,以完成以上描述的全部或者部分功能。实施例中的各功能单元、模块可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中,上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。另外,各功能单元、模块的具体名称也只是为了便于相互区分,并不用于限制本申请的保护范围。
所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,上述描述的系统,装置和单元的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
在上述实施例中,对各个实施例的描述都各有侧重,某个实施例中没有详述或记载的部分,可以参见其它实施例的相关描述。
本领域普通技术人员可以意识到,结合本文中所公开的实施例描述的各示例的单元及算法步骤,能够以电子硬件、或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本发明的范围。
在本发明所提供的实施例中,应该理解到,所揭露的装置和方法,可以通过其它的方式实现。例如,以上所描述的系统实施例仅仅是示意性的,例如,所述模块或单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通讯连接可以是通过一些接口,装置或单元的间接耦合或通讯连接,可以是电性,机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本发明各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明实现上述实施例方法中的全部或部分流程,也可以通过计算机程序来指令相关的硬件来完成,所述的计算机程序可存储于一计算机可读存储介质中,该计算机程序在被处理器执行时,可实现上述各个方法实施例的步骤。其中,所述计算机程序包括计算机程序代码,所述计算机程序代码可以为源代码形式、对象代码形式、可执行文件或某些中间形式等。所述计算机可读介质可以包括:能够携带所述计算机程序代码的任何实体或装置、记录介质、U盘、移动硬盘、磁碟、光盘、计算机存储器、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,RandomAccess Memory)、电载波信号、电信信号以及软件分发介质等。需要说明的是,所述计算机可读介质包含的内容可以根据司法管辖区内立法和专利实践的要求进行适当的增减,例如在某些司法管辖区,根据立法和专利实践,计算机可读介质不包括是电载波信号和电信信号。
以上所述实施例仅用以说明本发明的技术方案,而非对其限制;尽管参照前述实施例对本发明进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围,均应包含在本发明的保护范围之内。
Claims (10)
1.一种拍照搜索方法,其特征在于,包括:
在启动拍照搜索应用后,获取目标图像;
检测终端触屏上的触点操作;
根据检测到的触点的位置确定所述目标图像中的目标区域;
对所述目标区域进行识别,得到目标内容;
根据所述目标内容进行搜索。
2.如权利要求1所述的拍照搜索方法,其特征在于,所述根据检测到的触点的位置确定所述目标图像中的目标区域包括;
判断所述触点的位置周围的第一范围区间内是否包含文本;
若所述触点的位置周围的第一范围区间内包含文本,则将所述触点的位置作为基点,并以所述目标图像中的非文本区域为界限将所述基点沿四周方向向外进行延伸,将延伸得到的区域确定为所述目标区域;
若所述触点的位置周围的第一范围区间内不包含文本,则沿四周方向向外逐渐延伸所述第一范围区间直至所述第一范围区间内包含文本,将所述第一范围区间内包含的文本的所处位置作为基点,并以所述目标图像中的非文本区域为界限将所述基点沿四周方向向外进行延伸,将延伸得到的区域确定为所述目标区域。
3.如权利要求2所述的拍照搜索方法,其特征在于,所述以所述目标图像中的非文本区域为界限将所述基点沿四周方向向外进行延伸,将延伸得到的区域确定为所述目标区域包括:
使所述基点沿平面内的各个方向分别向外延伸第一距离,得到第一区域;
根据所述第一区域内非文本区域的分布位置判断所述基点沿所述各个方向的延伸是否均到达非文本区域;
若所述基点沿所述各个方向的延伸均到达非文本区域,则将所述第一区域确定为所述目标区域;
若所述基点沿所述各个方向的延伸不是均到达非文本区域,则根据所述第一区域内非文本区域的分布位置确定所述各个方向中未延伸到达非文本区域的方向,使所述第一区域沿所述未延伸到达非文本区域的方向分别向外延伸所述第一距离,返回执行根据所述第一区域内非文本区域的分布位置判断所述基点沿所述各个方向的延伸是否均到达非文本区域的步骤。
4.如权利要求1所述的拍照搜索方法,其特征在于,所述启动拍照搜索应用包括:
在终端处于黑屏待机状态下,检测由预设的硬件开关产生的启动信号;
若检测到所述启动信号,则启动所述拍照搜索应用。
5.如权利要求1所述的拍照搜索方法,其特征在于,所述根据所述目标内容进行搜索包括:
根据所述目标内容确定需要搜索的资源类型;
以所述目标内容为关键字,搜索与所述资源类型相同的资源。
6.如权利要求1至5中任一项所述的拍照搜索方法,其特征在于,所述目标内容为题目,在根据所述目标内容进行搜索之后,还包括:
若检测到用于获取多媒体资源的触屏操作,则从预设的多媒体资源库中获取与所述题目的解析相关的多媒体资源,并在终端屏幕播放所述多媒体资源。
7.如权利要求6所述的拍照搜索方法,其特征在于,所述多媒体资源库包含的多媒体资源通过以下步骤产生:
分别统计各个题目被搜索的次数;
将被搜索的次数大于第一阈值的题目确定为高频题目;
分别统计各个所述高频题目被要求获取多媒体资源的次数;
将被要求获取多媒体资源的次数大于第二阈值的高频题目确定为目标题目;
将录制得到的与所述目标题目的解析相关的多媒体资源存储至所述多媒体资源库中。
8.一种拍照搜索装置,其特征在于,包括:
图像获取模块,用于在启动拍照搜索应用后,获取目标图像;
触点检测模块,用于检测终端触屏上的触点操作;
区域确定模块,用于根据检测到的触点的位置确定所述目标图像中的目标区域;
内容识别模块,用于对所述目标区域进行识别,得到目标内容;
搜索模块,用于根据所述目标内容进行搜索。
9.一种终端设备,包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序,其特征在于,所述处理器执行所述计算机程序时实现如权利要求1至7中任一项所述的拍照搜索方法的步骤。
10.一种计算机可读存储介质,所述计算机可读存储介质存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现如权利要求1至7中任一项所述的拍照搜索方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201711096812.0A CN107885449B (zh) | 2017-11-09 | 2017-11-09 | 一种拍照搜索方法、装置、终端设备和存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201711096812.0A CN107885449B (zh) | 2017-11-09 | 2017-11-09 | 一种拍照搜索方法、装置、终端设备和存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN107885449A true CN107885449A (zh) | 2018-04-06 |
CN107885449B CN107885449B (zh) | 2020-01-03 |
Family
ID=61779642
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201711096812.0A Active CN107885449B (zh) | 2017-11-09 | 2017-11-09 | 一种拍照搜索方法、装置、终端设备和存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN107885449B (zh) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110837833A (zh) * | 2019-11-14 | 2020-02-25 | 广东小天才科技有限公司 | 题目选取方法、装置、终端设备及可读存储介质 |
CN111026924A (zh) * | 2019-03-11 | 2020-04-17 | 广东小天才科技有限公司 | 一种待搜索内容的获取方法及电子设备 |
CN112000796A (zh) * | 2020-08-05 | 2020-11-27 | 深圳中兴网信科技有限公司 | 答案生成方法、电子设备和计算机可读存储介质 |
Citations (16)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101667251A (zh) * | 2008-09-05 | 2010-03-10 | 三星电子株式会社 | 具备辅助定位功能的ocr识别方法和装置 |
CN102314782A (zh) * | 2011-09-16 | 2012-01-11 | 无敌科技(西安)有限公司 | 依据学习效果评量、评量结果产生教学内容的装置及储存媒体 |
CN102737238A (zh) * | 2011-04-01 | 2012-10-17 | 洛阳磊石软件科技有限公司 | 基于手势动作的字符识别系统、方法、及其应用 |
US20130021346A1 (en) * | 2011-07-22 | 2013-01-24 | Terman David S | Knowledge Acquisition Mulitplex Facilitates Concept Capture and Promotes Time on Task |
CN102930262A (zh) * | 2012-09-19 | 2013-02-13 | 北京百度网讯科技有限公司 | 一种从图像中提取文字行的方法及装置 |
CN103019578A (zh) * | 2011-09-27 | 2013-04-03 | 中国移动通信集团公司 | 文本选择方法和装置以及图片截取方法和装置 |
CN103455590A (zh) * | 2013-08-29 | 2013-12-18 | 百度在线网络技术(北京)有限公司 | 在触屏设备中进行检索的方法和装置 |
CN104157171A (zh) * | 2014-08-13 | 2014-11-19 | 三星电子(中国)研发中心 | 一种点读系统及其方法 |
CN105450900A (zh) * | 2014-06-24 | 2016-03-30 | 佳能株式会社 | 用于文档图像的畸变校正方法和设备 |
CN105956078A (zh) * | 2016-04-29 | 2016-09-21 | 广东小天才科技有限公司 | 一种智能设备的题目搜索方法和装置 |
CN106227398A (zh) * | 2016-06-29 | 2016-12-14 | 宇龙计算机通信科技(深圳)有限公司 | 一种相机图像文字显示方法及装置 |
CN106293365A (zh) * | 2015-05-20 | 2017-01-04 | 广州爱九游信息技术有限公司 | 一种获取页面内容的方法及装置 |
CN106326415A (zh) * | 2016-08-24 | 2017-01-11 | 广东小天才科技有限公司 | 一种拍照搜题的方法及装置 |
CN106484831A (zh) * | 2016-09-29 | 2017-03-08 | 百度在线网络技术(北京)有限公司 | 搜索系统、方法和装置 |
CN106527945A (zh) * | 2016-11-09 | 2017-03-22 | 广东小天才科技有限公司 | 文本信息提取方法及装置 |
CN107239209A (zh) * | 2017-06-06 | 2017-10-10 | 广东小天才科技有限公司 | 一种拍照搜索方法、装置、终端及存储介质 |
-
2017
- 2017-11-09 CN CN201711096812.0A patent/CN107885449B/zh active Active
Patent Citations (16)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101667251A (zh) * | 2008-09-05 | 2010-03-10 | 三星电子株式会社 | 具备辅助定位功能的ocr识别方法和装置 |
CN102737238A (zh) * | 2011-04-01 | 2012-10-17 | 洛阳磊石软件科技有限公司 | 基于手势动作的字符识别系统、方法、及其应用 |
US20130021346A1 (en) * | 2011-07-22 | 2013-01-24 | Terman David S | Knowledge Acquisition Mulitplex Facilitates Concept Capture and Promotes Time on Task |
CN102314782A (zh) * | 2011-09-16 | 2012-01-11 | 无敌科技(西安)有限公司 | 依据学习效果评量、评量结果产生教学内容的装置及储存媒体 |
CN103019578A (zh) * | 2011-09-27 | 2013-04-03 | 中国移动通信集团公司 | 文本选择方法和装置以及图片截取方法和装置 |
CN102930262A (zh) * | 2012-09-19 | 2013-02-13 | 北京百度网讯科技有限公司 | 一种从图像中提取文字行的方法及装置 |
CN103455590A (zh) * | 2013-08-29 | 2013-12-18 | 百度在线网络技术(北京)有限公司 | 在触屏设备中进行检索的方法和装置 |
CN105450900A (zh) * | 2014-06-24 | 2016-03-30 | 佳能株式会社 | 用于文档图像的畸变校正方法和设备 |
CN104157171A (zh) * | 2014-08-13 | 2014-11-19 | 三星电子(中国)研发中心 | 一种点读系统及其方法 |
CN106293365A (zh) * | 2015-05-20 | 2017-01-04 | 广州爱九游信息技术有限公司 | 一种获取页面内容的方法及装置 |
CN105956078A (zh) * | 2016-04-29 | 2016-09-21 | 广东小天才科技有限公司 | 一种智能设备的题目搜索方法和装置 |
CN106227398A (zh) * | 2016-06-29 | 2016-12-14 | 宇龙计算机通信科技(深圳)有限公司 | 一种相机图像文字显示方法及装置 |
CN106326415A (zh) * | 2016-08-24 | 2017-01-11 | 广东小天才科技有限公司 | 一种拍照搜题的方法及装置 |
CN106484831A (zh) * | 2016-09-29 | 2017-03-08 | 百度在线网络技术(北京)有限公司 | 搜索系统、方法和装置 |
CN106527945A (zh) * | 2016-11-09 | 2017-03-22 | 广东小天才科技有限公司 | 文本信息提取方法及装置 |
CN107239209A (zh) * | 2017-06-06 | 2017-10-10 | 广东小天才科技有限公司 | 一种拍照搜索方法、装置、终端及存储介质 |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111026924A (zh) * | 2019-03-11 | 2020-04-17 | 广东小天才科技有限公司 | 一种待搜索内容的获取方法及电子设备 |
CN110837833A (zh) * | 2019-11-14 | 2020-02-25 | 广东小天才科技有限公司 | 题目选取方法、装置、终端设备及可读存储介质 |
CN112000796A (zh) * | 2020-08-05 | 2020-11-27 | 深圳中兴网信科技有限公司 | 答案生成方法、电子设备和计算机可读存储介质 |
Also Published As
Publication number | Publication date |
---|---|
CN107885449B (zh) | 2020-01-03 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN103294363B (zh) | 一种搜索方法和终端 | |
CN103324674B (zh) | 网页内容选取方法及装置 | |
WO2016082598A1 (zh) | 一种快速查找应用程序的方法、装置及设备 | |
CN102902697A (zh) | 用于生成结构化文档导视图的方法和系统 | |
CN104239313A (zh) | 基于移动终端的屏幕中显示文字的搜索方法与移动终端 | |
CN101930457A (zh) | 一种供用户进行快速选择对象及搜索的方法、设备和系统 | |
CN107885449A (zh) | 一种拍照搜索方法、装置、终端设备和存储介质 | |
US11314757B2 (en) | Search results modulator | |
US20180011933A1 (en) | Method, apparatus, and server for generating hotspot content | |
CN107578659A (zh) | 电子题目的生成方法、生成装置及终端 | |
CN107517312A (zh) | 一种壁纸切换方法、装置及终端设备 | |
CN107832311A (zh) | 一种翻译方法、装置、终端及可读存储设备 | |
CN110032616A (zh) | 一种文档阅读情况的采集方法及装置 | |
CN106953913A (zh) | 一种信息推送方法及移动终端 | |
CN114356166A (zh) | 应用图标显示方法及相关设备 | |
CN106371706A (zh) | 应用快捷方式位置选择的方法及装置 | |
CN103631796A (zh) | 网址分类管理方法及电子装置 | |
WO2014023181A1 (en) | Method and device for processing tabbed-page | |
CN106919593B (zh) | 一种搜索的方法和装置 | |
CN114241501A (zh) | 影像文档处理方法、装置及电子设备 | |
US9384285B1 (en) | Methods for identifying related documents | |
CN108133048A (zh) | 文件排序方法、装置及移动终端 | |
CN112422754A (zh) | 智能语音的配置方法、装置、终端设备及存储介质 | |
CN102799650B (zh) | 一种移动通讯终端及其字符串搜索方法 | |
CN107272989B (zh) | 应用启动方法、装置及终端设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |