CN110399748A - 一种基于图像识别的截图方法和装置 - Google Patents

一种基于图像识别的截图方法和装置 Download PDF

Info

Publication number
CN110399748A
CN110399748A CN201910666132.0A CN201910666132A CN110399748A CN 110399748 A CN110399748 A CN 110399748A CN 201910666132 A CN201910666132 A CN 201910666132A CN 110399748 A CN110399748 A CN 110399748A
Authority
CN
China
Prior art keywords
information
operation behavior
user
shot
screenshot
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201910666132.0A
Other languages
English (en)
Inventor
李文博
赖志忠
陈翔
王晓冰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
China Construction Bank Corp
CCB Finetech Co Ltd
Original Assignee
China Construction Bank Corp
CCB Finetech Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by China Construction Bank Corp, CCB Finetech Co Ltd filed Critical China Construction Bank Corp
Priority to CN201910666132.0A priority Critical patent/CN110399748A/zh
Publication of CN110399748A publication Critical patent/CN110399748A/zh
Priority to PCT/CN2020/101546 priority patent/WO2021012973A1/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/60Protecting data
    • G06F21/602Providing cryptographic facilities or services
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/60Protecting data
    • G06F21/62Protecting access to data via a platform, e.g. using keys or access control rules
    • G06F21/6218Protecting access to data via a platform, e.g. using keys or access control rules to a system of files or objects, e.g. local or distributed file system or database
    • G06F21/6245Protecting personal data, e.g. for financial or medical purposes
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/60Type of objects
    • G06V20/62Text, e.g. of license plates, overlay texts or captions on TV images
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/40Document-oriented image-based pattern recognition

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Bioethics (AREA)
  • General Health & Medical Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • General Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Computer Security & Cryptography (AREA)
  • Computer Hardware Design (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Multimedia (AREA)
  • Medical Informatics (AREA)
  • Databases & Information Systems (AREA)
  • Artificial Intelligence (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本发明公开了一种基于图像识别的截图方法和装置,涉及计算机技术领域。该方法的一具体实施方式包括:检测当前页面下的用户操作行为以判断是否是截图操作行为,当前页面为当前启动的应用软件或访问的网页地址对应的页面;在判断是截图操作行为的情况下,识别当前页面的截图信息;判断截图信息是否包括隐私信息,若是,则提示用户确定加密范围;根据加密范围对隐私信息加密,得到加密后的截图。该实施方式能识别截图中的隐私信息并提示用户,支持用户自主选择加密范围以对隐私信息加密,满足用户截图及隐私保护需求,检测页面细化到具体应用软件、网页的具体页面,应用场景区分度高,可检测系统默认/第三方截图工具的截图行为,识别范围更广。

Description

一种基于图像识别的截图方法和装置
技术领域
本发明涉及计算机技术领域,尤其涉及一种基于图像识别的截图方法和装置。
背景技术
截图是指在互联网产品中以图像形式获取、保存产品界面信息内容的一种操作。在互联网时代,截图工具已经成为移动智能设备的必备功能,在PC(个人计算机)端截图工具或产品的截图功能也已经广泛应用。但在金融、公共服务等特殊领域,截图功能的使用可能导致个人或企业隐私信息泄漏。现有方案在识别到预设截图操作后仅支持截图或取消截图,对用户实际使用价值较低,不利于用户的后续操作,且应用场景区分度不高,不能识别第三方截图功能,识别范围有限。
在实现本发明过程中,发明人发现现有技术中至少存在如下问题:
在识别到预设截图操作后仅支持截图或取消截图,对用户实际使用价值较低,不利于用户的后续操作,无法满足用户截图及隐私保护的需求,且应用场景区分度不高,不能识别第三方截图功能,识别范围有限。
发明内容
有鉴于此,本发明实施例提供一种基于图像识别的截图方法和装置,能够识别截图中的隐私信息内容并提示用户,支持用户自主选择隐私信息加密范围,根据用户确定的加密范围对截图中的隐私信息加密,满足用户截图及隐私保护的需求,能将检测页面细化到具体应用软件、网页的具体页面,应用场景区分度更高,可检测系统默认/第三方截图工具的截图行为,识别范围更广。
为实现上述目的,根据本发明实施例的一个方面,提供了一种基于图像识别的截图方法。
一种基于图像识别的截图方法,包括:检测当前页面下的用户操作行为,以判断所述用户操作行为是否是截图操作行为,所述当前页面为当前启动的应用软件或访问的网页地址对应的页面;在判断所述用户操作行为是截图操作行为的情况下,识别所述当前页面的截图信息;判断所述截图信息是否包括隐私信息,若是,则提示用户确定对所述隐私信息的加密范围;根据所述加密范围对所述隐私信息加密,得到加密后的所述截图。
可选地,还包括预先将符合预定安全等级的应用软件和网页地址添加到名单;识别所述当前页面的截图信息的步骤之前,还包括:确定所述当前启动的应用软件或访问的网页地址在所述名单中。
可选地,还包括预先保存具有截图功能的软件的截图操作行为,根据以下判断所述用户操作行为是否是截图操作行为:将所述当前页面下的用户操作行为与所述具有截图功能的软件的截图操作行为进行比对,如果比对一致,则判断所述用户操作行为是截图操作行为,否则,判断所述用户操作行为不是截图操作行为。
可选地,还包括预先保存符合信息安全等级的预设信息,判断所述截图信息是否包括隐私信息的步骤,包括:将所述截图信息与所述预设信息进行比对,如果二者存在比对一致的信息,则所述截图信息包括所述隐私信息,且所述隐私信息为所述比对一致的信息;如果所述二者不存在所述比对一致的信息,则所述截图信息不包括所述隐私信息。
可选地,所述预设信息为文字信息。
可选地,通过以下方式识别所述当前页面的截图信息:根据图像识别算法识别所述截图操作行为所截获的区域中的文字信息,将识别出的所述文字信息作为所述截图信息。
可选地,还包括在判断所述用户操作行为是所述截图操作行为的情况下,识别所述截图信息在所述当前页面的位置,提示用户确定对所述隐私信息的加密范围的步骤,包括:根据所述截图信息在所述当前页面的位置,得到所述隐私信息在所述当前页面的位置;根据所述隐私信息及其在所述当前页面的位置生成供加密的默认范围;提示所述用户对所述默认范围进行选择或编辑操作,以确定所述加密范围。
根据本发明实施例的另一方面,提供了一种基于图像识别的截图装置。
一种基于图像识别的截图装置,包括:行为触发模块,用于检测当前页面下的用户操作行为,以判断所述用户操作行为是否是截图操作行为,所述当前页面为当前启动的应用软件或访问的网页地址对应的页面;图像识别模块,用于在所述用户操作行为是截图操作行为的情况下,识别所述当前页面的截图信息;隐私信息判断模块,用于判断所述截图信息是否包括隐私信息;提示信息模块,用于在所述截图信息包括所述隐私信息的情况下,提示用户确定对所述隐私信息的加密范围;图像编辑模块,用于根据所述加密范围对所述隐私信息加密,得到加密后的所述截图。
可选地,还包括名单管理模块,用于:预先将符合预定安全等级的应用软件和网页地址添加到名单;以及,判断所述当前启动的应用软件或访问的网页地址是否在所述名单中。
可选地,所述行为触发模块中预先保存具有截图功能的软件的截图操作行为,所述行为触发模块还用于:将所述当前页面下的用户操作行为与所述具有截图功能的软件的截图操作行为进行比对,如果比对一致,则判断所述用户操作行为是截图操作行为,否则,判断所述用户操作行为不是截图操作行为。
可选地,所述隐私信息判断模块中预先保存符合信息安全等级的预设信息,所述隐私信息判断模块还用于:将所述截图信息与所述预设信息进行比对,如果二者存在比对一致的信息,则所述截图信息包括所述隐私信息,且所述隐私信息为所述比对一致的信息;如果所述二者不存在所述比对一致的信息,则所述截图信息不包括所述隐私信息。
可选地,所述预设信息为文字信息。
可选地,所述图像识别模块还用于:根据图像识别算法识别所述截图操作行为所截获的区域中的文字信息,将识别出的所述文字信息作为所述截图信息。
可选地,所述图像识别模块还用于在所述用户操作行为是所述截图操作行为的情况下,识别所述截图信息在所述当前页面的位置,所述提示信息模块还用于:根据所述截图信息在所述当前页面的位置,得到所述隐私信息在所述当前页面的位置;根据所述隐私信息及其在所述当前页面的位置生成供加密的默认范围;提示所述用户对所述默认范围进行选择或编辑操作,以确定所述加密范围。
根据本发明实施例的又一方面,提供了一种电子设备。
一种电子设备,包括:一个或多个处理器;存储器,用于存储一个或多个程序,当所述一个或多个程序被所述一个或多个处理器执行时,使得所述一个或多个处理器实现本发明提供的基于图像识别的截图方法。
根据本发明实施例的又一方面,提供了一种计算机可读介质。
一种计算机可读介质,其上存储有计算机程序,所述程序被处理器执行时实现实现本发明提供的基于图像识别的截图方法。
上述发明中的一个实施例具有如下优点或有益效果:检测当前页面下的用户操作行为,以判断用户操作行为是否是截图操作行为,当前页面为当前启动的应用软件或访问的网页地址对应的页面;在判断用户操作行为是截图操作行为的情况下,识别当前页面的截图信息;判断截图信息是否包括隐私信息,若是,则提示用户确定对隐私信息的加密范围;根据加密范围对隐私信息加密,得到加密后的截图。能够识别截图中的隐私信息内容并提示用户,提示的内容更具针对性,支持用户自主选择隐私信息加密范围,根据用户确定的加密范围对截图中的隐私信息进行加密处理,满足用户截图及隐私保护的需求,能将检测页面细化到具体应用软件、网页的具体页面,应用场景区分度更高,既可检测默认截图工具的截图行为,还可检测第三方截图工具的截图行为,识别范围更广。
上述的非惯用的可选方式所具有的进一步效果将在下文中结合具体实施方式加以说明。
附图说明
附图用于更好地理解本发明,不构成对本发明的不当限定。其中:
图1是根据本发明第一实施例的基于图像识别的截图方法的主要步骤示意图;
图2是根据本发明第二实施例的基于图像识别的截图流程示意图;
图3是根据本发明第三实施例的基于图像识别的截图装置的主要模块示意图;
图4是根据本发明第四实施例的基于图像识别的截图装置的工作流程示意图;
图5是本发明实施例可以应用于其中的示例性系统架构图;
图6是适于用来实现本发明实施例的终端设备或服务器的计算机系统的结构示意图。
具体实施方式
以下结合附图对本发明的示范性实施例做出说明,其中包括本发明实施例的各种细节以助于理解,应当将它们认为仅仅是示范性的。因此,本领域普通技术人员应当认识到,可以对这里描述的实施例做出各种改变和修改,而不会背离本发明的范围和精神。同样,为了清楚和简明,以下的描述中省略了对公知功能和结构的描述。
本领域技术技术人员知道,本发明的实施方式可以实现为一种系统、装置、设备、方法或计算机程序产品。因此,本公开可以具体实现为以下形式,即:完全的硬件、完全的软件(包括固件、驻留软件、微代码等),或者硬件和软件结合的形式。
图1是根据本发明第一实施例的基于图像识别的截图方法的主要步骤示意图。
如图1所示,本实施例的基于图像识别的截图方法主要包括如下的步骤S101至步骤S104。
步骤S101:检测当前页面下的用户操作行为,以判断用户操作行为是否是截图操作行为。
当前页面为当前启动的应用软件或访问的网页地址对应的页面。
可以预先保存具有截图功能的软件的截图操作行为。具体可以保存具有截图功能的各软件、具有截图功能的各软件的截图操作行为以及具有截图功能的各软件与截图操作行为之间的对应关系。
截图操作行为例如可以是截图指令等,不同的具有截图功能的软件的截图操作行为可以相同或不同。
本实施例的具有截图功能的软件可以是终端的系统默认截图工具,也可以是在终端上安装的第三方截图软件。终端可以是手机、PAD(平板电脑)等移动终端,也可以是个人计算机等固定终端。
在判断用户操作行为是否是截图操作行为时,可以通过如下方式来判断:将当前页面下的用户操作行为与具有截图功能的软件的截图操作行为进行比对,如果比对一致,则判断用户操作行为是截图操作行为,否则,判断用户操作行为不是截图操作行为。例如,具有截图功能的软件A的截图操作行为用X表示,当检测到当前页面下的用户操作行为是X时,那么将其与预先保存具有截图功能的软件的截图操作行为(其中包括A的截图操作行为X)进行比对,则检测到的用户操作行为X与预先保存的A的截图操作行为X比对一致,则可以判断出当前页面下的用户操作行为是截图操作行为。
在用户操作行为不是截图操作行为的情况下,表示用户没有进行截图操作,直接结束本方法的流程。
步骤S102:在判断用户操作行为是截图操作行为的情况下,识别当前页面的截图信息。
识别当前页面的截图信息的过程具体如下:根据图像识别算法识别截图操作行为所截获的区域中的文字信息,图像识别算法可以对该截获的区域中的文字、图像、表格、表单等内容进行识别,识别出其中的文字信息,并将识别出的文字信息作为截图信息。
在判断用户操作行为是截图操作行为的情况下,还可以识别截图信息在当前页面的位置,其中包括:识别每行文字信息的具体文字在当前页面的位置。
步骤S103:判断截图信息是否包括隐私信息,若是,则提示用户确定对隐私信息的加密范围。
可以预先保存符合信息安全等级的预设信息,信息安全等级指示了信息的隐私性,符合信息安全等级的预设信息即涉及到用户隐私的信息,例如身份证、家庭住址、支付密码等信息。
通过如下方式判断截图信息是否包括隐私信息:将截图信息与该预设信息进行比对,如果二者存在比对一致的信息,则截图信息包括隐私信息,且隐私信息为该比对一致的信息;如果二者不存在比对一致的信息,则截图信息不包括隐私信息。
其中,预设信息可以为文字信息。
提示用户确定对隐私信息的加密范围的步骤,具体可以包括:根据截图信息在当前页面的位置,得到隐私信息在当前页面的位置;根据隐私信息及其在当前页面的位置生成供加密的默认范围;提示用户对默认范围进行选择或编辑操作,以确定加密范围。
供加密的默认范围包括所有隐私信息,提示用户对默认范围进行选择或编辑操作,具体地,可以提供例如包括“全选”、“全不选”、“自定义”的选项框,以供用户选择,用户在选择“全选”的情况下,表示用户同意对所有隐私信息加密,加密范围即为默认范围。用户在选择“全不选”的情况下,表示用户拒绝对隐私信息加密,那将不进行加密处理,用户可以照常截图,只是得到的截图中隐私信息是未经加密的。在用户选择“自定义”的情况下,表示用户同意对隐私信息加密,但需要对默认范围进行编辑,那么,对应供加密的默认范围,向用户展示编辑框,以由用户自主选择对哪些隐私信息加密,将用户选择的隐私信息作为加密范围。
在用户拒绝对隐私信息加密,或者,截图信息中不包括隐私信息的情况下,则直接根据截图操作行为所截获的区域生成相应的截图,然后结束截图操作。
步骤S104:根据加密范围对隐私信息加密,得到加密后的截图。
具体地,根据隐私信息在当前页面的位置以及用户确定的加密范围,对截图操作行为所截获的区域中的隐私信息进行加密处理,将经过该加密处理的截图操作行为所截获的区域的内容保存为图片格式,即加密后的截图,然后结束截图操作。
图2是根据本发明第二实施例的基于图像识别的截图流程示意图。
如图2所示,本实施例的基于图像识别的截图流程包括如下的步骤S201至步骤S207。
步骤S201:预先将符合预定安全等级的应用软件和网页地址添加到名单。
步骤S202:预先保存具有截图功能的软件的截图操作行为。
步骤S203:预先保存符合信息安全等级的文字信息。
步骤S204:当检测到名单中的应用软件或网页地址对应的某一页面下的用户操作行为,是预先保存的某一具有截图功能的软件的截图操作行为时,识别该页面的截图信息以及截图信息在该页面的位置。
步骤S205:判断截图信息中是否包括隐私信息,该隐私信息是截图信息与预先保存的符合信息安全等级的文字信息二者的比对一致的信息。
步骤S206:在截图信息中包括隐私信息的情况下,提示用户确定对隐私信息的加密范围。
步骤S207:根据隐私信息在当前页面的位置以及用户确定的加密范围,对截图操作行为所截获的区域中的隐私信息进行加密处理,得到加密后的截图。
上述流程中,步骤S201、步骤S202、步骤S203之间的先后顺序可以相互调换。
本实施例可以根据隐私保护的需求程度对应用软件、网页地址评级,得到各应用软件、网页地址的安全等级,安全等级越高对隐私保护的要求越高。可以将对隐私保护要求高的支付软件、金融交易软件、银行网页地址下的支付页面等,作为符合预定安全等级的应用软件和网页地址,并添加到名单中,本发明实施例添加到名单的应用软件和网页地址不限于上述列举出的应用软件和网页地址。
当用户启动一个应用软件或访问一个网页地址时,本实施例判断当前启动的应用软件或访问的网页地址是否在名单中,并检测当前启动的应用软件或访问的网页地址对应的页面下的用户操作行为,以判断用户操作行为是否是预先保存的某一具有截图功能的软件的截图操作行为。如果当前启动的应用软件或访问的网页地址在名单中,并且用户操作行为是截图操作行为,那么,识别该页面的截图信息以及截图信息在该页面的位置。
如果用户操作行为不是截图操作行为,那么直接结束本流程。
如果当前启动的应用软件或访问的网页地址不在名单中,且用户操作行为是截图操作行为,那么,不执行识别该页面的截图信息以及截图信息在该页面的位置的操作,而直接根据截图操作行为所截获的区域生成相应的截图,然后结束截图操作。
此外,如果判断截图信息中不包括隐私信息,则不进行加密处理,也将直接根据截图操作行为所截获的区域生成相应的截图,然后结束截图操作。
本发明实施例的基于图像识别的截图流程,通过预设截图操作行为数据、预设符合安全等级的应用软件和网页地址名单数据、预设符合安全等级的隐私信息数据,根据检测到的用户所在页面位置及截图操作行为,对涉及隐私信息内容的截图操作行为进行提醒,并且可以识别隐私信息位置,支持用户确定隐私信息的加密范围,便捷地完成对隐私信息的加密处理,为用户在金融、公共服务等特殊互联网产品使用过程提供了高效、便捷地技术支持,提升了产品的用户体验。
图3是根据本发明第三实施例的基于图像识别的截图装置的主要模块示意图。
本实施例的基于图像识别的截图装置300主要包括:行为触发模块301、图像识别模块302、隐私信息判断模块303、提示信息模块304、图像编辑模块305。
行为触发模块301,用于检测当前页面下的用户操作行为,以判断用户操作行为是否是截图操作行为,当前页面为当前启动的应用软件或访问的网页地址对应的页面。
本实施例的行为触发模块301中预先保存具有截图功能的软件的截图操作行为。其中可以包括:保存具有截图功能的各软件、具有截图功能的各软件的截图操作行为以及具有截图功能的各软件与截图操作行为之间的对应关系。
并且,行为触发模块301具体可以用于:将当前页面下的用户操作行为与具有截图功能的软件的截图操作行为进行比对,如果比对一致,则判断用户操作行为是截图操作行为,否则,判断用户操作行为不是截图操作行为。
行为触发模块301可以将用户操作行为是否是截图操作行为的判断结果反馈给其他模块。
图像识别模块302,用于在用户操作行为是截图操作行为的情况下,识别当前页面的截图信息。
具体地,图像识别模块302可以用于:根据图像识别算法识别截图操作行为所截获的区域中的文字信息,将识别出的文字信息作为截图信息,然后发送给隐私信息判断模块303。
图像识别模块302还可以用于在用户操作行为是截图操作行为的情况下,识别截图信息在当前页面的位置,然后发送给提示信息模块304。
隐私信息判断模块303,用于判断截图信息是否包括隐私信息,并可以将判断结果反馈给其他模块。
本实施例的隐私信息判断模块303中预先保存符合信息安全等级的预设信息,该预设信息可以是文字信息。
并且,隐私信息判断模块303具体可以用于:将截图信息与预设信息进行比对,如果二者存在比对一致的信息,则截图信息包括隐私信息,且隐私信息为该比对一致的信息;如果二者不存在比对一致的信息,则截图信息不包括隐私信息。
提示信息模块304,用于在截图信息包括隐私信息的情况下,提示用户确定对隐私信息的加密范围。
提示信息模块304具体可以用于:根据截图信息在当前页面的位置,得到隐私信息在当前页面的位置;根据隐私信息及其在当前页面的位置生成供加密的默认范围,默认范围包括所有隐私信息;提示用户对默认范围进行选择或编辑操作,以确定加密范围。
用户确定加密范围表示用户同意对隐私信息进行加密操作,则激活图像编辑模块305。若用户拒绝加密,则激活常规截图模块(该模块将在下文介绍)。
图像编辑模块305,用于根据加密范围对隐私信息加密,得到加密后的截图。
本实施例的加密是指对隐私信息的加密处理或编辑处理。图像编辑模块305能够能够将处理后的内容以图片格式保存。
作为优选实施例,基于图像识别的截图装置300还可以包括名单管理模块,用于预先将符合预定安全等级的应用软件和网页地址添加到名单,名单管理模块还可以用于监测用户打开的页面,并判断当前启动的应用软件或访问的网页地址是否在名单中,以访问网页地址为例,名单管理模块具体用于将用户访问的网页地址与预先保存的符合预定安全等级的网页地址进行比对,以判断当前访问的网页地址是否在名单中,并将比对结果反馈给其他模块。
可以在用户打开应用软件或网页地址时,激活名单管理模块。
优选地,可以在当前启动的应用软件或访问的网页地址在名单中,且用户操作行为是截图操作行为的情况下,激活图像识别模块302,以执行识别当前页面的截图信息的操作。如果用户操作行为是截图操作行为,但当前启动的应用软件或访问的网页地址不在名单中,则不激活图像识别模块302,从而不执行识别当前页面的截图信息的操作。
图像识别的截图装置300还可以包括常规截图模块,用于在当前启动的应用软件或访问的网页地址不在名单中,且用户操作行为是截图操作行为,或者,截图信息中不包括隐私信息,或者,在提示用户确定对隐私信息的加密范围之后用户选择拒绝加密的情况下,直接根据截图操作行为所截获的区域生成相应的截图,然后结束截图操作。
本发明实施例的基于图像识别的截图装置,根据行为触发模块能检测系统默认及第三方截图工具的截图操作行为,截图操作行为的识别范围更广。根据名单管理模块能将检测页面细化到具体应用软件、网页地址的具体页面,应用场景区分度更高。识别到名单中的应用软件或网页地址对应的页面下的用户操作行为是截图操作行为后,对截图内容进行识别,并在检测到隐私信息时提示用户,提醒内容更具针对性。还支持用户自主选择对隐私信息的加密范围,更符合用户操作需求。本发明实施例的基于图像识别的截图装置,在用户使用金融、公共服务等特殊互联网产品过程中提供了更加安全、便捷、高效的截图服务,降低了用户的隐私泄漏风险和操作成本。
图4是根据本发明第四实施例的基于图像识别的截图装置的工作流程示意图。
如图4所示,本实施例的基于图像识别的截图装置的工作流程包括步骤S401至步骤S410。
步骤S401:行为触发模块检测当前页面下的用户操作行为。
在启动应用软件或访问网页地址时,可以激活行为触发模块和名单管理模块。
步骤S402:行为触发模块判断当前页面下的用户操作行为是否是截图操作行为,若是,则执行步骤S403,否则,结束工作流程。
步骤S403:名单管理模块判断当前启动的应用软件或访问的网页地址是否在名单中,若是,则执行步骤S404,否则,执行步骤S410。
在用户操作行为是截图操作行为,并且当前启动的应用软件或访问的网页地址在名单中的情况下,激活图像识别模块和隐私信息判断模块。
步骤S404:图像识别模块识别当前页面的截图信息和截图信息在当前页面的位置。
步骤S405:隐私信息判断模块判断截图信息是否包括隐私信息,若是,则执行步骤S406,否则,执行步骤S410。
在截图信息包括隐私信息的情况下,激活信息提示模块。
步骤S406:提示信息模块根据隐私信息、截图信息在当前页面的位置生成供加密的默认范围。
具体地,根据截图信息在当前页面的位置,得到隐私信息在当前页面的位置,再根据隐私信息及其在当前页面的位置生成供加密的默认范围。默认范围包括所有隐私信息。
步骤S407:提示信息模块提示用户对默认范围进行选择或编辑操作,以确定加密范围,其中,提供“全选”、“全不选”、“自定义”的选项。
若用户选择“全选”,表示同意对所有隐私信息加密。若用户选择“全不选”,表示拒绝对隐私信息加密。若用户选择“自定义”,表示同意对隐私信息加密,但用户自主选择隐私信息的加密范围。
在用户对默认范围全选的情况下,执行步骤S408;在用户自定义对默认范围进行编辑的情况下,执行步骤S409;在用户对默认范围全不选的情况下,执行步骤S410。
用户同意加密则激活图像编辑模块;用户拒绝加密则激活常规截图模块。
步骤S408:图像编辑模块以默认范围作为加密范围,对截图操作行为所截获的区域中的隐私信息加密,得到加密后的截图。
步骤S409:图像编辑模块根据用户编辑得到的加密范围,对截图操作行为所截获的区域中的隐私信息加密,得到加密后的截图。
步骤S410:常规截图模块根据截图操作行为所截获的区域生成相应的截图。
另外,在本发明实施例中所述基于图像识别的截图装置的具体实施内容,在上面所述基于图像识别的截图方法中已经详细说明了,故在此重复内容不再说明。
图5示出了可以应用本发明实施例的基于图像识别的截图方法或基于图像识别的截图装置的示例性系统架构500。
如图5所示,系统架构500可以包括终端设备501、502、503,网络504和服务器505。网络504用以在终端设备501、502、503和服务器505之间提供通信链路的介质。网络504可以包括各种连接类型,例如有线、无线通信链路或者光纤电缆等等。
用户可以使用终端设备501、502、503通过网络504与服务器505交互,以接收或发送消息等。终端设备501、502、503上可以安装有各种通讯客户端应用,例如金融类应用、网页浏览器应用、搜索类应用、即时通信工具、邮箱客户端、社交平台软件等(仅为示例)。
终端设备501、502、503可以是具有显示屏并且支持网页浏览的各种电子设备,包括但不限于智能手机、平板电脑、膝上型便携计算机和台式计算机等等。
服务器505可以是提供各种服务的服务器,例如对用户利用终端设备501、502、503所浏览的网站提供支持的后台管理服务器(仅为示例)。后台管理服务器可以对接收到的信息处理请求等数据进行分析等处理,并将处理结果(例如图像信息仅为示例)反馈给终端设备。
需要说明的是,本发明实施例所提供的基于图像识别的截图方法一般由终端设备501、502、503执行,相应地,基于图像识别的截图装置一般设置于终端设备501、502、503中。
应该理解,图5中的终端设备、网络和服务器的数目仅仅是示意性的。根据实现需要,可以具有任意数目的终端设备、网络和服务器。
下面参考图6,其示出了适于用来实现本申请实施例的终端设备或服务器的计算机系统600的结构示意图。图6示出的终端设备或服务器仅仅是一个示例,不应对本申请实施例的功能和使用范围带来任何限制。
如图6所示,计算机系统600包括中央处理单元(CPU)601,其可以根据存储在只读存储器(ROM)602中的程序或者从存储部分608加载到随机访问存储器(RAM)603中的程序而执行各种适当的动作和处理。在RAM 603中,还存储有系统600操作所需的各种程序和数据。CPU 601、ROM 602以及RAM 603通过总线604彼此相连。输入/输出(I/O)接口605也连接至总线604。
以下部件连接至I/O接口605:包括键盘、鼠标等的输入部分606;包括诸如阴极射线管(CRT)、液晶显示器(LCD)等以及扬声器等的输出部分607;包括硬盘等的存储部分608;以及包括诸如LAN卡、调制解调器等的网络接口卡的通信部分609。通信部分609经由诸如因特网的网络执行通信处理。驱动器610也根据需要连接至I/O接口605。可拆卸介质611,诸如磁盘、光盘、磁光盘、半导体存储器等等,根据需要安装在驱动器610上,以便于从其上读出的计算机程序根据需要被安装入存储部分608。
特别地,根据本发明公开的实施例,上文参考流程图描述的过程可以被实现为计算机软件程序。例如,本发明公开的实施例包括一种计算机程序产品,其包括承载在计算机可读介质上的计算机程序,该计算机程序包含用于执行流程图所示的方法的程序代码。在这样的实施例中,该计算机程序可以通过通信部分609从网络上被下载和安装,和/或从可拆卸介质611被安装。在该计算机程序被中央处理单元(CPU)601执行时,执行本申请的系统中限定的上述功能。
需要说明的是,本发明所示的计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质或者是上述两者的任意组合。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的系统、装置或器件,或者任意以上的组合。计算机可读存储介质的更具体的例子可以包括但不限于:具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机访问存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本申请中,计算机可读存储介质可以是任何包含或存储程序的有形介质,该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。而在本申请中,计算机可读的信号介质可以包括在基带中或者作为载波一部分传播的数据信号,其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式,包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读的信号介质还可以是计算机可读存储介质以外的任何计算机可读介质,该计算机可读介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。计算机可读介质上包含的程序代码可以用任何适当的介质传输,包括但不限于:无线、电线、光缆、RF等等,或者上述的任意合适的组合。
附图中的流程图和框图,图示了按照本申请各种实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分,上述模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意,在有些作为替换的实现中,方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如,两个接连地表示的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这依所涉及的功能而定。也要注意的是,框图或流程图中的每个方框、以及框图或流程图中的方框的组合,可以用执行规定的功能或操作的专用的基于硬件的系统来实现,或者可以用专用硬件与计算机指令的组合来实现。
描述于本发明实施例中所涉及到的模块可以通过软件的方式实现,也可以通过硬件的方式来实现。所描述的模块也可以设置在处理器中,例如,可以描述为:一种处理器包括行为触发模块、图像识别模块、隐私信息判断模块、提示信息模块、图像编辑模块。其中,这些模块的名称在某种情况下并不构成对该模块本身的限定,例如,行为触发模块还可以被描述为“用于检测当前页面下的用户操作行为,以判断用户操作行为是否是截图操作行为的模块”。
作为另一方面,本发明还提供了一种计算机可读介质,该计算机可读介质可以是上述实施例中描述的设备中所包含的;也可以是单独存在,而未装配入该设备中。上述计算机可读介质承载有一个或者多个程序,当上述一个或者多个程序被一个该设备执行时,使得该设备包括:检测当前页面下的用户操作行为,以判断所述用户操作行为是否是截图操作行为,所述当前页面为当前启动的应用软件或访问的网页地址对应的页面;在判断所述用户操作行为是截图操作行为的情况下,识别所述当前页面的截图信息;判断所述截图信息是否包括隐私信息,若是,则提示用户确定对所述隐私信息的加密范围;根据所述加密范围对所述隐私信息加密,得到加密后的所述截图。
根据本发明实施例的技术方案,判断当前页面下的用户操作行为是否是截图操作行为,当前页面为当前启动的应用软件或访问的网页地址对应的页面;在用户操作行为是截图操作行为的情况下,识别当前页面的截图信息;判断截图信息是否包括隐私信息,若是,则提示用户确定对隐私信息的加密范围;根据加密范围对隐私信息加密,得到加密后的截图。能够识别截图中的隐私信息内容并提示用户,提示的内容更具针对性,支持用户自主选择隐私信息加密范围,根据用户确定的加密范围对截图中的隐私信息进行加密处理,满足用户截图及隐私保护的需求,能将检测页面细化到具体应用软件、网页的具体页面,应用场景区分度更高,既可检测默认截图工具的截图行为,还可检测第三方截图工具的截图行为,识别范围更广。
上述具体实施方式,并不构成对本发明保护范围的限制。本领域技术人员应该明白的是,取决于设计要求和其他因素,可以发生各种各样的修改、组合、子组合和替代。任何在本发明的精神和原则之内所作的修改、等同替换和改进等,均应包含在本发明保护范围之内。

Claims (16)

1.一种基于图像识别的截图方法,其特征在于,包括:
检测当前页面下的用户操作行为,以判断所述用户操作行为是否是截图操作行为,所述当前页面为当前启动的应用软件或访问的网页地址对应的页面;
在判断所述用户操作行为是截图操作行为的情况下,识别所述当前页面的截图信息;
判断所述截图信息是否包括隐私信息,若是,则提示用户确定对所述隐私信息的加密范围;
根据所述加密范围对所述隐私信息加密,得到加密后的所述截图。
2.根据权利要求1所述的方法,其特征在于,还包括预先将符合预定安全等级的应用软件和网页地址添加到名单;
识别所述当前页面的截图信息的步骤之前,还包括:
确定所述当前启动的应用软件或访问的网页地址在所述名单中。
3.根据权利要求1所述的方法,其特征在于,还包括预先保存具有截图功能的软件的截图操作行为,
根据以下判断所述用户操作行为是否是截图操作行为:
将所述当前页面下的用户操作行为与所述具有截图功能的软件的截图操作行为进行比对,如果比对一致,则判断所述用户操作行为是截图操作行为,否则,判断所述用户操作行为不是截图操作行为。
4.根据权利要求1所述的方法,其特征在于,还包括预先保存符合信息安全等级的预设信息,
判断所述截图信息是否包括隐私信息的步骤,包括:
将所述截图信息与所述预设信息进行比对,如果二者存在比对一致的信息,则所述截图信息包括所述隐私信息,且所述隐私信息为所述比对一致的信息;如果所述二者不存在所述比对一致的信息,则所述截图信息不包括所述隐私信息。
5.根据权利要求4所述的方法,其特征在于,所述预设信息为文字信息。
6.根据权利要求1所述的方法,其特征在于,通过以下方式识别所述当前页面的截图信息:
根据图像识别算法识别所述截图操作行为所截获的区域中的文字信息,将识别出的所述文字信息作为所述截图信息。
7.根据权利要求1所述的方法,其特征在于,还包括在判断所述用户操作行为是所述截图操作行为的情况下,识别所述截图信息在所述当前页面的位置,
提示用户确定对所述隐私信息的加密范围的步骤,包括:
根据所述截图信息在所述当前页面的位置,得到所述隐私信息在所述当前页面的位置;
根据所述隐私信息及其在所述当前页面的位置生成供加密的默认范围;
提示所述用户对所述默认范围进行选择或编辑操作,以确定所述加密范围。
8.一种基于图像识别的截图装置,其特征在于,包括:
行为触发模块,用于检测当前页面下的用户操作行为,以判断所述用户操作行为是否是截图操作行为,所述当前页面为当前启动的应用软件或访问的网页地址对应的页面;
图像识别模块,用于在所述用户操作行为是截图操作行为的情况下,识别所述当前页面的截图信息;
隐私信息判断模块,用于判断所述截图信息是否包括隐私信息;
提示信息模块,用于在所述截图信息包括所述隐私信息的情况下,提示用户确定对所述隐私信息的加密范围;
图像编辑模块,用于根据所述加密范围对所述隐私信息加密,得到加密后的所述截图。
9.根据权利要求8所述的装置,其特征在于,还包括名单管理模块,用于:
预先将符合预定安全等级的应用软件和网页地址添加到名单;以及,
判断所述当前启动的应用软件或访问的网页地址是否在所述名单中。
10.根据权利要求8所述的装置,其特征在于,所述行为触发模块中预先保存具有截图功能的软件的截图操作行为,
所述行为触发模块还用于:
将所述当前页面下的用户操作行为与所述具有截图功能的软件的截图操作行为进行比对,如果比对一致,则判断所述用户操作行为是截图操作行为,否则,判断所述用户操作行为不是截图操作行为。
11.根据权利要求8所述的装置,其特征在于,所述隐私信息判断模块中预先保存符合信息安全等级的预设信息,
所述隐私信息判断模块还用于:
将所述截图信息与所述预设信息进行比对,如果二者存在比对一致的信息,则所述截图信息包括所述隐私信息,且所述隐私信息为所述比对一致的信息;如果所述二者不存在所述比对一致的信息,则所述截图信息不包括所述隐私信息。
12.根据权利要求11所述的装置,其特征在于,所述预设信息为文字信息。
13.根据权利要求8所述的装置,其特征在于,所述图像识别模块还用于:
根据图像识别算法识别所述截图操作行为所截获的区域中的文字信息,将识别出的所述文字信息作为所述截图信息。
14.根据权利要求8所述的装置,其特征在于,所述图像识别模块还用于在所述用户操作行为是所述截图操作行为的情况下,识别所述截图信息在所述当前页面的位置,
所述提示信息模块还用于:
根据所述截图信息在所述当前页面的位置,得到所述隐私信息在所述当前页面的位置;
根据所述隐私信息及其在所述当前页面的位置生成供加密的默认范围;
提示所述用户对所述默认范围进行选择或编辑操作,以确定所述加密范围。
15.一种电子设备,其特征在于,包括:
一个或多个处理器;
存储器,用于存储一个或多个程序,
当所述一个或多个程序被所述一个或多个处理器执行时,使得所述一个或多个处理器实现如权利要求1-7中任一所述的方法。
16.一种计算机可读介质,其上存储有计算机程序,其特征在于,所述程序被处理器执行时实现如权利要求1-7中任一所述的方法。
CN201910666132.0A 2019-07-23 2019-07-23 一种基于图像识别的截图方法和装置 Pending CN110399748A (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN201910666132.0A CN110399748A (zh) 2019-07-23 2019-07-23 一种基于图像识别的截图方法和装置
PCT/CN2020/101546 WO2021012973A1 (zh) 2019-07-23 2020-07-13 一种基于图像识别的截图方法和装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910666132.0A CN110399748A (zh) 2019-07-23 2019-07-23 一种基于图像识别的截图方法和装置

Publications (1)

Publication Number Publication Date
CN110399748A true CN110399748A (zh) 2019-11-01

Family

ID=68325799

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910666132.0A Pending CN110399748A (zh) 2019-07-23 2019-07-23 一种基于图像识别的截图方法和装置

Country Status (2)

Country Link
CN (1) CN110399748A (zh)
WO (1) WO2021012973A1 (zh)

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2021012973A1 (zh) * 2019-07-23 2021-01-28 中国建设银行股份有限公司 一种基于图像识别的截图方法和装置
CN112363918A (zh) * 2020-11-02 2021-02-12 北京云聚智慧科技有限公司 用户界面ai自动化测试方法、装置、设备和存储介质
CN112464180A (zh) * 2020-11-25 2021-03-09 平安信托有限责任公司 页面截图外发管控方法、系统、电子设备及存储介质
CN112487461A (zh) * 2020-12-07 2021-03-12 重庆电子工程职业学院 一种数据加密方法
CN112783399A (zh) * 2020-05-13 2021-05-11 北京金山办公软件股份有限公司 一种截图方法及装置
CN112800449A (zh) * 2021-02-03 2021-05-14 网易(杭州)网络有限公司 一种页面截图的加密方法、装置、电子设备及存储介质
CN113382083A (zh) * 2021-06-30 2021-09-10 建信金融科技有限责任公司 一种网页截图方法和装置
CN115622764A (zh) * 2022-10-09 2023-01-17 深圳市君思科技有限公司 web网络流量中隐私数据发现与归类方法

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9813419B2 (en) * 2012-06-19 2017-11-07 SecureMySocial, Inc. Systems and methods for securing social media for users and businesses and rewarding for enhancing security
CN108319484A (zh) * 2017-05-17 2018-07-24 腾讯科技(深圳)有限公司 一种应用页面的处理方法、装置及存储介质
CN108491729A (zh) * 2018-02-26 2018-09-04 挖财网络技术有限公司 安卓系统中动态保护用户隐私的方法及装置

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106293365B (zh) * 2015-05-20 2019-11-26 广州爱九游信息技术有限公司 一种获取页面内容的方法及装置
US10007963B2 (en) * 2015-11-10 2018-06-26 International Business Machines Corporation Context-based provision of screenshot modifications
CN107145800A (zh) * 2017-05-31 2017-09-08 北京小米移动软件有限公司 隐私信息保护方法及装置、终端及存储介质
CN107679419B (zh) * 2017-10-17 2020-07-14 南通纤麦家纺科技有限公司 一种截屏方法及装置
CN108509533B (zh) * 2018-03-15 2019-08-16 平安科技(深圳)有限公司 截屏文件分享的控制方法、装置、设备和计算机存储介质
CN110399748A (zh) * 2019-07-23 2019-11-01 中国建设银行股份有限公司 一种基于图像识别的截图方法和装置

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9813419B2 (en) * 2012-06-19 2017-11-07 SecureMySocial, Inc. Systems and methods for securing social media for users and businesses and rewarding for enhancing security
CN108319484A (zh) * 2017-05-17 2018-07-24 腾讯科技(深圳)有限公司 一种应用页面的处理方法、装置及存储介质
CN108491729A (zh) * 2018-02-26 2018-09-04 挖财网络技术有限公司 安卓系统中动态保护用户隐私的方法及装置

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2021012973A1 (zh) * 2019-07-23 2021-01-28 中国建设银行股份有限公司 一种基于图像识别的截图方法和装置
CN112783399A (zh) * 2020-05-13 2021-05-11 北京金山办公软件股份有限公司 一种截图方法及装置
CN112363918A (zh) * 2020-11-02 2021-02-12 北京云聚智慧科技有限公司 用户界面ai自动化测试方法、装置、设备和存储介质
CN112363918B (zh) * 2020-11-02 2024-03-08 北京云聚智慧科技有限公司 用户界面ai自动化测试方法、装置、设备和存储介质
CN112464180A (zh) * 2020-11-25 2021-03-09 平安信托有限责任公司 页面截图外发管控方法、系统、电子设备及存储介质
CN112487461A (zh) * 2020-12-07 2021-03-12 重庆电子工程职业学院 一种数据加密方法
CN112800449A (zh) * 2021-02-03 2021-05-14 网易(杭州)网络有限公司 一种页面截图的加密方法、装置、电子设备及存储介质
CN113382083A (zh) * 2021-06-30 2021-09-10 建信金融科技有限责任公司 一种网页截图方法和装置
CN115622764A (zh) * 2022-10-09 2023-01-17 深圳市君思科技有限公司 web网络流量中隐私数据发现与归类方法

Also Published As

Publication number Publication date
WO2021012973A1 (zh) 2021-01-28

Similar Documents

Publication Publication Date Title
CN110399748A (zh) 一种基于图像识别的截图方法和装置
CN108509533B (zh) 截屏文件分享的控制方法、装置、设备和计算机存储介质
US20160267290A1 (en) Information viewing method, device, system and storage medium
CN109977690A (zh) 一种数据处理方法、装置和介质
WO2016101384A1 (zh) 基于双系统切换的数据安全处理方法及装置
CN110933103B (zh) 反爬虫方法、装置、设备和介质
CN107872433A (zh) 一种身份验证方法及其设备
CN104933342A (zh) 一种图片查看方法及移动终端
CN112106049A (zh) 生成隐私数据隔离和报告的系统和方法
CN111371741A (zh) 外网数据传输至内网方法、装置、计算机设备及存储介质
CN105630855A (zh) 文件共享方法、文件共享系统和终端
CN106411811A (zh) 一种接入客服的认证方法、系统及装置
CN104955043B (zh) 一种智能终端安全防护系统
CN106529232A (zh) 开机启动方法及装置
CN113158196A (zh) 登录验证方法、装置、设备和介质
CN106685945A (zh) 业务请求处理方法、业务办理号码的验证方法及其终端
CN106851613A (zh) 业务请求方法、业务办理号码的验证方法及其终端
CN105871840B (zh) 一种证书管理方法及系统
CN106254226A (zh) 一种信息同步方法及装置
CN106714147A (zh) 一种隐私短信的保护方法
CN101770553B (zh) 一种移动终端、以及移动终端中根证书的调用方法
CN104866761B (zh) 一种高安全性安卓智能终端
CN105701378A (zh) 一种终端设备控制方法及装置
CN114448722A (zh) 跨浏览器登录方法、装置、计算机设备和存储介质
JP2013210891A (ja) アプリケーション検査装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20191101