CN105117463A - 信息处理方法和信息处理装置 - Google Patents

信息处理方法和信息处理装置 Download PDF

Info

Publication number
CN105117463A
CN105117463A CN201510524724.0A CN201510524724A CN105117463A CN 105117463 A CN105117463 A CN 105117463A CN 201510524724 A CN201510524724 A CN 201510524724A CN 105117463 A CN105117463 A CN 105117463A
Authority
CN
China
Prior art keywords
face
target
web page
image
original web
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201510524724.0A
Other languages
English (en)
Other versions
CN105117463B (zh
Inventor
姜宇宁
印奇
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Megvii Technology Co Ltd
Beijing Aperture Science and Technology Ltd
Original Assignee
Beijing Megvii Technology Co Ltd
Beijing Aperture Science and Technology Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Megvii Technology Co Ltd, Beijing Aperture Science and Technology Ltd filed Critical Beijing Megvii Technology Co Ltd
Priority to CN201510524724.0A priority Critical patent/CN105117463B/zh
Publication of CN105117463A publication Critical patent/CN105117463A/zh
Priority to US14/992,507 priority patent/US10679252B2/en
Application granted granted Critical
Publication of CN105117463B publication Critical patent/CN105117463B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/02—Marketing; Price estimation or determination; Fundraising
    • G06Q30/0241—Advertisements
    • G06Q30/0251—Targeted advertisements
    • G06Q30/0263—Targeted advertisements based upon Internet or website rating
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/58—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/583—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
    • G06F16/5838—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content using colour
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/58—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/583—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
    • G06F16/5854—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content using shape and object relationship
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90—Details of database functions independent of the retrieved data types
    • G06F16/95—Retrieval from the web
    • G06F16/953—Querying, e.g. by the use of web search engines
    • G06F16/9535—Search customisation based on user profiles and personalisation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90—Details of database functions independent of the retrieved data types
    • G06F16/95—Retrieval from the web
    • G06F16/953—Querying, e.g. by the use of web search engines
    • G06F16/9538—Presentation of query results
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/161—Detection; Localisation; Normalisation

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Data Mining & Analysis (AREA)
  • General Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Library & Information Science (AREA)
  • Finance (AREA)
  • Strategic Management (AREA)
  • Development Economics (AREA)
  • Accounting & Taxation (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • Game Theory and Decision Science (AREA)
  • Economics (AREA)
  • Marketing (AREA)
  • General Business, Economics & Management (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Image Analysis (AREA)
  • Information Transfer Between Computers (AREA)
  • Processing Or Creating Images (AREA)

Abstract

本发明提供了一种信息处理方法和信息处理设备，所述信息处理方法包括：获取原始网页；解析所述原始网页，以确定候选图像集；检测所述候选图像集中的每个候选图像是否包含人脸；从检测到的人脸中确定目标人脸，并将与目标人脸对应的候选图像确定为目标图像；对所述目标人脸进行分析，以得到所述原始网页的内容特征，所述内容特征包括人脸属性特征和人物身份特征中的至少一个；基于所述内容特征，确定与所述内容特征匹配的显示内容；将所述显示内容以对话框的形式插入所述原始网页中与所述目标图像对应的目标区域，以得到目标网页；以及输出所述目标网页。

Description

信息处理方法和信息处理装置
技术领域
本发明涉及信息处理的领域，更具体地，本发明涉及一种信息处理方法和信息处理装置。
背景技术
随着互联网技术的发展，出现了在用户浏览的网页中插入额外的信息的技术。在这样的技术中，期望所插入的信息是用户所感兴趣的，而且，所插入的信息的显示既显著又不影响用户的正常浏览体验。
以互联网广告为例，在现有的互联网展示广告的投放方法中，通过对诸如用户浏览记录的用户过往行为进行分析而确定用户的兴趣点，并且将与用户兴趣点匹配的广告插入到用户当前浏览的网页中。然而，在这样的投放方法中，首先，由于基于用户过往的行为而分析用户当前的兴趣点，而用户的兴趣点是随时可能改变的，因此，这样的兴趣点挖掘有可能出现偏差，导致投放精度下降。其次，广告要么插入在网页正文部分的显著区域，要么插入在页面中的非显著区域。在前者的情况下，严重影响用户的浏览感受，降低用户体验；在后者的情况下，常常会被用户忽视，导致投放效果不佳。而且，无论哪种情况，广告的显示与所浏览的页面的显示都没有进行匹配，显得突兀、不美观，从而也降低了用户体验。
发明内容
有鉴于上述情况，本发明提供了一种信息处理方法和信息处理装置，其能够在网页中以显著而不影响用户阅读体验的方式插入与当前网页的内容相匹配的信息。
根据本发明一实施例，提供了一种信息处理方法，包括：获取原始网页；解析所述原始网页，以确定候选图像集；检测所述候选图像集中的每个候选图像是否包含人脸；从检测到的人脸中确定目标人脸，并将与目标人脸对应的候选图像确定为目标图像；对所述目标人脸进行分析，以得到所述原始网页的内容特征，所述内容特征包括人脸属性特征和人物身份特征中的至少一个；基于所述内容特征，确定与所述内容特征匹配的显示内容；将所述显示内容以对话框的形式插入所述原始网页中与所述目标图像对应的目标区域，以得到目标网页；以及输出所述目标网页。
根据本发明另一实施例，提供了一种信息处理装置，包括：获取单元，获取原始网页；解析单元，解析所述原始网页，以确定候选图像集；检测单元，检测所述候选图像集中的每个候选图像是否包含人脸；目标确定单元，从检测到的人脸中确定目标人脸，并将与目标人脸对应的候选图像确定为目标图像；分析单元，对所述目标人脸进行分析，以得到所述原始网页的内容特征，所述内容特征包括人脸属性特征和人物身份特征中的至少一个；内容确定单元，基于所述内容特征，确定与所述内容特征匹配的显示内容；插入单元，将所述显示内容以对话框的形式插入所述原始网页中与所述目标图像对应的目标区域，以得到目标网页；以及输出单元，输出所述目标网页。
根据本发明另一实施例，提供了一种信息处理装置，包括：处理器；存储器；和存储在所述存储器中的计算机程序指令，在所述计算机程序指令被所述处理器运行时执行以下步骤：获取原始网页；解析所述原始网页，以确定候选图像集；检测所述候选图像集中的每个候选图像是否包含人脸；从检测到的人脸中确定目标人脸，并将与目标人脸对应的候选图像确定为目标图像；对所述目标人脸进行分析，以得到所述原始网页的内容特征，所述内容特征包括人脸属性特征和人物身份特征中的至少一个；基于所述内容特征，确定与所述内容特征匹配的显示内容；将所述显示内容以对话框的形式插入所述原始网页中与所述目标图像对应的目标区域，以得到目标网页；以及输出所述目标网页。
根据本发明另一实施例，提供了一种计算机程序产品，包括计算机可读存储介质，在所述计算机可读存储介质上存储了计算机程序指令，所述计算机程序指令在被计算机运行时执行以下步骤：获取原始网页；解析所述原始网页，以确定候选图像集；检测所述候选图像集中的每个候选图像是否包含人脸；从检测到的人脸中确定目标人脸，并将与目标人脸对应的候选图像确定为目标图像；对所述目标人脸进行分析，以得到所述原始网页的内容特征，所述内容特征包括人脸属性特征和人物身份特征中的至少一个；基于所述内容特征，确定与所述内容特征匹配的显示内容；将所述显示内容以对话框的形式插入所述原始网页中与所述目标图像对应的目标区域，以得到目标网页；以及输出所述目标网页。
在本发明实施例的信息处理方法和信息处理装置中，检测网页中的人脸并由此得到网页的内容特征，在网页的目标区域中插入与所述内容特征匹配的显示内容，从而能够在网页中以显著而不影响用户阅读体验的方式插入与当前网页的内容特征相匹配的信息。
附图说明
图1是图示根据本发明实施例的信息处理方法的流程图；
图2A-2D是图示应用本发明实施例的信息处理方法的场景的示意图；
图3是图示根据本发明实施例的信息处理装置的主要配置的框图；以及
图4是图示根据本发明另一实施例的信息处理装置的主要配置的框图。
具体实施方式
以下将参考附图详细描述本发明实施例。
首先，参照图1描述根据本发明实施例的信息处理方法。
如图1所示，首先，在步骤S110，获取原始网页。
具体地，当用户访问网页时，根据用户的访问请求获取所述网页(为区别起见，以下适当时称为原始网页)的地址。
接下来，在步骤S120，解析所述原始网页，以确定候选图像集。
具体地，可以解析所述原始网页的代码，从而获取所述原始网页中每个图像的图像信息。所述图像信息表示图像的属性，例如包括但不限于图像尺寸、图像位置、图像显著程度等中的至少一个及其任意组合。
然后，可以基于所述图像信息，从所述原始网页中的所有图像中确定所述候选图像集。
具体地，例如，可确定关于候选图像的选择标准。在第一示例中，所述选择标准可以为图像尺寸大于预定尺寸阈值。在第二示例中，所述选择标准可以为图像位置位于预定范围内。在第三示例中，所述选择标准可以为图像显著程度大于预定显著程度阈值。以上所述的预定尺寸阈值、预定范围和预定显著程度阈值可以由本领域技术人员根据需要适当地设置，在此不作具体限定。此外，以上所述的仅为示例。本领域技术人员可以根据图像信息而设计其他各种相应的选择标准。
由此，可以确定每个图像的图像信息是否符合所述选择标准，并将符合选择标准的一个或多个图像确定为候选图像。
接下来，在步骤S130，检测每个所述候选图像是否包含人脸。本领域技术人员可以利用诸如基于支持向量机的方法、基于深度学习的方法等的各种人脸识别方法来进行所述检测，在此不再详述。
然后，在步骤S140，从检测到的人脸中确定目标人脸，并将与目标人脸对应的候选图像确定为目标图像。
具体地，例如，可确定关于目标人脸的选择标准。在第一示例中，将检测到的人脸中的人脸尺寸大于预定尺寸阈值的人脸确定为目标人脸。在第二示例中，将检测到的人脸中的人脸清晰度大于预定清晰度阈值的人脸确定为目标人脸。在第三示例中，将检测到的人脸中的姿态符合预定姿态的人脸确定为目标人脸。以上所述的预定尺寸阈值、预定清晰度阈值和预定姿态可以由本领域技术人员根据需要适当地设置，在此不作具体限定。此外，以上所述的仅为示例。本领域技术人员可以设计其他各种目标人脸的选择标准。
在从检测到的人脸中确定了一个或多个目标人脸之后，将与所述目标人脸相对应的候选图像确定为目标图像。
接下来，在步骤S150，对所述目标人脸进行分析，以得到所述原始网页的内容特征。
所述内容特征包括人脸属性特征和人物身份特征中的至少一个。具体地，一方面，可以通过诸如机器学习的方法等的分析方法，对所述目标人脸进行分析，以得到人脸属性特征。所述人脸属性特征例如包括年龄、性别、种族、标签、皮肤光滑程度、美丽指数等中的一个或其任意组合。当然，以上所述的人脸属性特征仅为示例。本领域技术人员可以根据需要从目标人脸中分析提取其他方面的人脸属性特征。
另一方面，可以通过诸如机器学习的方法等的分析方法，对所述目标人脸进行分析，以得到人物身份特征。所述人物身份特征例如包括名人、职业等中的一个或其任意组合。当然，以上所述的人物身份特征仅为示例。本领域技术人员可以根据需要从目标人脸中分析提取其他方面的人物身份特征。
需要指出的是，以上所述的人脸属性特征和人物身份特征仅为示例。本领域技术人员可以根据需要从目标人脸中分析提取其他与人脸相关的特征，作为所述原始网页的内容特征。
在得到包括原始网页的内容特征之后，所述信息处理方法进行到步骤S160，基于所述内容特征，确定与所述内容特征匹配的显示内容。
具体地，首先，可以基于所述内容特征，确定意图浏览所述原始网页的用户的兴趣点。更具体地，可以基于所述内容特征，利用机器学习等的方法来挖掘用户的兴趣点，其具体处理为本领域技术人员所知，在此不再详述。
接下来，可以从内容库中确定与所述兴趣点匹配的显示内容。也就是说，所述内容库中可以预先存储各方面的显示内容，从而可以从中确定与所述兴趣点匹配的特定方面的显示内容。
以展示广告的投放为例，所述内容库例如为应用所述信息处理方法的装置(如，服务器)自身的广告库或第三方广告交易平台等，其中存储了诸如食品、运动、旅游等各方面的广告物料。在通过如上所述的步骤S110-S150的处理基于用户当前期望浏览的网页而确定了用户当前的兴趣点之后，从广告库或第三方广告交易平台中确定相应的广告物料，以便有针对性的投放。
然后，在步骤S170，将所述显示内容以对话框的形式插入所述原始网页中与所述目标图像对应的目标区域，以得到目标网页。
具体地，所述目标区域可以为所述目标图像所在的区域中最适合插入所述显示内容(例如，广告)的区域。
示例性地，所述目标区域与目标人脸相关联。更具体地，首先，可以检测目标人脸的关键点的位置。所述关键点例如为唇部关键点等的人脸关键点。本领域技术人员可以利用现有的和未来开发的各种关键点检测方法来检测目标人脸的关键点的位置，在此不再详述。接下来，可以基于所述关键点位置，确定所述目标区域。例如，可以将所述目标区域确定为目标人脸中的嘴唇附近。之后，将所述显示内容以所述对话框的形式插入所述目标区域。
需要指出的是，以上所述的目标区域的确定方法仅为示例。本领域技术人员可以将所述目标图像中的其他区域确定为目标区域。例如，可以简单地将所述目标图像所在的区域中的特定位置(如中间区域、或某个角落)设置为所述目标区域。又例如，可以将目标区域设置为与所述目标图像中的大片色调相对单一的图像元素对应的区域。具体地，可通过对所述目标图像进行图像分割处理或显著区域检测处理，以确定所述目标图像中最适合插入所述显示内容的区域，作为所述目标区域。
此外，在此步骤中，还可以根据所述目标区域的性质调整所述显示内容的显示属性，并将调整后的显示内容插入所述目标区域。具体地，所述目标区域的性质例如包括但不限于目标区域的大小、形状、颜色、物体属性等中的至少一个或其任意组合。所述显示内容的显示属性例如包括但不限于显示内容的颜色、对比度、大小、外形等中的至少一个或其任意组合。由此，能够使得显示内容与目标图像之间更加协调。
此外，在此步骤中，还可以根据目标人脸而确定对话框形状。具体地，首先，可以通过如上所述的方式检测目标人脸的关键点(例如，唇部关键点)的位置。然后，可以基于关键点的位置，确定对话框的外边框形状。具体地，可基于唇部关键点与所确定的目标区域之间的相对位置关系而确定对话框的外边框形状。例如，可以使得对话框的用于指示说话者的部分边框朝向目标人脸中的唇部所在的位置。
最后，在步骤S180，输出所述目标网页。在一示例中，本发明实施例的信息处理方法可以应用于例如服务器。所述服务器与诸如手机、计算机等的用户终端进行通信。由此，所述服务器将所述目标网页发送回所述用户终端，以在所述用户终端上进行显示。替代地，在所述用户终端的处理能力较强的情况下，所述信息处理方法也可应用于所述用户终端。由此，在此步骤，所述用户终端直接显示所述目标网页。
下面，将结合图2，假设显示内容为广告，描述本发明实施例的信息处理方法的示例性应用场景。
图2A示出了根据用户的访问请求原本应显示的原始网页，其中包含三个图像：第一图像210、第二图像220和第三图像230。通过解析所述原始网页的代码可知，所述第一图像210和所述第二图像220的图像尺寸大于阈值，由此，将第一图像210和第二图像220确定为候选图像。
接下来，检测到第一图像210和第二图像220均包含人脸，但第一图像210中人脸的尺寸大于预定尺寸阈值，而第二图像220中人脸的尺寸小于预定尺寸阈值，因此，将第一图像210中的人脸确定为目标人脸，相应地，将第一图像210确定为目标图像。
图2B放大示出了所述目标图像及其中的目标人脸。通过对目标人脸进行分析，识别出目标人脸的人脸属性特征为年轻女性，人物身份特征为某明星，并将所识别出的人物属性特征和人物身份特征作为原始网页的内容特征。由此，可基于人脸属性特征确定用户兴趣点为美容，由此确定与目标人脸相匹配的显示内容，例如，某眼霜的广告，从而获得含有广告语的物料图像。替代地或与此相结合，可基于人物身份特征确定用户兴趣点为此明星，由此确定与目标人脸相匹配的显示内容，例如，此明星代言的广告，从而获得含有广告语的物料图像。然后，通过检测目标人脸的唇部关键点位置，确定唇部附近的区域作为目标区域，并根据目标区域和唇部之间的相对位置关系相应确定对话框的外边框的形状。接下来，可以根据所述目标区域的性质调整所述显示内容的显示属性。例如，可根据目标区域的大小调整物料图像的大小。可根据目标区域的颜色调整物料图像的颜色，使其颜色形状与目标区域相协调，并将调整后的广告物料图像以例如对话框的形式插入到所述目标区域，如图2C所示。最后，输出目标网页，并在用户终端显示如图2D所示的目标网页。
以上，参照图1和图2描述了本发明实施例的信息处理方法。
需要指出的是，虽然上面以广告为例描述了本发明实施例的信息处理方法，然而，本发明不限于此，而是可以应用于各种显示内容的显示。
在本发明实施例的信息处理方法中，对网页中的人脸分析以得到包含人脸属性特征和人物身份特征中的至少一个的网页的内容特征，并在网页的目标区域中插入与所述内容特征匹配的显示内容，从而能够在网页中以显著而不影响用户阅读体验的方式插入与当前网页的内容特征相匹配的信息。
在本发明实施例的信息处理方法应用于展示广告的投放时，可以投放与当前网页的图像(尤其是人脸图像)相关联的广告。具体地，可以基于当前网页精准地挖掘用户当前可能感兴趣的点并实时地推荐相应广告。
此外，在本发明实施例的信息处理方法中，广告可以采用基于图像的广告展现形式，即，可以插入在当前网页的特定图像所在的区域中，因此，既醒目又不会打断用户对于网页的阅读体验。而且，这样的展现形式无需额外的广告位，这在屏幕大小受限时(如应用于手机显示的情况下)尤为有利。
此外，在本发明实施例的信息处理方法中，可以根据目标图像的性质确定广告物料的显示区域及其显示属性，因此，使得广告的展示更加美观协调。
此外，在本发明实施例的信息处理方法中，通过诸如机器学习算法等的算法自动得到网页的内容特征并挖掘用户的兴趣点，在上述过程中都无需人工标注，因此，提高了处理效率，缩短了处理时间。
下面，将参照图3描述本发明实施例的信息处理装置。
图3是图示根据本发明实施例的信息处理装置的主要配置的框图。如图3所示，本发明实施例的信息处理装置300包括：获取单元310、解析单元320、检测单元330、目标确定单元340、分析单元350、内容确定单元360、插入单元370和输出单元380。
具体地，获取单元310获取原始网页。解析单元320解析所述原始网页，以确定候选图像集。检测单元330检测所述候选图像集中的每个候选图像是否包含人脸。目标确定单元340从检测到的人脸中确定目标人脸，并将与目标人脸对应的候选图像确定为目标图像。分析单元350对所述目标人脸进行分析，以得到所述原始网页的内容特征，所述内容特征包括人脸属性特征和人物身份特征中的至少一个。内容确定单元360基于所述内容特征，确定与所述内容特征匹配的显示内容。插入单元370将所述显示内容以对话框的形式插入所述原始网页中与所述目标图像对应的目标区域，以得到目标网页。输出单元380输出所述目标网页。
在一实施例中，所述解析单元320包括：图像信息获取单元，解析所述原始网页的代码，以获取所述原始网页中每个图像的图像信息，所述图像信息包括图像尺寸、图像位置、图像显著程度中的至少一个；以及候选图像确定单元，基于所述图像信息，从所述原始网页中的所有图像中确定所述候选图像。
在另一实施例中，所述目标确定单元340配置为执行以下中的至少一个：将检测到的人脸中的人脸尺寸大于预定尺寸阈值的人脸确定为目标人脸；将检测到的人脸中的人脸清晰度大于预定清晰度阈值的人脸确定为目标人脸；以及将检测到的人脸中的姿态符合预定姿态的人脸确定为目标人脸。
在另一实施例中，所述分析单元350配置为：通过机器学习的方法，对所述目标人脸进行分析，以得到人脸属性特征和人物身份特征中的至少一个；其中，所述人脸属性特征包括年龄、性别、种族、标签、皮肤光滑程度、美丽指数中的至少一个；所述人物身份特征包括名人和职业中的至少一个。
在另一实施例中，所述内容确定单元360包括：兴趣点确定单元，基于所述内容特征，确定意图浏览所述原始网页的用户的兴趣点；以及匹配内容确定单元，从内容库中确定与所述兴趣点匹配的显示内容。
在另一实施例中，所述插入单元370包括：属性调整单元，根据所述目标区域的性质调整所述显示内容的显示属性；以及内容插入单元，将调整后的显示内容插入所述目标区域。
在另一实施例中，所述插入单元370包括：关键点检测单元，检测目标人脸的关键点位置；区域和形状确定单元，基于所述关键点位置，确定所述对话框的外边框形状、以及所述目标区域中的至少一个；以及内容插入单元，将所述显示内容以所述对话框的形式插入所述目标区域。
所述信息处理装置300的各个单元的功能和配置已经在参照图1所述的信息处理方法中详细描述，在此不再重复。
图4是图示根据本发明另一实施例的信息处理装置的主要配置的框图。
如图4所示，本发明实施例的信息处理装置400主要包括：一个或多个处理器410和存储器420，这些组件通过总线系统430和/或其它形式的连接机构(未示出)互连。应当注意，图4所示的信息处理装置400的组件和结构只是示例性的，而非限制性的，根据需要，信息处理装置400也可以具有其他组件和结构。
处理器410可以是中央处理单元(CPU)或者具有数据处理能力和/或指令执行能力的其它形式的处理单元，并且可以控制信息处理装置400中的其它组件以执行期望的功能。
存储器420可以包括一个或多个计算机程序产品，所述计算机程序产品可以包括各种形式的计算机可读存储介质，例如易失性存储器和/或非易失性存储器。所述易失性存储器例如可以包括随机存取存储器(RAM)和/或高速缓冲存储器(cache)等。所述非易失性存储器例如可以包括只读存储器(ROM)、硬盘、闪存等。在所述计算机可读存储介质上可以存储一个或多个计算机程序指令，处理器420可以运行所述程序指令，以实现本发明实施例的信息处理方法的功能以及/或者其它期望的功能。
以上，参照图3和图4描述了本发明实施例的信息处理装置。
在本发明实施例的信息处理装置中，对网页中的人脸分析以得到包含人脸属性特征和人物身份特征中的至少一个的网页的内容特征，并在网页的目标区域中插入与所述内容特征匹配的显示内容，从而能够在网页中以显著而不影响用户阅读体验的方式插入与当前网页的内容特征相匹配的信息。
在本发明实施例的信息处理装置应用于展示广告的投放时，可以投放与当前网页的图像(尤其是人脸图像)相关联的广告。具体地，可以基于当前网页精准地挖掘用户当前可能感兴趣的点并实时地推荐相应广告。
此外，在本发明实施例的信息处理装置中，广告可以采用基于图像的广告展现形式，即，可以插入在当前网页的特定图像所在的区域中，因此，既醒目又不会打断用户对于网页的阅读体验。而且，这样的展现形式无需额外的广告位，这在屏幕大小受限时(如应用于手机的情况下)尤为有利。
此外，在本发明实施例的信息处理装置中，可以根据目标图像的性质确定广告物料的显示区域及其显示属性，因此，使得广告的展示更加美观协调。
此外，在本发明实施例的信息处理装置中，通过诸如机器学习算法等的算法自动得到网页的内容特征并挖掘用户的兴趣点，在上述过程中都无需人工标注，因此，提高了处理效率，缩短了处理时间。
此外，根据本发明另一实施例，提供了一种用于信息处理的计算机程序产品，该计算机程序产品包括计算机可读存储介质，在所述计算机可读存储介质上存储了计算机程序指令，所述计算机程序指令可由处理器执行以使得所述处理器执行以下处理：获取原始网页；解析所述原始网页，以确定候选图像集；检测所述候选图像集中的每个候选图像是否包含人脸；从检测到的人脸中确定目标人脸，并将与目标人脸对应的候选图像确定为目标图像；对所述目标人脸进行分析，以得到所述原始网页的内容特征，所述内容特征包括人脸属性特征和人物身份特征中的至少一个；基于所述内容特征，确定与所述内容特征匹配的显示内容；将所述显示内容以对话框的形式插入所述原始网页中与所述目标图像对应的目标区域，以得到目标网页；以及输出所述目标网页。
需要说明的是，在本说明书中，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
此外，需要说明的是，在本说明书中，类似“第一…单元”、“第二...单元”的表述仅为了在描述时方便区分，而并不意味着其必须实现为物理分离的两个或多个单元。事实上，根据需要，所述单元可以整体实现为一个单元，也可以实现为多个单元。
最后，还需要说明的是，上述一系列处理不仅包括以这里所述的顺序按时间序列执行的处理，而且包括并行或分别地、而不是按时间顺序执行的处理。
通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到本发明可借助软件加必需的硬件平台的方式来实现，当然也可以全部通过硬件来实施。基于这样的理解，本发明的技术方案对背景技术做出贡献的全部或者部分可以以软件产品的形式体现出来，该计算机软件产品可以存储在存储介质中，如ROM/RAM、磁碟、光盘等，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本发明各个实施例或者实施例的某些部分所述的方法。
在本发明实施例中，单元/模块可以用软件实现，以便由各种类型的处理器执行。举例来说，一个标识的可执行代码模块可以包括计算机指令的一个或多个物理或者逻辑块，举例来说，其可以被构建为对象、过程或函数。尽管如此，所标识模块的可执行代码无需物理地位于一起，而是可以包括存储在不同位里上的不同的指令，当这些指令逻辑上结合在一起时，其构成单元/模块并且实现该单元/模块的规定目的。
在单元/模块可以利用软件实现时，考虑到现有硬件工艺的水平，所以可以以软件实现的单元/模块，在不考虑成本的情况下，本领域技术人员都可以搭建对应的硬件电路来实现对应的功能，所述硬件电路包括常规的超大规模集成(VLSI)电路或者门阵列以及诸如逻辑芯片、晶体管之类的现有半导体或者是其它分立的元件。模块还可以用可编程硬件设备，诸如现场可编程门阵列、可编程阵列逻辑、可编程逻辑设备等实现。
以上对本发明进行了详细介绍，本文中应用了具体个例对本发明的原理及实施方式进行了阐述，以上实施例的说明只是用于帮助理解本发明的方法及其核心思想；同时，对于本领域的一般技术人员，依据本发明的思想，在具体实施方式及应用范围上均会有改变之处，综上所述，本说明书内容不应理解为对本发明的限制。

Claims (14)

1.一种信息处理方法，包括：
获取原始网页；
解析所述原始网页，以确定候选图像集；
检测所述候选图像集中的每个候选图像是否包含人脸；
从检测到的人脸中确定目标人脸，并将与目标人脸对应的候选图像确定为目标图像；
对所述目标人脸进行分析，以得到所述原始网页的内容特征，所述内容特征包括人脸属性特征和人物身份特征中的至少一个；
基于所述内容特征，确定与所述内容特征匹配的显示内容；
将所述显示内容以对话框的形式插入所述原始网页中与所述目标图像对应的目标区域，以得到目标网页；以及
输出所述目标网页。
2.如权利要求1所述的信息处理方法，解析所述原始网页的步骤包括：
解析所述原始网页的代码，以获取所述原始网页中每个图像的图像信息，所述图像信息包括图像尺寸、图像位置、图像显著程度中的至少一个；以及
基于所述图像信息，从所述原始网页中的所有图像中确定所述候选图像。
3.如权利要求1所述的信息处理方法，从检测到的人脸中确定目标人脸的步骤包括以下中的至少一个：
将检测到的人脸中的人脸尺寸大于预定尺寸阈值的人脸确定为目标人脸；
将检测到的人脸中的人脸清晰度大于预定清晰度阈值的人脸确定为目标人脸；以及
将检测到的人脸中的姿态符合预定姿态的人脸确定为目标人脸。
4.如权利要求1所述的信息处理方法，对所述目标人脸进行分析的步骤包括：
通过机器学习的方法，对所述目标人脸进行分析，以得到人脸属性特征和人物身份特征中的至少一个；
其中，所述人脸属性特征包括年龄、性别、种族、标签、皮肤光滑程度、美丽指数中的至少一个；
所述人物身份特征包括名人和职业中的至少一个。
5.如权利要求1所述的信息处理方法，其中，确定与所述内容特征匹配的显示内容的步骤包括：
基于所述内容特征，确定意图浏览所述原始网页的用户的兴趣点；以及
从内容库中确定与所述兴趣点匹配的显示内容。
6.如权利要求1所述的信息处理方法，其中，将所述显示内容以对话框的形式插入所述原始网页中与所述目标图像对应的目标区域的步骤包括：
根据所述目标区域的性质调整所述显示内容的显示属性；以及
将调整后的显示内容插入所述目标区域。
7.如权利要求1所述的信息处理方法，其中，将所述显示内容以对话框的形式插入所述原始网页中与所述目标图像对应的目标区域的步骤包括：
检测目标人脸的关键点位置；
基于所述关键点位置，确定所述对话框的外边框形状、以及所述目标区域中的至少一个；以及
将所述显示内容以所述对话框的形式插入所述目标区域。
8.一种信息处理装置，包括：
获取单元，获取原始网页；
解析单元，解析所述原始网页，以确定候选图像集；
检测单元，检测所述候选图像集中的每个候选图像是否包含人脸；
目标确定单元，从检测到的人脸中确定目标人脸，并将与目标人脸对应的候选图像确定为目标图像；
分析单元，对所述目标人脸进行分析，以得到所述原始网页的内容特征，所述内容特征包括人脸属性特征和人物身份特征中的至少一个；
内容确定单元，基于所述内容特征，确定与所述内容特征匹配的显示内容；
插入单元，将所述显示内容以对话框的形式插入所述原始网页中与所述目标图像对应的目标区域，以得到目标网页；以及
输出单元，输出所述目标网页。
9.如权利要求8所述的信息处理装置，所述解析单元包括：
图像信息获取单元，解析所述原始网页的代码，以获取所述原始网页中每个图像的图像信息，所述图像信息包括图像尺寸、图像位置、图像显著程度中的至少一个；以及
候选图像确定单元，基于所述图像信息，从所述原始网页中的所有图像中确定所述候选图像。
10.如权利要求8所述的信息处理装置，所述目标确定单元配置为执行以下中的至少一个：
将检测到的人脸中的人脸尺寸大于预定尺寸阈值的人脸确定为目标人脸；
将检测到的人脸中的人脸清晰度大于预定清晰度阈值的人脸确定为目标人脸；以及
将检测到的人脸中的姿态符合预定姿态的人脸确定为目标人脸。
11.如权利要求8所述的信息处理装置，所述分析单元配置为：
通过机器学习的方法，对所述目标人脸进行分析，以得到人脸属性特征和人物身份特征中的至少一个；
其中，所述人脸属性特征包括年龄、性别、种族、标签、皮肤光滑程度、美丽指数中的至少一个；
所述人物身份特征包括名人和职业中的至少一个。
12.如权利要求8所述的信息处理装置，其中，所述内容确定单元包括：
兴趣点确定单元，基于所述内容特征，确定意图浏览所述原始网页的用户的兴趣点；以及
匹配内容确定单元，从内容库中确定与所述兴趣点匹配的显示内容。
13.如权利要求8所述的信息处理装置，其中，所述插入单元包括：
属性调整单元，根据所述目标区域的性质调整所述显示内容的显示属性；以及
内容插入单元，将调整后的显示内容插入所述目标区域。
14.如权利要求8所述的信息处理装置，其中，所述插入单元包括：
关键点检测单元，检测目标人脸的关键点位置；
区域和形状确定单元，基于所述关键点位置，确定所述对话框的外边框形状、以及所述目标区域中的至少一个；以及
内容插入单元，将所述显示内容以所述对话框的形式插入所述目标区域。
CN201510524724.0A 2015-08-24 2015-08-24 信息处理方法和信息处理装置 Active CN105117463B (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN201510524724.0A CN105117463B (zh) 2015-08-24 2015-08-24 信息处理方法和信息处理装置
US14/992,507 US10679252B2 (en) 2015-08-24 2016-01-11 Information processing method and information processing apparatus

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201510524724.0A CN105117463B (zh) 2015-08-24 2015-08-24 信息处理方法和信息处理装置

Publications (2)

Publication Number Publication Date
CN105117463A true CN105117463A (zh) 2015-12-02
CN105117463B CN105117463B (zh) 2019-08-06

Family

ID=54665453

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510524724.0A Active CN105117463B (zh) 2015-08-24 2015-08-24 信息处理方法和信息处理装置

Country Status (2)

Country Link
US (1) US10679252B2 (zh)
CN (1) CN105117463B (zh)

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106778470A (zh) * 2016-11-15 2017-05-31 东软集团股份有限公司 一种人脸识别方法及装置
CN106815566A (zh) * 2016-12-29 2017-06-09 天津中科智能识别产业技术研究院有限公司 一种基于多任务卷积神经网络的人脸检索方法
CN107169135A (zh) * 2017-06-12 2017-09-15 广州市动景计算机科技有限公司 图像处理方法、装置和电子设备
CN107194817A (zh) * 2017-03-29 2017-09-22 腾讯科技（深圳）有限公司 用户社交信息的展示方法、装置和计算机设备
CN107341139A (zh) * 2017-06-30 2017-11-10 北京金山安全软件有限公司 一种多媒体处理方法、装置、电子设备及存储介质
CN107908324A (zh) * 2017-11-14 2018-04-13 优酷网络技术（北京）有限公司 界面展示方法及装置
CN111046365A (zh) * 2019-12-16 2020-04-21 腾讯科技（深圳）有限公司 人脸图像传输方法、数值转移方法、装置及电子设备
CN112001932A (zh) * 2020-09-01 2020-11-27 腾讯科技（深圳）有限公司 人脸识别方法、装置、计算机设备和存储介质
WO2021114552A1 (zh) * 2019-12-11 2021-06-17 北京市商汤科技开发有限公司 信息处理方法及装置、电子设备和存储介质
CN113282743A (zh) * 2021-06-03 2021-08-20 北京得间科技有限公司 信息展示方法、电子设备及存储介质
CN114040239A (zh) * 2016-08-19 2022-02-11 北京市商汤科技开发有限公司 视频图像处理方法、装置和终端设备
CN114051159A (zh) * 2016-08-19 2022-02-15 北京市商汤科技开发有限公司 视频图像处理方法、装置和终端设备

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108229269A (zh) * 2016-12-31 2018-06-29 深圳市商汤科技有限公司 人脸检测方法、装置和电子设备
CN108427911B (zh) * 2018-01-30 2020-06-23 阿里巴巴集团控股有限公司 一种身份验证方法、系统、装置及设备
CN108958505B (zh) * 2018-05-24 2023-05-05 维沃移动通信有限公司 一种显示候选信息的方法及终端

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20090125544A1 (en) * 2007-11-09 2009-05-14 Vibrant Media, Inc. Intelligent Augmentation Of Media Content
CN102012937A (zh) * 2010-12-08 2011-04-13 萨·约翰尼 用于将广告发布在超文本文档中的图像上的方法和系统
CN102662950A (zh) * 2012-02-29 2012-09-12 北京明日时尚信息技术有限公司 基于互联网图片的主动式广告的生成方法
CN104598869A (zh) * 2014-07-25 2015-05-06 北京智膜科技有限公司 基于人脸识别装置的智能广告推送方法
US20150186341A1 (en) * 2013-12-26 2015-07-02 Joao Redol Automated unobtrusive scene sensitive information dynamic insertion into web-page image
CN104837060A (zh) * 2014-02-07 2015-08-12 索尼电脑娱乐美国公司 确定广告和媒体中的其它插入物的位置和时间安排的方案

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7564994B1 (en) * 2004-01-22 2009-07-21 Fotonation Vision Limited Classification system for consumer digital images using automatic workflow and face detection and recognition
US20060129411A1 (en) * 2004-12-07 2006-06-15 Nina Bhatti Method and system for cosmetics consulting using a transmitted image
US20070226624A1 (en) * 2006-02-23 2007-09-27 Peker Kadir A Content-based video summarization using spectral clustering
US8416981B2 (en) * 2007-07-29 2013-04-09 Google Inc. System and method for displaying contextual supplemental content based on image content
US20090317019A1 (en) * 2008-06-19 2009-12-24 Venkatesh Rangarajan Puliur Placement of advertisements on electronic documents containing images
US20140195345A1 (en) * 2013-01-09 2014-07-10 Philip Scott Lyren Customizing advertisements to users
US9665595B2 (en) * 2013-05-01 2017-05-30 Cloudsight, Inc. Image processing client

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20090125544A1 (en) * 2007-11-09 2009-05-14 Vibrant Media, Inc. Intelligent Augmentation Of Media Content
CN102012937A (zh) * 2010-12-08 2011-04-13 萨·约翰尼 用于将广告发布在超文本文档中的图像上的方法和系统
CN102662950A (zh) * 2012-02-29 2012-09-12 北京明日时尚信息技术有限公司 基于互联网图片的主动式广告的生成方法
US20150186341A1 (en) * 2013-12-26 2015-07-02 Joao Redol Automated unobtrusive scene sensitive information dynamic insertion into web-page image
CN104837060A (zh) * 2014-02-07 2015-08-12 索尼电脑娱乐美国公司 确定广告和媒体中的其它插入物的位置和时间安排的方案
CN104598869A (zh) * 2014-07-25 2015-05-06 北京智膜科技有限公司 基于人脸识别装置的智能广告推送方法

Cited By (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114051159A (zh) * 2016-08-19 2022-02-15 北京市商汤科技开发有限公司 视频图像处理方法、装置和终端设备
CN114040239A (zh) * 2016-08-19 2022-02-11 北京市商汤科技开发有限公司 视频图像处理方法、装置和终端设备
CN106778470A (zh) * 2016-11-15 2017-05-31 东软集团股份有限公司 一种人脸识别方法及装置
CN106815566B (zh) * 2016-12-29 2021-04-16 天津中科智能识别产业技术研究院有限公司 一种基于多任务卷积神经网络的人脸检索方法
CN106815566A (zh) * 2016-12-29 2017-06-09 天津中科智能识别产业技术研究院有限公司 一种基于多任务卷积神经网络的人脸检索方法
CN107194817A (zh) * 2017-03-29 2017-09-22 腾讯科技（深圳）有限公司 用户社交信息的展示方法、装置和计算机设备
CN107169135A (zh) * 2017-06-12 2017-09-15 广州市动景计算机科技有限公司 图像处理方法、装置和电子设备
CN107341139A (zh) * 2017-06-30 2017-11-10 北京金山安全软件有限公司 一种多媒体处理方法、装置、电子设备及存储介质
CN107908324A (zh) * 2017-11-14 2018-04-13 优酷网络技术（北京）有限公司 界面展示方法及装置
WO2021114552A1 (zh) * 2019-12-11 2021-06-17 北京市商汤科技开发有限公司 信息处理方法及装置、电子设备和存储介质
CN111046365A (zh) * 2019-12-16 2020-04-21 腾讯科技（深圳）有限公司 人脸图像传输方法、数值转移方法、装置及电子设备
CN111046365B (zh) * 2019-12-16 2023-05-05 腾讯科技（深圳）有限公司 人脸图像传输方法、数值转移方法、装置及电子设备
CN112001932A (zh) * 2020-09-01 2020-11-27 腾讯科技（深圳）有限公司 人脸识别方法、装置、计算机设备和存储介质
CN112001932B (zh) * 2020-09-01 2023-10-31 腾讯科技（深圳）有限公司 人脸识别方法、装置、计算机设备和存储介质
CN113282743A (zh) * 2021-06-03 2021-08-20 北京得间科技有限公司 信息展示方法、电子设备及存储介质
CN113282743B (zh) * 2021-06-03 2022-02-18 北京得间科技有限公司 信息展示方法、电子设备及存储介质

Also Published As

Publication number Publication date
US20170061494A1 (en) 2017-03-02
US10679252B2 (en) 2020-06-09
CN105117463B (zh) 2019-08-06

Similar Documents

Publication Publication Date Title
CN105117463A (zh) 信息处理方法和信息处理装置
US11657084B2 (en) Correlating image annotations with foreground features
US20200160403A1 (en) Image quality assessment to merchandise an item
US10049308B1 (en) Synthesizing training data
CN102567543B (zh) 一种服装图片的搜索方法和装置
CN105095498A (zh) 信息处理方法和信息处理装置
US9607010B1 (en) Techniques for shape-based search of content
US20170228809A1 (en) Recommendations utilizing visual image analysis
KR102135477B1 (ko) 이미지 자동분류 방법 및 시스템
CN108596098B (zh) 人体部件的解析方法、系统、设备和存储介质
WO2018035164A1 (en) Description information generation and presentation systems, methods, and devices
WO2021098310A1 (zh) 视频生成方法、装置、终端以及存储介质
CN113329261B (zh) 视频处理方法及装置
CN110363206B (zh) 数据对象的聚类、数据处理及数据识别方法
CN111327930A (zh) 获取目标对象的方法、装置、电子设备及存储介质
Zhang et al. Fashion evaluation method for clothing recommendation based on weak appearance feature
CN108875501B (zh) 人体属性识别方法、装置、系统及存储介质
US11253045B2 (en) Systems and methods for recommendation of makeup effects based on makeup trends and facial analysis
CN114846812A (zh) 摘要视频的生成方法、装置和服务器
CN111695971A (zh) 物品推荐方法、装置和设备及计算机存储介质
CN116542737A (zh) 跨境电商平台的大数据处理方法及系统
CN111405371A (zh) 一种数据处理的方法以及相关装置
CN110781388A (zh) 针对图像信息的信息推荐方法及装置
CN110598766A (zh) 一种商品推荐模型的训练方法、装置及电子设备
CN114971760A (zh) 一种基于大数据的车型推荐方法、装置、电子设备及介质

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
CB02 Change of applicant information
CB02 Change of applicant information

Address after: 100190 room 313, block A, 2 South Road, Haidian District Academy of Sciences, Beijing, China

Applicant after: MEGVII INC.

Applicant after: Beijing maigewei Technology Co., Ltd.

Address before: 100080 room A, block, No. 2 South Road, Haidian District Academy of Sciences, Beijing, China

Applicant before: MEGVII INC.

Applicant before: Beijing aperture Science and Technology Ltd.

GR01 Patent grant
GR01 Patent grant