CN113449715A - 产品比较方法、可读存储介质及电子设备 - Google Patents

产品比较方法、可读存储介质及电子设备 Download PDF

Info

Publication number
CN113449715A
CN113449715A CN202110303785.XA CN202110303785A CN113449715A CN 113449715 A CN113449715 A CN 113449715A CN 202110303785 A CN202110303785 A CN 202110303785A CN 113449715 A CN113449715 A CN 113449715A
Authority
CN
China
Prior art keywords
product
comparison
products
attribute
electronic device
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202110303785.XA
Other languages
English (en)
Inventor
崔誉媛
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Line Plus Corp
Original Assignee
Line Plus Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Line Plus Corp filed Critical Line Plus Corp
Publication of CN113449715A publication Critical patent/CN113449715A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/53—Querying
    • G06F16/535—Filtering based on additional data, e.g. user or group profiles
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/06—Buying, selling or leasing transactions
    • G06Q30/0601—Electronic shopping [e-shopping]
    • G06Q30/0623—Item investigation
    • G06Q30/0625—Directed, with specific intent or strategy
    • G06Q30/0629—Directed, with specific intent or strategy for generating comparisons
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00—Pattern recognition
    • G06F18/20—Analysing
    • G06F18/24—Classification techniques
    • G06F18/241—Classification techniques relating to the classification model, e.g. parametric or non-parametric approaches
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/53—Querying
    • G06F16/538—Presentation of query results
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/58—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/583—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/58—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/583—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
    • G06F16/5846—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content using extracted text
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/58—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/583—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
    • G06F16/5854—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content using shape and object relationship
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/58—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/5866—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using information manually generated, e.g. tags, keywords, comments, manually generated location and time information
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90—Details of database functions independent of the retrieved data types
    • G06F16/95—Retrieval from the web
    • G06F16/953—Querying, e.g. by the use of web search engines
    • G06F16/9535—Search customisation based on user profiles and personalisation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/06—Buying, selling or leasing transactions
    • G06Q30/0601—Electronic shopping [e-shopping]
    • G06Q30/0641—Shopping interfaces
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/20—Scenes; Scene-specific elements in augmented reality scenes
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00—Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/10—Character recognition
    • G06V30/14—Image acquisition
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00—Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/10—Character recognition
    • G06V30/14—Image acquisition
    • G06V30/148—Segmentation of character regions
    • G06V30/153—Segmentation of character regions using recognition of characters or words
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00—Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/10—Character recognition
    • G06V30/19—Recognition using electronic means
    • G06V30/19007—Matching; Proximity measures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00—Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/10—Character recognition

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Databases & Information Systems (AREA)
  • Data Mining & Analysis (AREA)
  • General Engineering & Computer Science (AREA)
  • Library & Information Science (AREA)
  • Business, Economics & Management (AREA)
  • Multimedia (AREA)
  • Finance (AREA)
  • Accounting & Taxation (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Development Economics (AREA)
  • Economics (AREA)
  • Marketing (AREA)
  • Strategic Management (AREA)
  • General Business, Economics & Management (AREA)
  • Artificial Intelligence (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Evolutionary Biology (AREA)
  • Evolutionary Computation (AREA)
  • User Interface Of Digital Computer (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

本公开提供了通过比较产品的共同特征，提供比较结果的方法、可读存储介质及电子设备。产品比较方法包括：从至少一个图像识别两个以上的比较对象产品的步骤；向UI(user interface)暴露所述比较对象产品之间可比较的至少一个属性的步骤；以及提供对于通过所述UI选择的属性的数据的比较结果的步骤。

Description

产品比较方法、可读存储介质及电子设备
技术领域
本公开涉及一种比较产品的技术。
背景技术
检索商品时使用的方法通常是基于通过文本输入的商品的信息，按照属性进行分类，从而向用户展示的方式。该方法作为基于关键词的图像检索技术，当对商品的知识不足时，需要亲自确认所有分类的商品，检索时难以准确输入关键词而在商品检索中存在很多困难。
对此，作为新的方法可以使用基于图像的特征向量进行检索的、基于内容的图像检索(content-based image retrieval)技术。
作为基于图像的商品检索技术的一例，在韩国授权专利第10-2032038号(授权日2019年10月07日)中公开有识别通过图像描述的商品，检索关于商品的数据的技术。
发明内容
解决的技术问题：
可以通过比较从图像识别的两个以上的产品之间相同属性的数据，在该图像上标记(labeling)比较结果，从而进行展示。
可以向UI(用户界面)提供可以比较从图像识别的两个以上的产品的共同特征，从而在该图像上标记通过UI选择的特征的比较结果。
技术方案：
根据本公开的一个方面，提供一种产品比较方法，所述产品比较方法包括：从至少一个图像识别两个以上的比较对象产品的步骤；向UI(用户界面；user interface)暴露所述比较对象产品之间可比较的至少一个属性；以及，提供对于通过所述UI选择的属性的数据的比较结果的步骤。
根据本公开的至少一个实施方式的产品比较方法，所述暴露的步骤可以包括：利用所述比较对象产品的元数据，确认所述比较对象产品之间可共同分类的属性的步骤。
根据本公开的至少一个实施方式的产品比较方法，所述暴露的步骤可以包括：从包含各个产品的元数据的产品数据库，查询所述比较对象产品的元数据的步骤；以及利用查询到的元数据，确认所述比较对象产品之间可共同分类的属性的步骤。
根据本公开的至少一个实施方式的产品比较方法，所述暴露的步骤可以包括：从通过对所述比较对象产品的实时检索获取的产品明细，查询元数据的步骤；以及利用查询到的元数据，确认所述比较对象产品之间可共同分类的属性的步骤。
根据本公开的至少一个实施方式的产品比较方法，所述暴露的步骤还可以包括：对于所述比较对象产品之间可共同分类的各个属性，确认字段值的步骤。
根据本公开的至少一个实施方式的产品比较方法，所述提供的步骤可以包括：在所述图像上进行叠加，从而标记基于所述比较结果的标签的步骤。
根据本公开的至少一个实施方式的产品比较方法，所述标记的步骤可以将所述标签的显示要素根据针对所述选择的属性的所述比较对象产品中的至少一个字段值，分等级显示。
根据本公开的至少一个实施方式的产品比较方法，所述提供的步骤可以包括：利用针对所述选择的属性的所述比较对象产品中的至少一个字段值，通过图表形式提供所述比较对象产品之间的比较结果的步骤。
根据本公开的至少一个实施方式的产品比较方法，所述识别的步骤可以包括：对于在所述图像识别的各个事物，提供与该事物相匹配的产品信息的步骤；以及当针对所述产品信息的用户确认被输入时，将该产品特定为所述比较对象产品的步骤。
根据本公开的至少一个实施方式的产品比较方法，所述产品比较方法还可以包括：通过所述至少一个处理器，在所述比较对象产品之间通过OCR(光学字符阅读器；optical character reader)比较从所述图像提取的文本，提供比较结果的步骤。
根据本公开的另一个方面，提供一种计算机可读存储介质，所述可读存储介质中存储有执行指令，所述执行指令被处理器执行时用于实现上述任一项所述的方法。
根据本公开的又一个方面，提供一种电子设备，包括：存储器，所述存储器存储执行指令；以及处理器，所述处理器执行所述存储器存储的执行指令，使得所述处理器执行上述任一项所述的方法。
根据本公开的再一个方面，提供一种电子设备，包括：至少一个处理器，所述处理器构成为执行存储器中存储的执行指令，所述执行指令包括以下模块：产品识别部，从至少一个图像识别两个以上的比较对象产品；属性提供部，向UI提供所述比较对象产品之间可比较的至少一个属性；以及标签标记部，根据对通过所述UI选择的属性的数据的比较结果，在所述图像上标记标签。
附图说明
图1是示出根据本公开的一实施例的网络环境的示例的图。
图2是在本公开的一实施例中用于说明电子设备以及服务器的内部结构的框图。
图3是示出根据本公开的一实施例的电子设备的处理器可以包含的构成要素的示例的图。
图4是示出根据本公开的一实施例的电子设备可以执行的方法的示例的流程图。
图5是在本公开的一实施例中用于说明输入比较对象产品的图像的过程的示意图。
图6以及图7是在本公开的一实施例中用于说明特定比较对象产品的过程的示意图。
图8是在本公开的一实施例中用于说明暴露比较对象产品之间可进行比较的字段信息的过程的示意图。
图9以及图10是在本公开的一实施例中用于说明提供比较对象产品之间的比较结果的过程的示意图。
具体实施方式
以下，参考附图详细说明本公开的实施例。
本公开的实施例涉及一种比较图像中包含的相同属性的产品的技术。
在本说明书中，包括具体公开内容的实施例可以通过比较从图像识别的两个以上的产品之间相同属性的数据，在该图像上标记比较结果。
图1是示出根据本公开的一实施例的网络环境的示例的图。图1的网络环境示出包括多个电子设备110、120、130、140、多个服务器150、160以及网络170的示例。所述图1作为用于说明本公开的一例，电子设备的数量或者服务器的数量不限定为如图1。
多个电子设备110、120、130、140可以为由计算机装置实现的固定终端或者移动终端。举例多个电子设备110、120、130、140的话，有智能手机(smart phone)、移动电话、导航仪、计算机、笔记本电脑、数字广播用终端、PDA(个人数码助手；Personal DigitalAssistants)、PMP(便携式多媒体播放器；Portable Multimedia Player)、平板电脑(PC)、游戏机(game console)、可穿戴设备(wearable device)、IoT(物联网；internet ofthings)设备、VR(虚拟现实；virtual reality)设备、AR(增强现实；augmented reality)设备等。作为一例，图1中作为电子设备110的示例示出智能手机的形状，然而在本公开的实施例中，电子设备110实质上可以是指利用无线或者有线通信方式，通过网络170可以与其他电子设备120、130、140以及/或者服务器150、160进行通信的多种物理性计算机装置中的一个。
通信方式没有限制，不仅可以利用包括网络170可包括的通信网(作为一例，移动通信网、有线网络、无线网络、广播网、卫星网等)的通信方式，也可以包括设备之间的近距离无线通信。例如，网络170可以包括PAN(个人局域网；personal area network)、LAN(局域网；local area network)、CAN(校园网络；campus area network)、MAN(城域网；metropolitan area network)、WAN(广域网；wide area network)、BBN(宽带网络；broadband network)、互联网等网络中的一个以上的任意的网络。另外，网络170可以包括网络拓扑中的任意的一个以上，所述网络拓扑包括总线网络、星型网络、环形网络、网状网络、星型-总线网络、树或者分级(hierarchical)网络等，然而不限于此。
服务器150、160可以由计算机装置或者多个计算机装置实现，计算机装置或者多个计算机装置各自与多个电子设备110、120、130、140通过网络170进行通信，从而提供指令、代码、文件、内容、服务等。例如，服务器150可以是向通过网络170连接的多个电子设备110、120、130、140提供第一服务的系统，服务器160也可以是向通过网络170接通的电子设备110、120、130、140提供第二服务的系统。作为更加具体的示例，服务器150可以通过作为设置在多个电子设备110、120、130、140并被驱动的计算机程序的应用程序，向多个电子设备110、120、130、140提供所述应用程序作为目的的服务(作为一例，产品比较服务等)作为第一服务。作为其他例，服务器160可以提供向多个电子设备110、120、130、140分发用于设置以及驱动上述应用程序的文件的服务作为第二服务。
图2是在本公开的一实施例中用于说明电子设备以及服务器的内部结构的框图。图2中，作为电子设备的示例，说明电子设备110以及服务器150的内部结构。另外，其他电子设备120、130、140或者服务器160也可以具有与上述电子设备110或者服务器150相同或者类似的内部结构。
电子设备110和服务器150可以包括存储器211、221、处理器212、222、通信模块213、223以及输入输出接口214、224。存储器211、221作为非暂时性计算机可读记录介质，可以包括诸如RAM(随机存取存储器；random access memory)、ROM(只读存储器；read onlymemory)、磁盘驱动器、SSD(固态驱动器；solid state drive)、闪速存储器(flash memory)等的永久性大容量存储装置(permanent mass storage device)。其中，诸如ROM、SSD、闪速存储器、磁盘驱动器等的永久性大容量存储装置作为与存储器211、221区分的另外的永久性存储装置，也可以包含在电子设备110或者服务器150中。另外，存储器211、221中可以存储有操作系统或者至少一个程序代码(作为一例，用于设置在电子设备110并被驱动的浏览器或者为了提供特定服务而设置在电子设备110的应用程序的代码)。所述软件构成要素可以从与存储器211、221分开的计算机可读记录介质进行加载。所述分开的计算机可读记录介质可以包括软盘、磁盘、磁带、DVD/CD-ROM驱动器、记忆卡等计算机可读记录介质。在其他实施例中，软件构成要素也可以是不通过计算机可读记录介质而是通过通信模块213、223加载在存储器211、221中。例如，至少一个程序可以基于计算机程序(作为一例，上述应用程序)而加载在存储器211、221中，所述计算机程序是通过开发人员或者分发应用程序的安装文件的文件分发系统(作为一例，上述服务器160)通过网络170提供的文件而被安装的。
处理器212、222可以构成为通过执行基本的算术、逻辑以及输入输出演算而处理计算机程序的指令。指令可以通过存储器211、221或者通信模块213、223被提供至处理器212、222。例如，处理器212、222可以构成为根据存储在诸如存储器211、221的记录装置中的程序代码而执行接收的指令。
通信模块213、223可以通过网络170提供用于使电子设备110和服务器150彼此通信的功能，并可以提供用于使电子设备110以及/或者服务器150与其他电子设备(作为一例，电子设备120)或者其他服务器(作为一例，服务器160)进行通信的功能。作为一例，电子设备110的处理器212根据存储在诸如存储器211的记录装置中的程序代码生成的请求可以根据通信模块213的控制，通过网络170被传输至服务器150。相反地，根据服务器150的处理器222的控制提供的控制信号或者指令、内容、文件等可以经通信模块223和网络170，通过电子设备110的通信模块213被电子设备110接收。例如，通过通信模块213接收的服务器150的控制信号或者指令、内容、文件等可以被传输至处理器212或者存储器211，内容或者文件等可以被存储在电子设备110还可以包括的存储介质(上述的永久性存储装置)中。
输入输出接口214可以为用于与输入输出装置215接口的装置。例如，输入装置可以包括键盘、鼠标、麦克风、摄像头等装置，输出装置可以包括显示器、扬声器、触觉反馈设备(haptic feedback device)等装置。作为其他例，输入输出接口214也可以为用于与如触摸屏用于执行输入和输出的功能被统一的装置接口的装置。输入输出装置215也可以与电子设备110由一个装置构成。另外，服务器150的输入输出接口224可以是用于与服务器150连接或者是用于与服务器150可以包含的用于输入或者输出的装置(未图示)接口的装置。作为更加具体的示例，在电子设备110的处理器212处理加载在存储器211中的计算机程序的指令时，可以通过输入输出接口214在显示器显示服务画面或者内容，所述服务画面或者内容是利用服务器150或者电子设备120提供的数据构成的。
另外，在其他实施例中，电子设备110以及服务器150也可以包括比图2的构成要素更多的构成要素。然而，大部分的现有技术的构成要素没有必要明确示出。例如，电子设备110可以实现为包括上述输入输出装置215中的至少一部分，或者还可以包括诸如收发器(transceiver)、GPS(全球定位系统；Global Positioning system)模块、摄像头、各种传感器、数据库等的其他构成要素。作为更加具体的示例，当电子设备110为智能手机时，可以实现为电子设备110中还包括通常智能手机所包含的加速度传感器或者陀螺仪传感器、摄像头模块、各种物理按钮、利用触控板的按钮、输入输出端口、用于振动的振动器等的多种构成要素。
以下，说明通过比较产品的共同特征，提供比较结果的方法以及系统的具体实施例。
图3是示出根据本公开的一实施例的电子设备的处理器可以包含的构成要素的示例的框图，图4是示出根据本公开的一实施例的电子设备可以执行的方法的示例的流程图。
在根据本实施例的电子设备110中，可以具备通过计算机实现的产品比较系统。作为一例，产品比较系统可以实现为独自操作的程序形态，或者构成为特定应用程序的应用程序内(in-app)形态，从而实现为可以在所述特定应用程序上操作，根据情况，可以通过与服务器150联动，提供产品比较服务。
基于在电子设备110安装的应用程序提供的指令，在电子设备110实现的产品比较系统可以执行图4中图示的产品比较方法。
电子设备110可以执行图4中的产品比较方法，为此，如图3所示，电子设备110的处理器212可以包括产品识别部310、属性提供部320以及标签标记部330作为构成要素。根据实施例，处理器212的构成要素也可以被选择性地包含在处理器212中或者从处理器212中排除。另外，根据实施例，处理器212的构成要素为了表现处理器212的功能，也可以被分离或者合并。
所述处理器212以及处理器212的构成要素可以控制电子设备110以执行图4的产品比较方法包含的步骤(S410至S430)。例如，处理器212以及处理器212的构成要素可以实现为根据存储器211包含的操作系统的代码和至少一个程序的代码，执行指令(instruction)。
其中，处理器212的构成要素可以为，根据存储在电子设备110中的程序代码提供的指令(作为一例，电子设备110中驱动的应用程序提供的指令)，由处理器212执行的处理器212的彼此不同的功能(different functions)的表现。例如，为了使电子设备110从图像识别产品，作为根据上述指令控制电子设备110的处理器212的功能性表现，可以利用产生识别部310。
处理器212可以从加载有与电子设备110的控制相关的指令的存储器211读取所需的指令。该情况下，所述读取的指令可以包括用于控制处理器212执行下面说明的步骤(S410至S430)的指令。
参考图4，在步骤S410中，产品识别部310可以从至少一个输入图像识别两个以上的产品。产品识别部310可以利用包括基于AI(人工智能)的摄像头功能的应用程序，被输入包括比较对象产品的图像。例如，产品识别部310可以通过应用程序的摄像头拍摄功能，被输入图像或者从与电子设备110关联的图像存储空间(作为一例，诸如存储器211的本地存储空间、可以与电子设备110联动的互联网上的存储空间等)导入图像。
作为一例，产品识别部310可以被输入想要比较的两个以上的产品装在一个帧内的图像。作为其他例，产品识别部310可以分阶段，按照各个产品，被输入各一张该产品图像。例如，产品识别部310进入到“产品比较模式”时，可以拍摄各一张比较对象产品或者提供可以从存储空间导入的界面。被识别的产品可以通过按照各个产品分离的区域显示。当被输入或者从存储装置导入的一张图像中包含两个以上的产品时，可以分离各个产品进行显示。
在本实施例中，比较对象产品作为提供图像比较分析的属性的事物，可以是指具有产品之间可比较的共同特征的事物。例如，比较对象产品可以包括化妆品、红酒、运动鞋、手机、家电等，其仅属于示例，可以包括彼此之间可以进行比较的所有的共同分类对象。即便比较对象产品的详细类别不同，也可以适用可以按照用途等其他基准进行标记的产品。
产品识别部310可以以基于深度学习(deep learning)的目标检测(objectdetection)技术为基础，分析输入图像之后，利用分析结果，特定比较对象产品。作为一例，产品识别部310为了通过与服务器150的联动来提供产品比较服务，可以利用事先构建的产品数据库(作为一例，存储器221)，对于从输入图像识别的各个事物，提供与该事物相匹配的产品信息。产品识别部310可以向服务器150传输包括输入图像的产品信息请求，对此，服务器150作为对产品信息请求的回应，可以提供与从输入图像识别的事物相匹配的产品信息。产品识别部310可以对于从输入图像识别的各个事物，显示与该事物相匹配的产品信息，此时，可以基于对产品信息的用户输入，特定比较对象产品。例如，用户输入图像时，可以在显示与从该图像识别的事物相匹配的产品信息的同时，请求对是否是想要比较的对象的用户确认，对产品信息的用户确认被输入时，可以将该产品特定为比较对象产品。
在步骤S420中，属性提供部320可以向UI(以下称为“属性选择UI”)提供步骤S410中识别的产品之间可比较的相同属性的字段信息。当特定两个以上的比较对象产品时，属性提供部320可以在确认可以将比较对象产品共同分类的至少一个属性之后，对确认的属性提供可供用户选择的UI。
属性提供部320可以按照各个比较对象产品，查询各个产品的元数据。元数据是指对产品的多个属性进行说明的数据，不仅是类别或者产品分类品种、用途、容量、成分、生产国家、生产者、销售者、生产日期、流通期限等的产品说明，而且可以包括功效或者性能之类的产品特征、对产品的评价数据或者各种标签(tag)等。比较对象产品之间的可共同分类的属性可以是指基于元数据，可以将比较对象产品通过共同属性进行分类的基准。属性提供部320可以确认比较对象产品之间是否存在相同属性的元数据字段。例如，比较对象产品为化妆品时，比较各个产品的元数据，表示水分感的属性字段和表示美白性能的属性字段共同存在时，可以将水分感和美白性能用作可共同分类的属性。另外，属性提供部320可以确认是否存在属于元数据字段的字段值、元数据字段是否具有可以进行比较的数值等。作为一例，当包括清洗的元数据的数据库被事先构建时，属性提供部320可以利用该数据库，查询比较对象产品的元数据。例如，各个产品的元数据可以包含在产品数据库(DB)中。作为其他例，属性提供部320可以利用被特定为比较对象产品的产品信息进行实时检索，由此从对于包含在比较对象产品的检索结果中的至少一个产品的详细信息，查询元数据。例如，可以在对比较对象产品的检索结果中，提取暴露在最高位的产品明细，查询比较对象产品的元数据。可以事先定义对多种详细表达的映射表以能够在未被清洗的多个形态的产品明细中确认元数据字段，属性提供部320可以利用映射表，从通过实时检索获取的产品明细，查询比较对象产品的元数据值。
属性提供部320可以提取比较对象产品之间相同属性的字段信息，对于各个字段信息，可以确认表示该字段值的数值。此时，属性提供部320可以将比较对象产品之间可比较的各个字段信息作为共同概念进行分类，并各自提供给UI。作为一例，属性提供部320可以在比较对象产品之间相同属性的元数据字段中，提取字段深度(depth)最大的字段信息或者按照深度大的顺序提取一定数量的字段信息，对于提取的各个字段信息，可以确认字段值(例如，数值)。作为其他例，可以根据用户的请求，调整比较的字段深度。如上所述，通过调整比较的水准，从而可以使产品之间进行更加详细或者抽象的比较。
在步骤S430中，通过属性选择UI选择特定字段时，标签标记部330可以比较选择的字段信息的数据，在输入图像上标记根据比较结果的标签。标签标记部330可以比较比较对象产品之间相同属性的数据，将比较结果叠加(overlay)在图像上，可以根据比较结果，在输入图像上的产品进行标记，从而进行展示。此时，可以将基于比较结果的标签的诸如大小或者颜色等的显示要素按照表示字段值的数值，分等级应用。
作为其他例，标签标记部330可以通过图表形式提供比较对象产品之间的比较结果，可以将表示各个比较对象产品的字段值的数值做成图表，从而标记比较结果。
以上说明了对比较对象产品之间相同属性的元数据字段进行比较的情况，然而不限定于此，只要是产品之间可比较的共同特征，可以全部应用。例如，处理器212可以应用通过OCR(光学字符阅读器；optical character reader)的文字识别结果。换言之，处理器212可以对于各个比较对象产品，在输入图像通过OCR提取文本之后，比较提取的文本中包含的数值，根据比较结果，标记标签。除了比较对象产品的元数据之外，还可以比较可以通过OCR识别的产品本身的标签信息，更进一步地，不仅可以结合比较对象产品的元数据和OCR识别结果，而且可以将产品明细中包含的所有信息用作产品比较数据。
另外，对于在比较对象产品的元数据字段或者OCR文字识别结果中的事先设定的特定属性，例如存在用户事先设定的属性时，处理器212可以强调包含该属性的产品并进行标记。例如，当想要识别的有害成分或者过敏成分乃至不喜欢的成分被用户指定时，对于比较对象产品中存在该成分的产品，可以另外标记标签或者标志。另外，通过对产品的OCR文字识别，提取出显示用户想要识别的有害成分或者过敏成分乃至不喜欢的成分的文本时，也可以将该文本与其他产品之间的比较结果一起暴露。
服务器150可以基于清洗的元数据，事先构建对元数据字段的数据库。服务器150的处理器222可以通过输入输出接口224，接收对产品的分类以及字段信息的输入，在数据库存储产品的分类以及字段信息。进一步地或者作为替代方案，服务器150的处理器222可以分析通过网络170收集的数据，决定按照产品分类的字段名以及字段深度，可以如表1地存储在数据库中。
【表1】
产品大分类 产品细分类 字段名 字段深度
化妆品 霜 保湿 1
化妆品 霜 水分感 2
化妆品 霜 有无香味 1
化妆品 香水 目标性别 1
化妆品 香水 主要香味 1
化妆品 香水 后调 2
化妆品 香水 前调 2
对事先构建的元数据字段的数据库可以再次用在元数据收集以及清洗中。例如，通过产品识别部310识别到香水A和香水B时，可以在属性提供部320参考表1的数据库，将字段深度为“1”的“目标性别”和“主要香味”作为字段信息进行提取。此时，两个香水的“目标性别”和“主要香味”相同，则可以在属性提供部320作为“字段信息”提取“字段深度”为“2”的“后调”和“前调”，利用香水A和香水B的元数据，决定属于香水A和香水B的字段值。此时，可以与决定的字段值相关联，决定标签，决定的标签可以通过标签标记部330标记在输入图像上。
图5至图10是示出在本公开的一实施例中用于说明提供产品比较服务的过程的用户界面的画面的示例图。
图5至图10示出产品比较服务画面500，可以为显示在电子设备110的显示器上的画面。
参考图5，处理器212可以通过摄像头拍摄功能，被输入图像501，或者从与电子设备110关联的图像存储空间导入图像501，显示在产品比较服务画面500。此时，可以将图像501作为两个以上的比较对象产品捕获在一个帧内的图像输入处理器212，或者将各个比较对象产品的个别图像输入处理器212。
例如，用户为了比较两个洁面产品，可以将两个洁面产品装在一个帧内进行拍摄，此时，拍摄图像作为用于产品比较的图像501被输入到处理器212。
处理器212对于从图像501识别的各个事物，可以显示与该事物相匹配的产品信息，基于对产品信息的用户输入，特定比较对象产品。
如图6和图7所示，对于从图像501识别的各个事物，处理器212可以提供包括与该事物相匹配的产品信息的用户确认画面610、710。在图像501中，将一个产品识别为A品牌的“甲”产品，将另一个产品识别为B品牌的“乙”产品时，为了可以使用户确认被识别的产品是否正确，可以提供包括该产品信息的用户确认画面610、710。通过用户确认画面610、710输入对于识别的产品的用户确认时，处理器212可以将该产品特定为比较对象产品。
根据实施例，可以省略提供对从图像501识别的产品信息的用户确认画面610、710的过程。例如，当产品识别准确度为一定级别以上时，可以省略提供用户确认画面610、710的过程。
处理器212可以查询各个比较对象产品的元数据，从而确认比较对象产品之间是否存在相同属性的元数据字段和该字段是否具有可比较的数值。此时，处理器212可以提取比较对象产品之间可比较的相同属性的字段信息。例如，对于“甲”产品和“乙”产品，可以从元数据提取水分感(或者滋润信息)、有害成分数量(或者有害指标)、整体评分等具有共同特征的属性。处理器212可以按照比较对象产品之间的各个相同属性，确认该属性的字段值数值。例如，为了比较“甲”产品和“乙”产品，可以确认诸如水分感(“甲”产品-5分、“乙”产品-3分)、有害成分数量(“甲”产品-2个、“乙”产品-1个)、整体评分(“甲产品”-10分、“乙”产品-5分)等的产品之间相同属性的字段值数值。
参考图8，处理器212可以利用比较对象产品之间可比较的相同属性的字段信息，提供属性选择UI820。换言之，处理器212可以将显示共同特征的个别字段值作为共同概念进行分类，并提供给属性选择UI820。“甲”产品和“乙”产品在元数据内共同具有水分感(或者滋润信息)、有害成分数量(或者有害指标)、整体评分的字段信息时，可以利用该字段信息，提供属性选择UI820。
参考图9，通过属性选择UI820选择特定属性的字段时，处理器212可以比较选择的字段值数值，在图像上显示基于比较结果的标签930。在属性选择UI820中，选择“有害成分少”的UI时，可以在“甲”产品和“乙”产品的元数据属性中，比较与“有害成分”有关的字段值数值，在有害成分最少的产品上标记标签930。或者，也可以代替基于比较结果的标签930，提供各个比较对象产品的排序信息。例如，可以按照与“有害成分”有关的字段值数值少的顺序，显示各个产品的排序。
作为其他例，处理器212可以代替基于比较结果的标签930，通过图表形式提供比较对象产品之间的比较结果。参考图10，在属性选择UI820中选择“有害成分少”的UI时，处理器212可以提供利用图表1040显示的“甲”产品和“乙”产品的元数据属性中与“有害成分”相关的字段值数值的比较结果。
因此，本实施例对于两个以上的比较对象产品，可以暴露产品之间可比较的共同属性，将比较用户选择的属性的字段值的结果贴标签，从而进行标记。
根据所述本公开的实施例，可以比较从图像识别的两个以上的产品之间相同属性的数据，从而在该图像上标记比较结果，并进行展示。然后，根据本公开的实施例，可以向UI提供可以比较从图像识别的两个以上的产品的共同特征，从而提供通过UI选择的特征的比较结果。
以上说明的装置可以由硬件构成要素、软件构成要素以及/或者硬件构成要素以及软件构成要素的组合实现。例如，实施例中说明的装置以及构成要素可以例如处理器、控制器、ALU(算术逻辑单元；arithmetic logic unit)、数字信号处理器(digital signalprocessor)、微计算机、FPGA(现场可编程门阵列；field programmable gate array)、PLU(可编程逻辑单元；programmable logic unit)、微处理器或者可以执行指令(instruction)并响应的其他任意装置，利用一个以上的通用计算机或者特殊目的计算机来实现。处理装置可以执行操作系统(OS)以及在所述操作系统上执行的一个以上的软件应用程序。另外，处理装置响应软件的执行，也可以存取、存储、操作、处理以及生成数据。为了方便理解，说明了使用一个处理装置的情况，然而本技术领域中具有通常知识的人可以理解处理装置可以包括多个处理元件(processing element)以及/或者多个类型的处理元件。例如，处理装置可以包括多个处理器或者一个处理器以及一个控制器。另外，也可以是诸如并行处理器(parallel processor)其他处理结构(processing configuration)。
软件可以包括计算机程序(computer program)、代码(code)、指令(instruction)或者其中一个以上的组合，可以将处理装置构成为按照意愿操作或者单独或者共同(collectively)命令处理装置。软件以及/或者数据为了通过处理装置进行解释或者向处理装置提供指令或者数据，可以具体化(embody)为某一类型的机器、构成要素(component)、物理装置、计算机存储介质或者装置。软件也可以分散到通过网络连接的计算机系统上，从而通过分散的方法进行存储或者执行。软件以及数据可以存储在一个以上的计算机可读记录介质中。
根据实施例的方法可以实现为可通过多种计算机装置执行的程序指令形态，从而记录在计算机可读介质中。此时，介质也可以继续存储可由计算机执行的程序，或者为了执行或者下载而临时存储。另外，介质可以为单一或者多个硬件结合的形态的多种记录装置或者存储装置，然而不限定于与某一计算机系统直接接通的介质，也可以是在网络上分散存在的介质。作为介质的示例，可以包括诸如硬盘、软盘以及磁盘的磁性介质、CD-ROM以及DVD之类的光记录介质、软式光盘(floptical disk)之类的磁-光介质(magneto-opticalmedium)、以及ROM、RAM、闪速存储器等，构成为存储有程序指令。另外，作为其他介质的示例，也可以例举出流通应用程序的应用商城或者供应乃至流通其他多种软件的网站、在服务器等上管理的记录介质乃至存储介质。
虽然通过限定的实施例和附图说明了如上所述实施例，然而只要是本技术领域中具有通常知识的人，可以由所述记载进行多种修改以及变形。例如，即便说明的技术按照与说明的方法不同的顺序执行，以及/或者说明的系统、结构、装置、电路等的构成要素以与说明的方法不同的形态进行结合或者组合，或者被其他构成要素或者均等物替代或者取代，也能达成合适的结果。

Claims (21)

1.一种产品比较方法，其特征在于，
所述产品比较方法包括：
从至少一个图像识别两个以上的比较对象产品的步骤；
向用户界面UI暴露在所述比较对象产品之间可比较的至少一个属性的步骤；以及
提供对于通过所述UI选择的属性的数据的比较结果的步骤。
2.根据权利要求1所述的产品比较方法，其特征在于，所述暴露的步骤包括：
利用所述比较对象产品的元数据，确认所述比较对象产品之间可共同分类的属性的步骤。
3.根据权利要求1所述的产品比较方法，其特征在于，所述暴露的步骤包括：
从包含各个产品的元数据的产品数据库，查询所述比较对象产品的元数据的步骤；以及
利用查询到的元数据，确认所述比较对象产品之间可共同分类的属性的步骤。
4.根据权利要求1所述的产品比较方法，其特征在于，所述暴露的步骤包括：
从通过对所述比较对象产品的实时检索获取的产品明细，查询元数据的步骤；以及
利用查询到的元数据，确认所述比较对象产品之间可共同分类的属性的步骤。
5.根据权利要求2所述的产品比较方法，其特征在于，所述暴露的步骤还包括：对于所述比较对象产品之间可共同分类的各个属性，确认字段值的步骤。
6.根据权利要求1所述的产品比较方法，其特征在于，所述提供的步骤包括：
在所述图像上进行叠加，从而标记基于所述比较结果的标签的步骤。
7.根据权利要求6所述的产品比较方法，其特征在于，所述标记的步骤为，
将所述标签的显示要素根据针对所述选择的属性的所述比较对象产品中的至少一个字段值，分等级显示。
8.根据权利要求1所述的产品比较方法，其特征在于，所述提供的步骤包括：
利用针对所述选择的属性的所述比较对象产品中的至少一个字段值，通过图表形式提供所述比较对象产品之间的比较结果的步骤。
9.根据权利要求1所述的产品比较方法，其特征在于，所述识别的步骤包括：
对于在所述图像识别的各个事物，提供与该事物相匹配的产品信息的步骤；以及
当针对所述产品信息的用户确认被输入时，将该产品特定为所述比较对象产品的步骤。
10.根据权利要求1所述的产品比较方法，其特征在于，所述产品比较方法还包括：在所述比较对象产品之间通过光学字符阅读器比较从所述图像提取的文本，从而提供比较结果的步骤。
11.一种可读存储介质，其特征在于，所述可读存储介质中存储有执行指令，所述执行指令被处理器执行时用于实现权利要求1至10中任一项所述的产品比较方法。
12.一种电子设备，包括执行存储器中存储的执行指令的至少一个处理器，所述执行指令包括以下模块：
产品识别部，从至少一个图像识别两个以上的比较对象产品；
属性提供部，向UI提供所述比较对象产品之间可比较的至少一个属性；以及
标签标记部，根据对于通过所述UI选择的属性的数据的比较结果，在所述图像上标记标签。
13.根据权利要求12所述的电子设备，其特征在于，所述属性提供部利用所述比较对象产品的元数据，确认所述比较对象产品之间可共同分类的属性。
14.根据权利要求12所述的电子设备，其特征在于，所述属性提供部从包含各个产品的元数据的产品数据库，查询所述比较对象产品的元数据，利用查询到的元数据，确认所述比较对象产品之间可共同分类的属性。
15.根据权利要求12所述的电子设备，其特征在于，所述属性提供部
从通过对所述比较对象产品的实时检索获取的产品明细，查询元数据，利用查询到的元数据，确认所述比较对象产品之间可共同分类的属性。
16.根据权利要求13所述的电子设备，其特征在于，所述属性提供部对于所述比较对象产品之间可共同分类的各个属性，确认字段值。
17.根据权利要求13所述的电子设备，其特征在于，所述标签标记部将所述标签的显示要素根据针对所述选择的属性的所述比较对象产品中的至少一个字段值，分等级显示。
18.根据权利要求13所述的电子设备，其特征在于，所述至少一个处理器利用针对所述选择的属性的所述比较对象产品中的至少一个字段值，通过图表形式提供所述比较对象产品之间的比较结果。
19.根据权利要求12所述的电子设备，其特征在于，所述产品识别部
对于在所述图像识别的各个事物，提供与该事物相匹配的产品信息，当针对所述产品信息的用户确认被输入时，将该产品特定为所述比较对象产品。
20.根据权利要求12所述的电子设备，其特征在于，所述至少一个处理器在所述比较对象产品之间通过光学字符阅读器比较从所述图像提取的文本，从而提供比较结果。
21.一种电子设备，其特征在于，包括：
存储器，所述存储器存储执行指令；以及
处理器，所述处理器执行所述存储器存储的执行指令，使得所述处理器执行权利要求1至10中任一项所述的产品比较方法。
CN202110303785.XA 2020-03-24 2021-03-22 产品比较方法、可读存储介质及电子设备 Pending CN113449715A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020200035570A KR20210119112A (ko) 2020-03-24 2020-03-24 제품의 공통된 특징을 비교하여 비교 결과를 제공하는 방법, 시스템, 및 컴퓨터 프로그램
KR10-2020-0035570 2020-03-24

Publications (1)

Publication Number Publication Date
CN113449715A true CN113449715A (zh) 2021-09-28

Family

ID=77809158

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110303785.XA Pending CN113449715A (zh) 2020-03-24 2021-03-22 产品比较方法、可读存储介质及电子设备

Country Status (4)

Country Link
US (1) US11636148B2 (zh)
JP (1) JP2021152897A (zh)
KR (1) KR20210119112A (zh)
CN (1) CN113449715A (zh)

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10776849B2 (en) * 2014-12-04 2020-09-15 Lenovo (Singapore) Pte Ltd Visually identifying products
US20160217157A1 (en) 2015-01-23 2016-07-28 Ebay Inc. Recognition of items depicted in images
US10204136B2 (en) * 2015-10-19 2019-02-12 Ebay Inc. Comparison and visualization system
KR20190005082A (ko) * 2017-07-05 2019-01-15 십일번가 주식회사 증강 현실을 통한 오프라인 상품의 온라인 판매 정보 제공 방법 및 이를 위한 장치
US11270367B2 (en) * 2019-04-19 2022-03-08 Apple Inc. Product comparison techniques using augmented reality

Also Published As

Publication number Publication date
US11636148B2 (en) 2023-04-25
JP2021152897A (ja) 2021-09-30
US20210303617A1 (en) 2021-09-30
KR20210119112A (ko) 2021-10-05

Similar Documents

Publication Publication Date Title
US10824942B1 (en) Visual similarity and attribute manipulation using deep neural networks
KR101768521B1 (ko) 이미지에 포함된 객체에 대한 정보 데이터를 제공하는 방법 및 시스템
US7542610B2 (en) System and method for use of images with recognition analysis
KR102211650B1 (ko) 인공지능 기반 상품 추천 방법 및 그 시스템
US9008465B2 (en) System and method for use of images with recognition analysis
US10032072B1 (en) Text recognition and localization with deep learning
CN110249304B (zh) 电子设备的视觉智能管理
US8718369B1 (en) Techniques for shape-based search of content
US20180181569A1 (en) Visual category representation with diverse ranking
US10706098B1 (en) Methods to present search keywords for image-based queries
US10769524B1 (en) Non-binary gender filter
US20210035187A1 (en) Device and method for item recommendation based on visual elements
CN110580489B (zh) 一种数据对象的分类系统、方法以及设备
US11037071B1 (en) Cross-category item associations using machine learning
US11810177B2 (en) Clothing collocation
KR102427723B1 (ko) 인공지능 기반 상품 추천 방법 및 그 시스템
KR102277240B1 (ko) 키워드 관계 구조를 이용한 동의어 추출 방법 및 시스템
US20170034586A1 (en) System for content matching and triggering for reality-virtuality continuum-based environment and methods thereof
CN112948526A (zh) 用户画像的生成方法及装置、电子设备、存储介质
CN113449715A (zh) 产品比较方法、可读存储介质及电子设备
KR102195191B1 (ko) 키워드 관계 구조를 이용한 신규 키워드 추출 방법 및 시스템
CN114511741A (zh) 图像的识别方法、装置、设备、存储介质及程序产品
KR20190000061A (ko) 키워드 속성을 기준으로 관련 있는 키워드를 제공하는 방법 및 시스템
WO2007041647A2 (en) System and method for use of images with recognition analysis
JP7027524B2 (ja) 視覚的入力の処理

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination