CN108781262A - 用于合成图像的方法和使用该方法的电子装置 - Google Patents

用于合成图像的方法和使用该方法的电子装置 Download PDF

Info

Publication number
CN108781262A
CN108781262A CN201780017436.3A CN201780017436A CN108781262A CN 108781262 A CN108781262 A CN 108781262A CN 201780017436 A CN201780017436 A CN 201780017436A CN 108781262 A CN108781262 A CN 108781262A
Authority
CN
China
Prior art keywords
picture
electronic device
user
attribute information
weighted value
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201780017436.3A
Other languages
English (en)
Other versions
CN108781262B (zh
Inventor
郑俊诚
金善花
李宰荣
崔基琫
崔善
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics Co Ltd
Original Assignee
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Samsung Electronics Co Ltd filed Critical Samsung Electronics Co Ltd
Publication of CN108781262A publication Critical patent/CN108781262A/zh
Application granted granted Critical
Publication of CN108781262B publication Critical patent/CN108781262B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/0002—Inspection of images, e.g. flaw detection
    • G06T7/0004—Industrial image inspection
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/272—Means for inserting a foreground image in a background image, i.e. inlay, outlay
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/58—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/583—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/00—2D [Two Dimensional] image generation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/00—2D [Two Dimensional] image generation
    • G06T11/60—Editing figures and text; Combining figures or text
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/265—Mixing
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2200/00—Indexing scheme for image data processing or generation, in general
    • G06T2200/24—Indexing scheme for image data processing or generation, in general involving graphical user interfaces [GUIs]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/20—Special algorithmic details
    • G06T2207/20212—Image combination
    • G06T2207/20221—Image fusion; Image merging
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30108—Industrial image inspection
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/10—Segmentation; Edge detection
    • G06T7/194—Segmentation; Edge detection involving foreground-background segmentation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/272—Means for inserting a foreground image in a background image, i.e. inlay, outlay
    • H04N2005/2726—Means for inserting a foreground image in a background image, i.e. inlay, outlay for simulating a person's appearance, e.g. hair style, glasses, clothes

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Databases & Information Systems (AREA)
  • Data Mining & Analysis (AREA)
  • Library & Information Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Quality & Reliability (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

提供了一种用于合成图像的装置和方法以及使用该方法的电子装置。该电子装置包括存储图片的存储器、与外部服务器通信的收发器、检测用户交互的显示器、以及从存储器读取图片的处理器。处理器根据加权值第一选择至少一张图片，从第一选择的至少一个图片中确定第一属性信息和第二属性信息，以数据库形式存储第一属性信息和第二属性信息，基于第一属性信息、第二属性信息和用户上下文信息，从第一选择的至少一个图片中第二选择至少一个图片，控制收发器从外部服务器接收与第二选择的至少一个图片相对应的产品图像，以及通过合成第二选择的至少一个图片和产品图像来创建合成图像。

Description

用于合成图像的方法和使用该方法的电子装置
技术领域
本公开涉及一种用于提供虚拟衣服穿戴服务的方法和系统。更具体地，本公开涉及一种用于将包括用户的图片与产品图像合成并将合成图像提供给用户终端装置或大型平板显示器(LFD)的电子装置。
背景技术
计算机和通信技术的进步使得电子装置具有小尺寸并且包括各种功能。具体地，电子装置可以具有用于创建图像的相机，并且通过无线通信功能将创建的图像发送到远程位置的服务器。
同时，用户可以使用各种购买方法来通过离线或在线方式购买诸如服装或配饰之类的产品。通过使用这样的方法，用户通过查看由另一实体(例如阿凡达)或模特等穿戴的产品来决定购买衣服或配饰。在这种情况下，用户面临意外的结果，并且对于使用者来说，他或她不能穿着实际的衣服和配饰是不方便的。此外，用户购买的衣服和配饰可能不适应季节和环境的变化，带来各种问题。
以上信息仅作为背景信息呈现，以帮助理解本公开。没有做出任何确定，并且没有断言关于上述任何一个是否可以适用于关于本公开的现有技术。
发明内容
本公开的各方面旨在解决至少上述问题和/或缺点，并提供至少下述优点。因此，本公开的一个方面是提供一种用于生成图像并提供图像的方法和装置，其中用户从先前拍摄的图片中选择图片，并且所选择的图片与用户要购买的衣服或配饰合成。
根据本公开的一方面，提供了一种用于生成电子装置的合成图像的方法。该方法包括：根据加权值第一选择至少一张图片；基于所述第一选择的至少一个图片确定第一属性信息和第二属性信息；以数据库形式存储第一属性信息和第二属性信息；基于第一属性信息、第二属性信息和用户上下文信息，从第一选择的至少一个图片中第二选择至少一个图片；从服务器接收与第二选择的至少一个图片相对应的产品图像；和通过将第二选择的至少一个图片与产品图像合成来生成合成图像。可以基于创建图片的日期和/或时间来确定加权值。或者，基于图片中包括的对象的形状确定加权值。或者，可以基于是否共享图片来确定加权值。或者，可以基于用户交互来确定加权值。可以在屏幕上显示图片的同时检测用户交互。响应于用户交互是放大手势，可以增加加权值。第一属性信息可以是关于图片中包括的对象的信息。第二属性信息可以是关于图片背景的信息。用户上下文信息可以包括用户的位置信息。
根据本公开的另一方面，提供了一种电子装置。该电子装置包括：存储器，被配置为存储多个图片；收发器，被配置为与外部服务器通信；显示器，被配置为检测用户交互；和处理器配置为：从存储器中读取多个图片。处理器还被配置为：根据加权值第一选择至少一张图片，从第一选择的至少一个图片中确定第一属性信息和第二属性信息，以数据库形式存储第一属性信息和第二属性信息，基于第一属性信息、第二属性信息和用户上下文信息，从第一选择的至少一个图片中第二选择至少一个图片，控制收发器从外部服务器接收与第二选择的至少一个图片相对应的产品图像，以及通过合成第二选择的至少一个图片和产品图像来创建合成图像。可以基于创建多个图片中的图片的日期和/或时间来确定加权值。可以基于图片中包括的对象的形状来确定加权值。可以基于是否共享图片来确定加权值。可以基于用户交互来确定加权值。可以在屏幕上显示图片的同时检测用户交互。电子装置可以响应于用户交互是放大手势而增加加权值。第一属性信息可以是关于图片中包括的对象的信息。第二属性信息可以是关于图片背景的信息。用户上下文信息可以包括用户的位置信息。
根据本公开的另一方面，提供了一种电子装置。该电子装置包括：存储器，被配置为存储多个图片；显示器，用于检测用户交互；以及处理器。电子装置从存储器读取多个图片，根据加权值第一选择至少一张图片，从第一选择的至少一个图片中确定第一属性信息和第二属性信息，以数据库形式存储第一属性信息和第二属性信息，基于第一属性信息、第二属性信息和用户上下文信息，从第一选择的至少一个图片中第二选择至少一个图片，控制收发器从外部服务器接收与第二选择的至少一个图片相对应的产品图像，以及通过合成第二选择的至少一个图片和产品图像来创建合成图像，从而使用户能够看到或看到他或她自己穿着实际产品。
根据本公开的另一方面，提供了一种用于合成图像的装置。该装置包括显示器、至少一个处理器、以及存储被配置为由至少一个处理器执行的一个或多个计算机程序的至少一个存储器。所述一个或多个计算机程序包括以下指令：根据加权值第一选择至少一张图片，从第一选择的至少一个图片中确定第一属性信息和第二属性信息，以数据库形式存储第一属性信息和第二属性信息，基于第一属性信息、第二属性信息和用户上下文信息，从第一选择的至少一个图片中第二选择至少一个图片，控制收发器从外部服务器接收与第二选择的至少一个图片相对应的产品图像，以及通过合成第二选择的至少一个图片和产品图像来创建合成图像。
通过以下结合附图公开了本公开的各种实施例的详细描述，本公开的其他方面、优点和显著特征对于本领域技术人员将变得显而易见。
附图说明
通过以下结合附图的描述，本公开的某些实施例的以上和其他方面、特征和优点将更加明显，其中：
图1是示出根据本公开各种实施例的包括电子装置的网络环境的视图；
图2是根据本公开的各种实施例的电子装置的框图；
图3是根据本公开的各种实施例的本公开的粗略流程图；
图4是说明根据本公开各种实施例的选择存储在电子装置中的多个图片的过程的视图；
图5是说明根据本公开各种实施例的由电子装置选择从服务器接收的图片的过程的视图；
图6是根据本公开各种实施例的针对由用户创建的图片分配加权值的方法的流程图；
图7是根据本公开的各种实施例的针对从服务器接收的图片分配加权值的方法的流程图；
图8是示出根据本公开各种实施例的从所选图片中提取图片中包括的衣服的属性信息和图片的背景的属性信息的示例的视图；
图9A和9B是示出根据本公开各种实施例的使用图片的属性信息推荐用户优选服装的示例的视图；
图10是用于说明根据本公开的各种实施例的将用户创建的图片与由第三方提供的产品图像合成并提供该合成图像的示例的视图；
图11是用于说明根据本公开各种实施例的将产品图像与存储在电子装置中的用于拟合用途的图片进行合成的过程的视图；和
图12是提供用于解释根据本公开各种实施例的将产品图像与在电子装置中的用于拟合用途的图片进行合成的的过程的流程图。
在整个附图中，应该注意，相同的附图标记用于描绘相同或相似的元件、特征和结构。
具体实施方式
提供参考附图的以下描述以帮助全面理解由权利要求及其等同物限定的本公开的各种实施例。它包括各种具体细节以帮助理解，但这些仅被视为示例性的。因此，本领域普通技术人员将认识到，在不脱离本公开的范围和精神的情况下，可以对本文描述的各种实施例进行各种改变和修改。另外，为了清楚和简明，可以省略对公知功能和结构的描述。
在以下描述和权利要求中使用的术语和词语不限于书面含义，而是仅由发明人使用以使得能够清楚和一致地理解本公开。因此，对于本领域技术人员来说显而易见的是，提供本公开的各种实施例的以下描述仅用于说明目的，而不是为了限制由所附权利要求及其等同物限定的本公开的目的。
应理解，除非上下文另有明确规定，否则单数形式“一”、“一个”和“该”包括复数指示物。因此，例如，对“组件表面”的引用包括对一个或多个这样的表面的引用。
在本公开中，诸如“具有”、“可具有”、“包括”或“可包括”的表达指的是相应特征的存在(例如，诸如数值、功能、操作或部分等)，并且不排除存在附加特征。
在本公开中，诸如“A或B”、“A和/或B中的至少一个”或“A和/或B中的一个或多个”的表达可以包括所列项目的所有可能组合。、例如，“A或B”、“A和B中的至少一个”或“A或B中的至少一个”可以指：(1)至少一个A；(2)至少一个B；或(3)至少一个A和至少一个B。
本公开中使用的表述“第一”、“第二”、“一”和“二”可以修改各种元件，而不管顺序和/或重要性，并且仅用于区分一个元件和另一个，并不限制相应的元件。例如，第一用户装置和第二用户装置可以表示不同的用户装置，而不管顺序或重要性。例如，第一元件可以被命名为第二元件，并且类似地，第二元件可以被命名为第一元件，而不会超出本公开的范围。
当提到元件(例如，第一元件)与另一元件(例如第二元件)“可操作地或通信地耦合”或“连接到”另一元件(例如第二元件)时，应理解该元件可以是与另一元件直接耦合，或者可以通过另一元件(例如，第三元件)耦合。另一方面，当提到一个元件(例如，第一元件)与另一个元件(例如第二元件)“直接耦合”或“直接连接”时，可以理解为没有元件(例如，第三个元件存在于一个元件和另一个元件之间。
根据情况，本公开中使用的表述“被配置为”可以互换地使用为，例如，“适合于”、“具有能力”、“设计为”、“适应于”、“制造”或“能够”。表达“被配置为”并不一定意味着“专门设计为”硬件方式。相反，在一些情况下，表述“被配置为”的装置可以意味着该装置可以“被配置为”与另一装置或部件做某事。例如，短语“被配置为执行A、b和C的处理器”可以指用于执行相应操作的专用处理器(例如，嵌入式处理器)、或者通过执行存储在存储装置中的至少一个软件程序来执行相应的操作的通用处理器(例如，中央处理单元(CPU)或应用处理器(AP))。
本公开中使用的术语用于解释任意实施例，并且可以不旨在限制另一实施例的范围。另外，在本说明书中，为了便于解释可以使用单数表达，但是除非表达在上下文中具有明显不同的含义，否则也可以理解为包括复数表达的概念。另外，本说明书中使用的术语可以具有与本领域技术人员通常理解的含义相同的含义。在本说明书中使用的所有术语的通用字典中定义的术语可以被理解为具有与现有技术的上下文中的含义相同或相似的含义，并且除非在本说明书中具体定义术语，否则术语不应被理解为具有理想或过度敷衍的含义。根据情况，即使在本说明书中定义了术语，也可以不理解为排除本说明书的实施例。
根据本公开各种实施例的电子装置可以例如包括智能手机、平板个人计算机(PC)、电子书阅读器、台式个人计算机(PC)、笔记本电脑、上网本电脑、工作站和服务器中的至少一个。在一些实施例中，电子装置可以是家用电器。例如，家用电器可以包括电视、电视盒(例如，Samsung HomeSyncTM、Appl e TVTM或Googl e TVTM)和电子相框中的至少一个。
根据实施例，电子装置可以包括电子板、电子签名接收装置和投影仪中的至少一个。在各种实施例中，电子装置可以是前述各种装置之一或其组合。根据一些实施例的电子装置可以是柔性电子装置。此外，根据本公开的实施例的电子装置不限于上述装置，并且可以包括根据新技术的发展的新电子装置。
在下文中，将参考附图描述根据各种实施例的电子装置。在本公开中，术语“用户”可以指使用电子装置的人或使用电子装置的装置(例如，人工智能电子装置)。
图1是示出根据本公开的各种实施例的包括电子装置的网络环境100的视图。
参见图1，将参照图1描述根据各种实施例的网络环境100中的电子装置101。电子装置101可以包括总线110、处理器120、存储器130、输入/输出接口150、显示器160和收发器或通信接口170。在一些实施例中，电子装置101可以省略至少一个元件，或进一步包括另一个元件。
总线110可以例如包括将元件110-170彼此连接的电路，并且在元件之间传递通信(例如，控制消息和/或数据)。
存储器130可以包括易失性和/或非易失性存储器。存储器130可以例如存储与电子装置101的至少一个其他元件或数据相关的命令。根据实施例，存储器130可以存储软件和/或程序140。程序140可以例如包括内核141、中间件143、应用程序编程接口(API)145和/或应用程序、(或“应用”)147等。
内核141、中间件140或API 145的至少一部分可以称为操作系统(OS)。
内核141可以例如控制或管理用于执行在其他程序(例如，中间件143，API 145或应用程序147)中实现的操作或功能的系统资源9，例如总线110，处理器120或存储器130等。内核141可以通过从中间件143、API 145或应用程序147访问电子装置101的各个元件来提供能够控制或管理系统资源的接口。
中间件143可以例如充当中间装置，使得API 145和应用程序147可以与内核141通信和交换数据。
中间件可以根据优先级处理从应用程序147接收的一个或多个操作请求。例如，中间件143可以为应用程序147中的至少一个分配优先级以使用电子装置101的系统资源(例如，总线110、处理器120或存储器130等)。例如，中间件143通过根据所分配的优先级处理所述至少一个操作请求，针对所述一个或多个操作请求执行调度或负载平衡等。
如图1所示，API 145例如是由应用程序147控制由内核141或中间件143提供的功能的接口，其可以包括用于文件控制、窗口控制、图像处理或角色控制等的至少一个接口或功能(例如，指令)。
输入/输出接口150可以例如起到能够将从用户或另一外部装置输入的命令或数据传送到电子装置101的另一元件的接口的作用。输入/输出接口150可以将从电子装置101的另一元件接收的命令或数据输出到用户或另一外部装置。
显示器160可以例如包括液晶显示器(LCD)、发光二极管(LED)显示器、有机发光二极管(OLED)显示器、微机电系统(MEMS)显示器、或者电子纸显示器。例如，显示器160可以向用户显示各种内容(例如，文本、图像、视频、图标或符号等)。显示器160可以包括触摸屏，并且可以例如使用电子笔或使用用户的身体部位、手势、接近度或悬停来接收触摸输入。
通信接口170可以例如设置电子装置101与外部装置(例如，第一外部电子装置102、第二外部电子装置104或服务器106)之间的通信。例如，如图1所示，通信接口170可以经由无线通信或有线通信连接到网络162，以与外部装置(例如，第二外部电子装置104或服务器106)通信。
无线通信例如是蜂窝通信协议，其可以例如使用长期演进(LTE)、高级LTE(LTE-A)、码分多址(CDMA)、宽带CDMA(WCDMA)、通用移动电信系统(UMTS)、无线宽带(Wi Bro)和全球移动通信系统(GSM)等中的至少一个。无线通信可以包括例如包括近场通信(NFC)164。NFC164可以例如包括无线保真(WiFi)、蓝牙、NFC或全球导航卫星系统(GNSS)等中的至少一个。根据使用区域或带宽等，GNSS可以包括以下中的至少一个：全球定位系统(GPS)、全球导航卫星系统(Glonass)、北斗导航卫星系统(以下称“北斗”)和伽利略以及欧洲全球卫星导航系统。在本公开中，“GPS”可以与“GNSS”互换使用。有线通信可以例如包括通用串行总线(USB)、高清晰度多媒体接口(HDMI)、推荐标准232(RS-232)和普通老式电话服务(POTS)中的至少一种。网络162可以例如包括电信网络、计算机网络(例如局域网(LAN)或广域网(WAN))、互联网或电话网络。
处理器120，如图1所示，可以包括中央处理单元(CPU)、应用处理器(AP)和通信处理器(CP)中的至少一个。处理器120可以例如执行关于电子装置101的至少一个其他元件的控制和/或通信的计算或数据处理。
特别地，处理器120，如图1中所示，可以从存储器130读取图片，基于加权值第一选择图片，从第一选择图片确定第一属性信息和第二属性信息，以数据库形式存储第一属性信息和第二属性信息，基于第一属性信息、第二属性信息和用户上下文信息从第一选择图片中第二选择至少一个图片，控制通信接口170接收与第二选择图片对应的产品图像，并通过合成第二选择的图片和产品图片来创建合成图像。
具体地，处理器120可以在操作S1201基于加权值来第一选择图片，如图12的流程图所示。可以基于创建图片的日期和/或时间来确定加权值。处理器120可以将图片中包括的日期和/或时间信息与今天的日期或当前时间进行比较，并且作为比较的结果，当创建图片的日期和/或时间早于预定时段时，确定图片是旧图片并且降低图片的加权值(例如，根据时间差)。另外，处理器120还可以基于图片中包括的对象的形状来确定加权值。包括在图片中的对象可以是用户，并且对象的形状可以被划分为正面、侧面和背面。处理器120可以分析图片，并确定对象的形状是正面、侧面或背面。当确定图片的对象是正面时，处理器120可以增加图片的加权值。处理器120还可以基于图片是否被共享来确定加权值。当用户共享图片时，共享信息可以存储在图片中。共享信息可以包括共享图片的日期和/或时间、共享图片的地址、以及用于共享的应用程序的名称。处理器120还可以通过从图片中提取共享信息来确定是否共享图片，并且增加共享图片的加权值。处理器120可以基于用户交互来确定加权值。在用户创建图片，然后对图片执行放大或缩小操作或在再现图片时轻拂图片之后，可以在图片中存储用户交互信息。处理器120可以从存储在存储器130中的图片中提取用户交互信息，并相应地确定图片的加权值。例如，处理器120可以控制显示器160在屏幕上显示图片，并且当用户执行放大手势时，检测用户交互并将检测到的用户交互存储在图片中。当用户交互是放大手势时，可以增加图片的加权值。处理器120可以第一选择使用上述方法计算的加权值超过预定值的图片，并使用所选择的图片进行拟合使用。
处理器120，如图1所示，可以从第一选择的一个或多个图片确定第一属性信息和第二属性信息。在该示例中，第一属性信息可以是关于图片中包括的对象的信息。物体可以是用户或用户穿着的衣服。处理器120可以通过分析图片来识别用户，提取用户所穿的衣服的样式、颜色、品牌、尺寸和其他信息，并将提取的信息作为关于对象的信息存储在存储器130中。关于背景的属性信息可以包括图片背景的位置、天气、季节或上下文等。处理器120可以以数据库形式将第一属性信息和第二属性信息存储在存储器130中。可以构造、分类和存储第一属性信息和第二属性信息。
处理器120，如图1所示，可以基于第一属性信息、第二属性信息和用户上下文信息，从第一选择的一个或多个图片中选择至少一个图片。用户上下文信息可以包括用户的位置信息。用户上下文信息可以包括关于用户的操作状态的信息。例如，上下文信息可以指示用户是购物、睡觉、去上班还是吃饭。
处理器120可以控制通信接口170以从服务器106接收与第二选择的图片相对应的产品图像。第二选择的图片可以用于创建合成图像。例如，产品图像可以是由第三方提供的衣服的图像。可以基于由电子装置101提供的用于拟合使用的图片的信息来选择产品图像。当用户位于特定地点或执行特定动作时，处理器120可以选择对应于用户上下文的用于拟合使用的图片，并将用于适合使用的图片的属性信息提供给服务器106或显示装置102。
处理器120可以将第二选择的图片与产品图像合成以创建合成图像。在该示例中，处理器120可以创建合成图像，但是这仅仅是示例，并且外部服务器106或显示装置102可以创建合成图像。
处理器120可以控制显示器160显示合成图像。在该示例中，处理器120可以控制显示器160以与合成图像一起显示产品图像。
外部电子装置104，如图1所示，可以是与电子装置101相同或不同类型的装置。根据实施例，服务器106可以包括一组一个或多个服务器。根据各种实施例，在电子装置101中执行的全部或一些操作可以在另一电子装置或多个电子装置(例如，电子装置104或服务器106)中执行。根据实施例，当电子装置101要自动地或按照请求执行功能或服务时，电子装置101可以请求另一装置(例如，电子装置104或服务器106)执行与功能或服务相关的至少一些功能或者另外或代替自己执行功能或服务。另一电子装置(例如，电子装置104或服务器106)可以执行所请求的功能或附加功能，并将结果发送到电子装置101。电子装置101可以按原样处理接收的结果，或者另外处理接收的结果以提供所请求的功能或服务。为此，例如，可以使用云计算、分布式计算或客户端-服务器计算技术。
显示装置102可以例如是大型平板显示器(LFD)。LFD可以经由电子装置101的通信接口170与电子装置101通信。显示装置102可以经由网络162与服务器106通信。
图2是根据本公开的各种实施例的电子装置的框图。
参照图2，电子装置201可以例如包括图1中所示的电子装置101的全部或一些组件。电子装置201可包括至少一个处理器210(例如AP)、通信模块220、订户识别模块(SIM)224、存储器230、传感器模块240、输入装置250、显示器260、接口270、音频模块280、相机模块291、电源管理模块295、电池296、指示器297和电机298。
处理器210可以例如通过驱动操作系统或应用程序来控制连接到处理器210的多个硬件或软件元件，并执行各种数据处理和计算。例如，处理器210可以实现为片上系统(SoC)。根据实施例，处理器210还可包括图形处理单元(GPU)和/或图像信号处理器(ISP)。处理器210还可以包括图2中所示的元件的至少一些(例如，蜂窝模块221)。处理器210可以将从诸如非易失性存储器的至少一个其他元件接收的命令或数据加载到易失性存储器以对其进行处理，并将各种数据存储在非易失性存储器中。
通信模块220可以具有与图1的通信接口170相同或相似的配置。通信模块220可以例如包括蜂窝模块221、WiFi模块223、蓝牙(BT)模块225、GNSS模块227(例如GPS模块、Glonass模块、北斗模块或伽利略模块)、近场通信(NFC)模块228和射频(RF)模块229。
蜂窝模块221可以例如经由通信网络提供语音呼叫、视频呼叫、文本消息服务或互联网服务。根据实施例，蜂窝模块221可以使用SIM(例如，SIM卡)224在通信网络内执行电子装置201的识别和认证。根据实施例，蜂窝模块221可以执行处理器210可提供的至少一些功能。根据实施例，蜂窝模块221可以包括CP。WiFi模块223、蓝牙模块225、GNSS模块227或NFC模块228可以例如包括处理器，以分别处理通过相应模块发送或接收的数据。根据实施例，蜂窝模块221、WiFi模块223、蓝牙模块225、GNSS模块227或NFC模块228中的至少一些(例如，至少两个)可以包括在一个集成芯片(IC)或IC封装中。
RF模块229可以例如发送或接收通信信号(例如，RF信号)。RF模块229可以例如包括收发器、功率放大器模块(PAM)、频率滤波器、低噪声放大器(LNA)或天线等。根据另一实施例，蜂窝电话模块221、WiFi模块223、蓝牙模块225、GNSS模块227和NFC模块228的至少一个可以通过单独的RF模块发送或接收RF信号。
参见图2，订户识别模块224可以例如包括卡或包括订阅识别模块的嵌入式SIM，并且包括唯一标识信息(例如，集成电路卡标识符(ICCID))或订户信息(例如，国际移动订户身份(IMSI))。
存储器230可以例如包括嵌入式或内部存储器232或外部存储器234。嵌入式或内部存储器232可以例如包括易失性存储器(例如，动态随机存取存储器(DRAM))、静态RAM、同步动态RAM、非易失性存储器(例如，一次性可编程只读存储器(OTPROM))、可编程ROM(PROM)、可擦除可编程ROM(EPROM)、电可擦除和可编程ROM(EEPROM)、掩模ROM、闪存ROM、闪存(例如NAND闪存或NOR闪存等)、硬盘驱动器和固态驱动器(SSD)中的至少一个。
外部存储器234还可以包括闪存驱动器，例如紧凑型闪存(CF)、安全数字(SD)、微安全数字(micro-SD)、迷你-SD、极端数字(xD)、多媒体卡(MMC)或记忆棒。外部存储器234可以通过各种接口在功能上和/或物理上连接到电子装置201。
传感器模块240可以例如测量物理量或检测电子装置201的操作状态，并将测量或检测的信息转换为电信号。传感器模块240可以例如包括手势传感器240A、陀螺仪传感器240B、气压计或气压传感器240C、磁传感器240D、加速度传感器240E、抓握传感器240F、接近传感器240G、颜色传感器240H(例如红色、绿色、蓝色(RGB)传感器)、医疗或BIO传感器240I、温度/湿度传感器240J、照度或发光强度传感器240K、以及紫外(UV)传感器240M和超声波传感器240N。附加地或替代地，传感器模块240可以例如包括电子鼻(E-nose)传感器(未示出)、肌电图(EMG)传感器(未示出)、脑电图(EEG)传感器(未示出)、心电图(ECG)传感器(未示出)、红外(IR)传感器(未示出)、虹膜扫描传感器(未示出)和/或手指扫描传感器(未示出)。传感器模块240还可包括控制电路，以控制其中包括的至少一个传感器。根据实施例，电子装置201还可以包括处理器，该处理器被配置为将传感器模块240控制为处理器210的一部分或附加的，并且在处理器210处于睡眠状态时控制传感器模块240。
如图2所示，电子装置250可以例如包括触摸板252、数字笔或(数字)笔传感器254、键256或超声输入装置258。触摸板252可以例如使用静电型、压敏型、IR型和UV型中的至少一种。触摸板252还可以包括控制电路。触摸板252还可以包括触觉层，以向用户提供触觉响应。
(数字)笔传感器254可以例如是触摸板的一部分或包括用于识别使用的附加板。键256可以例如包括物理按钮、光学键或小键盘。超声输入装置258可以通过麦克风(例如麦克风288)检测由输入工具产生的超声声音，并检查与检测到的超声声音相对应的数据。
显示器260可以包括面板262、全息装置264和/或投影仪266。面板262可以包括与图1的显示器160的配置相同或类似的配置。例如，面板262可以实现为柔性、透明或可穿戴。面板262可以与触摸面板252一起被配置为一个模块。全息装置264可以使用光的干涉在空中显示立体图像。投影仪266可以将光投射到屏幕上以显示图像。例如，屏幕可以位于电子装置201内部或外部。根据实施例，显示器260还可以包括控制面板262、全息装置264或投影仪266的控制电路。
接口270可以例如包括HDMI 272、USB 274、光学接口276或D-超小型(D-sub)278。接口270可以例如包括在图1所示的通信接口170中。附加地或替代地，接口270可以例如包括移动高清链路(MHL)接口、安全数字(SD)卡/多媒体卡(MMC)接口或红外数据协会(IrDA)标准接口。
音频模块280可以例如将声音转换为电信号，并将电信号转换为声音。音频模块280的至少一些元件可以例如包括在图1中所示的输入/输出接口150中。音频模块280可以处理通过如图2所示的扬声器282、接收器284、耳机286或麦克风288等输入或输出的声音信息。
相机模块291例如是捕获静止图像和视频的装置，并且根据实施例，包括至少一个图像传感器(例如前传感器或后传感器)、镜头、ISP、或闪光灯(例如LED或氙气灯等)。
电源管理模块295可以例如管理电子装置201的电源。根据一个实施例，电源管理模块295可以包括电源管理集成电路(PMIC)、充电器IC、电池电量计296、或能量表(fuelgauge)。PMIC可以使用有线和/或无线充电方法。无线充电方法可以例如包括磁共振方法、电磁感应方法、电磁方法等，并且还包括例如线圈回路、谐振电路、整流器等。例如，电池量表可以测量电池296的剩余量，以及充电时的电压、电流或温度。电池296可以例如包括可充电电池和/或太阳能电池。
指示器297，如图2所示，可以显示电子装置201或电子装置201的一部分(例如，处理器210)的特定状态，例如，引导状态、消息状态、充电状态等。电机298可以将电信号转换为机械振动，并且产生振动、触觉效果等。虽然未示出，但是电子装置201可以包括用于支持移动TV的处理装置(例如GPU)。用于支持移动TV的处理装置可以例如根据标准处理媒体数据，例如数字多媒体广播(DMB)、数字视频广播(DVB)、媒体FloTM等。
本公开中描述的元件可以分别被配置为一个或多个组件，并且每个元件的名称可以根据电子装置的类型而变化。在各种实施例中，电子装置可以被配置为包括本公开中描述的元件中的至少一个，并且省略一些元件或者还包括另一元件。而且，根据各种实施例的电子装置的一些元件可以组合成单个实体，以执行与组合之前的元件对应的元件的相同功能。
图3是根据本公开的各种实施例的本公开的示意流程图。
参见图3，电子装置101可以分析存储在电子装置101中的多个图片，以识别用户的品味和用户在图片中穿戴的衣服的品牌。在操作301，电子装置101可以基于用户优选选择存储在存储器中的多个图片。稍后将提供由电子装置101选择图片的详细方法。
一旦选择了图片，电子装置101或201可以在操作302分析所选择的图片并提取关于图片的背景的信息和关于包括在图片中的对象(通常是衣服)的信息。关于衣服的信息作为非限制性示例，可以是衣服的品牌名称、颜色、尺寸等。图片中包括的衣服的图像可以是用户穿着的衣服的图像或由不同的人穿着的衣服的图像。
由电子装置101从图片提取的背景信息和衣服信息可以存储在存储器130或230中。例如，电子装置101或201可以在攀爬一座山时识别用户的图片的背景信息是一座“山”。此外，电子装置101可以提取用户在图片中穿戴的衣服的品牌名称。电子装置101可以在图片中包括从图片中提取的背景和用户穿戴的衣服的品牌名称并将其存储，或者以单独的数据文件的形式将其存储。
这样，电子装置101可以从所选择的图片中提取图片的信息和关于用户所穿的衣服的信息，并且将所选择的图片、背景信息和衣服信息发送到服务器106，如图1所示。
在操作303，服务器106可以基于由电子装置101提供的关于图片和衣服的信息来确定所接收的图片的上下文，并且检索与该上下文相对应的衣服信息并提供该信息，或者可以合成所检索的产品图像和电子装置101提供的图片以创建合成图像并将创建的合成图像发送到电子装置101或设置在用户所在位置的显示装置102。或者，电子装置101可以合成所发送的产品图像和存储在电子装置101中的所选图片以创建合成图像，并在电子装置101上显示合成图像。
图4是示出根据本公开各种实施例的选择存储在电子装置101中的多个图片的过程的视图。
参照图4，电子装置101可以将加权值分配给存储在存储器130中的图片，并基于加权值选择图片。本公开中的“图片”可以指“形成图片的数据”或“图片文件”。例如，存储在存储器中的图片可以指“形成在显示器上显示的图片的数据”。
电子装置101可以基于拍摄图片的日期和/或时间来分配加权值。例如，在操作401，电子装置101可以将高加权值分配给最近拍摄的图片。
电子装置101可以分析捕获的图片，并且基于图片中包括的对象的取向来确定图片的加权值。例如，在操作402，如果图片中包括的对象的方向是正面视图，则电子装置可以分配更高的加权值，并且如果对象的方向是侧面视图或后面视图，则时分配较低的加权值。
电子装置101可以基于在显示器160显示捕获的图片时检测到的用户交互来确定图片的加权值。例如，在显示器160上显示图片的状态下，当用户执行放大手势时，如图4所示，在操作403，电子装置101可以分配高加权值。当用户在显示器160上显示图片的同时执行放大手势时，电子装置101可以确定用户放大了兴趣之外的图片，并增加相对于图片的加权值。另一方面，当用户在显示器160上显示图片的同时执行轻拂手势时，电子装置101可以确定用户对相应图片不感兴趣并且改变图片，并且减小加权值。
电子装置101可以基于图片是否被共享来确定加权值。当用户共享图片时(例如，当图片被上传到社交网站(SNS)时)，电子装置101可以在操作404处设置关于图片的高加权值。例如，当在显示器160上显示图片时用户按下按钮“共享”时，电子装置101可以增加图片的加权值。
当图片被用作简档或背景时，电子装置101可以在操作405设置关于图片的高加权值。
电子装置101可以基于图片的访问信息确定加权值。当用户访问图片时，电子装置101可以将图片的访问信息存储在图片或图片文件中。访问信息可以是关于用户访问图片的日期和/或时间的信息。每当用户访问图片时，电子装置101可以更新图片的访问信息。电子装置101可以从图片中提取访问信息，并且当访问的日期/时间早于预定的日期/时间时，在操作411，将图片识别为被忽略的图片并且设置关于图片的低加权值。
当用户在显示图片的同时执行轻拂手势时，在操作412，电子装置101可以确定用户对相应图片具有很少兴趣或没有兴趣并且改变图片，并且为相应图片设置低加权值。
电子装置101可以基于关于图片的删除的信息来确定加权值。例如，电子装置101可以识别出用户拍摄了图片，然后将其发送到云服务器。随后，当从电子装置101删除图片时，电子装置可以在操作413设置关于图片的低加权值，并且将关于相应图片的加权值的信息发送到云服务器。
图5是示出根据本公开的各种实施例的由电子装置101选择从服务器106接收的图片的过程的视图。
参照图5，电子装置101可以将加权值分配给从服务器106(图1中示出)接收的图片，并基于加权值选择图片。在用户经由有线或无线网络162上网的情况下，电子装置101可以从服务器106接收图片。例如，当用户通过浏览网页检索图片时，电子装置101可以从相应的服务器接收图片。
电子装置101可以基于是否从互联网下载从服务器106接收的图片来确定加权值。例如，当用户访问在线购物中心并在检索产品时下载特定图片时，电子装置101可以在操作501设置关于相应图片的高加权值。
电子装置101可以基于用户的屏幕捕获操作来确定加权值。例如，当用户在浏览网页时捕获特定图片时，电子装置101可以在操作502处为捕获的图片分配高加权值。
电子装置101可以检测关于从服务器106接收的图片的用户交互，并基于用户交互确定加权值。例如，在用户在浏览网页时针对特定图片执行放大手势的情况下，电子装置101可以在操作503处针对相应图片设置高加权值。
电子装置101可以基于在屏幕上显示从服务器接收的图片的时间来确定加权值。例如，当用户在浏览网页时在屏幕上显示图片达预定时间或更长时间时，电子装置101可以在操作504基于屏幕注视时间设置关于相应图片的高加权值。
电子装置101可以基于用户是否在SNS上共享图片来确定关于从服务器106接收的图片的加权值。例如，当用户在观看图片和浏览网页的同时点击SNS分享按钮时，电子装置101可以在操作505处设置关于相应图片的高加权值。
电子装置101可以检测关于从服务器106接收的图片的用户交互，并基于用户交互确定加权值。例如，如图5中所示，在用户正在浏览网页的状态下，当用户在屏幕上显示图片的同时点击后退按钮时，电子装置101可以在操作511设置关于相应特征的低加权值。或者，在浏览网页时，当用户针对屏幕上显示的图片执行轻拂手势并将图片改变为另一图片时，电子装置101可以在操作512针对相应图片设置低加权值。
图6是根据本公开的各种实施例的将加权值分配给由用户创建的图片的过程的流程图。
参见6所示，电子装置101从存储器130读取图片。在通过包括在电子装置101中的相机创建之后，图片可能已经存储在电子装置101的存储器130中或者存储在云服务器中。在操作S601，电子装置101可以确定最近是否拍摄了所读取的图片。电子装置101可以从图片中提取日期/时间信息，并将提取的日期/时间信息与当前日期/时间进行比较。作为比较的结果，如果在预定日期/时间之前创建了图片，即在操作S601处为“是”，则电子装置101可以确定图片是最近的图片，并且增加图片的加权值。如果在预定日期/时间之后创建图片，在操作S601处为“否”，则电子装置101可以在操作S603减小或降低图片的加权值。
在操作S604，电子装置101可以分析所读取的图片，并确定包括在图片中的对象是否面向前方以确定图片是否是正面图片。如果确定图片是正面图片，即在操作S604处为“是”，则电子装置101可以在操作S605增加图片的加权值。如果确定图片不是正面图片，即在操作S604处为“否”，则电子装置可以在操作S606减小图片的加权值。
参见图6，在操作S607，电子装置101可以确定最近是否共享了所读取的图片。如果确定最近共享了图片，即在操作S607处为“是”，则电子装置101可以在操作S608增加图片的加权值。如果确定最近没有共享图片，即在操作S607处为“否”，则电子装置101可以在操作S609减小图片的加权值。当用户在屏幕上显示图片的同时执行SNS应用程序以共享图片时，可以将相应图片的共享信息存储在图片中。共享信息可以包括共享日期、时间和为共享图片而执行的应用程序的名称。电子装置101可以分析包括在图片中的共享信息以确定是否已经共享了相应的图片。
在操作S610，电子装置101可以在显示器160上显示图片的同时检测用户交互，并且基于用户交互设置图片的加权值。电子装置101可以在显示器160上显示图片。当在显示器160上显示图片的同时检测到用户交互时，电子装置101可以识别检测到的交互，并将识别的结果存储在图片中。在操作S611，电子装置101可以读取包括在图片中的交互信息，并且如果交互信息是“放大”，则增加图片的加权值。在操作S612，如果在图片中包括的交互信息是“轻扫”，则电子装置101可以减小图片的加权值。
图7是根据本公开的各种实施例的将加权值分配给从服务器106接收的图片的过程的流程图。
参见图7，在用户经由有线或无线网络162浏览网页的情况下，电子装置101可以从相应的服务器106接收包括图片的网页。例如，当用户通过浏览网页检索图片时，电子装置101可以从对应的服务器106接收图片。另外，如果通过电子邮件向用户提供来自卖家或供应商网站的图片，则电子装置101可以从对应的服务器106接收图片。
当用户访问互联网时，电子装置101的显示器160可以显示网页。在操作S701，电子装置101可以在显示器160上显示网页的同时确定用户是否下载图片。当用户下载图片时，即在操作S701处为“是”，在操作S703电子装置101可以将用户创建的图片选择标准(例如，用户用他或她的相机拍摄的图片)应用于下载的图片以选择图片。参考图6描述选择用户创建的图片的详细方法，因此，在此省略其细节。如果用户没有下载图片，即在操作S701中为“否”，则电子装置101可以在操作S702确定用户是否捕获在显示器160上显示的图片的屏幕。如果用户捕获图片的屏幕，即在操作S702中为“是”，则在操作S704电子装置101可以通过将用户创建的图片选择标准应用于图片来选择图片。当用户没有捕获图片的屏幕，即在操作S704处为“否”时，电子装置101可以在操作S705确定最近是否共享了相应的图片。当最近未共享图片时，即在操作S705中为“否”，电子装置101可以在操作S707减小相应图片的权重值。当最近共享图片时，即在操作S705中为“是”，电子装置101可以在操作S706增加相应图片的加权值。
在操作S708，电子装置101可以在显示器160上显示图片的同时检测用户交互。如果用户交互是放大手势，则电子装置101可以在操作S709增加图片的加权值。如果用户交互是轻扫手势、轻拂手势或后退按钮，则电子装置101可以在操作S710减小图片的加权值。
图8是示出根据本公开各种实施例的从所选图片中提取图片中包括的衣服的属性信息和图片的背景的属性信息的示例的视图。
参见图8，作为示例，本公开仅采用人穿的衣服的示例，但是可以使用人可穿戴的其他物体(例如，配件和可穿戴设备)来代替衣服。
图8示出了图片801、811、821。电子装置101可以从图片801、811、821中提取由图片801、811、821中包括的对象(或人)所穿的衣服的各种属性以及图片的背景属性。
关于衣服的属性信息可以包括衣服的样式、颜色、品牌、尺寸和其他信息。例如，衣服的样式属性可以包括“正装衬衫”、“正式西装”或“休闲装”等。衣服的尺寸属性可以包括“M”、“L”、“XL”、“XXL”等。
背景的属性信息可以包括图片的背景的位置、天气、季节、上下文等。例如，图片的背景位置属性可以包括“山”、“海滩”、“市区”，“天气”属性可以包括“晴天”、“阴天”、“下雨”、“下雪”等。天气属性可以包括“春天”、“夏天”、“秋天”和“冬天”。上下文属性可以包括“喝酒”、“婚礼”、“登山”、“锻炼”等。
电子装置101可以从所选择的图片中提取关于衣服和背景的属性信息，并且以数据库形式将属性信息存储在存储器130或服务器106中。或者，提取的属性信息可以与图片一起存储。
例如，电子装置101可以提取图片801，并且识别由所识别的用户穿着的衣服的颜色是“黄色”并且该样式是“户外服装”。电子装置101可以将颜色提取为“黄色”并将样式提取为“户外服装”作为衣服的属性信息，并将提取的衣服的属性信息存储在图片801中或者在单独的文件中创建信息并将文件存储在电子装置101或服务器106中。此外，电子装置101可以分析图片801，并将图片801的背景位置识别为“山”，将天气识别为“晴天”，并将上下文识别为“登山”。电子装置101可以从图片801中提取“山”、“晴天”和“登山”作为图片背景的属性信息，并将提取的背景属性信息存储在图片801中或者将信息作为单独的文件存储在电子装置101或服务器106中。
例如，电子装置101可以分析图片811，并且将所识别的用户所穿的衣服的颜色识别为“白色”和样式识别为“婚纱”。电子装置可以提取颜色“白色”和样式“婚纱”作为衣服的属性信息，并将提取衣服的属性信息存储在图片811中，或者创建单独的文件并将文件存储在电子装置101或服务器106中。此外，电子装置101可以分析图片811，并且针对图片811的背景位置识别“户外”，针对天气识别“晴天”，并且针对上下文识别“婚礼”。电子装置可以从图片811中提取关于图片背景的属性信息的“户外”、“晴天”和“婚礼”，并将提取的图片811的属性信息存储在图片811中，或者创建单独的文件存储并将该文件存储在电子装置101或服务器106中。
电子装置101可以分析图片821，并且将所识别的用户所穿的衣服的颜色识别为“蓝色”，将尺寸识别为“M”(中等)，并将样式识别为“T恤”。电子装置101可以针对衣服的属性信息提取颜色“蓝色”和样式“T恤”和尺寸“M”，并将提取的衣服的属性信息存储在图片821中或者创建单独的文件并将该文件存储在电子装置101或服务器106中。此外，电子装置101可以分析图片821，并且识别出图片821的背景的位置是“海滩”，天气是“晴天”，并且上下文是“旅行”。电子装置101可以从图片821中提取背景的位置为“户外”，将天气提取为“晴天”，将上下文提取为“旅行”作为图片的属性信息，并将提取的图片821的背景属性信息存储在图片821中或创建单独的文件并将该文件存储在电子装置101或服务器106中。
电子装置可以组合所存储的背景和衣服的属性信息以制作虚拟桌子831，并确定用户优选的衣服的品牌、尺寸、颜色等。
图9A和9B是示出根据本公开各种实施例的通过图片的属性信息推荐用户优选的衣服的示例的视图。
参照图9A和9B，图9A和9B示出了在商店中展示的显示装置901。显示装置901例如可以是大型平板显示器(LFD)。当用户在商店中选择衣服并在显示装置901上标记衣服时，在操作903，显示装置901可以显示由用户选择的衣服的图像902(如图9A所示)。
或者，电子装置905可以将存储在存储器中的衣服的属性信息通告给显示装置901，并且显示装置901可以接收所通告的衣服的属性信息，基于属性信息检索用户优选的衣服服，并显示对应于检索到的衣服的图像902。
或者，电子装置905可以通过近场通信(例如，NFC、WiFi)将存储在电子装置905中的用于拟合使用的图片发送到显示装置901，并且显示装置901可以合成由用户选择的衣服的图像和用于拟合的所发送的图片以创建合成图像，并显示所创建的合成图像906,907(如图9B所示)。
图10是用于解释根据本公开的各种实施例的将由第三方提供的产品图像与由用户创建的图片合成并提供该合成的图片的示例的视图。
图10示出了电子装置1001、云服务器1002、图片分析服务器1003、显示装置1004和电子装置1005。电子装置1001和电子装置1005是相同类型的电子装置，例如，由用户携带的智能手机。电子装置1001可以基于加权值将所选择的图片确定为用于拟合使用的图片。用于拟合使用的图片可以存储关于衣服和背景的属性信息。电子装置1001可以将用于拟合使用的所选图片发送到云服务器1002。用于拟合使用的图片可以自动发送到云服务器1002。云服务器1002可以存储从电子装置1001接收的用于拟合用途的图片。云服务器1002可以将用于拟合使用的图片发送到图片分析服务器1003。图片分析服务器1003可以分析从云服务器1002接收的用于拟合使用的图片并确定图片的上下文。可以通过将图片中包括的衣服与图片的属性组合来确定图片的上下文。图片分析服务器1003可以是由第三方(例如，衣服销售商)提供的服务器。根据实施例，云服务器1002还可以用作图片分析服务器1003。当在图片分析服务器1003中确定用于拟合使用的图片的上下文时，图片分析服务器1003可以检索与图片的上下文对应的衣服的图像，并合成图片以便与检索到的衣服图像一起拟合使用以创建合成图像。图片分析服务器1003可以将合成图像发送到用户的显示装置1004和电子装置1005。图片分析服务器1003可以通过显示装置1004的请求将合成图像发送到显示装置1004。当用户靠近显示装置1004时，显示装置1004可以将对合成图像的请求发送到图片分析服务器1003，显示从图像分析服务器1003接收的合成图像以供用户查看。或者，图片分析服务器1003可以基于用户的位置信息将合成图像发送到用户的电子装置1005。电子装置1005可以接收合成图像并在显示器上显示图像。
例如，当具有智能手机的用户进入第三方的商店时，在图10中示出的显示装置1004可以通过蓝牙低功耗(BLE)接收从用户的智能手机通告的用户的信息，并识别用户。当显示装置1004识别用户时，显示装置1004可以向图片分析服务器1003发送对应于用户的合成图像的请求，并且接收合成图像以在显示装置1004中将其显示给用户。或者，当显示装置1004接收用户的位置信息并将该信息发送到图片分析服务器1003时，图片分析服务器1003可以将对应于用户的合成图像发送到用户的智能手机。或者，当确定图片分析服务器1003从用户的智能手机1005接收位置信息并且用户进入商店时，图片分析服务器1003可以将对应于用户的合成图像发送到用户的智能手机1005。
图11是用于解释根据本公开各种实施例的用于将产品图像与存储在电子装置中的用于拟合使用的图片进行合成的过程的视图。
参见图11，电子装置1101可基于加权值将所选图片确定为用于拟合使用的图片。用于拟合使用的图片可以包括衣服和背景的属性信息。或者，衣服和背景的属性信息可以以单独的数据库文件的形式存储在存储器中，并且可以被检索。电子装置1101可以基于用户的位置信息检索存储在存储器中的用于拟合使用的图片。例如，如果用户在户外服装店中，则电子装置1101可以基于用户的位置信息确定用户的当前位置在户外服装店中，并从存储在存储器的用于拟合使用的图片中检索具有户外服装属性的图片。
电子装置1101可以基于关于当前天气的信息来检索存储在存储器中的用于拟合使用的图片。例如，当天气晴朗时，电子装置1101可以从存储在存储器的用于拟合使用的图片中检索具有“晴天”属性的图片。
参照图11，电子装置1101可以基于关于当前季节的信息来检索存储在存储器中的用于拟合使用的图片。例如，如果天气是秋天，则电子装置1101可以从存储在存储器中的用于拟合使用的图片中检索具有“秋天”属性的图片。电子装置1101可以在显示器上显示检索到的图片图像1102。
如果用户在户外服装商店，则电子装置1101可以从服务器接收与商店品牌相对应的广告内容1103。广告内容1103例如可以是产品图像。例如，如果用户在“K品牌”商店，则电子装置1101可以从服务器接收“K品牌”的广告内容1103。
当从服务器接收广告内容1103时，电子装置1101可以将广告内容1103与检索到的图片图像1102合成以创建合成图像1105。例如，在操作1106中，如果包括在检索到的图像中的对象1104穿着黄色的户外服装，电子装置1101可以将从服务器接收的广告内容1103与检索到的图像合成，并且将对象改变为穿着绿色户外服装的对象1105并创建合成图像。电子装置1101可以在显示器上显示创建的合成图像1108。
电子装置1101可以显示从服务器接收的广告内容1109。例如，电子装置1101可以将广告内容1109显示为与显示器上的合成图像1108重叠。或者，电子装置1101可以在显示器(例如显示装置)上单独显示广告内容1109。
图12是提供用于解释根据本公开各种实施例的用于在电子装置中将用于拟合使用的图片与产品图像合成的过程的流程图。
参见图12，在操作S1201，电子装置101可以首先基于加权值选择图片。可以基于创建图片的日期/时间来确定加权值。电子装置101可以将图片中包括的日期/时间信息与今天的日期/时间进行比较，当创建图片的日期/时间长于预定时间段时，电子装置101可以确定图片是旧的图片并例如，根据图片的年龄减少图片的加权值。
可以基于图片中包括的对象的形状来确定加权值。包括在图片中的对象可以是用户，并且对象的形状可以被划分为正面、侧面和背面。电子装置101可以分析图片并确定物体的形状是正面、侧面还是背面。如果确定物体的形状是正面，则电子装置101可以增加图像的加权值，或者如果确定物体的形状是侧面或背面，则电子装置101可以降低图像的加权值。
可以基于是否要共享图片来确定加权值。当用户共享图片时，共享信息可以包括在图片中。共享信息可以包括共享日期/时间、共享地址和用于共享的应用程序的名称。电子装置101可以从图片中提取共享信息以确定是否共享图片，并且增加共享图片的加权值。
可以基于用户交互来确定图片的加权值。当用户创建图片然后再现图片时，当用户执行放大或缩小操作或轻拂图片时，用户交互信息可以存储在图片中。电子装置101可以从存储在存储器130中的图片中提取用户交互信息，并确定图片的加权值。当图片正在屏幕上显示时，可以检测用户交互。例如，当用户在屏幕上显示图片以查看图片并执行放大手势时，电子装置101可以检测用户交互并将检测到的用户交互存储在图片中。如果用户交互是放大手势，则可以增加图片的加权值。电子装置101可以首先使用上述方法选择计算出的加权值高于或等于预定值的图片，并使用所选择的图片进行拟合使用。可以组合各种加权值(诸如对象的形状、是否要共享图片、用户交互或其他因素)，以创建图片的总权重值。
在操作S1202中，电子装置101可以从第一选择图片确定第一属性信息和第二属性信息。图片的第一属性信息可以是关于图片中包括的对象的信息。对象可以是用户或用户穿着的衣服。电子装置101可以分析图片以识别用户，并提取用户穿着的衣服的样式、颜色、品牌、尺寸和其他信息。例如，作为非限制性示例，衣服的样式属性可以包括“正装衬衫”、“正式西装”或“休闲装”。作为非限制性示例，衣服的尺寸属性可包括“M”、“L”、“XL”或“XXL”。图片的第二属性信息可以是关于图片背景的信息。作为非限制性示例，背景属性信息可以包括图片的背景位置、天气、季节或上下文。例如，作为非限制性示例，图片的背景位置可以包括“山”、“海滩”或“市中心”。作为非限制性示例，天气属性可以包括“晴天”、“阴天”、“下雨”或“下雪”。作为非限制性示例，季节属性可以包括“春天”、“夏天”、“秋天”或“冬天”。作为非限制性示例，上下文属性可以包括“喝酒”、“婚礼”、“登山”或“锻炼”。
在操作S1203，电子装置101可以以数据库形式将第一属性信息和第二属性信息存储在存储器130中。第一属性信息和第二属性信息被构造、分类和存储，这是可检索的。而且，可以检索和聚类具有相同属性的图片。
在操作S1204，电子装置101可以基于第一属性信息，第二属性信息和用户上下文信息，从第一选择图片中选择至少一个图片。用户上下文信息可以包括用户的位置信息。此外，用户上下文信息可以包括关于用户的操作状态的信息。例如，上下文信息可以指示用户是购物、睡觉、去上班还是吃饭。
在操作S1205，电子装置101可以从服务器106接收与第二选择的图片相对应的产品图像。第二选择的图片可用于创建合成图像。
产品图像可以是例如由第三方提供的衣服的图像。可以基于电子装置101提供的用于拟合使用的图片的信息来选择产品图像。当用户处于特定位置或执行特定动作时，电子装置101可以选择对应于用户的上下文的用于拟合的图片，并向服务器106或显示装置102提供用于拟合使用的图片的属性信息。
在操作S1206中，电子装置101可以合成第二选择的图片和产品图像以创建合成图像。生成合成图像的操作可以在电子装置101中、在服务器106中或在显示装置102中执行。
电子装置101可以在电子装置中显示所创建的合成图像。另外，所创建的合成图像可以显示在显示装置102中。
虽然已经参考本公开的各种实施例示出和描述了本公开，但是本领域技术人员将理解，在不脱离本发明的精神和范围的情况下，可以在形式和细节上进行各种改变。由所附权利要求及其等同物限定的公开内容。

Claims (15)

1.一种用于生成电子装置的合成图像的方法，该方法包括：
根据加权值第一选择至少一张图片；
基于所述第一选择的至少一个图片确定第一属性信息和第二属性信息；
以数据库形式存储第一属性信息和第二属性信息；
基于第一属性信息、第二属性信息和用户上下文信息，从第一选择的至少一个图片中第二选择至少一个图片；
从服务器接收与第二选择的至少一个图片相对应的产品图像；和
通过将第二选择的至少一个图片与产品图像合成来生成合成图像。
2.如权利要求1所述的方法，其中，基于何时创建多个图片中的图片来确定加权值。
3.如权利要求1所述的方法，其中，基于图片中包括的对象的形状确定加权值。
4.如权利要求1所述的方法，其中，基于图片是否被共享来确定加权值。
5.如权利要求1所述的方法，其中，基于用户交互确定加权值。
6.如权利要求5所述的方法，其中，在屏幕上显示图片的同时检测用户交互。
7.如权利要求6所述的方法，其中，响应于用户交互是放大手势，增加加权值。
8.如权利要求1所述的方法，其中，第一属性信息包括关于图片中包括的对象的信息。
9.如权利要求1所述的方法，其中，第二属性信息包括关于图片背景的信息。
10.如权利要求1所述的方法，其中，用户文本信息包括用户的位置信息。
11.一种用于生成合成图像的装置，该装置包括：
存储器，被配置为存储多个图片；
收发器，被配置为与外部服务器通信；
显示器，被配置为检测用户交互；和
处理器配置为：
从存储器中读取多个图片，
根据加权值第一选择至少一张图片，
从第一选择的至少一个图片中确定第一属性信息和第二属性信息，
以数据库形式存储第一属性信息和第二属性信息，
基于第一属性信息、第二属性信息和用户上下文信息，从第一选择的至少一个图片中第二选择至少一个图片，
控制收发器从外部服务器接收与第二选择的至少一个图片相对应的产品图像，以及
通过合成第二选择的至少一个图片和产品图像来创建合成图像。
12.如权利要求11所述的装置，其中，基于何时创建多个图片中的图片来确定加权值。
13.如权利要求11所述的装置，其中，基于图片中包括的对象的形状来确定加权值。
14.如权利要求11所述的装置，其中，基于图片是否被共享来确定加权值。
15.如权利要求11所述的装置，其中，基于用户交互确定加权值。
CN201780017436.3A 2016-04-01 2017-02-14 用于合成图像的方法和使用该方法的电子装置 Active CN108781262B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
KR1020160040268A KR102140072B1 (ko) 2016-04-01 2016-04-01 이미지 합성 방법 및 그 전자 장치
KR10-2016-0040268 2016-04-01
PCT/KR2017/001607 WO2017171231A1 (en) 2016-04-01 2017-02-14 Method for synthesizing image and an electronic device using the same

Publications (2)

Publication Number Publication Date
CN108781262A true CN108781262A (zh) 2018-11-09
CN108781262B CN108781262B (zh) 2022-03-08

Family

ID=59961143

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201780017436.3A Active CN108781262B (zh) 2016-04-01 2017-02-14 用于合成图像的方法和使用该方法的电子装置

Country Status (5)

Country Link
US (2) US10043260B2 (zh)
EP (1) EP3366038A4 (zh)
KR (1) KR102140072B1 (zh)
CN (1) CN108781262B (zh)
WO (1) WO2017171231A1 (zh)

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107437269B (zh) * 2017-08-03 2021-10-08 北京小米移动软件有限公司 一种处理图片的方法及装置
KR102499399B1 (ko) * 2018-03-20 2023-02-14 삼성전자주식회사 Isp 업데이트를 알리는 전자 장치 및 그 동작 방법
US11049300B2 (en) * 2018-09-04 2021-06-29 Dish Network L.L.C. Devices, systems and methods for mini-banner content
JP7132440B2 (ja) * 2019-07-26 2022-09-06 富士フイルム株式会社 超音波診断装置および超音波診断装置の制御方法
KR20210070623A (ko) * 2019-12-05 2021-06-15 엘지전자 주식회사 사용자의 관심사를 추출하는 인공 지능 장치 및 그 방법
CN112866764A (zh) * 2021-02-01 2021-05-28 上海酷量信息技术有限公司 一种广告素材自动制作系统和方法
US20230104119A1 (en) * 2021-10-05 2023-04-06 Capital One Services, Llc Systems and methods for storing dynamic data

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2001011886A1 (en) * 1998-10-28 2001-02-15 Hi-Pic Ltd. Virtual dressing over the internet
CN1427293A (zh) * 2001-12-14 2003-07-02 欧姆龙株式会社 照片图像打印装置、照片图像打印方法、程序以及打印媒体单元
JP2009088729A (ja) * 2007-09-28 2009-04-23 Casio Comput Co Ltd 合成画像出力装置および合成画像出力処理プログラム
KR20110054175A (ko) * 2009-11-17 2011-05-25 엘지전자 주식회사 이동 단말기 및 그 제어 방법
CN102473318A (zh) * 2009-07-30 2012-05-23 伊斯曼柯达公司 处理用于图像显示的数字模板
US20130182963A1 (en) * 2012-01-18 2013-07-18 Ronald Steven Cok Selecting images using relationship weights
KR20150044520A (ko) * 2013-10-16 2015-04-27 한양대학교 에리카산학협력단 배경 인식모듈을 갖는 스마트 디스플레이
US20150206292A1 (en) * 2012-08-30 2015-07-23 Rakuten, Inc. Clothing image processing device, clothing image display method and program
WO2015129987A1 (ko) * 2014-02-26 2015-09-03 에스케이플래닛 주식회사 사물 인식에 기반한 광고를 제공하는 서비스 장치, 사물 인식에 기반한 광고를 수신하는 사용자 장치, 사물 인식에 기반한 광고를 제공하는 시스템, 방법 및 컴퓨터 프로그램이 기록된 기록매체
US20160063588A1 (en) * 2014-08-28 2016-03-03 Akshay Gadre Methods and systems for virtual fitting rooms or hybrid stores

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101151428B1 (ko) 2005-10-17 2012-06-01 에스케이플래닛 주식회사 이동통신망을 이용한 가상 의류 착용 서비스 제공 방법 및시스템
JP2008065413A (ja) 2006-09-05 2008-03-21 Tokyo Metropolitan Univ 移動通信体及び情報案内サーバ
US7725547B2 (en) * 2006-09-06 2010-05-25 International Business Machines Corporation Informing a user of gestures made by others out of the user's line of sight
US10872322B2 (en) * 2008-03-21 2020-12-22 Dressbot, Inc. System and method for collaborative shopping, business and entertainment
KR20100026981A (ko) 2008-08-28 2010-03-10 이승운 의류 및 신체 장신구 착용의 실제 본인 모습 확인시스템 및 그 방법
KR101720774B1 (ko) * 2010-11-24 2017-03-28 삼성전자주식회사 디지털 촬영 장치 및 그의 사진 제공 방법
US20120136755A1 (en) 2010-11-29 2012-05-31 Yang Jin Seok System and Method for Providing Virtual Fitting Experience
KR20120078290A (ko) 2010-12-31 2012-07-10 주식회사 케이티 의류 착용 서비스 제공 방법 및 그 시스템
US20140180873A1 (en) 2012-12-21 2014-06-26 Ebay Inc. Shopping by virtual fitting
US20140201023A1 (en) 2013-01-11 2014-07-17 Xiaofan Tang System and Method for Virtual Fitting and Consumer Interaction
CN105072337B (zh) * 2015-07-31 2019-03-26 小米科技有限责任公司 图片处理方法及装置
CN106886538B (zh) * 2015-12-16 2021-06-08 阿里巴巴集团控股有限公司 提供业务对象信息的方法及装置
US10237740B2 (en) * 2016-10-27 2019-03-19 International Business Machines Corporation Smart management of mobile applications based on visual recognition

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2001011886A1 (en) * 1998-10-28 2001-02-15 Hi-Pic Ltd. Virtual dressing over the internet
CN1427293A (zh) * 2001-12-14 2003-07-02 欧姆龙株式会社 照片图像打印装置、照片图像打印方法、程序以及打印媒体单元
JP2009088729A (ja) * 2007-09-28 2009-04-23 Casio Comput Co Ltd 合成画像出力装置および合成画像出力処理プログラム
CN102473318A (zh) * 2009-07-30 2012-05-23 伊斯曼柯达公司 处理用于图像显示的数字模板
KR20110054175A (ko) * 2009-11-17 2011-05-25 엘지전자 주식회사 이동 단말기 및 그 제어 방법
US20130182963A1 (en) * 2012-01-18 2013-07-18 Ronald Steven Cok Selecting images using relationship weights
US20150206292A1 (en) * 2012-08-30 2015-07-23 Rakuten, Inc. Clothing image processing device, clothing image display method and program
KR20150044520A (ko) * 2013-10-16 2015-04-27 한양대학교 에리카산학협력단 배경 인식모듈을 갖는 스마트 디스플레이
WO2015129987A1 (ko) * 2014-02-26 2015-09-03 에스케이플래닛 주식회사 사물 인식에 기반한 광고를 제공하는 서비스 장치, 사물 인식에 기반한 광고를 수신하는 사용자 장치, 사물 인식에 기반한 광고를 제공하는 시스템, 방법 및 컴퓨터 프로그램이 기록된 기록매체
US20160063588A1 (en) * 2014-08-28 2016-03-03 Akshay Gadre Methods and systems for virtual fitting rooms or hybrid stores

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
ANDRES TRAUMANN, GHOLAMREZA ANBARJAFARI: "A New Retexturing Method for Virtual Fitting Room Using Kinect 2 Camera", <2015 IEEE CONFERENCE ON COMPUTER VISION AND PATTERN RECOGNITION WORHSHOPS(CVPRW)》 *
MASAHIRO SEKINE, KAORU SUGITA, FRANK PERBET, BJÖRN STENGER: "Virtual Fitting by Single-Shot Body Shape Estimation", 《5TH INTERNATIONAL CONFERENCE ON 3D BODY SCANNING TECHNOLOGIES, LUGANO, SWITZERLAND, 21-22 OCTOBER 2014》 *

Also Published As

Publication number Publication date
US20180330491A1 (en) 2018-11-15
EP3366038A4 (en) 2018-10-24
US20170287127A1 (en) 2017-10-05
US10043260B2 (en) 2018-08-07
US11145047B2 (en) 2021-10-12
KR102140072B1 (ko) 2020-07-31
CN108781262B (zh) 2022-03-08
WO2017171231A1 (en) 2017-10-05
EP3366038A1 (en) 2018-08-29
KR20170112743A (ko) 2017-10-12

Similar Documents

Publication Publication Date Title
CN108781262A (zh) 用于合成图像的方法和使用该方法的电子装置
US10021569B2 (en) Theme applying method and electronic device for performing the same
CN105512164B (zh) 使用语音标签管理图像的方法和装置
EP3343399B1 (en) Device and method for processing metadata
CN108513060A (zh) 使用外部电子设备的拍摄方法和支持该方法的电子设备
CN108664829A (zh) 用于提供与图像中对象有关的信息的设备
KR102379171B1 (ko) 전자 장치 및 그의 영상 표시 방법
CN106462247A (zh) 用于提供增强现实信息的可穿戴设备和方法
CN106796651A (zh) 电子设备的多媒体数据处理方法及其电子设备
CN108141490B (zh) 用于处理图像的电子设备及其控制方法
CN107832784A (zh) 一种图像美化的方法和一种移动终端
CN108628985B (zh) 一种相册的处理方法及移动终端
WO2022048398A1 (zh) 多媒体数据拍摄方法及终端
US20190378611A1 (en) Healthcare program management method and electronic device thereof
KR20170000196A (ko) 객체의 속성 기반의 상태 변화 효과를 출력하기 위한 방법 및 그 전자 장치
CN108024763A (zh) 活动信息提供方法及支持其的电子设备
CN110178110A (zh) 电子设备及用于通过其显示屏幕的方法
CN111028071A (zh) 账单处理方法、装置、电子设备及存储介质
CN107370781A (zh) 一种穿戴式设备数据的管理方法、终端及系统
CN107665232A (zh) 检测类似应用的方法及其适配的电子装置
US10185724B2 (en) Method for sorting media content and electronic device implementing same
KR20150120153A (ko) 전자 장치의 웹 페이지 저장 및 표현 방법
KR20160024427A (ko) 사용자의 관심 영역을 추출하는 전자 장치 및 관심 영역 추출 방법
CN108431811A (zh) 根据用户的偏好向用户提供内容的方法及其电子装置
CN108632450A (zh) 用于捕获内容的电子设备和方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant