CN111967324A - 一种具有智能识别的穿衣系统及其识别方法 - Google Patents

一种具有智能识别的穿衣系统及其识别方法 Download PDF

Info

Publication number
CN111967324A
CN111967324A CN202010685826.1A CN202010685826A CN111967324A CN 111967324 A CN111967324 A CN 111967324A CN 202010685826 A CN202010685826 A CN 202010685826A CN 111967324 A CN111967324 A CN 111967324A
Authority
CN
China
Prior art keywords
user
clothes
dressing
intelligent
information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202010685826.1A
Other languages
English (en)
Inventor
文博
刘志欢
梁江飞
朱广鹏
黄雪清
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nanjing Panda Electronics Co Ltd
Nanjing Panda Electronics Manufacturing Co Ltd
Original Assignee
Nanjing Panda Electronics Co Ltd
Nanjing Panda Electronics Manufacturing Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nanjing Panda Electronics Co Ltd, Nanjing Panda Electronics Manufacturing Co Ltd filed Critical Nanjing Panda Electronics Co Ltd
Priority to CN202010685826.1A priority Critical patent/CN111967324A/zh
Publication of CN111967324A publication Critical patent/CN111967324A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/40Scenes; Scene-specific elements in video content
    • G06V20/41Higher-level, semantic clustering, classification or understanding of video scenes, e.g. detection, labelling or Markovian modelling of sport events or news items
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/22Matching criteria, e.g. proximity measures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/40Scenes; Scene-specific elements in video content
    • G06V20/46Extracting features or characteristics from the video content, e.g. video fingerprints, representative shots or key frames
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/168Feature extraction; Face representation
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/22Procedures used during a speech recognition process, e.g. man-machine dialogue
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/22Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G10L2015/223Execution procedure of a spoken command

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Health & Medical Sciences (AREA)
  • Data Mining & Analysis (AREA)
  • Human Computer Interaction (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Computational Linguistics (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • General Engineering & Computer Science (AREA)
  • Evolutionary Computation (AREA)
  • Software Systems (AREA)
  • Evolutionary Biology (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Artificial Intelligence (AREA)
  • General Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Acoustics & Sound (AREA)
  • Image Analysis (AREA)

Abstract

本发明公开了一种具有智能识别的穿衣系统及其识别方法,包括显控模块、智能计算模块、网络通信模块和存储模块;且包括如下步骤:1、获取当前用户图像,如果是新用户或新图像,重新导入到计算模型并训练生成分类标签;2、识别出当前用户人脸及身体特征,列出该用户所有衣物信息并显示;3、记录当前用户每一次穿衣信息,并生成用户的个性标签;同时获取信息生成环境标签;4、智能匹配符合上述个性标签和环境标签的穿衣搭配,并通过语音提示当前用户选择建议;5、用户根据当前穿衣效果和推荐确定是否满意,若不满意将重新匹配直至满意。本发明能够智能识别出用户的人体测量数据和衣物信息,结合当前环境,完成智能计算自进化。

Description

一种具有智能识别的穿衣系统及其识别方法
技术领域
本发明属于智能家居技术领域,特别涉及一种具有智能识别的穿衣系统及其识别方法。
背景技术
穿衣镜作为现代智能家居品质生活的必不可少的一部分,扮演着帮助人们提高外在形象及审美的重要角色。目前市面上的智能镜子要么功能单一,缺少交互,要么功能复杂,用户试衣时间增加,导致用户体验大大降低。
发明内容
发明目的:针对上述缺陷,本发明提供一种具有智能识别的穿衣系统及其识别方法,能够智能识别出用户的人体测量数据和衣物信息,结合当前环境,完成智能计算自进化,建立一套合适的穿衣识别系统,从而帮助用户快速实现智能穿衣选择,提高穿衣效率,符合人性审美、智能交互、高效便捷的特点。
技术方案:本发明提出一种具有智能识别的穿衣系统,包括显控模块、智能计算模块、网络通信模块和存储模块;
所述智能计算模块用于对衣物、人体的特征提取和模型的分类训练,自动分析并识别出用户的穿衣类别和身体数据;
所述网络通信模块用于访问网络并智能推送,也可以通过本地连接实现现有衣物信息共享;
所述存储模块用于存储识别到的用户的穿衣习惯和人体健康信息。
进一步的,所述显控模块包括显示触摸单元、图像采集单元、语音控制单元和人体感应单元;
所述显示触摸单元用于显示当前用户穿衣状态;
所述图像采集单元用于检测衣物和用户身体信息;
所述语音控制单元用于提醒用户和语音交互;
所述人体感应单元用于检测人体并主动唤醒。
进一步的,所述智能计算模块包括至少一个具有神经网络处理器的高性能计算模组。
进一步的,所述网络通信模块包括无线网络图像模块和蓝牙模块。
进一步的,所述显示触摸单元还包括立式液晶触摸屏,用于用户穿衣比对显示和多媒体显示。
进一步的,所述图像采集单元包括一高清摄像头,用于扫描检测用户衣物信息:颜色、材质、品牌;同时实时捕捉用户人体信息:身高、肩宽、腰围。
进一步的,所述人体感应模块包括红外感应模块。
随着人工智能目标识别技术的兴起,越来越多的智能家居产品得已应用,如冰箱食材识别、洗衣机衣物识别等,因此,让穿衣镜更智能,更高效,具备自主学习的能力,才能更好地融入到智能家居场景中。
一种如上所述的具有智能识别的穿衣系统的识别方法,包括如下步骤:
(1)构建计算模型;
(2)获取当前用户图像,如果是新用户或新图像,重新导入到计算模型并训练生成分类标签;
(3)识别出当前用户人脸及身体特征,列出该用户所有衣物信息并显示在大屏上;
(4)记录当前用户每一次穿衣信息,并通过智能计算生成用户的个性标签;同时获取当前天气、位置、节日的信息生成环境标签;
(5)智能匹配符合上述个性标签和环境标签的穿衣搭配,并通过语音提示当前用户选择建议;
(6)用户根据当前穿衣效果和推荐确定是否满意,若不满意将重新匹配直至满意。
进一步的,所述步骤(1)中构建计算模型的具体步骤如下:
(1.1)对所有图像采用超级像素分割算法进行区域分割,识别并定位出部位轮廓;对人体关键部位按区域划分并提取人体部位特征;
(1.2)在获取到相应的人体部位特征后,对各部分人体区域图片进行再进行衣物特征提取;
(1.3)定义不同的衣物训练标签和人体训练标签,针对不同标签,导入预训练模型进行迭代计算,得到衣物解析模型和人体测量模型;
(1.4)记录并存储当前用户每一次的穿衣信息,导入训练模型生成当前用户穿衣个性标签;
(1.5)根据当前扩展的计算模组个数,采用串行或并行的方式动态调整训练模式,达到最优分类模型输出。
本发明采用上述技术方案,具有以下有益效果:
本发明融合了触摸控制、语音识别、图像识别等多种人机交互模式,具有更智能化、人性化的试衣体验。
本发明采用的可扩展式计算模组,串并行灵活计算,能够动态调整训练模型过程中计算资源调度分配问题,大大提高自我学习的运算效率,完成智能识别进化,保证识别精度和性能高效。
本发明能够实时捕捉图像信息,通过识别算法分析人体特征和衣物信息,显示并记录用户当前穿衣状态,包括身高、腰围、肩宽、衣物材质、衣物类别、搭配风格等,为用户实现定制化的智能量体和智能搭配服务,并提供智能化建议。
附图说明
图1为本发明的结构示意图;
图2为本发明的流程图;
图3为具体实施例中计算模型的流程图;
图4为具体实施例中扩展计算说明图。
具体实施方式
下面结合具体实施例,进一步阐明本发明,应理解这些实施例仅用于说明本发明而不用于限制本发明的范围,在阅读了本发明之后,本领域技术人员对本发明的各种等价形式的修改均落于本申请所附权利要求所限定的范围。
图1为一种具有智能识别的穿衣系统的系统结构框图,该系统包括显控模块、智能计算模块、网络通信模块、存储模块;其中显控模块包括显示触摸单元、图像采集单元、语音控制单元、人体感应单元。显示触摸单元包括一大尺寸立式液晶触摸屏,用于显示当前用户穿衣状态;图像采集单元包括一高清摄像头,用于扫描检测用户衣物信息,如颜色、材质、品牌等;同时实时捕捉用户人体信息,如身高、肩宽、腰围等;语音控制单元用于识别用户在试衣过程中发出的语音控制命令,并通过语音交互,提示识别结果和搭配推荐;人体感应单元包括红外感应模块,用于判断用户距离并主动唤醒系统;智能计算模块包括至少一个具有神经网络处理器的高性能计算模组,用于对衣物、人体的特征提取和模型的分类训练,通过多任务的方式实现特征共享,自动分析并识别出用户的穿衣类别和身体数据;网络通信模块包括无线网络通信模块和蓝牙模块,用于根据用户穿衣个性标签来筛选匹配符合用户喜好的推送服务,包括搭配推荐、新品潮流、品牌购买等;存储模块用于存储用户的穿衣习惯和人体健康等信息。
图2为一种具有智能识别的穿衣系统的计算模型流程图,假设系统存储单元已录入包含用户人脸和衣物的图片,
首先对图像采用超级像素分割算法进行区域分割,识别人体姿势并定位出人体部位轮廓位置;对人体关键部位区域划分并提取人体特征如脸部、上半身、下半身、下半身、手臂、脚等等;
不同的衣物对应的特征是在不同的身体部位中提取的,在获取到相应的人体部位特征后,对各部分人体区域图片进行再进行颜色、形状、纹理等特征提取;
将上衣、衬衫、牛仔裤等衣物类别定义成不同的衣物训练标签,同时将人脸、胸围、肩宽、腰围等身体数据定义成人体训练标签,针对每一个标签,导入预训练模型进行迭代计算,得到衣物解析模型和人体测量模型;
当用户进行试衣时,通过图像采集单元自动识别出当前用户人脸,并显示当前穿衣信息,记录并存储当前用户每一次的穿衣信息,如颜色、款式、套装等特点,导入训练模型生成当前用户穿衣个性标签。
图3为一种具有智能识别的穿衣系统的智能识别流程图,具体如下:
步骤1:高清摄像头单元获取当前用户图像,判断当图像是否为新用户或新衣物,如果是则导入新图像,由智能计算模块加载模型重新训练;
步骤2:获取匹配值最高的分类标签,识别出当前用户身体数据和该所有衣物信息,并存储穿衣数据反复训练,生成当前用户的个性标签;网络模块获取当前天气、位置、节日等信息,生成环境标签;
步骤3:通过匹配算法从数据库中找出最符合用户当前个性标签和环境标签的穿衣搭配需求并显示在显示屏上;
步骤4:根据识别出的当前用户,从当前训练好的图像库中显示当前用户有关的衣物和搭配推荐信息,通过语音单元智能提示用户穿衣帮助建议。
图4为一种具有智能识别的穿衣系统的扩展计算说明图,具有神经网络处理器功能的计算模组可以组成多个单元扩充阵列,为模型训练智能分配计算资源,当只有一个模型在训练时,系统可以采用串行计算方式为该模型分配多个计算单元;当有多个模型训练时,系统会采用并行计算的方式为每个模型均衡分配计算任务,通过采用动态优先调度算法,提高运算加速比和运算效率。
本文中所描述的具体实施例仅仅是对本发明精神做举例说明。本发明所属技术领域的技术人员可以对所描述的具体实施例做各种各样的修改或补充或采用类似的方式替代,但并不会偏离本发明的精神或者超越所附权利要求书所定义的范围。

Claims (9)

1.一种具有智能识别的穿衣系统,其特征在于,包括显控模块、智能计算模块、网络通信模块和存储模块;
所述智能计算模块用于对衣物、人体的特征提取和模型的分类训练,自动分析并识别出用户的穿衣类别和身体数据;
所述网络通信模块用于访问网络并智能推送,也可以通过本地连接实现现有衣物信息共享;
所述存储模块用于存储识别到的用户的穿衣习惯和人体健康信息。
2.根据权利要求1所述的一种具有智能识别的穿衣系统,其特征在于,所述显控模块包括显示触摸单元、图像采集单元、语音控制单元和人体感应单元;
所述显示触摸单元用于显示当前用户穿衣状态;
所述图像采集单元用于检测衣物和用户身体信息;
所述语音控制单元用于提醒用户和语音交互;
所述人体感应单元用于检测人体并主动唤醒。
3.根据权利要求1所述的一种具有智能识别的穿衣系统,其特征在于,所述智能计算模块包括至少一个具有神经网络处理器的高性能计算模组。
4.根据权利要求1所述的一种具有智能识别的穿衣系统,其特征在于,所述网络通信模块包括无线网络图像模块和蓝牙模块。
5.根据权利要求1所述的一种具有智能识别的穿衣系统,其特征在于,所述显示触摸单元还包括立式液晶触摸屏,用于用户穿衣比对显示和多媒体显示。
6.根据权利要求1所述的一种具有智能识别的穿衣系统,其特征在于,所述图像采集单元包括一高清摄像头,用于扫描检测用户衣物信息:颜色、材质、品牌;同时实时捕捉用户人体信息:身高、肩宽、腰围。
7.根据权利要求1所述的一种具有智能识别的穿衣系统,其特征在于,所述人体感应模块包括红外感应模块。
8.一种如权利要求1-7之一所述的具有智能识别的穿衣系统的识别方法,其特征在于,包括如下步骤:
(1)构建计算模型;
(2)获取当前用户图像,如果是新用户或新图像,重新导入到计算模型并训练生成分类标签;
(3)识别出当前用户人脸及身体特征,列出该用户所有衣物信息并显示在大屏上;
(4)记录当前用户每一次穿衣信息,并通过智能计算生成用户的个性标签;同时获取当前天气、位置、节日的信息生成环境标签;
(5)智能匹配符合上述个性标签和环境标签的穿衣搭配,并通过语音提示当前用户选择建议;
(6)用户根据当前穿衣效果和推荐确定是否满意,若不满意将重新匹配直至满意。
9.根据权利要求8所述的一种具有智能识别的穿衣系统的识别方法,其特征在于,所述步骤(1)中构建计算模型的具体步骤如下:
(1.1)对所有图像采用超级像素分割算法进行区域分割,识别并定位出部位轮廓;对人体关键部位按区域划分并提取人体部位特征;
(1.2)在获取到相应的人体部位特征后,对各部分人体区域图片进行再进行衣物特征提取;
(1.3)定义不同的衣物训练标签和人体训练标签,针对不同标签,导入预训练模型进行迭代计算,得到衣物解析模型和人体测量模型;
(1.4)记录并存储当前用户每一次的穿衣信息,导入训练模型生成当前用户穿衣个性标签;
(1.5)根据当前扩展的计算模组个数,采用串行或并行的方式动态调整训练模式,达到最优分类模型输出。
CN202010685826.1A 2020-07-16 2020-07-16 一种具有智能识别的穿衣系统及其识别方法 Pending CN111967324A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010685826.1A CN111967324A (zh) 2020-07-16 2020-07-16 一种具有智能识别的穿衣系统及其识别方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010685826.1A CN111967324A (zh) 2020-07-16 2020-07-16 一种具有智能识别的穿衣系统及其识别方法

Publications (1)

Publication Number Publication Date
CN111967324A true CN111967324A (zh) 2020-11-20

Family

ID=73361920

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010685826.1A Pending CN111967324A (zh) 2020-07-16 2020-07-16 一种具有智能识别的穿衣系统及其识别方法

Country Status (1)

Country Link
CN (1) CN111967324A (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112726114A (zh) * 2020-12-28 2021-04-30 广东天骏智能科技有限公司 一种衣物护理机的智能交互系统
CN112726101A (zh) * 2020-12-16 2021-04-30 青岛海尔洗衣机有限公司 一种信息提示方法、装置、介质及洗衣机
CN112785389A (zh) * 2021-02-01 2021-05-11 广东睿住智能科技有限公司 穿衣推荐方法、存储介质和终端设备
CN113848736A (zh) * 2021-09-13 2021-12-28 青岛海尔科技有限公司 基于智能衣柜的衣物信息处理方法及设备

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108170728A (zh) * 2017-12-12 2018-06-15 合肥龙图腾信息技术有限公司 一种基于天气情况智能推荐穿衣系统
CN108682045A (zh) * 2018-05-28 2018-10-19 吴静 一种基于智能家居的镜子及其控制方法
CN110859047A (zh) * 2018-06-21 2020-03-03 深圳市蚂蚁雄兵物联技术有限公司 服装管理方法、装置及智能穿衣镜

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108170728A (zh) * 2017-12-12 2018-06-15 合肥龙图腾信息技术有限公司 一种基于天气情况智能推荐穿衣系统
CN108682045A (zh) * 2018-05-28 2018-10-19 吴静 一种基于智能家居的镜子及其控制方法
CN110859047A (zh) * 2018-06-21 2020-03-03 深圳市蚂蚁雄兵物联技术有限公司 服装管理方法、装置及智能穿衣镜

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112726101A (zh) * 2020-12-16 2021-04-30 青岛海尔洗衣机有限公司 一种信息提示方法、装置、介质及洗衣机
CN112726114A (zh) * 2020-12-28 2021-04-30 广东天骏智能科技有限公司 一种衣物护理机的智能交互系统
CN112785389A (zh) * 2021-02-01 2021-05-11 广东睿住智能科技有限公司 穿衣推荐方法、存储介质和终端设备
CN113848736A (zh) * 2021-09-13 2021-12-28 青岛海尔科技有限公司 基于智能衣柜的衣物信息处理方法及设备

Similar Documents

Publication Publication Date Title
CN111967324A (zh) 一种具有智能识别的穿衣系统及其识别方法
CN107633207B (zh) Au特征识别方法、装置及存储介质
CN102081918B (zh) 一种视频图像显示控制方法及视频图像显示器
CN107798653B (zh) 一种图像处理的方法和一种装置
US10517521B2 (en) Mental state mood analysis using heart rate collection based on video imagery
CN105005777B (zh) 一种基于人脸的音视频推荐方法及系统
US20200104703A1 (en) Device and method for recommending product
Caridakis et al. Modeling naturalistic affective states via facial and vocal expressions recognition
CN105426850A (zh) 一种基于人脸识别的关联信息推送设备及方法
CN106294489A (zh) 内容推荐方法、装置及系统
CN108161933A (zh) 交互模式选择方法、系统及接待机器人
CN104598869A (zh) 基于人脸识别装置的智能广告推送方法
US20170140210A1 (en) Image processing apparatus and image processing method
CN106651433A (zh) 互动式智能试衣镜系统及试衣方法
CN107958218A (zh) 一种实时手势识别的方法
CN101751574A (zh) 图像处理设备、成像装置、成像处理方法和程序
CN108153169A (zh) 导览模式切换方法、系统和导览机器人
KR102326902B1 (ko) 멀티 포즈를 지원하는 이미지 기반 자세보존 가상피팅 시스템
CN102222342A (zh) 人体运动跟踪及其识别方法
CN111597870A (zh) 一种基于注意力机制与多任务学习的人体属性识别方法
CN107729380A (zh) 服饰搭配方法、终端、计算机终端
David et al. A comprehensive survey of emotion recognition system in facial expression
CN113180427A (zh) 一种多功能的智能镜
Chalup et al. Simulating pareidolia of faces for architectural image analysis
US20150365390A1 (en) Method of creating preference image identification code, method of diagnosing preference image identification code, and method of providing information using preference image identification code

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination