CN108549483B - 一种智能画框的控制方法及控制系统 - Google Patents

一种智能画框的控制方法及控制系统 Download PDF

Info

Publication number
CN108549483B
CN108549483B CN201810278095.1A CN201810278095A CN108549483B CN 108549483 B CN108549483 B CN 108549483B CN 201810278095 A CN201810278095 A CN 201810278095A CN 108549483 B CN108549483 B CN 108549483B
Authority
CN
China
Prior art keywords
viewer
information
identity information
emotional state
picture frame
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201810278095.1A
Other languages
English (en)
Other versions
CN108549483A (zh
Inventor
李文波
同关山
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
BOE Technology Group Co Ltd
Original Assignee
BOE Technology Group Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by BOE Technology Group Co Ltd filed Critical BOE Technology Group Co Ltd
Priority to CN201810278095.1A priority Critical patent/CN108549483B/zh
Publication of CN108549483A publication Critical patent/CN108549483A/zh
Priority to PCT/CN2019/078495 priority patent/WO2019184745A1/zh
Priority to US16/605,941 priority patent/US11455036B2/en
Application granted granted Critical
Publication of CN108549483B publication Critical patent/CN108549483B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/015—Input arrangements based on nervous system activity detection, e.g. brain waves [EEG] detection, electromyograms [EMG] detection, electrodermal response detection
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/16—Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state
    • A61B5/165—Evaluating the state of mind, e.g. depression, anxiety
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/24—Detecting, measuring or recording bioelectric or biomagnetic signals of the body or parts thereof
    • A61B5/316—Modalities, i.e. specific diagnostic methods
    • A61B5/369—Electroencephalography [EEG]
    • A61B5/372—Analysis of electroencephalograms
    • A61B5/374—Detecting the frequency distribution of signals, e.g. detecting delta, theta, alpha, beta or gamma waves
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/24—Detecting, measuring or recording bioelectric or biomagnetic signals of the body or parts thereof
    • A61B5/316—Modalities, i.e. specific diagnostic methods
    • A61B5/369—Electroencephalography [EEG]
    • A61B5/377—Electroencephalography [EEG] using evoked responses
    • A61B5/378—Visual stimuli
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/172—Classification, e.g. identification
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/174—Facial expression recognition
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/20—Movements or behaviour, e.g. gesture recognition
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L25/00—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
    • G10L25/48—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use
    • G10L25/51—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use for comparison or discrimination
    • G10L25/63—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use for comparison or discrimination for estimating an emotional state
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/24—Detecting, measuring or recording bioelectric or biomagnetic signals of the body or parts thereof
    • A61B5/25—Bioelectric electrodes therefor
    • A61B5/279—Bioelectric electrodes therefor specially adapted for particular uses
    • A61B5/291—Bioelectric electrodes therefor specially adapted for particular uses for electroencephalography [EEG]
    • A61B5/293—Invasive
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/01—Indexing scheme relating to G06F3/01
    • G06F2203/011—Emotion or mood input determined on the basis of sensed human body parameters such as pulse, heart rate or beat, temperature of skin, facial expressions, iris, voice pitch, brain activity patterns

Landscapes

  • Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Physics & Mathematics (AREA)
  • General Health & Medical Sciences (AREA)
  • Theoretical Computer Science (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Human Computer Interaction (AREA)
  • General Physics & Mathematics (AREA)
  • Psychiatry (AREA)
  • Multimedia (AREA)
  • Biomedical Technology (AREA)
  • General Engineering & Computer Science (AREA)
  • Social Psychology (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Molecular Biology (AREA)
  • Public Health (AREA)
  • Veterinary Medicine (AREA)
  • Animal Behavior & Ethology (AREA)
  • Surgery (AREA)
  • Medical Informatics (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Psychology (AREA)
  • Pathology (AREA)
  • Biophysics (AREA)
  • Dermatology (AREA)
  • Neurosurgery (AREA)
  • Neurology (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Child & Adolescent Psychology (AREA)
  • Hospice & Palliative Care (AREA)
  • Developmental Disabilities (AREA)
  • Educational Technology (AREA)
  • Computational Linguistics (AREA)
  • Signal Processing (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Acoustics & Sound (AREA)
  • User Interface Of Digital Computer (AREA)
  • Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)

Abstract

本发明公开了一种智能画框的控制方法及控制系统，通过识别不同的观看者身份信息，调用预先存储的在目标情绪状态下该身份信息对应的控制指令，以控制智能画框进行相应的显示调整，实现利用智能画框的显示信息准确调节观看者的情绪状态达到目标情绪状态的效果，使智能画框更加具有人性化设计。

Description

一种智能画框的控制方法及控制系统
技术领域
本发明涉及显示技术领域，尤其涉及一种智能画框的控制方法。
背景技术
随着经济的快速发展，越来越多的家庭开始关注艺术文化消费，追求美学表达和实现，而绘画与影像作品是目前唯一未被数字化的领域。智能画框 (iGallery)是新兴的家庭云艺术馆，它包含精选艺术内容库、艺术欣赏交易云平台、能还原艺术原作的显示终端以及更多附加服务。虽然IGallery产品放在家中，能显示出高格艺术品质和高科技带来的惊喜，但还缺少些许人性化的设置内容。
发明内容
有鉴于此，本发明实施例提供了一种智能画框的控制方法及控制系统，用以增加智能画框显示的人性化设计。
本发明实施例提供了一种智能画框的控制方法，包括：
确定位于所述智能画框前方的观看者的身份信息；
根据设定的目标情绪状态和所述身份信息，调用预先存储的在所述目标情绪状态下所述身份信息对应的控制指令；
根据调用的所述控制指令，控制智能画框进行相应的显示调整。
在一种可能的实现方式中，在本发明实施例提供的上述控制方法中，还包括：
确定同一所述身份信息的观看者在观看调整后的所述智能画框时的当前情绪状态；
确定所述当前情绪状态是否达到所述目标情绪状态；
若否，则根据预设的所述目标情绪状态对应的多个备选控制指令，变更所述身份信息对应的控制指令，并根据变更后的控制指令，重新控制所述智能画框进行相应的显示调整，再次确定同一所述身份信息的观看者的当前情绪状态，直至确定同一所述身份信息的观看者的当前情绪状态达到所述目标情绪状态为止；
若是，将当前的控制指令作为所述身份信息对应的控制指令进行存储。
在一种可能的实现方式中，在本发明实施例提供的上述控制方法中，所述确定同一所述身份信息的观看者在观看调整后的所述智能画框时的当前情绪状态，具体包括：
获取所述观看者的脑电波信息；
根据所述脑电波信息，确定所述观看者的脑波频率；
根据预先设定的脑波频段划分与情绪状态的对应关系，确定所述观看者的当前情绪状态。
在一种可能的实现方式中，在本发明实施例提供的上述控制方法中，所述确定同一所述身份信息的观看者在观看调整后的所述智能画框时的当前情绪状态，还包括：
获取所述观看者的外部形态信息；
根据所述外部形态信息，对确定出的所述观看者的当前情绪状态进行修正。
在一种可能的实现方式中，在本发明实施例提供的上述控制方法中，所述获取所述观看者的外部形态信息，具体包括：
获取所述观看者的面部情态信息；和/或，
获取所述观看者的声音信息；和/或，
获取所述观看者的肢体动作信息。
另一方面，本发明实施例还提供了一种智能画框的控制系统，包括：
身份确定模块，用于确定位于所述智能画框前方的观看者的身份信息；
指令调用模块，用于根据设定的目标情绪状态和所述身份信息，调用预先存储的在所述目标情绪状态下所述身份信息对应的控制指令；
显示控制模块，用于根据调用的所述控制指令，控制所述智能画框进行相应的显示调整。
在一种可能的实现方式中，在本发明实施例提供的上述控制系统中，还包括：
情绪确认模块，用于确定同一所述身份信息的观看者在观看调整后的所述智能画框时的当前情绪状态；
数据处理模块，用于确定所述当前情绪状态是否达到所述目标情绪状态；
存储模块，用于在确定所述当前情绪状态达到所述目标情绪状态时，将当前的控制指令作为所述身份信息对应的控制指令进行存储；
指令变更模块，用于在确定所述当前情绪状态未达到所述目标情绪状态时，根据预设的所述目标情绪状态对应的多个备选控制指令，变更所述身份信息对应的控制指令；
所述显示控制模块，还用于根据变更后的控制指令，重新控制所述智能画框进行相应的显示调整；
所述情绪确认模块，还用于再次确定同一所述身份信息的观看者的当前情绪状态，直至所述数据处理模块确定同一所述身份信息的观看者的当前情绪状态达到所述目标情绪状态为止。
在一种可能的实现方式中，在本发明实施例提供的上述控制系统中，所述情绪确认模块，具体包括：
脑电信号采集模块，用于获取所述观看者的脑电波信息；
信号处理模块，用于根据所述脑电波信息，确定所述观看者的脑波频率；
数据匹配模块，用于根据预先设定的脑波频段划分与情绪状态的对应关系，确定所述观看者的当前情绪状态。
在一种可能的实现方式中，在本发明实施例提供的上述控制系统中，所述情绪确认模块，还包括：
外部形态采集模块，用于获取所述观看者的外部形态信息；
数据修正模块，用于根据所述外部形态信息，对确定出的所述观看者的当前情绪状态进行修正。
在一种可能的实现方式中，在本发明实施例提供的上述控制系统中，所述外部形态采集模块，具体包括：
摄像头模块，用于获取所述观看者的面部情态信息；和/或，获取所述观看者的肢体动作信息；
和/或，声波传感器，用于获取所述观看者的声音信息。
本发明实施例的有益效果包括：
本发明实施例提供的一种智能画框的控制方法及控制系统，通过识别不同的观看者身份信息，调用预先存储的在目标情绪状态下该身份信息对应的控制指令，以控制智能画框进行相应的显示调整，实现利用智能画框的显示信息准确调节观看者的情绪状态达到目标情绪状态的效果，使智能画框更加具有人性化设计。
附图说明
图1为本发明实施例提供的智能画框的控制方法的一种流程图；
图2为本发明实施例提供的智能画框的控制方法的另一种流程图；
图3为本发明实施例提供的智能画框的控制方法的另一种流程图；
图4为本发明实施例提供的智能画框的控制方法的另一种流程图；
图5为本发明实施例提供的智能画框的控制方法的完整流程图；
图6为本发明实施例提供的智能画框的控制系统的一种结构示意图；
图7为本发明实施例提供的智能画框的控制系统的另一种结构示意图；
图8为本发明实施例提供的智能画框的控制系统的另一种结构示意图。
具体实施方式
为了使本发明的目的、技术方案和优点更加清楚，下面将结合附图对本发明作进一步地详细描述，显然，所描述的实施例仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其它实施例，都属于本发明保护的范围。
本发明实施例提供的一种智能画框的控制方法，如图1所示，通过以下步骤实现：
S101、确定位于智能画框前方的观看者的身份信息；
S102、根据设定的目标情绪状态和身份信息，调用预先存储的在目标情绪状态下身份信息对应的控制指令；
S103、根据调用的控制指令，控制智能画框进行相应的显示调整。
具体地，本发明实施例提供的上述智能画框的控制方法，通过识别不同的观看者身份信息，调用预先存储的在目标情绪状态下该身份信息对应的控制指令，以控制智能画框进行相应的显示调整，实现利用智能画框的显示信息准确调节观看者的情绪状态达到目标情绪状态的效果，使智能画框更加具有人性化设计。
具体地，目标情绪状态可以根据智能画框的应用场景而具体设定。例如，在较为安静办公地点，目标情绪状态可以设定舒缓平静，使观看者的情绪状态因观看智能画框的显示信息而趋近于舒缓平静，以利于工作。又如，在追思会，目标情绪可以设定为悲伤，使观看者的情绪状态因观看智能画框的显示信息而趋近于悲伤，以符合当前场景。
在实际应用时，同一智能画框可以被多个观看者使用，不同的观看者的情绪状态针对不同的显示信息会有不同的反应变化。因此，在控制智能画框进行显示调整时，应该根据不同的观看者进行有针对性的调整。基于此，在本发明实施例提供的上述控制方法中，首先需要执行步骤S101确定当前观看者的身份信息。
并且，当前观看者有可能是首次使用智能画框的观看者，也有可能是之前使用过智能画框的观看者。针对首次使用智能画框的观看者，需要为首次使用智能画框的观看者配置与其对应的标识信息，以便后续身份识别使用。针对已经使用过智能画框的观看者，需要在已经存储的标识信息中，识别当前观看者对应的标识信息。
基于此，在本发明实施例提供的上述智能画框的控制方法中，步骤S101 确定当前观看者的身份信息，可以具体包括：
首先，获取位于智能画框前方的观看者的特征信息，例如面部特征信息；
之后，在已经存储的各特征 信息中，确定是否存在匹配的特征信息；
若是，则确定该特征信息对应的标识信息即为观看者的身份信息；
若否，则为该特征信息分配新的标识信息，作为该观看者的身份信息。
具体地，在本发明实施例提供的上述智能画框的控制方法中，预先会存储目标情绪状态对应的多个备选控制指令，每个备选控制指令用于控制智能画框进行不同的显示调整。并且，针对各身份信息会在多个备选控制指令中预先设定一个作为初始控制指令。
例如，目标情绪状态为舒缓情绪，则备选控制指令可以包括：对应变更背景画面信息为绿色的控制指令，对应变更画面的亮度的控制指令，对应显示家庭画面信息的控制指令，对应显示一些美丽风景，辽阔草原、无边大海，高耸山林、细淙流水等画面的控制指令等。
针对首次使用的观看者，其身份信息为新分配的标识信息，则，在步骤S102 根据设定的目标情绪状态和身份信息，调用预先存储的在目标情绪状态下身份信息对应的控制指令中，调用预先存储的在目标情绪状态下初始控制指令，作为该身份信息对应的控制指令。针对已经使用过智能画框的观看者，则，在步骤S102调用的控制指令有可能是初始控制指令，也有可能是更改后的备选控制指令，具体更改的机制在后续描述中会详细的说明，在此不作详述。
具体地，在本发明实施例提供的上述智能画框的控制方法中，在执行步骤S103根据调用的控制指令，控制智能画框进行相应的显示调整之后，同一身份信息的观看者的情绪状态可能会根据观看到的画面信息的变更而改变，例如从失落情绪变更为轻松情绪，从愤怒情绪变更为悲伤情绪，从轻松情绪变更为悲伤情绪。为了使同一观看者的当前情绪状态更加符合目标情绪状态，可以对在目标情绪状态下同一观看者的身份信息对应的控制指令进行不断的修正，具体可以通过自我学习的方式实现。
基于此，可选地，在本发明实施例提供的上述智能画框的控制方法中，如图2所示，还可以包括以下步骤：
S201、确定同一身份信息的观看者在观看调整后的智能画框时的当前情绪状态；
S202、确定当前情绪状态是否达到目标情绪状态；若否，则执行步骤S203；若是，则执行步骤S205；
S203、根据预设的目标情绪状态对应的多个备选控制指令，变更该身份信息对应的控制指令；
S204、根据变更后的控制指令，重新控制智能画框进行相应的显示调整；之后返回步骤S201；
S205、将当前的控制指令作为身份信息对应的控制指令进行存储。
具体地，通过不断的循环重复上述步骤S201至步骤S204，可以对在目标情绪状态下该身份信息对应的控制指令不断修正，使其可以有效的将该身份信息对应的观看者的情绪状态调整为达到目标情绪状态。
具体地，在本发明实施例提供的上述控制方法中，上述S202确定当前情绪状态是否达到目标情绪状态，具体为：确定当前情绪状态是否与目标情绪状态一致，或在目标情绪状态的指标范围内。例如目标情绪状态为舒缓心情，若检测到当前情绪状态为轻松或愉悦，说明当前情绪状态已经达到目标情绪状态，则无需调整智能画框的显示信息，即保持智能画框的显示信息。
具体地，在本发明实施例提供的上述控制方法中，上述步骤S203根据预设的目标情绪状态对应的多个备选控制指令，变更该身份信息对应的控制指令，具体为：在备选控制指令中，选取一个与该身份信息对应的当前控制指令不同的备选指令，作为变更后的该身份信息对应的控制指令。
可选地，在本发明实施例提供的上述控制方法中，上述步骤S201确定同一身份信息的观看者在观看调整后的智能画框时的当前情绪状态，可以是在步骤S103控制智能画框进行相应的显示调整之后，或步骤S204重新控制智能画框进行相应的显示调整之后，间隔固定时间段例如间隔5分钟之后执行，以留给观看者充分的情绪状态变化时间。
可选地，在本发明实施例提供的上述控制方法中，上述步骤S201确定同一身份信息的观看者在观看调整后的智能画框时的当前情绪状态，如图3所示，可以具体包括：
S301、获取观看者的脑电波信息；
S302、根据脑电波信息，确定观看者的脑波频率；
S303、根据预先设定的脑波频段划分与情绪状态的对应关系，确定观看者的当前情绪状态。
具体地，观看者的脑电波信息随着观看者的心情即内心活动的变化而变化，在上述步骤S301中可以直观的获取到脑电波的各种波形信息。通过上述步骤S302对脑电波的波形信息进行算法分析，可以得到观看者的脑波频率。如下表1所示，可以看出，不同的脑电波频段对应观看者的不同心情状态。因此可以预先设定脑电波频段与情绪状态的对应关系，之后根据确定出观看者的脑波频率，来确定观看者的当前情绪状态。
例如：当检测到观看者的脑波频率属于Beta波段至B波段，可判断出观看者的情绪比较紧张。当检测到观看者的脑波频率属于AlPha波段至A波段，可以判断出观看者处于比较轻松的状态。
Figure BDA0001614024560000091
表1
可选地，在本发明实施例提供的上述控制方法中，由于仅根据脑电波信息判断观看者的心情会存在一定的偏差，基于此，上述步骤S301获取位于智能画框前方的观看者的情感信息，如图4所示，还可以包括：
S401、获取观看者的外部形态信息；
S402、根据外部形态信息，对确定出的观看者的当前情绪状态进行修正。
具体地，根据上述步骤S401获取的观看者外部形态信息可以直观的映射出观看者的情绪状态，通过外部形态信息可以对脑电波信息进行补充，可以准确的辨别出相似情绪，使最终确定出的观看者的当前情绪状态更准确。
可选地，在本发明实施例提供的上述控制方法中，反映观看者的情绪状态的外部形态信息可以有多种，例如人的面部表情，人的肢体语言，人的谈话音量和音频等，基于此，步骤S401获取观看者的外部形态信息，可以具体包括：
获取观看者的面部情态信息，具体可以通过摄像头等图像获取设备获取观看者的面部情态信息，例如可以获取到观看者的面部处于哭泣状态等信息；和 /或，
获取观看者的声音信息，具体可以通过麦克风或声波传感器等设备获取观看者的音量和音频等信息，例如可以获取到观看者的音量较大且音频较高等信息；和/或，
获取观看者的肢体动作信息，具体可以通过红外传感器或摄像头等设备获取观看者的肢体动作语言，例如可以获取到观看者的肢体处于快速运动的状态等信息。
具体地，通过对上述各种具体外部形态信息的获取，配合脑电波信息，可以准确的识别出观看者的当前情绪状态。
下面通过一个具体的实例说明本发明实施例提供的上述智能画框的控制方法，如图5所示，包括以下步骤：
S501、确定位于智能画框前方的观看者的身份信息；
S502、根据设定的目标情绪状态和身份信息，调用在目标情绪状态下该身份信息对应的控制指令；
S503、根据调用的控制指令，控制智能画框进行相应的显示调整；
S504、间隔设定时长，例如5分钟；
S505、获取同一身份信息的观看者的脑电波信息；
S506、根据脑电波信息，确定观看者的脑波频率；
S507、根据预先设定的脑波频段划分与情绪状态的对应关系，确定观看者的当前情绪状态；
S508、确定当前情绪状态是否达到目标情绪状态；若否，则执行步骤S509；若是，则执行步骤S511；
S509、在预设的目标情绪状态对应的多个备选控制指令，选取一个与该身份信息对应的当前控制指令不同的备选指令，作为变更后的该身份信息对应的控制指令；
S510、根据变更后的控制指令，重新控制智能画框进行相应的显示调整；之后返回步骤S504；
S511、将当前的控制指令作为身份信息对应的控制指令进行存储。
基于同一发明构思，本发明实施例还提供了一种智能画框的控制系统，由于该系统解决问题的原理与前述一种智能画框的控制方法相似，因此该系统的实施可以参见控制方法的实施，重复之处不再赘述。
具体地，本发明实施例提供的一种智能画框的控制系统，如图6所示，包括：
身份确定模块601，用于确定位于智能画框前方的观看者的身份信息；
指令调用模块602，用于根据设定的目标情绪状态和身份信息，调用预先存储的在目标情绪状态下身份信息对应的控制指令；
显示控制模块603，用于根据调用的控制指令，控制智能画框进行相应的显示调整。
具体地，身份确定模块601、指令调用模块602和显示控制模块603可以同时集成于智能画框内；或者，指令调用模块602和显示控制模块603可以同时集成于智能画框内，身份确定模块601单独设置于外部设备中；或者，显示控制模块603可以同时集成于智能画框内，身份确定模块601和指令调用模块 602单独设置于外部设备中，在此不做限定。
可选地，在本发明实施例提供的上述控制系统中，如图7所示，还可以包括：
情绪确认模块604，用于确定同一身份信息的观看者在观看调整后的智能画框时的当前情绪状态；
数据处理模块605，用于确定当前情绪状态是否达到目标情绪状态；
存储模块606，用于在确定当前情绪状态达到目标情绪状态时，将当前的控制指令作为身份信息对应的控制指令进行存储；
指令变更模块607，用于在确定当前情绪状态未达到目标情绪状态时，根据预设的目标情绪状态对应的多个备选控制指令，变更身份信息对应的控制指令；
显示控制模块603，还用于根据变更后的控制指令，重新控制智能画框进行相应的显示调整；
情绪确认模块604，还用于再次确定同一身份信息的观看者的当前情绪状态，直至数据处理模块605确定同一身份信息的观看者的当前情绪状态达到目标情绪状态为止。
可选地，在本发明实施例提供的上述控制系统中，如图8所示，情绪确认模块604，可以具体包括：
脑电信号采集模块614，用于获取观看者的脑电波信息；
信号处理模块624，用于根据脑电波信息，确定观看者的脑波频率；
数据匹配模块634，用于根据预先设定的脑波频段划分与情绪状态的对应关系，确定观看者的当前情绪状态。
具体地，脑电信号采集模块614可以包括外部电极也可以包括内嵌于脑皮层的内部电极，在不做限定。
可选地，在本发明实施例提供的上述控制系统中，情绪确认模块604，如图8所示，还可以包括：
外部形态采集模块644，用于获取观看者的外部形态信息；
数据修正模块654，用于根据外部形态信息，对确定出的观看者的当前情绪状态进行修正。
可选地，在本发明实施例提供的上述控制系统中，外部形态采集模块644，如图8所示，具体可以包括：
摄像头模块644a，用于获取观看者的面部情态信息；和/或，获取观看者的肢体动作信息；
和/或，声波传感器644b，用于获取观看者的声音信息。
通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到本发明实施例可以通过硬件实现，也可以借助软件加必要的通用硬件平台的方式来实现。基于这样的理解，本发明实施例的技术方案可以以软件产品的形式体现出来，该软件产品可以存储在一个非易失性存储介质(可以是CD-ROM，U盘，移动硬盘等)中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本发明各个实施例的方法。
本领域技术人员可以理解附图只是一个优选实施例的示意图，附图中的模块或流程并不一定是实施本发明所必须的。
本领域技术人员可以理解实施例中的装置中的模块可以按照实施例描述进行分布于实施例的装置中，也可以进行相应变化位于不同于本实施例的一个或多个装置中。上述实施例的模块可以合并为一个模块，也可以进一步拆分成多个子模块。
上述本发明实施例序号仅仅为了描述，不代表实施例的优劣。
本发明实施例提供的上述智能画框的控制方法及控制系统，通过识别不同的观看者身份信息，调用预先存储的在目标情绪状态下该身份信息对应的控制指令，以控制智能画框进行相应的显示调整，实现利用智能画框的显示信息准确调节观看者的情绪状态达到目标情绪状态的效果，使智能画框更加具有人性化设计。
显然，本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样，倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内，则本发明也意图包含这些改动和变型在内。

Claims (6)

1.一种智能画框的控制方法，其特征在于，包括：
确定位于所述智能画框前方的观看者的身份信息；
根据设定的目标情绪状态和所述身份信息，调用预先存储的在所述目标情绪状态下所述身份信息对应的控制指令；
根据调用的所述控制指令，控制智能画框进行相应的显示调整；
确定同一所述身份信息的观看者在观看调整后的所述智能画框时的当前情绪状态；
确定所述当前情绪状态是否达到所述目标情绪状态；
若否，则根据预设的所述目标情绪状态对应的多个备选控制指令，变更所述身份信息对应的控制指令，并根据变更后的控制指令，重新控制所述智能画框进行相应的显示调整，再次确定同一所述身份信息的观看者的当前情绪状态，直至确定同一所述身份信息的观看者的当前情绪状态达到所述目标情绪状态为止；
若是，将当前的控制指令作为所述身份信息对应的控制指令进行存储；
其中，所述确定同一所述身份信息的观看者在观看调整后的所述智能画框时的当前情绪状态，具体包括：
获取所述观看者的脑电波信息；
根据所述脑电波信息，确定所述观看者的脑波频率；
根据预先设定的脑波频段划分与情绪状态的对应关系，确定所述观看者的当前情绪状态。
2.如权利要求1所述的控制方法，其特征在于，所述确定同一所述身份信息的观看者在观看调整后的所述智能画框时的当前情绪状态，还包括：
获取所述观看者的外部形态信息；
根据所述外部形态信息，对确定出的所述观看者的当前情绪状态进行修正。
3.如权利要求2所述的控制方法，其特征在于，所述获取所述观看者的外部形态信息，具体包括：
获取所述观看者的面部情态信息；和/或，
获取所述观看者的声音信息；和/或，
获取所述观看者的肢体动作信息。
4.一种智能画框的控制系统，其特征在于，包括：
身份确定模块，用于确定位于所述智能画框前方的观看者的身份信息；
指令调用模块，用于根据设定的目标情绪状态和所述身份信息，调用预先存储的在所述目标情绪状态下所述身份信息对应的控制指令；
显示控制模块，用于根据调用的所述控制指令，控制所述智能画框进行相应的显示调整；
情绪确认模块，用于确定同一所述身份信息的观看者在观看调整后的所述智能画框时的当前情绪状态；
数据处理模块，用于确定所述当前情绪状态是否达到所述目标情绪状态；
存储模块，用于在确定所述当前情绪状态达到所述目标情绪状态时，将当前的控制指令作为所述身份信息对应的控制指令进行存储；
指令变更模块，用于在确定所述当前情绪状态未达到所述目标情绪状态时，根据预设的所述目标情绪状态对应的多个备选控制指令，变更所述身份信息对应的控制指令；其中，所述备选控制指令包含调节显示亮度的备选控制指令；
所述显示控制模块，还用于根据变更后的控制指令，重新控制所述智能画框进行相应的显示调整；
所述情绪确认模块，还用于再次确定同一所述身份信息的观看者的当前情绪状态，直至所述数据处理模块确定同一所述身份信息的观看者的当前情绪状态达到所述目标情绪状态为止；
其中，所述情绪确认模块，具体包括：
脑电信号采集模块，用于获取所述观看者的脑电波信息；
信号处理模块，用于根据所述脑电波信息，确定所述观看者的脑波频率；
数据匹配模块，用于根据预先设定的脑波频段划分与情绪状态的对应关系，确定所述观看者的当前情绪状态。
5.如权利要求4所述的控制系统，其特征在于，所述情绪确认模块，还包括：
外部形态采集模块，用于获取所述观看者的外部形态信息；
数据修正模块，用于根据所述外部形态信息，对确定出的所述观看者的当前情绪状态进行修正。
6.如权利要求5所述的控制系统，其特征在于，所述外部形态采集模块，具体包括：
摄像头模块，用于获取所述观看者的面部情态信息；和/或，获取所述观看者的肢体动作信息；
和/或，声波传感器，用于获取所述观看者的声音信息。
CN201810278095.1A 2018-03-30 2018-03-30 一种智能画框的控制方法及控制系统 Active CN108549483B (zh)

Priority Applications (3)

Application Number Priority Date Filing Date Title
CN201810278095.1A CN108549483B (zh) 2018-03-30 2018-03-30 一种智能画框的控制方法及控制系统
PCT/CN2019/078495 WO2019184745A1 (zh) 2018-03-30 2019-03-18 智能画框的控制方法、控制系统及计算机可读存储介质
US16/605,941 US11455036B2 (en) 2018-03-30 2019-03-18 Control method of iGallery, control system of iGallery, and computer readable storage medium

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810278095.1A CN108549483B (zh) 2018-03-30 2018-03-30 一种智能画框的控制方法及控制系统

Publications (2)

Publication Number Publication Date
CN108549483A CN108549483A (zh) 2018-09-18
CN108549483B true CN108549483B (zh) 2020-08-18

Family

ID=63517526

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810278095.1A Active CN108549483B (zh) 2018-03-30 2018-03-30 一种智能画框的控制方法及控制系统

Country Status (3)

Country Link
US (1) US11455036B2 (zh)
CN (1) CN108549483B (zh)
WO (1) WO2019184745A1 (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108549483B (zh) 2018-03-30 2020-08-18 京东方科技集团股份有限公司 一种智能画框的控制方法及控制系统
CN113390170A (zh) * 2021-06-08 2021-09-14 青岛海尔空调器有限总公司 用于控制空调的方法、装置及空调

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN205644515U (zh) * 2016-04-29 2016-10-12 长沙三帆信息科技有限公司 一种智能电子画框
CN106658178A (zh) * 2017-01-03 2017-05-10 京东方科技集团股份有限公司 一种显示控制装置及其控制方法
CN106874265A (zh) * 2015-12-10 2017-06-20 深圳新创客电子科技有限公司 一种与用户情绪匹配的内容输出方法、电子设备及服务器
CN106909907A (zh) * 2017-03-07 2017-06-30 佛山市融信通企业咨询服务有限公司 一种视频通讯情感分析辅助系统
CN107320114A (zh) * 2017-06-29 2017-11-07 京东方科技集团股份有限公司 基于脑电波检测的拍摄处理方法、系统及其设备
CN107330722A (zh) * 2017-06-27 2017-11-07 昝立民 一种共享设备的广告投放方法

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5335961B2 (ja) * 2011-11-28 2013-11-06 シャープ株式会社 表示装置およびテレビ受像機
CN103405239B (zh) * 2013-08-07 2016-01-06 青岛赛博凯尔信息技术有限公司 驾驶创伤后应激障碍虚拟现实治疗系统
US10437332B1 (en) * 2015-10-30 2019-10-08 United Services Automobile Association System and method for emotional context communication
US10772551B2 (en) * 2017-05-09 2020-09-15 International Business Machines Corporation Cognitive progress indicator
CN107186728B (zh) * 2017-06-15 2020-02-14 重庆柚瓣家科技有限公司 智能养老服务机器人控制系统
CN107172337B (zh) * 2017-06-29 2019-08-27 京东方科技集团股份有限公司 一种智能画框及其中的图像采集装置的切换方法
CN107424019A (zh) * 2017-08-15 2017-12-01 京东方科技集团股份有限公司 基于情绪识别的艺术品推荐方法、装置、介质和电子设备
CN108549483B (zh) * 2018-03-30 2020-08-18 京东方科技集团股份有限公司 一种智能画框的控制方法及控制系统

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106874265A (zh) * 2015-12-10 2017-06-20 深圳新创客电子科技有限公司 一种与用户情绪匹配的内容输出方法、电子设备及服务器
CN205644515U (zh) * 2016-04-29 2016-10-12 长沙三帆信息科技有限公司 一种智能电子画框
CN106658178A (zh) * 2017-01-03 2017-05-10 京东方科技集团股份有限公司 一种显示控制装置及其控制方法
CN106909907A (zh) * 2017-03-07 2017-06-30 佛山市融信通企业咨询服务有限公司 一种视频通讯情感分析辅助系统
CN107330722A (zh) * 2017-06-27 2017-11-07 昝立民 一种共享设备的广告投放方法
CN107320114A (zh) * 2017-06-29 2017-11-07 京东方科技集团股份有限公司 基于脑电波检测的拍摄处理方法、系统及其设备

Also Published As

Publication number Publication date
CN108549483A (zh) 2018-09-18
US20210124418A1 (en) 2021-04-29
WO2019184745A1 (zh) 2019-10-03
US11455036B2 (en) 2022-09-27

Similar Documents

Publication Publication Date Title
US10074012B2 (en) Sound and video object tracking
US11321385B2 (en) Visualization of image themes based on image content
CN106462384B (zh) 基于多模态的智能机器人交互方法和智能机器人
US20190311718A1 (en) Context-aware control for smart devices
US9613448B1 (en) Augmented display of information in a device view of a display screen
US10083363B2 (en) System and method for customizing content for a user
US10126823B2 (en) In-vehicle gesture interactive spatial audio system
US20220084275A1 (en) Method and system for generating data to provide an animated visual representation
CN107016163B (zh) 植物种类推荐方法及装置
WO2020119032A1 (zh) 基于生物特征的声源追踪方法、装置、设备及存储介质
CN108549483B (zh) 一种智能画框的控制方法及控制系统
CN109635616A (zh) 互动方法和设备
CN105960801B (zh) 增强视频会议
WO2021143574A1 (zh) 增强现实眼镜、基于增强现实眼镜的ktv实现方法与介质
US11211074B2 (en) Presentation of audio and visual content at live events based on user accessibility
CN111275650B (zh) 美颜处理方法及装置
US10261749B1 (en) Audio output for panoramic images
CN109005627A (zh) 一种灯光控制方法、装置、终端及存储介质
US11800217B2 (en) Multimedia data processing method and apparatus
CN109993835A (zh) 一种舞台互动投影方法、装置以及系统
CN109688512B (zh) 一种拾音方法及装置
JP7204984B1 (ja) プログラム、方法、情報処理装置
CN112995530A (zh) 视频的生成方法、装置及设备
CN109685741A (zh) 一种图像处理方法、装置及计算机存储介质
WO2022193465A1 (zh) 一种展示内容的控制方法及装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant