CN115212543A - 一种界面可切换健身系统 - Google Patents

Abstract

本发明公开了一种界面可切换健身系统，所述系统包括：显示器，其可操作地用于显示多个用户界面，用户界面具有至少一个用户界面对象，所述多个用户界面间可进行切换；每个所述用户界面包括至少一个页面对象，所述页面对象用于展示至少一种或者至少一组页面信息；镜子，所述镜子用于展示用户在所述镜子上的镜像，所述显示器透过所述镜子向用户显示所述用户界面。涉及智能家居及智能健身领域，提供了一种独立的页面能够切换的智能健身镜系统。

Description

一种界面可切换健身系统

技术领域

本发明涉及智能家居及智能健身领域，具体地，涉及一种界面可切换健身系统。

背景技术

随着经济的快速发展，人们生活节奏的加快，高速的生活和高负荷的工作使得城市生活的人们身体逐渐出现了各种健康问题，随之健身成为了人们关注的热点。智能健身镜，是集人工智能、硬件内容服务于一身的新型健身产品。

当前的智能镜的界面主要是通过手机设备等进行视频内容的选择或投送控制，尚未有一个独立的健身智能镜的界面系统。

发明内容

为了提供一种独立的页面能够切换的智能健身镜系统，本发明提供了一种界面可切换健身系统，所述系统包括：

显示器，用于显示多个用户界面，所述多个用户界面间可进行切换；每个所述用户界面包括至少一个页面对象，所述页面对象用于展示至少一种或者至少一组页面信息；

镜子，所述镜子用于展示用户在所述镜子上的镜像，所述显示器透过所述镜子向用户显示所述用户界面。

其中，本系统能够独立显示用户界面，并且能够在用户界面间进行切换。

优选的，所述页面信息包括锻炼课程视频、可视化数据、可操作的交互对象和交互引导。通过丰富的页面信息可以为用户提供丰富的功能和选项。

优选的，所述用户界面包括至少一个主页面，所述至少一个主页面中任一主页面能够切换至其他用户界面，或者在所述主页面上完成指定操作。主界面通常为用户正在使用的界面，用户可通过主界面切换到其他想要的界面。

优选的，所述用户界面还包括页面切换页面，所述页面切换页面的页面对象展示的页面信息包括至少一个预览图，所述预览图与其余可切换的用户界面一一对应。用户界面还包括页面切换页面，用户可以利用预览图对预览后续的界面，便于在切换时选择页面。

优选的，所述用户界面还包括至少一个锻炼页面，所述锻炼页面的页面对象展示的页面信息包括用于锻炼课程视频、课程播放信息、配件连接信息和用户生理信息中的至少一种。

优选的，所述用户界面还包括预安装的功能页面、以及第三方接入的应用程序页面。

优选的，所述用户界面还包括页面动效，所述页面动效包括页面切换动效和页面交互动效，其中，所述页面切换动效用于在页面操作、变化时产生动态效果，所述页面交互动效用于在进行交互时为用户提供引导。

优选的，用户界面上包括用于进入页面切换页面的交互对象，用户通过执行用于进入页面切换页面的交互对象的交互进入页面切换页面。

优选的，页面切换页面包括第一主页面、第二主页面、第三主页面的预览图并突出显示其中一个页面。

优选的，页面切换页面上设有展示返回和确认进入突出显示页面的交互对象及与页面切换页面设有展示切换突出显示页面的交互对象。

优选的，用户界面包括页面动效，所述页面动效包括页面切换动效，页面切换动效包括翻页动效、返回上一级和进入下一级动效。

本发明还提供了一种反射视频显示设备(本文也被称为“智能健身镜”和“交互式健身系统”)，其被配置为向用户显示诸如由教练带领的预先录制的或直播的锻炼之类的视频内容并提供允许用户交互和使视频内容个性化的界面。该智能健身镜可以是通信地耦合到内容提供商(例如，服务器、云服务)和/或智能装置(例如，智能手机、平板计算机、计算机)的联网装置。该智能健身镜可以包括显示面板和扬声器以向用户输出视频内容和音频。该智能健身镜还可以包括摄像头和传声器以在锻炼期间捕获用户的视频和音频。因此，该智能健身镜可以在锻炼期间实现用户与教练之间的双向通信。通过这种方式，该智能健身镜可以为用户提供一种接收指导锻炼的便捷选择，同时实现与由常规健身房的私人教练员或教练提供的锻炼类似的更大程度的个性化和个人指导。

智能健身镜的一个例子包括用于接收健身教练的视频影像的通信接口、可操作地耦合到通信接口以显示健身教练的视频影像的显示器、以及设置在显示器前面以反射与显示器相对的人员的图像的镜子。该镜子具有部分反射部分以将健身教练的视频影像传输给与显示器相对的人员使得健身教练的视频影像表现为叠加在人员的图像的一部分上。

交互式健身方法的一个例子包括以下步骤：(1)将健身内容流式传输到交互式视频系统，该交互式视频系统包括具有部分反射部分的镜子和设置在部分反射部分的一侧的显示器；(2)经由显示器和镜子的部分反射部分向用户显示健身内容；(3)以及利用镜子反射用户的图像使得用户的图像至少部分地叠加在经由显示器和镜子的部分反射部分显示的健身内容上。

使用智能健身镜的方法的一个例子包括以下步骤：在部分透射镜子后面的视频显示器上向用户显示健身内容时：(1)利用部分透射镜反射用户的图像；(2)利用附接到用户的心率监测器测量用户的心率；(3)将心率从心率监测器传输到可操作地耦合到视频显示器的天线；(4)在视频显示器上显示用户的心率；以及(5)在视频显示器上显示用户的目标心率。

为了在智能健身镜上增加个性化的界面及新的交互方式，优化智能健身镜与用户的交互方式，提高智能健身镜在日常生活中的使用频率，本发明在为智能健身镜设计了一套操作系统Launcher，具体包括：(1)GUI界面；(2)动作控制的系统控制方法；(3)语音控制的系统控制方法；(4)多模态融合的控制方法；(5) 可执行的控制指令；(6)数据采集管理的方法；(7)一些具体的功能管理方法。本发明的核心在于，为智能健身镜这种设备定制了一套系统及操作方法，使智能健身镜的功能不止于观看健身锻炼视频，还可以作为智能家居的一个重要组成部分便于用户查看更多的信息，提升使用效率。同时，定制化的操作方法客服了传统智能健身镜需要通过触摸进行控制容易在部分反射镜面上留下指纹的弊病，由于智能健身镜的核心功能是可以让用户观看健身锻炼视频时对比自己镜像的动作，部分反射镜面上留下指纹后对智能健身镜的功能影响较大，导致大多数用户不愿意使用触摸交互，而使用智能终端对智能健身镜控制又不直观，比较麻烦。而采用动作控制的方法则没有这些问题，同时虽然手势控制在一些其他电子产品上也有应用，不过在智能健身镜上应用时也有突破性的进展，由于智能健身镜包括部分反射镜面，我们在进行动作控制时，能清楚的看到自己正在做的动作，降低误控制、误操作的可能，同时由于动作识别是智能健身镜的核心功能，智能健身镜无需额外增加成本就可以实现更高精度的复杂动作识别，使能够完成的控制指令相对于现有的手势控制也丰富很多，最后由于智能健身镜的主要功能是运动健身，将动作控制应用于智能健身镜还需要避免健身动作才来的控制误触，与传统的手势控制也有明显区别。

以下更详细讨论的前述概念和附加概念的所有组合(假设此类概念并不相互矛盾)可以被预期作为本文公开的发明主题的一部分。具体地，出现在本公开文本结尾的所要求保护的主题的所有组合都可以被预期是本文公开的发明主题的一部分。本文明确采用的并且也可以出现在通过引用并入的任何公开内容中的术语应当被赋予与本文公开的特定概念最一致的含义。

本发明提供的一个或多个技术方案，至少具有如下技术效果或优点：

本发明提供了一种独立的智能健身镜系统，通过健身镜上具有一个或多个用户界面对象的用户界面的切换，丰富健身镜的功能，提升多个用户界面对象的用户体验，增加用户健身的积极性和兴趣。

附图说明

此处所说明的附图用来提供对本发明实施例的进一步理解，构成本申请的一部分，并不构成对本发明实施例的限定。在附图中：

图1为示例性智能健身镜的框图；

图2为智能健身镜上的示例性GUI页面；

图3为智能健身镜上的示例性GUI页面；

图4为智能健身镜上的示例性GUI页面；

图5-a为智能健身镜上的示例性GUI页面；

图5-b为智能健身镜上的示例性GUI页面；

图6为智能健身镜上的示例性GUI页面；

图7为智能健身镜上的示例性GUI页面；

图8为智能健身镜上的示例性GUI页面；

图9为智能健身镜上的示例性GUI页面；

图10为智能健身镜的动作识别示意图。

具体实施方式

为了能够更清楚地理解本发明的上述目的、特征和优点，下面结合附图和具体实施方式对本发明进行进一步的详细描述。需要说明的是，在相互不冲突的情况下，本发明的实施例及实施例中的特征可以相互组合。

在下面的描述中阐述了很多具体细节以便于充分理解本发明，但是，本发明还可以采用其他不同于在此描述范围内的其他方式来实施，因此，本发明的保护范围并不受下面公开的具体实施例的限制。

本领域技术人员应理解的是，在本发明的揭露中，术语“纵向”、“横向”、“上”、“下”、“前”、“后”、“左”、“右”、“竖直”、“水平”、“顶”、“底”“内”、“外”等指示的方位或位置关系是基于附图所示的方位或位置关系，其仅是为了便于描述本发明和简化描述，而不是指示或暗示所指的装置或元件必须具有特定的方位、以特定的方位构造和操作，因此上述术语不能理解为对本发明的限制。

因此，本专利涉及一种交互式镜面装置(也被称为“智能健身镜”和“交互式训练系统”)以及使用交互式训练设备的方法。智能健身镜包括被配置为显示锻炼内容(预先录制的视频或直播流)的显示器以及使得用户能够个性化锻炼的界面。此外，智能健身镜可以允许用户和/或教练在锻炼期间以类似于在其中用户和教练在同一个房间的健身房或小型健身工作室进行的常规锻炼的方式彼此交互(例如，向教练提供关于锻炼节奏的反馈，校正用户在特定健身计划期间的形式)。

一个示例性的智能健身镜。

图1示出了智能健身镜的示例性表示。智能健身镜可以包括处理器110，其用于部分地控制智能健身镜中的各种子部件的操作并且管理流入/流出智能健身镜的数据流(例如，视频内容、来自教练或用户的音频、生物识别反馈分析)。智能健身镜可以包括用于显示视频内容的显示器120、用户可以与其交互并控制智能健身镜的图形用户界面(GUI)、生物识别反馈数据和/或其他视觉内容。传感器130可以耦合到处理器110以采集用户相关数据。天线140可以耦合到处理器110，以在智能健身镜与另一个装置(例如，遥控装置、生物识别传感器、无线路由器)之间提供数据传输。天线140可以包括多个发射器和接收器，每个发射器和接收器针对特定频率和/或无线标准(例如，蓝牙、802.11a、802.11b、802.11g、802.11n、802.11ac、2G、3G、4G、4G LTE、5G)而定制。放大器150可以耦合到处理器 110以从处理器 110接收音频信号以便通过左扬声器152和/或右扬声器154输出后续声音。

智能健身镜还可以包括图1中未示出的附加部件。例如，智能健身镜可以包括开关模式电源(SMPS)、开关以及板载存储器和存储装置(非易失性和/或易失性存储器)，包括但不限于硬盘驱动器(HDD)、固态驱动器(SDD)、快闪存储器、随机存取存储器(RAM)和安全数字(SD)卡。该板载存储器和/或存储装置可以用于存储用于智能健身镜的操作的固件和/或软件。如上所述，板载存储器和/或存储装置还可以用于(临时和/或永久)存储其他数据，包括但不限于视频内容、音频、用户视频、生物识别反馈数据和用户设置。在另一个例子中，智能健身镜可以包括安装和支撑智能健身镜的各种部件。

天线140可以包括多个天线，每个天线用作接收器和/或发射器以与各种外部装置通信，这些外部装置诸如是用户的智能终端(例如，计算机、智能手机、平板计算机)、外置传感器(例如，心率带、惯性传感器、体脂称)和/或用于流式传输或播放视频内容的远程服务器或云服务器。再一次，天线140可以符合各种无线标准，包括但不限于蓝牙、802.11a、802.11b、802.11g、802.11n、802.11ac、2G、3G、4G、4G LTE和5G标准。

传感器130可以包括多个传感器，多个传感器可以分别是图像识别传感器（摄像头）、红外识别传感器或语音识别传感器（麦克风）中的一个或多个。

智能健身镜中的图像识别传感器（摄像头）可以用于在用户进行活动(例如，锻炼)时获取用户的视频和/或静态图像。然后可以向教练分享用户的视频以允许教练在锻炼期间观察并向用户提供指导。还可以向其他智能健身镜的其他用户分享视频以进行比较或竞争。用户的视频也可以实时显示在显示120上或者存储以供以后回放。例如，通过提供用户与教练的视觉比较，用户的视频可以用于锻炼期间或之后的自我评估。存储的视频还可以允许用户在进行类似健身时评估他们随时间变化的进度或改进。图像识别传感器（摄像头）还可以被配置为在用户进行活动(例如，锻炼)时获取用户的动态和/或静态图像并处理为骨骼点图像，并根据骨骼点图像判断用户动作是否与标准动作匹配并输出判断结果，若用户动作与标准动作不匹配，则输出动作矫正信息。还可以在用户使用智能健身镜时或在锻炼完成之后实时处理动态和/或静态图像，以基于用户的运动和动作来对智能健身镜进行控制或导出用户的生物识别数据。

智能健身镜中的红外识别传感器可以用于在用户进行活动(例如，锻炼)时获取用户的热成像图，并根据热成像图判断用户运动时锻炼的部位、发力的部位及消耗的热量，并根据用户运动时锻炼的部位、发力的部位判断用户动作是否与标准动作匹配并输出判断结果，若用户动作与标准动作不匹配，则输出动作矫正信息

智能健身镜中的语音识别传感器（麦克风）可以用于在用户使用智能健身镜时获取实时处理用户的语音信息并，以基于用户的语音信息来对智能健身镜进行控制或与用户进行对话。

图形用户界面(GUI)

智能健身镜可以通过显示器120来显示图形用户界面(GUI)以促进用户与智能健身镜的交互。

图形用户界面(GUI)包括但不限于唤醒页面、主页面、锻炼页面和其他页面等。

其中唤醒页面是指智能健身镜被唤醒时的初始页面，用于展示一些基础的页面信息，只有检测到用户进行指定操作时，智能健身镜被彻底唤醒进入主页面、锻炼页面或其他页面。

其中主页面展示至少一项页面信息，所述页面信息用于向用户展示数据、可操作的交互对象或交互引导。所述主页面用于向用户展示预设的页面信息或用户的自己设置的页面信息，同时用户可以通过在主页面上进行指定操作对智能健身镜进行控制，所述控制包括但不限于页面切换、功能切换或进入第三方接入的应用程序。

其中锻炼页面展示用于播放锻炼视频指导用户进行锻炼的视频播放窗口，还可以展示课程播放信息（如课程总时长、已播放的时长等）、配件连接信息（如心率带连接信息等）和用户生理信息（如心率、血压、消耗的卡路里等）中的至少一种。锻炼页面可以由主页面进入或唤醒页面进入并退回到主页面或唤醒页面，也可以在智能健身镜开启时直接进入。

其中其他页面展示通过主页面进入的预安装的功能页面（如多媒体播放器页面、天气展示页面、饮食推荐页面等）或第三方接入的应用程序页面（如微信、抖音、喜马拉雅等），其他页面一般由主页面进入或唤醒页面进入并退回到主页面或唤醒页面。

页面信息

图形用户界面(GUI)可以通过页面对象展示页面信息，每个页面对象用于展示至少一种或一组页面信息，所述展示的页面信息可以是存储在智能健身镜本地的存储装置中的信息，也可以是智能健身镜通过通信接口从其他设备处接收到的信息，包括但不限于可切换展示的课程预览信息、用户信息、环境信息、多媒体信息、外部设备信息等。

所述课程预览信息包括但不限于教练名称、课程类型、课程时长、课程难度、课程标签和/或预计消耗等。所述课程类型包括但不限于是通过智能健身镜向用户展示HIIT、有氧舞、瑜伽、力量塑形、格斗训练、Barre、普拉提、拉伸、舞蹈、冥想、挑战等。所述课程标签包括但不限于是通过智能健身镜向用户展示是否为AI识别课程、是否为亲子课程、课程主要涉及的身体部位（如全身、手臂、腰腹、腿部等）及课程中需要使用的道具（如无器械、瑜伽垫、弹力圈、弹力带、哑铃等）等。所述展示课程预览信息的页面对象也称为课程卡片。

所述用户信息包括但不限于使用历史信息、生理信息、社交信息、日历信息等。所述使用历史信息包括但不限于是通过智能健身镜向用户展示已完成的课程、收藏的课程、历史最佳成绩、上课的频率等。所述生理信息包括但不限于是通过智能健身镜向用户展示身高、体重、性别、年龄、心率、血压、伤病史等。所述社交信息包括但不限于是通过智能健身镜向用户展示与用户关注的人/好友相关的信息，也可以是与用户加入的团体/兴趣组相关的信息，这些信息具体的可以是邀请用户完成指定课程的上课邀请、邀请用户进行一对一或多人的挑战邀请、用户间的排名及用户自己或其他用户上传的动态等。所述动态可以被同步到其他社交平台（如微信、微博、Facebook、Twitter等）。所述日历信息包括但不限于是通过智能健身镜向用户展示用户的日程信息、待办事项、课程计划等。所述展示用户信息的页面对象也称为用户卡片。

所述环境信息包括但不限于天气信息。所述天气信息包括但不限于是通过智能健身镜向用户展示天气预报、温度、湿度、穿衣推荐等。所述展示天气信息的页面对象也称为天气卡片。

所述多媒体信息包括但不限于通过智能健身镜播放的音乐、视频的信息。所述展示多媒体信息的页面对象也称为多媒体卡片。

所述外部设备信息包括但不限于通过智能健身镜展示与智能健身镜建立连接的其他健身装置的信息、其他智能家具的信息（如扫地机器人、智能音箱、智能网关等）。所述展示外部设备信息的页面对象也称为设备卡片。

图形用户界面(GUI)还可以通过交互对象展示页面信息，所述交互对象可以是图标、文字、高亮选择、其他可以提示用户进行交互的形式或其组合。所述交互对象用于向用户展示用户可以执行的控制或操作（如页面切换、选择、课程的暂停/播放等）。进一步的，所述交互对象还可以与图形用户界面(GUI)的页面或页面对象进行结合以展示不同的交互功能。

所述页面对象和交互对象除了可以固定在各个页面上，还可以采用在各个页面进行弹窗或滚动播放的方式进行展示。

一些示例性的页面

方案一如图2、3、4、5-a、5-b所示，其中图2是第一主页面，图3是页面切换页面、图4、5-a、5-b分别是第二主页面、第三主页面和第四主页面。第一主页面通过多个页面对象展示多个页面信息，包括天气卡片、多媒体卡片和推荐的课程卡片等，同时第一主页面上还包括在右上角展示的用于进入页面切换页面的交互对象及与课程卡片组合的交互对象，用户可以通过执行与课程卡片组合的交互对象的交互进入第二主页面，也可以通过执行用于进入页面切换页面的交互对象的交互进入页面切换页面，页面切换页面包括第一主页面、第二主页面、第三主页面的预览图并突出显示其中一个页面，同时页面切换页面上方还展示了返回和确认进入突出显示页面的交互对象及与页面切换页面下方还展示了切换突出显示页面的交互对象。用户可以通过执行切换突出显示页面的交互对象的交互切换突出显示的页面，并通过确认进入突出显示页面的交互对象的交互进入选中的页面。当用户选中并进入第二主页面时，第二主页面包括多个课程卡片并突出显示其中一个课程卡片，同时第二主页面上方还展示了返回和确认进入突出显示课程卡片课程的交互对象及与页面切换页面下方还展示了切换突出显示课程卡片的交互对象，用户可以通过执行切换突出显示课程卡片的交互对象的交互切换突出显示的课程卡片，并通过执行确认进入突出显示课程卡片课程的交互对象的交互进入选中的课程卡片的锻炼页面。当用户选中并进入第三主页面时，第三主页面包括多个并列显示的页面对象，同时第三主页面还展示了选中的页面对象及进入选中的页面对象的交互对象，以及第三主页面下方还展示了切换页面对象的交互对象，用户可以执行通过切换页面对象的交互对象的交互切换显示的页面对象，并通过执行进入选中的页面对象的交互对象的交互进入选中的页面对象对应的页面。

方案二如图6、7、8、9所示，其中图6是第五主页面，图7是第六主页面、图8、9分别是第七主页面、第八主页面。第五主页面通过多个页面对象展示多个页面信息，包括天气卡片、多媒体卡片和推荐的课程卡片等，同时第五主页面上还包括在下方展示的用于切换主页面的交互对象及与课程卡片组合的交互对象，用户可以通过执行与课程卡片组合的交互对象的交互进入第八主页面，也可以通过执行用于切换主页面的交互对象的交互切换显示的主页面。当用户选择切换显示的主页面为第六主页面时，第六主页面包括多个并列显示的页面对象，同时第六主页面还展示了选中的页面对象及进入选中的页面对象的交互对象，以及第六主页面下方还展示了用于切换主页面的交互对象，用户可以通过执行用于切换主页面的交互对象的交互切换显示的主页面，并通过执行进入选中的页面对象的交互对象的交互进入选中的页面对象对应的页面。当用户选择切换显示的主页面为第七主页面时，第七主页面包括多个并列显示的页面对象，同时第七主页面还展示了选中的页面对象及进入选中的页面对象的交互对象，以及第七主页面下方还展示了用于切换主页面的交互对象，用户可以通过执行用于切换主页面的交互对象的交互切换显示的主页面，并通过执行进入选中的页面对象的交互对象的交互进入选中的页面对象对应的页面。当用户选择进入选中的页面对象对应的页面为第八主页面时，第八主页面包括多个并列显示的课程卡片，同时第八主页面还展示了选中的课程卡片及进入选中的课程卡片的交互对象，以及第八主页面下方还展示了用于切换课程卡片的交互对象，用户可以通过执行用于切换课程卡片的交互对象的交互切换显示的课程卡片，并通过执行进入选中的课程卡片的交互对象的交互进入选中的课程卡片对应的锻炼页面。

页面切换页面包括第一主页面、第二主页面、第三主页面的预览图并突出显示其中一个页面，同时页面切换页面上方还展示了返回和确认进入突出显示页面的交互对象及与页面切换页面下方还展示了切换突出显示页面的交互对象。用户可以通过执行切换突出显示页面的交互对象的交互切换突出显示的页面，并通过确认进入突出显示页面的交互对象的交互进入选中的页面。当用户选中并进入第二主页面时，第二主页面包括多个课程卡片并突出显示其中一个课程卡片，同时第二主页面上方还展示了返回和确认进入突出显示课程卡片课程的交互对象及与页面切换页面下方还展示了切换突出显示课程卡片的交互对象，用户可以通过执行切换突出显示课程卡片的交互对象的交互切换突出显示的课程卡片，并通过执行确认进入突出显示课程卡片课程的交互对象的交互进入选中的课程卡片的锻炼页面。当用户选中并进入第三主页面时，第三主页面包括多个并列显示的页面对象，同时第三主页面还展示了选中的页面对象及进入选中的页面对象的交互对象，以及第三主页面下方还展示了切换页面对象的交互对象，用户可以通过切换页面对象的交互对象的交互切换显示的页面对象，并通过执行进入选中的页面对象的交互对象的交互进入选中的页面对象对应的页面。

页面动效

图形用户界面(GUI)还包括页面动效，所述页面动效包括但不限于页面切换动效和页面交互动效。

其中页面切换动效包括翻页动效、返回上一级、进入下一级动效等，页面切换动效主要是针对页面操作和变化的动效，目的是使页面操作和变化在显示时具有更好的用户体验。

其中页面交互动效包括选择确认动效、动作引导动效等，页面交互动效主要是针对用户在进行交互时为用户提供引导，如提示用户当前正在进行的交互、交互的进度以及提示用户进行交互时需要进行的操作。进一步具体包括但不限于，在用户进行交互时对涉及的页面信息进行高亮或闪烁、在涉及的页面信息上显示进度条等。还包括在进行动作控制时，对用户正在做的动作进行识别并显示提示动作或建议动作等。还包括在进行语音控制时，根据用户的语音指令进行补全提示等。

智能健身镜控制

用户可以直接与智能健身镜对接来控制智能健身镜(例如，动作命令、语音命令、触摸命令等)。可以提供在显示器120上显示的图形用户界面(GUI)以促进用户与智能健身镜的交互。

动作命令控制(包括“体式控制”和“手势控制”)

智能健身镜可以根据图像识别传感器采集到的用户动作对图形用户界面(GUI)进行控制。

具体的，动作命令控制的动作包括但不限于静态动作和动态动作。静态动作是指用户将特定的身体部位做出特定的姿势并维持指定时间；动态动作是指用户将特定的身体部位做出特定的动作。

具体的，静态动作包括但不限于举起左/右手、抬起左/右腿、双手举过头顶比心以及各种静态手势等，维持指定时间的范围一般为0-5秒或更长，只要是通过人体的特定部位相对于空间、人体整体或其他特定部位间的位置关系确定，并有维持的指定时间的动作，均应落入静态动作的保护范围。进一步具体的如：左手打直与水平面呈15°/30°角维持1.5秒、左手与右手呈直角维持1秒、左手向前伸出维持0.1秒等。

具体的，动态动作包括但不限于水平滑动左/右手、上下滑动左/右手、双手击掌、跳起、蹲下以及各种动态手势等，只要是通过人体的特定部位相对于空间、人体整体或其他特定部位的移动轨迹确定的动作均应落入动态动作的保护范围。进一步具体的如：水平滑动左手使左手从身体左侧移动到身体右侧、水平滑动左手使左手从身体右侧移动到身体左侧、水平滑动右手使右手从身体右侧移动到身体左侧、上下滑动左手使左手从肩部以上移动到腰部以下、上下滑动左手使左手从人体整体的上20%处以上移动到上40%处以下、双手在头顶击掌、双手在左侧肩部以上击掌等。

具体的，动作命令控制执行的控制指令包括但不限于对非锻炼页面（唤醒页面、主页面、其他页面）的控制指令和对锻炼页面的控制指令。对非锻炼页面的控制指令主要涉及用户与非锻炼页面的交互指令。对锻炼页面的控制指令主要涉及用户对锻炼课程播放的控制指令

具体的，对非锻炼页面的控制指令包括但不限于非锻炼页面的切换、上一页、下一页、确定、返回、选择课程、课程收藏、加入计划、进入页面切换界面、唤醒语音助手、多媒体音量控制等。

具体的，对锻炼页面的控制指令包括但不限于课程暂停、课程播放、上一环节、下一环节、课程背景音乐音量控制、课程教练音量控制、课程评价等。

具体的，用户还可以通过多个动作的组合实现不同的功能。具体的包括但不限于使用第一动作进入第一级控制指令菜单，然后使用第二动作在第一级控制指令菜单中进行指令选择或进入第二级级控制指令菜单，所述控制指令菜单可以在显示器上展示给用户。进一步的具体的包括但不限于第一级控制指令菜单可以是课程选择控制指令菜单，包括播放课程、收藏课程、显示课程详情、预约课程和进入第二级级控制指令菜单指令，第二级级控制指令菜单可以是课程评价菜单，包括好评、中评、差评指令。

具体的，还包括在图形用户界面(GUI)对用户动作命令控制进行提示。具体的包括但不限于，在图形用户界面(GUI)显示可操作的动作的图标、在图形用户界面(GUI)对用户静态动作指向的控制指令进行标记或突出显示、在图形用户界面(GUI)对用户静态动作维持时间的进度条进行显示、在图形用户界面(GUI)对用户动态动作进行指引（当用户动态动作完成度超过指定比例时）等。

具体的，还包括智能健身镜可以根据图像识别传感器采集到的用户动作对图形用户界面(GUI)进行控制时依赖其他传感器提供辅助判断。具体的包括但不限于通过语音识别传感器开启/中断/确认动作命令控制、通过面部识别传感器判断用户的正面或背面（仅当用户正面面对智能健身镜时开启动作命令控制）、通过面部识别传感器区分不同用户以加载自定义的动作命令控制指令、通过IMU优化动作/轨迹识别精度等。

具体的，动作命令控制的动作可以是预先在智能健身镜中设定好的动作，也可以是用户自己录制的动作。动作命令控制执行的控制指令可以是预先在智能健身镜中设定好的指令，也可以是用户自己设置的自动化指令。动作命令控制的动作和执行的控制指令可以是预先设置好的对应关系，也可以是用户自己设置的对应关系，可以是一对一的关系，也可以是多对一的关系。

此外，控制动作和控制指令相对应，匹配一种控制动作，则代表处理器执行和该控制动作想匹配的控制指令。

具体的，动作命令控制功能的开启或关闭可以由特定的图形用户界面(GUI)或锻炼页面决定，如在图形用户界面(GUI)的主页面默认开启动作命令控制功能而在其他页面默认关闭动作命令控制功能；动作命令控制功能的开启或关闭还可以根据其他传感器检测到的数据进行决定；动作命令控制功能的开启或关闭还可以是全部功能的开启/关闭或部分功能的开启/关闭。

一个具体的智能健身镜可以根据图像识别传感器采集到的用户动作对图形用户界面(GUI)进行控制的示例，智能健身镜首先通过显示器120显示图形用户界面(GUI)的第一页面，第一页面上显示有举左手进入页面切换模式的第一提示图标，用户举起左手，第一提示图标进入高亮状态并开启进度条，1.5秒后，进度条完成，智能健身镜通过显示器120显示用于切换页面显示的页面切换页面，切换页面上除突出显示的第一页面，还包括第一页面的上一页“第二页面”和第一页面的下一页“第三页面”，切换页面上还显示有上一页、下一页、退出和确认的提示图标，其中上一页的提示图标代表左手从左往右水平挥动的动作，下一页的提示图标代表右手从右往左水平挥动的动作，退出的提示图标代表举左手，确定的提示图标代表举右手，用户此时做出左手从左往右水平挥动，切换页面变为突出显示第二页面，此时用户举起右手，代表确认的图标进入高亮状态并开启进度条，1.5秒后，进度条完成，智能健身镜通过显示器120显示第二页面。

一个具体的智能健身镜可以根据图像识别传感器采集到的用户动作对图形用户界面(GUI)进行控制的示例，智能健身镜首先通过显示器120显示图形用户界面(GUI)的第四页面，第四页面上显示有代表左手从左往右水平挥动进入上一页的第二提示图标和代表右手从右往左水平挥动进入下一页的第三提示图标，用户此时做出右手从右往左水平挥动的动作，智能健身镜通过显示器120显示由第四页面转入第五页面。

一个具体的智能健身镜可以根据图像识别传感器采集到的用户动作对图形用户界面(GUI)进行控制的示例，智能健身镜首先通过显示器120显示如图5-a的第三主页面，第三主页面包括多个并列显示的页面对象，同时第三主页面还展示了选中的页面对象及进入选中的页面对象的交互对象，以及第三主页面下方还展示了切换页面对象的交互对象，用户可以通过切换页面对象的交互对象的交互切换显示的页面对象，并通过执行进入选中的页面对象的交互对象的交互进入选中的页面对象对应的页面。用户可以通过右手/左手向左斜上方、左斜下方、右斜上方、右斜下方举起来选择选中的页面对象，并在选择完成后维持住右手/左手的姿态，同时使手部做出指定的静态动作如五指张开1秒即可进入选中的页面对象对应的页面。同时，用户可以做出右手从左往右水平挥动的动作切换显示的页面对象，进入第四主页面。

进一步的，一个具体的智能健身镜悬浮动作控制示例，智能健身镜首先通过显示器120显示如图5-a的第三主页面，第三主页面包括四宫格排布并列显示的页面对象，用户使用智能健身镜时，根据用户右手的位置确定用户选中的页面对象，即当用户的右手处于人体右侧肩部以上时，选中页面对象“天气”、当用户的右手处于人体右侧肩部以下时，选中页面对象“提醒”、当用户的右手处于人体左侧肩部以上时，选中页面对象“音乐”、当用户的右手处于人体右侧肩部以下时，选中页面对象“体脂秤”。当用户右手动作时，智能健身镜根据识别到的右手位置判断用户选择的页面对象，当右手停止运动并超过一定的时间后，执行预设的针对选中的页面对象的交互，所述预设的针对选中的页面对象的交互可以是打开该页面对象的功能，也可以是大概该页面对象的上下文菜单（contextual menu）。所述四宫格排布并列显示的页面对象也可以是左右排布、六宫格排布、九宫格排布等排布方式。

所述动作可以设置有个人偏好（左右撇子、残疾等），同时具备有单手和双手的不同模式，包括左/右手模式、双手同时进行的模式（如左手选择，右手切屏）。

所述第一页面、第二页面、第三页面、第四页面和第五页面可以分别是唤醒页面、主页面、锻炼页面或其他页面。

语音命令控制

智能健身镜可以根据语音识别传感器采集到的用户语音对图形用户界面(GUI)进行控制。

具体的，用户可以通过语音命令控制的语音识别结果来代替动作命令控制的动作并实现相同的控制效果。

具体的，动作命令控制执行的控制指令包括但不限于对非锻炼页面（唤醒页面、主页面、其他页面）的控制指令和对锻炼页面的控制指令。对非锻炼页面的控制指令主要涉及用户与非锻炼页面的交互指令。对锻炼页面的控制指令主要涉及用户对锻炼课程播放的控制指令

具体的，对非锻炼页面的控制指令包括但不限于非锻炼页面的切换、上一页、下一页、确定、返回、选择课程、课程收藏、加入计划、进入页面切换界面、唤醒语音助手、多媒体音量控制等。

具体的，对锻炼页面的控制指令包括但不限于课程暂停、课程播放、上一环节、下一环节、课程背景音乐音量控制、课程教练音量控制、课程评价等。

具体的，用户还可以通过多个动作的组合实现不同的功能。具体的包括但不限于使用第一语音进入第一级控制指令菜单，然后使用第二语音在第一级控制指令菜单中进行指令选择或进入第二级级控制指令菜单，所述控制指令菜单可以在显示器上展示给用户。进一步的具体的包括但不限于第一级控制指令菜单可以是课程选择控制指令菜单，包括播放课程、收藏课程、显示课程详情、预约课程和进入第二级级控制指令菜单指令，第二级级控制指令菜单可以是课程评价菜单，包括好评、中评、差评指令。

具体的，还包括在图形用户界面(GUI)对用户语音命令控制进行提示。具体的包括但不限于，在图形用户界面(GUI)显示可使用的语音的关键词、在图形用户界面(GUI)对用户语音指令进行补全（当用户动态动作完成度超过指定比例时）等。

具体的，还包括智能健身镜可以根据语音识别传感器采集到的用户语音对图形用户界面(GUI)进行控制时依赖其他传感器提供辅助判断。具体的包括但不限于通过动作识别传感器开启/中断/确认动作命令控制、通过面部识别传感器判断用户的正面或背面（仅当用户正面面对智能健身镜时开启动作命令控制）、通过面部识别传感器区分不同用户以加载自定义的语音命令控制指令等。

具体的，语音命令控制的关键词可以是预先在智能健身镜中设定好的关键词，也可以是用户自己录制的关键词。语音命令控制执行的控制指令可以是预先在智能健身镜中设定好的指令，也可以是用户自己设置的自动化指令。语音命令控制的关键词和执行的控制指令可以是预先设置好的对应关系，也可以是用户自己设置的对应关系，可以是一对一的关系，也可以是多对一的关系。

具体的，语音命令控制功能的开启或关闭可以由特定的图形用户界面(GUI)或锻炼页面决定，如在图形用户界面(GUI)的主页面默认开启语音命令控制功能而在其他页面默认关闭动作命令控制功能；语音命令控制功能的开启还可以通过识别唤醒词进行；语音命令控制功能的开启或关闭还可以根据其他传感器检测到的数据进行决定；语音命令控制功能的开启或关闭还可以是全部功能的开启/关闭或部分功能的开启/关闭。

一个具体的智能健身镜可以根据图像识别传感器采集到的用户动作对图形用户界面(GUI)进行控制的示例，智能健身镜首先通过显示器120显示图形用户界面(GUI)的第一页面，用户通过唤醒词开启语音命令控制功能，第四页面上显示有代表语音命令控制功能开启图标，用户此时说出“进入切换页面”或“页面切换”的指令，智能健身镜通过显示器120显示用于切换页面显示的页面切换页面，切换页面上除突出显示的第一页面，还包括第一页面的上一页“第二页面”和第一页面的下一页“第三页面”，切换页面上还显示有代表语音命令控制功能开启图标，用户此时说出“上一页”或“往前翻一页”的指令，切换页面变为突出显示第二页面，此时用户说出“进入”或“确定”的指令，智能健身镜通过显示器120显示第二页面。

一个具体的智能健身镜可以根据图像识别传感器采集到的用户动作对图形用户界面(GUI)进行控制的示例，智能健身镜首先通过显示器120显示图形用户界面(GUI)的第四页面，用户通过唤醒词开启语音命令控制功能，第四页面上显示有代表语音命令控制功能开启图标，用户此时说出“下一页”或“往后翻一页”的指令，智能健身镜通过显示器120显示由第四页面转入第五页面。

一个具体的智能健身镜可以根据图像识别传感器采集到的用户动作对图形用户界面(GUI)进行控制的示例，智能健身镜首先通过显示器120显示图形用户界面(GUI)的第六页面，用户通过动作命令控制开启语音命令控制功能，第四页面上显示有代表语音命令控制功能开启图标，用户此时说出“开始训练”或“确定”的指令，智能健身镜通过显示器120显示由第六页面转入第七页面。

所述第一页面、第二页面、第三页面、第四页面和第五页面可以分别是唤醒页面、主页面、锻炼页面或其他页面，第六页面是用来展示锻炼卡片的页面，第七页面是锻炼页面。

触摸命令控制

智能健身镜可以根据触摸屏采集到的用户触控指令对图形用户界面(GUI)进行控制。

多模态命令控制

多模态命令控制包括组合控制、增强控制和冲突控制。

其中组合控制包括但不限于多个动作的动作组合控制及多个关键词的语音组合控制，可以通过连续（间隔时间不超过阈值）的多个动作或关键词实现较为复杂的控制指令（如选中并收藏、选中并推荐给好友、截图并分享等）。

其中组合控制包括但不限于通过面部识别或场景识别对用户的动作指令控制或语音指令控制进行增强优化，进一步的包括但不限于用户的动作指令控制或语音指令控制为播放音乐时，识别到用户面部表情为不开心，为用户呈现舒缓心情的推荐结果同时对用户进行关心；用户的动作指令控制或语音指令控制为推荐课程时，识别到场景温度较低，减少冥想类课程的推荐。

其中冲突控制包括但不限于当用户使用多个不同的控制方法同时对智能健身镜进行控制时，出现了多个冲突的控制指令，通过对不同的控制方法进行优先级判断，确定用户希望执行的控制指令并由智能健身镜进行执行。

控制指令

控制指令包括但不限于系统唤醒指令、页面切换指令、页面交互指令和课程控制指令，用户可以通过这些控制指令实现对智能健身镜的控制。

其中系统唤醒指令包括将智能健身镜从待机状态唤醒到唤醒页面、主页面、锻炼页面、其他页面的指令和将智能健身镜从唤醒页面切换到主页面、锻炼页面、其他页面的指令。

其中页面切换指令是指用于控制智能健身镜在多个不同的页面中切换的指令，所述不同的页面可以是类型不同的页面，也可以是内容不同的页面。进一步的页面切换指令包括但不限于翻页指令（如下一页面/上一页面）和控制智能健身镜进入页面切换页面的指令。

其中页面交互指令是指用于控制智能健身镜执行交互或输入的指令，所述页面交互指令包括但不限于控制交互指令和输入交互指令。进一步的所述控制交互指令是指控制图形用户界面(GUI)或图形用户界面(GUI)中的页面对象或交互对象实现其交互功能的指令，如确认/返回、加入收藏、加入计划、唤醒语音助手、音量控制、切换账号、切换模式、打开上下文菜单（contextual menu）等。进一步的所述输入交互指令是指在图形用户界面(GUI)或图形用户界面(GUI)中的页面对象或交互对象中输入信息的指令，如在进行课程评价时，每输入一次指令加一颗心；或在通过智能健身镜与其他用户进行聊天时，每输入一次指令切换一个预设表情/回复等

其中课程控制指令是指用于控制智能健身镜在锻炼页面播放锻炼视频时的控制指令，主要用于对锻炼视频的播放进行控制。进一步的课程控制指令包括但不限于暂停/播放、上一节/下一节、背景音量控制、教练音量控制、课程评价等。

数据管理

智能健身镜的数据源包括但不限于传感器数据和后台数据，所述传感器数据和后台数据用于用户控制指令的输入和页面信息的展示。

其中传感器数据包括但不限于镜上传感器数据和外置传感器数据，所述镜上传感器数据包括但不限于图像识别传感器、红外识别传感器和语音识别传感器等安装在智能健身镜上的传感器检测到的数据。进一步具体的，图像识别传感器检测到的数据包括但不限于图像识别传感器检测到的图像和对图像处理识别后得到的数据，如用户动作数据、用户姿态数据、面部识别数据、用户表情数据和环境图像数据等。进一步具体的，红外识别传感器检测到的数据包括但不限于红外识别传感器检测到的热成像图及对热成像图处理识别后得到的数据，如用户热成像数据、用户锻炼部位数据、环境热成像数据等。进一步具体的，语音识别传感器检测到的数据包括但不限于音识别传感器检测到的语音数据及对语音数据处理识别后得到的数据，如语音控制指令、关键词指令、唤醒词指令等。所述镜上传感器数据包括但不限于惯性传感器数据、生理数据传感器数据（如心率带数据、体脂称数据等）等与智能健身镜通过无线连接的传感器检测到的数据。进一步具体的，惯性传感器检测到的数据包括但不限于惯性传感器检测到的速度/加速度数据和对速度/加速度数据处理识别后得到的数据，如用户动作数据等。进一步具体的，生理数据传感器检测到的数据包括但不限于生理数据传感器检测到的生理数据和对生理数据处理识别后得到的数据，如心率数据、血压数据、血氧饱和度数据等。

其中后台数据包括但不限于后台用户数据和后台其他数据，所述后台用户数据为智能健身镜和/或与智能健身镜连接的服务器存储的与用户直接关联的数据，所述后台用户数据包括但不限于用户生理数据、用户社交数据、用户日历数据和使用历史数据等。所述使用历史数据包括但不限于用户展示已完成的课程数据、收藏的课程数据、历史最佳成绩数据、课程过程中的生理数据和表现数据、上课的频率数据等。所述用户生理数据包括但不限于用户的身高、体重、性别、年龄、心率、血压、伤病史等。所述用户社交数据包括但不限于用户关注的人/好友相关的数据和用户加入的团体/兴趣组相关的数据，这些信息具体的可以是邀请用户完成指定课程的上课邀请数据、邀请用户进行一对一或多人的挑战邀请数据、用户间的排名及用户自己或其他用户上传的动态数据等。所述动态可以被同步到其他社交平台（如微信、微博、Facebook、Twitter等）。所述用户日历数据包括但不限于用户的日程信息数据、待办事项数据、课程计划数据等。所述后台其他数据为智能健身镜和/或与智能健身镜连接的服务器存储的与用户低关联度的数据，所述后台其他数据包括但不限于IP数据、环境数据、课程数据和第三方数据等。其中IP数据包括但不限于智能健身镜的IP地址数据、Mac地址数据等。其中环境数据包括但不限于智能健身镜的IP所在的区域的时间数据、定位数据、天气数据、温度数据、穿衣指数数据等。所述课程数据包括但不限于锻炼视频数据、教练名称、课程类型、课程时长、课程难度、课程标签和/或预计消耗等。所述课程类型包括但不限于是通过智能健身镜向用户展示HIIT、有氧舞、瑜伽、力量塑形、格斗训练、Barre、普拉提、拉伸、舞蹈、冥想、挑战等。所述课程标签包括但不限于是通过智能健身镜向用户展示是否为AI识别课程、是否为亲子课程、课程主要涉及的身体部位（如全身、手臂、腰腹、腿部等）及课程中需要使用的道具（如无器械、瑜伽垫、弹力圈、弹力带、哑铃等）等。所述第三方数据包括但不限于安装在智能健身镜上的第三方功能的数据。

数据存储

智能健身镜还可以取决于所使用的存储空间量在智能健身镜和/或远程存储装置(例如，云服务)上本地存储用户信息。例如，使用很少存储空间的用户信息可以本地存储在智能健身镜上，这些用户信息包括但不限于用户的姓名、年龄、身高、体重和性别。另外，课程数据也可以存储在智能健身镜中以降低可能影响视频流质量的网络等待时间的影响。所存储的视频内容量可能受到智能健身镜的存储容量的限制。在一些配置中，视频内容可以仅每天或每周临时存储，或者取决于所使用的智能健身镜容量的百分比。使用大量存储空间的后台用户数据可以存储在远程存储装置上，这些用户信息包括但不限于生理数据，诸如用户的心率和消耗的卡路里以及在锻炼期间拍摄的用户的视频或骨骼点数据。智能健身镜可以检索该信息以用于后续分析和显示。

可以通过各种方式保护(例如，加密)智能健身镜与远程存储装置之间的数据传输，以防止用户信息的非所需丢失或被盗。例如，低功耗蓝牙协议包括可以由利用该协议的装置使用的内置安全特征。然而，只有在与加密建立连接之前完成蓝牙绑定步骤时，才能使用这些安全特征。在一些情况下，可能未实现各种安全机制或各种安全机制可能发生故障，此时可以结合上述数据的分块规范来实现应用级安全性。例如，可以在前置消息的前导码之前应用消息的高级加密标准(AES)加密。在一些方面，低功耗蓝牙协议经由固件级别的内置安全特征执行类似过程，并且可以提供类似保护以防止人员阅读客户端与服务器之间的通信。

当客户端与服务器断开连接时，可以从服务器装置上的服务录制中删除为客户端添加的用于读取/通知消息的GATT服务。这确保了没有任何连接被打开，并且系统不会意外地将信息泄露给邪恶的窥探者。这种连接终止可以由服务器或客户端触发，并依赖于低功耗蓝牙堆栈以向双方提供连接已关闭的通知。如果在初始连接设置中使用蓝牙绑定以提供固件级加密安全性，则可以将绑定信息存储在每个装置上，使得在客户端与服务器之间的后续连接之后不需要重复绑定。

功能管理

智能健身镜还可以根据接收到的数据实现以下功能：用户识别、模式切换、注意力判断、身体/情绪评估、穿衣推荐。

其中用户识别功能允许智能健身镜通过输入的数据识别出正在使用智能健身镜的用户，该功能主要通过以下方法实现：用户通过数据输入装置输入用户的特征数据，智能健身镜将用户输入的特征数据与数据库中的特征数据对比，根据对比结果确定正在使用智能健身镜的用户，根据识别结果允许智能健身镜对图形用户界面(GUI)进行调整，如调整字体大小、页面信息偏好等。其中数据输入装置包括但不限于镜上传感器数据和外置传感器，用户的特征数据包括但不限于用户的骨骼点、声纹、体重、静息心率等镜上传感器数据和外置传感器采集到或采集后经过处理得到的数据，所述数据库中记录了用户和特征数据的映射关系。进一步的，用户识别功能可以被用于一个主账号下的多个子账号的识别和切换，也可以用于多个主账号之间的识别和切换。在另一个示例中，用户识别功能允许智能健身镜通过输入的数据识别出正在使用智能健身镜的用户的特征，如男性用户、女性用户、老人、小孩，根据识别结果允许智能健身镜对图形用户界面(GUI)进行调整，如调整字体大小、页面信息等。

其中模式切换功能允许智能健身镜在多个工作模式中切换以适应不同的工作场景。例如，智能健身镜被允许切换为青少年模式，青少年模式中，青少年账号与父母账号或设备主账号绑定，在青少年模式下，智能健身镜展示的页面信息会进行适应性的调整，如课程推荐会调整为优先呈现适合青少年的内容，如跳绳、体感游戏等，同时，在该模式下的实时情况和运动数据可以被同步至父母账号或设备主账号的智能终端。在另一个示例中，智能健身镜被允许切换为访客模式，访客模式中，智能健身镜不需要与账号绑定也可以工作，智能健身镜展示的页面信息也可以进行适应性的调整，如课程推荐会调整为优先呈现适合新手的内容，如难度标签为低的内容等，同时，即使智能健身镜与账号绑定，在该模式下的运动数据不会计入绑定的账号，不会影响绑定账号的训练计划或完课情况。

其中注意力判断允许智能健身镜确定设备工作时用户的注意力是否在智能健身镜上，以便于智能健身镜判断用户与镜子的交互意图同时可操作的激活或关闭传感器、其他数输入装置以及功能。注意力判断主要是根据用户的表现来判断用户是否希望使用智能健身镜，可以但不限于通过以下特征进行判断：距离判断（用户与智能健身镜的距离不超过阈值）、体态判断（用户是否正面面对智能健身镜）、动作判断（用户是否做出了指定的动作或锻炼常用的动作）、语义判断（用户语音的识别结果是否与特定关键词相关）等。

其中身体/情绪评估允许智能健身镜确定用户使用设备时的身体/情绪状况，以便于智能健身镜根据用户的身体/情绪状况可操作的调整页面信息或其他反馈。用户的身体/情绪状况可以通过生理数据传感器和图像识别传感器（面部识别）进行识别。当识别到用户情绪为不开心，为用户呈现舒缓心情的页面信息推荐结果同时在语音交互时对用户进行关心；进一步的一个实例，用户通过唤醒词唤醒智能健身镜的语音功能时，智能健身镜通过图像识别传感器（面部识别）识别到用户的表情较为沮丧，智能健身镜发起第一轮对话“hey，怎么啦你看起来不太高兴哦，要不要听一首歌来放松一下”。所述身体/情绪状况的识别可以通过对用户的年龄、身体姿态、表情等信息的识别，来判别用户的情绪、压力、疲劳等身体/情绪的状态；还可以通过生理数据传感器检测到的血压、心率数据来进行识别。

其中穿衣推荐允许智能健身镜基于特定条件向用户发起主动交互。智能健身镜根据采集到的时间数据、定位数据，结合用户信息及用户在智能健身镜前的动作判断用户是否需要智能健身镜发起主动交互。如，在用户早上第一次出现在智能健身镜前并转了一圈时，智能健身镜开启穿衣推荐功能，向用户推荐当前定位适合今天穿着的衣服。进一步的如，在用户周末出现在智能健身镜前并转了一圈时，智能健身镜开启穿衣推荐功能，向用户输出当前衣物的穿搭建议。上述功能还可以用于智能健身镜基于用户和外部信息进行主动互动的其他功能。

一种电子装置，包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序，所述处理器执行所述计算机程序时实现所述多模态交互健身镜的步骤。

其中，所述处理器可以是中央处理器，还可以是其他通用处理器、数字信号处理器、专用集成电路、现成可编程门阵列或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。

所述存储器可用于存储所述计算机程序和/或模块，所述处理器通过运行或执行存储在所述存储器内的数据，实现发明中多模态交互健身镜的装置的各种功能。所述存储器可主要包括存储程序区和存储数据区，其中，存储程序区可存储操作系统、至少一个功能所需的应用程序（比如声音播放功能、图像播放功能等）等。此外，存储器可以包括高速随机存取存储器、还可以包括非易失性存储器，例如硬盘、内存、插接式硬盘，智能存储卡，安全数字卡，闪存卡、至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。

视频流传输方法

智能健身镜被配置为在显示面器120上显示来自视频制作工厂的视频内容。视频内容可以作为直播内容或预先录制好的录播内容流式传输。也可以将直播内容录制并存储在云服务器中，使得用户可以稍后请求和播放视频内容，因此成为录播内容。在进行视频流传输时，首先智能健身镜向API服务器发送指定课程的请求，API服务器返回的数据分为两部分，第一部分为指定课程的概览（包括课程图片及课程简介）；第二部分为课程视频的地址（URL），然后智能健身镜根据收到的URL去OSS服务器上请求对应的课程视频。当课程为录播内容时，智能健身镜使用HLS协议进行视频播放，即课程视频的地址（URL）为对应课程的M3U8文件，然后智能健身镜的播放器根据M3U8文件的记载从OSS服务器上下载对应的课程视频切片。当课程为直播内容时，智能健身镜使用RTMP协议进行视频播放，即课程视频的地址（URL）为对应课程的RTMP直播地址，然后智能健身镜的播放器根据RTMP直播地址从OSS服务器上下载对应的课程视频直播数据。

在一些应用中，智能健身镜可以连接到在线流媒体服务，该在线流媒体服务向用户提供从服务器(例如，直接通过网络路由器或间接地通过用户的智能装置)流式传输的第三方视频内容。可以基于订阅向用户提供第三方内容。第三方可以向集中式分发平台提供内容，该集中式分发平台通过网络与智能健身镜通信。集中式分发平台的一个好处是内容到智能健身镜的分发更简单。可选地，第三方可以开发单独的分发平台，其可以在智能装置上使用单独的软件应用程序以供用户访问内容。

一种计算机可读存储介质，所述计算机可读存储介质存储有计算机程序，所述计算机程序被处理器执行时实现所述多模态交互健身镜的步骤。

本发明实施例的计算机存储介质，可以采用一个或多个计算机可读的介质的任意组合。计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质。计算机可读存储介质可以是但不限于电、磁、光、电磁、红外线、或半导体的系统、装置或器件，或者任意以上的组合。计算机可读存储介质的更具体的例子（非穷举的列表）包括：具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机存取存储器(RAM)、只读存储器(ReadOnlyMemory，ROM)、可擦式可编程只读存储器((ErasableProgrammableReadOnlyMemory，EPROM)或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本文件中，计算机可读存储介质可以是任何包含或存储程序的有形介质，该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。

一种动作识别方法，

如图10所示，在上述实施例的基础上，本装置在交互过程，具体包括以下步骤：

S121健身镜采集区域内用户图像，得到用户的动作图像；

S122根据动作图像生成用户的骨骼点信息，根据骨骼点信息建立坐标系；

S122.1骨骼点信息包括头顶骨骼点、盆骨骨骼点、左手骨骼点和右手骨骼点；

S122.2获取头顶骨骼点和盆骨骨骼点之间的直线距离，根据所述直线距离获取坐标系的单位长度；

S122.21获取头顶骨骼点和盆骨骨骼点之间的直线距离，将直线距离的六分之一作为坐标系的单位长度，即坐标系的单位长度1的大小为直线距离的六分之一；

S122.3将头顶骨骼点和盆骨骨骼点之间所在直线作为纵坐标、盆骨骨骼点为原点，并以获取的单位长度构建直角坐标系；

S123根据坐标系建立若干交互区域；

在本实施例中，交互区域共有五个，分别为第一交互区域、第二交互区域、第三交互区域、第四交互区域和第五交互区域，如图10所示，第一交互区域为图10中的A区域，第二交互区域为图10的B区域，第三交互区域为图10的C区域，第四交互区域为图10的D区域，第五交互区域为图10的E区域。

其中第一交互区域为以头顶骨骼点为中心，纵向5个单位长度，横向6个单位长度作为第一交互区域，即第一交互区域的长度为12个单位长度，高度为10个单位长度。第一交互区域为以头顶骨骼点为中心，纵向向上5个单位长度为上边，纵向向下5个单位长度为下边；以头顶骨骼点为中心，横向向左6个单位长度为左边，横向向右6个单位长度为右边。第一交互区域预设的控制指令为确定A，即当交互姿势位于第一交互区域时，输出第一交互区域对应的控制指令，即输出确定A的控制指令。

第二交互区域的控制指令为向左，第三交互区域的控制指令为向右，第二交互区域为以盆骨骨骼点为起始点，纵向向上2个单位长度为上边，纵向向下10个单位长度为下边，以头顶骨骼点为起始点，横向向左3个单位长度为右边，横向向左16个单位长度为左边构成的长度为13个单位长度，高度为12个单位长度的区域。

第三交互区域为以盆骨骨骼点为起始点，纵向向上2个单位长度为上边，纵向向下10个单位长度为下边，以头顶骨骼点为起始点，横向向右3个单位长度为左边，横向向右16个单位长度为右边构成的长度为13个单位长度，高度为12个单位长度的区域。

第四交互区域的控制指令为确定D，第五交互区域的控制指令为确定E，第四交互区域为以头顶骨骼点为起始点，纵向向上4个单位长度为上边，纵向向下5个单位长度为下边，以头顶骨骼点为起始点，横向向左7个单位长度为右边，横向向左16个单位长度为左边构成的长度为11个单位长度，高度为9个单位长度的区域。

第五交互区域为以头顶骨骼点为起始点，纵向向上4个单位长度为上边，纵向向下5个单位长度为下边，以头顶骨骼点为起始点，横向向右7个单位长度为左边，横向向右16个单位长度为右边构成的长度为11个单位长度，高度为9个单位长度的区域。

S124根据骨骼点信息识别交互姿势；

S124.1获取左手骨骼点和右手骨骼点之间的距离；

S124.2将左手骨骼点和右手骨骼点之间的距离与阈值T对比，若左手骨骼点和右手骨骼点之间的距离小于或等于阈值T，则识别到交互姿势，在本实施例中阈值T为15cm，若左手骨骼点和右手骨骼点之间的距离小于或等于阈值T，则判断用户做出交互姿势，识别到交互姿势，例如在本实施例中交互姿势为击掌，即用户做出击掌动作；若左手骨骼点和右手骨骼点之间的距离大于阈值T，则用户未做出击掌动作；在本实施例中具体的交互姿势只做举例说明并不做限定。

S124.3用户做出交互姿势，则获取左手骨骼点和右手骨骼点之间的中间点坐标；

S125判断中间点坐标是否位于交互区域中；

S125.1判断中间点坐标是否位于交互区域中；

S125.11若中间点坐标位于其中一个交互区域中时，则该交互区域为激活状态，输出该交互区域对应的控制指令；其他交互区域为未激活状态；

S125.12输出该交互区域对应的控制指令的同时，该交互区域为激活状态，其余交互区域为未激活状态；激活状态的交互区域面积增大，未激活状态的交互区域面积缩小。

在本实施例中，激活状态的交互区域的长度增大1.5个单位长度，高度增大0.5个单位长度，具体的，在本实施例中，激活状态的交互区域的长度向左右两侧依次增大即外扩0.75个单位长度，高度向上下两端依次增大即外扩0.25个单位长度。未激活状态的交互区域长度缩小2个单位长度，高度缩小1个单位长度。具体的，未激活状态的交互区域长度向左右两侧依次缩小即内缩1个单位长度，高度向上下两端缩小即内缩0.5个单位长度。

在未输出该交互区域对应的控制指令时，交互区域的面积不改变，输出控制指令后，交互区域的面积调整，执行控制指令后，交互区域的面积恢复到原始状态。

当用户在第一交互区域中做出交互姿势后，健身镜识别到交互姿势，输出第一交互区域对应的控制指令，第一交互区域的面积扩大，即上边纵向向上增大0.25个单位长度，下边纵向向下增大0.25个单位长度，左边横向向左增大0.75个单位长度，右边横向向右增大0.75个单位长度。

本文描述的所有参数、尺寸、材料和配置旨在是示例性的，并且实际参数、尺寸、材料和/或配置将取决于使用本发明教导的一个或多个特定应用。应当理解，前述实施方案主要通过举例方式呈现，并且在所附权利要求及其等同物的范围内，本发明的实施方案可以不同于具体描述和要求保护的方式来实践。本公开文本的发明实施方案涉及本文描述的每个单独的特征、系统、物品、材料、套件和/或方法。

另外，如果此类特征、系统、物品、材料，套件和/或方法不相互矛盾，则两种或更多种这样的特征、系统、物品、材料、套件和/或方法的任何组合包括在本公开文本的发明范围。在不脱离本公开文本的精神的情况下，可以在示例性实施方式的相应元件的设计、操作条件和布置中进行其他替换、修改、改变和省略。数值范围的使用不排除落在范围之外的以相同方式实现相同功能以产生相同结果的等同物。

可以多种方式实现上述实施方案。例如，可以使用硬件、软件或其组合来实现实施方案。当在软件中实现时，软件代码可以在合适的处理器或处理器集合上执行，而无论是在单个计算机中提供还是分布在多个计算机之间。

此外，计算机可以被体现为多种形式中的任何一种，诸如机架式计算机、台式计算机、膝上型计算机或平板计算机。另外，计算机可以嵌入通常不被视为计算机但具有合适处理能力的装置中，该装置包括个人数字助理(PDA)、智能手机或任何其他合适的便携式或固定电子装置。

此外，计算机可以具有一个或多个输入和输出装置。除其他之外，这些装置还可以用于呈现用户界面。可以用于提供用户界面的输出装置的例子包括用于输出的视觉呈现的打印机或显示屏和用于输出的可听呈现的扬声器或其他发声装置。可以用于用户界面的输入装置的例子包括键盘和指示装置，诸如鼠标、触摸板和数字化平板计算机。作为另一个例子，计算机可以通过语音识别或其他可听格式接收输入信息。

此类计算机可以通过一种或多种网络以合适形式互连，这些网络包括局域网或广域网，诸如企业网、智能网(IN)或因特网。此类网络可以基于合适的技术，可以根据合适的协议进行操作，并且可以包括无线网络、有线网络或光纤网络。

本文概述的各种方法或过程可以被编码为可在采用各种操作系统或平台中的任何一者的一个或多个处理器上执行的软件。另外，可以使用许多合适的编程语言和/或编程或脚本工具中的任何一种来编写这种软件，并且还可以将这种软件编译为在框架或虚拟机上执行的可执行机器语言代码或中间代码。一些实施方式可以具体地采用特定操作系统或平台以及特定编程语言和/或脚本工具中的一者或多者来促进执行。

此外，各种发明构思可以被体现为一种或多种方法，其中已经提供了这些方法的至少一个例子。作为该方法的一部分执行的动作在一些情况下可以以不同方式排序。因此，在一些发明实施方式中，给定方法的相应动作可以按与具体示出的顺序不同的顺序执行，其可以包括同时执行一些动作(即使此类动作在示例性实施方案中被示为顺序动作)。

本文提及的所有出版物、专利申请、专利以及其他参考文献都通过引用整体并入。

如本文定义和使用的所有定义应被理解为控制字典定义、通过引用并入的文献中的定义和/或所定义术语的普通含义。

除非明确指示相互矛盾，否则本说明书和权利要求书中使用的不定冠词“一”和“一个”应被理解为表示“至少一个”。

本说明书和权利要求书中使用的短语“和/或”应被理解为表示如此结合的“一个或两个”元件，即，在一些情况下结合存在并且在其他情况下分离存在的元件。用“和/或”列出的多个元件应以相同方式解释，即，“一个或多个”元件如此结合。除由“和/或”子句具体表示的元件之外，可以可选地存在其他元件，而无论是与具体表示的那些元件相关还是不相关。因此，作为非限制性例子，当与诸如“包括”之类的开放式语言结合使用时，对“A和/或B”的引用可以在一个实施方案中仅指代A(可选地包括除B之外的元件)；在另一个实施方案中，仅指代B(可选地包括除A之外的元件)；在又一个实施方案中，指代A和B两者(可选地包括其他元件)；等等。

如本说明书和权利要求书中所用的，“或”应被理解为与如上所定义的“和/或”具有相同含义。例如，当分隔列表中的项目时，“或”或“和/或”应被解释为包含性的，即，包括至少一个，但是也包括许多元件或元件列表中的一个以上元件以及(可选地)附加的未列出项目。只有明确指示相互矛盾，否则诸如“只有一个”或“恰好一个”或者在权利要求中使用时“由...组成”将指代恰好包括许多元件或元件列表中的一个元件。一般而言，如本文中所使用的术语“或”之后有诸如“两者之一”、“中的一个”、“中的仅一个”或“中的恰好一个”之类的排他性术语时仅应被解释为指示排他性备选方案(即，“一个或另一个但不是两个”)。“基本上由...组成”在权利要求中使用时它的普通意义如同在专利法领域中使用的那样。

如本说明书和权利要求书中所使用的，关于一个或多个元件的列表，短语“至少一个”应被理解为表示选自元件列表中的任何一个或多个元件的至少一个元件，但不一定包括元件列表中具体列出的每个元件中的至少一个元件，并且不排除元件列表中元件的任何组合。该定义还允许可选地存在除在短语“至少一个”所指代的元件列表内具体表示的元件之外的元件，而无论是与具体表示的那些元件相关还是不相关。因此，作为非限制性例子，“A和B中的至少一者”(或等同地，“A或B中的至少一者”，或等效地“A和/或B中的至少一者”)在一个实施方案中可以指代至少一个A，可选地包括一个以上A，而不存在B(并且可选地包括除B之外的元件)；在另一个实施方案中，指代至少一个B，可选地包括一个以上B，而不存在A(并且可选地包括除A之外的元件)；在又一个实施方案中，指代至少一个A，可选地包括一个以上A和至少一个B，可选地包括一个以上B(和可选地包括其他元件)；等等。

在权利要求以及上面的说明书中，诸如“包括”、“包含”、“携带”、“具有”、“含有”、“涉及”、“持有”、“由...组成”等之类的所有过渡短语应被理解为开放式的，即，包括但不限于。

尽管已描述了本发明的优选实施例，但本领域内的技术人员一旦得知了基本创造性概念，则可对这些实施例作出另外的变更和修改。所以，所附权利要求意欲解释为包括优选实施例以及落入本发明范围的所有变更和修改。

显然，本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样，倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内，则本发明也意图包含这些改动和变型在内。

Claims (11)

1.一种界面可切换健身系统，其特征在于，所述系统包括：

显示器，用于显示多个用户界面，所述多个用户界面间可进行切换；每个所述用户界面包括至少一个页面对象，所述页面对象用于展示至少一种或者至少一组页面信息；

镜子，所述镜子用于展示用户在所述镜子上的镜像，所述显示器透过所述镜子向用户显示所述用户界面。

2.根据权利要求1所述的一种界面可切换健身系统，其特征在于，所述页面信息包括锻炼课程视频、可视化数据、可操作的交互对象和交互引导。

3.根据权利要求1所述的一种界面可切换健身系统，其特征在于，所述用户界面包括至少一个主页面，所述至少一个主页面中任一主页面能够切换至其他用户界面，或者在所述主页面上完成指定操作。

4.根据权利要求1所述的一种界面可切换健身系统，其特征在于，所述用户界面还包括页面切换页面，所述页面切换页面的页面对象展示的页面信息包括至少一个预览图，所述预览图与其余可切换的用户界面一一对应。

5.根据权利要求1所述的一种界面可切换健身系统，其特征在于，所述用户界面还包括至少一个锻炼页面，所述锻炼页面的页面对象展示的页面信息包括用于锻炼课程视频、课程播放信息、配件连接信息和用户生理信息中的至少一种。

6.根据权利要求1所述的一种界面可切换健身系统，其特征在于，所述用户界面还包括预安装的功能页面、以及第三方接入的应用程序页面。

7.根据权利要求1所述的一种界面可切换健身系统，其特征在于，所述用户界面还包括页面动效，所述页面动效包括页面切换动效和页面交互动效，其中，所述页面切换动效用于在页面操作、变化时产生动态效果，所述页面交互动效用于在进行交互时为用户提供引导。

8.根据权利要求1所述的一种界面可切换健身系统，其特征在于，用户界面上包括用于进入页面切换页面的交互对象，用户通过执行用于进入页面切换页面的交互对象的交互进入页面切换页面。

9.根据权利要求8所述的一种界面可切换健身系统，其特征在于，页面切换页面包括第一主页面、第二主页面、第三主页面的预览图并突出显示其中一个页面。

10.根据权利要求9所述的一种界面可切换健身系统，其特征在于，页面切换页面上设有展示返回和确认进入突出显示页面的交互对象及与页面切换页面设有展示切换突出显示页面的交互对象。

11.根据权利要求1所述的一种界面可切换健身系统，其特征在于，用户界面包括页面动效，所述页面动效包括页面切换动效，页面切换动效包括翻页动效、返回上一级和进入下一级动效。

Images