CN110187758A - 显示方法、装置、智能穿戴设备及存储介质 - Google Patents

显示方法、装置、智能穿戴设备及存储介质 Download PDF

Info

Publication number
CN110187758A
CN110187758A CN201910381114.8A CN201910381114A CN110187758A CN 110187758 A CN110187758 A CN 110187758A CN 201910381114 A CN201910381114 A CN 201910381114A CN 110187758 A CN110187758 A CN 110187758A
Authority
CN
China
Prior art keywords
collection unit
sound collection
display
wearable device
intelligent wearable
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201910381114.8A
Other languages
English (en)
Other versions
CN110187758B (zh
Inventor
黄汪
于澎涛
汪孔桥
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Anhui Huami Information Technology Co Ltd
Original Assignee
Anhui Huami Information Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Anhui Huami Information Technology Co Ltd filed Critical Anhui Huami Information Technology Co Ltd
Priority to CN201910381114.8A priority Critical patent/CN110187758B/zh
Publication of CN110187758A publication Critical patent/CN110187758A/zh
Priority to PCT/CN2020/089206 priority patent/WO2020224641A1/zh
Priority to US17/514,544 priority patent/US11880172B2/en
Application granted granted Critical
Publication of CN110187758B publication Critical patent/CN110187758B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G04HOROLOGY
    • G04GELECTRONIC TIME-PIECES
    • G04G9/00Visual time or date indication means
    • G04G9/0082Visual time or date indication means by building-up characters using a combination of indicating elements and by selecting desired characters out of a number of characters or by selecting indicating elements the positions of which represents the time, i.e. combinations of G04G9/02 and G04G9/08
    • G04G9/0088Visual time or date indication means by building-up characters using a combination of indicating elements and by selecting desired characters out of a number of characters or by selecting indicating elements the positions of which represents the time, i.e. combinations of G04G9/02 and G04G9/08 by controlling light sources, e.g. electroluminescent diodes
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482Interaction with lists of selectable items, e.g. menus
    • GPHYSICS
    • G04HOROLOGY
    • G04CELECTROMECHANICAL CLOCKS OR WATCHES
    • G04C3/00Electromechanical clocks or watches independent of other time-pieces and in which the movement is maintained by electric means
    • G04C3/001Electromechanical switches for setting or display
    • G04C3/002Position, e.g. inclination dependent switches
    • GPHYSICS
    • G04HOROLOGY
    • G04GELECTRONIC TIME-PIECES
    • G04G21/00Input or output devices integrated in time-pieces
    • G04G21/06Input or output devices integrated in time-pieces using voice
    • GPHYSICS
    • G04HOROLOGY
    • G04GELECTRONIC TIME-PIECES
    • G04G9/00Visual time or date indication means
    • G04G9/0005Transmission of control signals
    • GPHYSICS
    • G04HOROLOGY
    • G04GELECTRONIC TIME-PIECES
    • G04G9/00Visual time or date indication means
    • G04G9/0064Visual time or date indication means in which functions not related to time can be displayed
    • GPHYSICS
    • G04HOROLOGY
    • G04GELECTRONIC TIME-PIECES
    • G04G9/00Visual time or date indication means
    • G04G9/0064Visual time or date indication means in which functions not related to time can be displayed
    • G04G9/007Visual time or date indication means in which functions not related to time can be displayed combined with a calculator or computing means
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16Constructional details or arrangements
    • G06F1/1613Constructional details or arrangements for portable computers
    • G06F1/163Wearable computers, e.g. on a belt
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16Constructional details or arrangements
    • G06F1/1613Constructional details or arrangements for portable computers
    • G06F1/1633Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
    • G06F1/1637Details related to the display arrangement, including those related to the mounting of the display in the housing
    • G06F1/1647Details related to the display arrangement, including those related to the mounting of the display in the housing including at least an additional display
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16Constructional details or arrangements
    • G06F1/1613Constructional details or arrangements for portable computers
    • G06F1/1633Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
    • G06F1/1684Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16Constructional details or arrangements
    • G06F1/1613Constructional details or arrangements for portable computers
    • G06F1/1633Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
    • G06F1/1684Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675
    • G06F1/1694Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675 the I/O peripheral being a single or a set of motion sensors for pointer control or gesture input obtained by sensing movements of the portable computer
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/26Power supply means, e.g. regulation thereof
    • G06F1/32Means for saving power
    • G06F1/3203Power management, i.e. event-based initiation of a power-saving mode
    • G06F1/3206Monitoring of events, devices or parameters that trigger a change in power modality
    • G06F1/3215Monitoring of peripheral devices
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/26Power supply means, e.g. regulation thereof
    • G06F1/32Means for saving power
    • G06F1/3203Power management, i.e. event-based initiation of a power-saving mode
    • G06F1/3206Monitoring of events, devices or parameters that trigger a change in power modality
    • G06F1/3231Monitoring the presence, absence or movement of users
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/26Power supply means, e.g. regulation thereof
    • G06F1/32Means for saving power
    • G06F1/3203Power management, i.e. event-based initiation of a power-saving mode
    • G06F1/3234Power saving characterised by the action undertaken
    • G06F1/325Power saving in peripheral device
    • G06F1/3265Power saving in display device
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/26Power supply means, e.g. regulation thereof
    • G06F1/32Means for saving power
    • G06F1/3203Power management, i.e. event-based initiation of a power-saving mode
    • G06F1/3234Power saving characterised by the action undertaken
    • G06F1/3287Power saving characterised by the action undertaken by switching off individual functional units in the computer system
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0346Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of the device orientation or free movement in a 3D space, e.g. 3D mice, 6-DOF [six degrees of freedom] pointers using gyroscopes, accelerometers or tilt-sensors
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16Sound input; Sound output
    • G06F3/167Audio in a user interface, e.g. using voice commands for navigating, audio feedback
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02DCLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D10/00Energy efficient computing, e.g. low power processors, power management or thermal management
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02DCLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D30/00Reducing energy consumption in communication networks
    • Y02D30/70Reducing energy consumption in communication networks in wireless communication networks

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Computer Hardware Design (AREA)
  • Human Computer Interaction (AREA)
  • Health & Medical Sciences (AREA)
  • Multimedia (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • General Health & Medical Sciences (AREA)
  • Mathematical Physics (AREA)
  • Computing Systems (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本公开提供一种显示方法、装置、智能穿戴设备及计算机可读存储介质,所述方法用于智能穿戴设备上,所述智能穿戴设备包括至少两个屏幕显示区域以及对应的至少两个声音采集单元;在用户穿戴所述智能穿戴设备时,各屏幕显示区域不同时处于同一平面上;所述方法包括:根据所有的声音采集单元采集的语音信号,确定最靠近声源的声音采集单元;点亮与所述最靠近声源的声音采集单元对应的屏幕显示区域,以显示当前内容。本公开实施例实现基于声音感应用户的方位从而自动点亮屏幕的过程。

Description

显示方法、装置、智能穿戴设备及存储介质
技术领域
本公开涉及可穿戴设备技术领域,尤其涉及一种显示方法、装置、智能穿戴设备及计算机可读存储介质。
背景技术
随着智能可穿戴技术的发展,可穿戴设备,如手环、手表、臂带或者手带等,在人们的移动生活中正扮演着越来越重要的角色,随之而来的“倒逼”需求也在大力推动着可穿戴技术的进一步发展,这不仅体现在新型传感器技术和生物测量算法上,还体现在可穿戴设备的交互上。
从应用角度来看,目前可穿戴设备主要用在运动和健康等细分领域,除此,近来移动市场对可穿戴设备具有通信功能的需求越来越强烈。因此,相关技术中的智能穿戴设备普遍设置有相应的屏幕,其能够提供基于用户的触控操作显示或者执行相应内容的功能,从而实现与用户的交互。
但是,发明人发现:相关技术中的智能穿戴设备的屏幕通常设置于智能穿戴设备的固定位置,当用户想要从智能穿戴设备上查看任意内容,如果当前屏幕不在用户视线范围内,则用户需要将智能穿戴设备的屏幕手动调整至视线范围内才能进行操作,影响用户的使用体验。
发明内容
为克服相关技术中存在的问题,本公开提供了显示方法、装置、智能穿戴设备及计算机可读存储介质。
根据本公开实施例的第一方面,提供一种显示方法,应用于智能穿戴设备上,所述智能穿戴设备包括至少两个屏幕显示区域以及对应的至少两个声音采集单元;在用户穿戴所述智能穿戴设备时,各屏幕显示区域不同时处于同一平面上;
所述方法包括:
根据所有的声音采集单元采集的语音信号,确定最靠近声源的声音采集单元;
点亮与所述最靠近声源的声音采集单元对应的屏幕显示区域,以显示当前内容。
可选地,所述根据所有的声音采集单元采集的语音信号,确定最靠近声源的声音采集单元,包括:
分别计算各声音采集单元采集到的语音信号的预设参数;所述参数为与语音信号的能量相关的参数或者与语音信号的幅值相关的参数;
根据所述预设参数,确定最靠近声源的声音采集单元。
可选地,所述根据所述预设参数,确定最靠近声源的声音采集单元,包括:
若所述声音采集单元对应的预设参数的数值大于预设阈值,且与所述预设阈值的差值最大,确定其为最靠近声源的声音采集单元。
可选地,在所述确定最靠近声源的声音采集单元之后,还包括:
对所述最靠近声源的声音采集单元采集的语音信号进行语音识别,以获取语音信息;
则所述点亮与所述最靠近声源的声音采集单元对应的屏幕显示区域,包括:
根据所述语音信息,确定是否点亮与所述最靠近声源的声音采集单元对应的屏幕显示区域。
可选地,所述根据所述语音信息,确定是否点亮与所述最靠近声源的声音采集单元对应的屏幕显示区域,包括:
若所述语音信息匹配预设文本信息,点亮所述对应的屏幕显示区域;
若所述语音信息不匹配预设文本信息,不点亮所述对应的屏幕显示区域。
可选地,所述智能穿戴设备还包括惯性传感器;
则所述显示方法,还包括:
通过所述惯性传感器采集的测量数据,获取用户的目标动作;
根据所述目标动作确定所述当前内容的显示方向,以基于所述显示方向调整所述当前内容;所述显示方向为水平方向或者竖直方向。
根据本公开实施例的第二方面,提供一种装置,应用于智能穿戴设备上,所述智能穿戴设备包括至少两个屏幕显示区域以及对应的至少两个声音采集单元;在用户穿戴所述智能穿戴设备时,各屏幕显示区域不同时处于同一平面上;
所述装置包括目标确定模块,以及屏幕点亮模块;
所述声音采集单元,用于采集语音信号;
所述目标确定模块,用于所述根据所有的声音采集单元采集的语音信号,确定最靠近声源的声音采集单元;
所述屏幕点亮模块,用于点亮与所述最靠近声源的声音采集单元对应的屏幕显示区域,以显示当前内容。
可选地,所述目标确定模块,包括:
参数计算单元,用于分别计算各声音采集单元采集到的语音信号的预设参数;所述参数为与语音信号的能量相关的参数或者与语音信号的幅值相关的参数;
目标确定单元,用于根据所述预设参数,确定最靠近声源的声音采集单元。
可选地,所述目标确定单元包括:
若所述声音采集单元对应的预设参数的数值大于预设阈值,且与所述预设阈值的差值最大,确定其为最靠近声源的声音采集单元。
可选地,在所述目标确定模块之后,还包括:
语音识别模块,用于对所述最靠近声源的声音采集单元采集的语音信号进行语音识别,以获取语音信息;
则所述屏幕点亮模块包括:
根据所述语音信息,确定是否点亮与所述最靠近声源的声音采集单元对应的屏幕显示区域。
可选地,所述屏幕点亮模块包括:
亮屏单元,用于若所述语音信息匹配预设文本信息,点亮所述对应的屏幕显示区域;
暗屏单元,用于若所述语音信息不匹配预设文本信息,不点亮所述对应的屏幕显示区域。
可选地,所述智能穿戴设备还包括惯性传感器;
则所述显示装置,还包括:
目标动作获取模块,用于通过所述惯性传感器采集的测量数据,获取用户的目标动作;
内容显示方向调整模块,用于根据所述目标动作确定所述当前内容的显示方向,以基于所述显示方向调整所述当前内容;所述显示方向为水平方向或者竖直方向。
根据本公开实施例的第三方面,提供一种智能穿戴设备,包括:
处理器;
用于存储处理器可执行指令的存储器;
至少两个屏幕显示区域以及对应的至少两个声音采集单元;
其中,
所述声音采集单元用于采集语音信号;
所述处理器被配置为执行如上所述方法中的操作。
根据本公开实施例的第四方面,提供一种计算机可读存储介质,其上存储有计算机程序,当由一个或多个处理器执行时,使得处理器执行如上所述方法中的操作。
本公开的实施例提供的技术方案可以包括以下有益效果:
本公开中,在智能穿戴设备设置至少两个屏幕显示区域以及对应的至少两个声音采集单元,使得在所述声音采集单元采集到用户的语音信号时,所述智能穿戴设备能够根据所有的声音采集单元采集的语音信号,确定最靠近声源的声音采集单元,然后点亮与所述最靠近声源的声音采集单元对应的屏幕显示区域,以显示当前内容,本公开实施例实现基于声音感应用户的方位从而自动点亮屏幕的过程,无需用户手动调整屏幕位置,进一步提升用户使用体验。
本公开中,通过计算各个语音信号的预设参数,基于所述预测参数的数值大小确定最靠近声源的声音采集单元,保证确定结果的准确性。
本公开中,根据各声音采集单元对应的预设参数的数据值与预设阈值的大小关系,确定最靠近声源的声音采集单元,保证确定结果的准确性。
本公开中,还对所述最靠近声源的声音采集单元采集的语音信号进行语音识别,以获取语音信息,然后根据所述语音信息确定是否点亮屏幕,明确用户的点亮意图,避免出现误点亮现象,提高点亮准确率。
本公开中,提供一种点亮屏幕的具体实现方式,在所述语音信息匹配预设文本信息,才点亮所述对应的屏幕显示区域,避免出现误点亮现象,提高点亮正确率,从而提升用户的使用体验。
本公开中,所述智能穿戴设备还包括惯性传感器,所述智能穿戴设备能够根据所述惯性传感器采集的数据确定用户的动作,进而决定是否调整当前内容的显示方向,使得用户无论从哪个角度阅读显示内容,都能看到符合用户的文字阅读习惯的排列方式所展示的显示内容,有利于提高用户的使用体验。
应当理解的是,以上的一般描述和后文的细节描述仅是示例性和解释性的,并不能限制本公开。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分,示出了符合本公开的实施例,并与说明书一起用于解释本公开的原理。
图1A是本公开根据一示例性实施例示出的智能穿戴设备的示意图。
图1B是本公开根据一示例性实施例示出的用户佩戴智能穿戴设备的示意图。
图2是本公开根据一示例性实施例示出的一种显示方法的流程图。
图3是本公开根据一示例性实施例示出的用户的一次吹气事件所产生的语音信号的示意图。
图4是本公开根据一示例性实施例示出的另一种显示方法的流程图。
图5是本公开根据一示例性实施例示出的显示方法的第三个流程图。
图6是本公开根据一示例性实施例示出的用户穿戴所述智能穿戴设备转腕时,改变内容显示方向的示意图。
图7是本公开根据一示例性实施例示出的三维坐标系的示例性朝向示意图。
图8A是本公开根据一示例性实施例示出的垂直方向转腕时的三轴角速度数据波形示意图。
图8B是本公开根据一示例性实施例示出的垂直方向转腕时的三轴加速度数据波形示意图。
图9A是本公开根据一示例性实施例示出的水平方向转腕时的三轴角速度数据波形示意图。
图9B是本公开根据一示例性实施例示出的水平方向转腕时的三轴加速度数据波形示意图。
图10是本公开根据一示例性实施例示出的一种显示装置的结构框图。
图11是本公开根据一示例性实施例示出的另一种显示装置的结构框图。
图12是本公开根据一示例性实施例示出的一种智能穿戴设备的架构图。
具体实施方式
这里将详细地对示例性实施例进行说明,其示例表示在附图中。下面的描述涉及附图时,除非另有表示,不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本公开相一致的所有实施方式。相反,它们仅是与如所附权利要求书中所详述的、本公开的一些方面相一致的装置和方法的例子。
在本公开使用的术语是仅仅出于描述特定实施例的目的,而非旨在限制本公开。在本公开和所附权利要求书中所使用的单数形式的“一种”、“所述”和“该”也旨在包括多数形式,除非上下文清楚地表示其他含义。还应当理解,本文中使用的术语“和/或”是指并包含一个或多个相关联的列出项目的任何或所有可能组合。
应当理解,尽管在本公开可能采用术语第一、第二、第三等来描述各种信息,但这些信息不应限于这些术语。这些术语仅用来将同一类型的信息彼此区分开。例如,在不脱离本公开范围的情况下,第一信息也可以被称为第二信息,类似地,第二信息也可以被称为第一信息。取决于语境,如在此所使用的词语“如果”可以被解释成为“在……时”或“当……时”或“响应于确定”。
相关技术中的智能穿戴设备的屏幕通常设置于智能穿戴设备的固定位置,当用户想要从智能穿戴设备上查看任意内容,如果当前屏幕不在用户视线范围内,则用户需要将智能穿戴设备的屏幕手动调整至视线范围内才能进行操作,影响用户的使用体验。
因此,为解决相关技术中的问题,本公开实施例提供了一种显示方法。本公开实施例的显示方法可以应用于智能穿戴设备上,所述智能穿戴设备可以是手环、手表、手带、臂带、胸带、指环或者脚环等设备。请参阅图1A,以所述智能穿戴设备为手环为例进行说明,所述智能穿戴设备包括有至少两个屏幕显示区域以及至少两个声音采集单元,其中,本公开对于所述屏幕显示区域的具体形式不做任何限制,所述屏幕显示区域可以是一独立显示屏幕,则所述智能穿戴设备包括由至少两个独立显示屏幕构成的具有多显示区域的屏幕;或者,所述智能穿戴设备包括一显示屏幕,所述显示屏幕上可以包括多个显示区域;所述屏幕显示区域与所述声音采集单元一一对应,当所述屏幕显示区域为独立显示屏幕时,所述声音采集单元可以设置在所述屏幕显示区域的周围,比如可以将所述声音采集单元设置于距离所述屏幕显示区域不大于预设距离阈值比如1cm、1.1cm或者1.2cm的任意位置上,当所述屏幕显示区域为一显示屏幕中的其中一个时,所述声音采集单元可以设置在与所述屏幕显示区域相应的手环的侧边(除手环的上下表面之外的面),可以理解的是,本公开实施例对于所述屏幕显示区域以及所述声音采集装置的具体类型不做任何限制,可依据实际情况进行具体设置,例如所述屏幕显示区域的屏幕材质可以是具有可扩展性的柔性屏材质,所述声音采集单元可以是麦克风或者拾音器等等。
需要说明的是,为了减少用户在想要开启所述智能穿戴设备进行某些操作之前需要手动将屏幕显示区域调整至视线范围内的繁琐操作,所述至少两个屏幕显示区域满足以下条件:当用户穿戴所述智能穿戴设备时,各个屏幕显示区域不同时处于同一平面上。在一个例子中,请参阅图1B,所述智能穿戴设备包括有两个独立显示屏幕,在用户穿戴所述智能穿戴设备时,其中一个独立显示屏幕位于腕上,另一个独立显示屏幕位于腕下;在另一个例子中,所述智能穿戴设备可以包括一显示屏幕,所述显示屏幕有三个屏幕显示区域,在用户穿戴所述智能穿戴设备时,其中一个屏幕显示区域位于腕上,第二个屏幕显示区域位于腕前,最后一个屏幕显示区域位于腕下。
如图2所示,图2是本公开根据一示例性实施例示出的一种显示方法的流程图,所述方法包括:
在步骤S101中,根据所有的声音采集单元采集的语音信号,确定最靠近声源的声音采集单元。
在步骤S102中,点亮与所述最靠近声源的声音采集单元对应的屏幕显示区域,以显示当前内容。
本公开实施例中,在所述声音采集单元采集到语音信号之后,所述智能穿戴设备可以基于所有声音采集单元采集到的语音信号,确定最靠近声源方向的声音采集单元,从而点亮与所述最靠近声源的声音采集单元对应的屏幕显示区域,而其他屏幕显示区域保持熄灭状态,实现基于声音感应用户的方位从而自动点亮屏幕的过程,提升用户的使用体验。
在步骤S101中,所述智能穿戴设备在声音采集单元采集到语音信号之后,根据所有的声音采集单元采集的语音信号,确定最靠近声源方向的声音采集单元,其中,所述语音信号可以是采集的用户的一个哈气的声音、任意语音或者敲击屏幕的声音等。
在一实施例中,所述智能穿戴设备通过计算语音信号的预设参数来衡量所述声音采集单元采集到的语音信号的强弱或者是否接收到语音,进而确定用户在对着哪一个麦克风说话,所述参数可以为与语音信号的能量相关的参数,比如语音信号的平均能量、或者最高能量等;或者如图3所示,为用户的一次吹气事件所产生的语音信号的示意图,图中展示语音信号的幅值变化,因此所述参数还可以是与语音信号的幅值相关的参数,比如可以是最大幅值、或者幅值的N次方等,N为大于1的整数;因此所述智能穿戴设备可以分别计算各声音采集单元采集到的语音信号的预设参数,然后基于所述预设参数确定最靠近声源的声音采集单元。
在一种实现方式中,以所述智能穿戴设备计算各语音信号的幅值为例进行说明:所述智能穿戴设备首先将所述声音采集单元采集的语音信号(非电信号,模拟信号)转换为电信号(离散信号),然后从所述电信号中采样最大的幅值作为预设参数。
在另一种实现方式中,以所述智能穿戴设备计算各语音信号的平均能量为例进行说明:所述智能穿戴设备首先将所述声音采集单元采集的语音信号(非电信号,模拟信号)转换为电信号(离散信号),然后基于从所述电信号中采样的幅值,计算所述声音采集单元采集的语音信号的能量,比如从所述电信号中采样n个幅值(n≥1),例如可以每隔相同时间采样一个幅值,直到采样n个幅值,然后基于采样的n个幅值计算所述语音信号的平均能量,例如设所述声音采集单元采集的语音信号的能量为E,幅值为x,则通过采样的n个幅值计算所述语音信号的平均能量作为预设参数,从而确保计算的信号能量的正确性。
另外,为进一步提高计算的信号的预设参数的准确性,还可以先对所述语音信号进行去噪处理,比如可以基于多小波变换将先将带有噪声的数据通过多小波变换展开为多小波级数,然后通过门限方法抽取“重要”的多小波系数,再把去噪后的多小波系数经多小波逆变换来重建信号,从而实现对所述语音信号的优化处理。
接着,在确定了各个声音采集单元采集的语音信号的预设参数之后,所述智能穿戴设备可以基于各个声音采集单元采集的语音信号的预设参数的数值大小,确定最靠近声源的声音采集单元,具体地,若所述智能穿戴设备确定声音采集单元对应的预设参数的数值大于预设阈值,且与所述预设阈值的差值最大,确定其为最靠近声源的声音采集单元;可以理解的是,本公开实施例对于所述阈值的具体数值不做任何限制,可依据实际情况进行具体设置。
在步骤S102中,在确定了最靠近声源的声音采集单元之后,所述智能穿戴设备可以基于声音采集单元与屏幕显示区域一一对应的关系,获取与所述最靠近声源的声源采集单元对应的屏幕显示区域,然后点亮所述屏幕显示区域,以显示当前内容,而其他的屏幕显示区域则保持熄灭,达到节能的目的,本公开实施例实现了基于声音感应用户的方位从而自动点亮屏幕的过程,无需用户其他手动操作,提升用户的使用体验。
图4是本公开根据一示例性实施例示出的显示方法的另一个流程图。图4相对于图2更详细描述了本公开的方案。
如图4所示,该方法可以应用于所述智能穿戴设备中,所述智能穿戴设备包括至少两个屏幕显示区域以及对应的至少两个声音采集单元;并且所述屏幕显示区域满足:在用户穿戴所述智能穿戴设备时,各屏幕显示区域不同时处于同一平面上;
所述方法包括以下步骤:
在步骤S201中,根据所有的声音采集单元采集的语音信号,确定最靠近声源的声音采集单元;与图2中的步骤S101类似,此处不再赘述。
在步骤S202中,对所述最靠近声源的声音采集单元采集的语音信号进行语音识别,以获取语音信息。
在步骤S203中,根据所述语音信息,确定是否点亮与所述最靠近声源的声音采集单元对应的屏幕显示区域。
本公开实施例中,所述智能穿戴设备在确定了最靠近声源的声音采集单元之后,进一步对所述最靠近声源的声音采集单元采集的语音信号进行语音识别,获取语音信息,最后基于所述语音信息确定是否点亮与所述最靠近声源的声音采集单元对应的屏幕显示区域,明确用户的点亮意图,避免出现误点亮现象,提高点亮准确率。
在步骤S202中,在确定了最靠近声源的声音采集单元之后,所述智能穿戴设备对所述最靠近声源的声音采集单元采集的语音信号进行语音识别,以获取语音信息,具体地,所述智能穿戴设备对所述语音信号进行频谱分析,然后从所述语音信号中抽取语音特征,基于所述语音特征进行语音识别,从而获取语音信息。
在一种实现方式中,可以预先建立语音识别模型,然后所述智能穿戴设备在获取所述语音特征之后,将所述语音特征输入到所述语音识别模型中,以使所述语音识别模型输出语音识别结果(即语音信息),可以理解的是,本公开实施例对于所述语音识别模型的训练过程不做任何限制,可依据实际情况进行算法和样本选择,例如所述语音识别模型可以基于隐马尔可夫算法、支持向量机算法或者随机森林算法训练生成。
在步骤S203中,在获取所述语音信息之后,所述智能穿戴设备可以基于所述语音信息确定是否点亮与所述最靠近声源的声音采集单元对应的屏幕显示区域,避免出现误点亮现象,提高点亮准确率。
在一种可能的实现方式中,所述智能穿戴设备可以先确定所述语音消息中是否包括有与亮屏相关的关键词或者表示有亮屏意图的关键词,如“小爱同学,亮屏”、“点亮屏幕”或者“我要看(或者阅读)信息”等,如果有,则所述智能穿戴设备点亮与所述最靠近声源的麦克风对应的屏幕显示区域,以显示当前内容,其他屏幕显示区域保持熄灭状态,如果没有则无屏幕显示区域被点亮,本公开实施例实现了在与用户的语音交互中点亮屏幕的过程,明确用户是否要点亮屏幕的意图,提高用户的使用体验。
在另一种可能的实现方式中,所述智能穿戴设备将所述语音消息与预设文本信息进行比对,若所述语音信息匹配预设文本信息,则点亮所述与最靠近声源的声音采集单元对应的屏幕显示区域,其他屏幕显示区域保持熄灭状态,若所述语音信息不匹配预设文本信息,则不点亮所述对应的屏幕显示区域,本公式实施例基于所述语音消息的匹配确定是否点亮屏幕,避免误点亮现象的发生,提高用户的使用体验;可以理解的是,本公开实施例对于所述预设文本信息的内容不做任何限制,可依据实际情况进行具体设置,例如所述预设文本信息可以是“小爱同学”等。
图5是本公开根据一示例性实施例示出的显示方法的第三个流程图。所述显示方法应用于智能穿戴设备上,所述智能穿戴设备还包括惯性传感器,所述惯性传感器用于检测和测量加速度、倾斜、冲击、振动、旋转和多自由度(DoF)运动,所述惯性传感器包括加速度计(或加速度传感器)和角速度传感器(陀螺仪)以及它们的单、双、三轴组合IMU(惯性测量单元),可以理解的是,本公开对于所述惯性传感器的具体种类和型号不做任何限制,比如所述惯性传感器分为两大类:一类是角速度陀螺仪;另一类是加速度传感器,所述角速度陀螺仪可以是机械式、干式液浮、半液浮或者气浮角速率陀螺、或者光纤角速率陀螺等;所述加速度传感器可以是机械式线加速度计或者挠性线加速度计等。
图5所示的实施例中,所述显示方法包括:
在步骤S301中,根据所有的声音采集单元采集的语音信号,确定最靠近声源的声音采集单元。与图2中的步骤S101类似,此处不再赘述。
在步骤S302中,点亮与所述最靠近声源的声音采集单元对应的屏幕显示区域,以显示当前内容。与图2中的步骤S102类似,此处不再赘述。
在步骤S303中,通过所述惯性传感器采集的测量数据,获取用户的目标动作。
在步骤S304中,根据所述目标动作确定所述当前内容的显示方向,以基于所述显示方向调整所述当前内容;所述显示方向为水平方向或者竖直方向。
在本公开实施例中,可以根据用户的目标动作确定当前内容的显示方向,进而调整当前内容,方便用户的观看;需要说明的是,所述目标动作可以为转腕动作,转腕动作包括两种情况,一是竖直方向的转腕,即用户的手臂是从相对于地面平行的水平方向转为相对于地面垂直的竖直方向,二是水平方向上的转腕,即用户的手臂是从相对于身体平行的水平方向转为相对于身体垂直的竖直方向(需要说明的是,相对于身体垂直的竖直方向并不是完全与地面方向平行,与地面有一定的夹角,该夹角小于90°),在一个例子中,请参阅图6,当用户穿戴所述智能穿戴设备(图6以手环为例进行展示说明)转动手腕之后,如果用户的手臂是从相对于地面平行的水平方向转为相对于地面垂直的竖直方向,或者是从相对于身体平行的水平方向转为相对于身体垂直的竖直方向,则所述智能穿戴设备将被点亮的屏幕显示区域的当前内容调整为竖直方向(竖屏状态);如果用户是从相对于地面垂直的竖直方向转为相对于地面平行的水平方向,或者从相对于身体垂直的竖直方向转为相对于身体平行的水平方向,则所述智能穿戴设备将被点亮的屏幕显示区域的当前内容调整为水平方向(横屏状态)。
对于步骤S302,所述智能穿戴设备可以根据所述惯性传感器测量的在三维坐标系内的Z轴的角速度数据,获取用户的转腕动作;需要说明的是,综合用户的实际情况,本公开的转腕动作只考虑手心朝上的转腕动作。
在一个例子中,在图7定义的三维坐标系的朝向中(图7所示的三维坐标系中,在用户左手穿戴所述智能穿戴设备,且其显示屏幕相对于地面平行的情况下,Y轴与X轴构成的平面相对于显示屏幕所构成的平面平行,且X轴与手臂呈平行关系,且其方向与文字显示方向(从左指向右)相应,Y轴与手臂呈处垂直关系且其方向指向身体所在一侧的方向,Z轴垂直于X、Y轴所构成的平面,且与重力加速度的方向相同;需要说明的是,以图7中手表的表盘戴在手心的三维坐标系的朝向进行举例说明),请参阅图8A(图8A为垂直方向转腕时的三轴角速度数据波形图)以及图9A(图9A为水平方向转腕时的三轴角速度数据波形图),可以看出,当用户右手穿戴所述智能穿戴设备,并且手心朝上做第一次转腕动作时,参见图8A以及图9A中第一个转腕变化趋势,图8A(用户的手臂由相对于地面垂直的竖直方向转为相对于地面平行的水平方向)中其Z轴的角速度呈逆时针旋转一定角度,如80°~90°(负脉冲),图9A(在水平方向上,用户的手臂从相对于身体垂直的竖直方向转为相对于身体平行的水平方向)中其Z轴的角速度呈顺时针旋转一定角度(正脉冲);当用户右手穿戴所述智能穿戴设备,并且手心朝上做第二次转腕动作时,参见图8A以及图9A中第二个转腕变化趋势,图8A(用户的手臂由相对于地面平行的水平方向转为相对于地面垂直的竖直方向)中其Z轴的角速度呈顺时针旋转一定角度,如80°~90°(正脉冲),图9A(在水平方向上,用户的手臂从相对于身体平行的水平方向转为相对于身体垂直的竖直方向)中其Z轴的角速度呈逆时针旋转一定角度(负脉冲)。
当用户左手穿戴所述智能穿戴设备并且手心朝上做转腕动作时,若是竖直方向的转腕动作,用户的手臂由相对于地面垂直的竖直方向转为相对于地面平行的水平方向,其Z轴的角速度呈顺时针旋转趋势(正脉冲),用户的手臂从相对于地面平行的水平方向转为相对于地面垂直的竖直方向,其Z轴的角速度呈逆时针旋转趋势(负脉冲);若是水平方向的转腕动作,用户的手臂由相对于身体垂直的竖直方向转为相对于身体平行的水平方向,其Z轴的角速度呈逆时针旋转趋势(负脉冲),用户的手臂从相对于身体平行的水平方向转为相对于身体垂直的竖直方向,其Z轴的角速度呈顺时针旋转趋势(正脉冲)。
因此,无需区分是左手佩戴还是右手佩戴的情况,也无需区别是水平方向上的转腕还是竖直方向上的转腕,所述智能穿戴设备均可以通过判断Z轴的角速度数据是否大于或者等于预设阈值来确定是否为转腕动作,若是,则确定用户当前的动作为转腕动作,本公开实施例有利于提高动作识别的准确性;可以理解的是,本公开对于所述预设阈值不做任何限制,可依据实际情况进行具体设置。
对于步骤S304,请参阅图8B(图8B为垂直方向转腕时的三轴加速度数据波形图)以及图9B(图9B为水平方向转腕时的三轴加速度数据波形图),在确定所述动作为目标动作之后,所述智能穿戴设备可以根据X轴以及Y轴的加速度数据确定所述转腕动作的翻转方向,以确定所述当前内容的显示方向,从而根据所述当前内容的显示方向调整所述当前内容,以方便用户的阅读。
在一个例子中,用户穿戴所述智能穿戴设备,假设当前为相对于地面平行且相对于身体平行的水平方向,且手心朝上,则与用户视线范围相应的屏幕显示区域为腕下屏幕显示区域,此时点亮腕下显示区域,且当前内容的文字显示方向为水平方向(横屏显示);若用户进行转腕动作,转为相对于地面垂直的竖直方向或者相对于身体垂直的竖直方向,且手心朝上,则当前点亮的腕下显示区域的当前内容的文字显示方向从水平方向转为竖直方向(竖屏显示)。
在另一个例子中,用户穿戴所述智能穿戴设备,假设相对于地面垂直的竖直方向或者相对于身体垂直的竖直方向,且手心朝上,则与用户视线范围相应的屏幕显示区域为腕下屏幕显示区域,此时点亮腕下显示区域,且当前内容的文字显示方向为竖直方向(竖屏显示);若用户进行转腕动作,转为相对于地面平行且相对于身体平行的水平方向,且手心朝上,则当前点亮的腕下显示区域的当前内容的文字显示方向从竖直方向转为水平方向(横屏显示)。
在一实施例中,所述智能设备可以获取预设时间段内的X轴的加速度数据和Y轴的加速度数据,然后分别计算X轴加速度数据和Y轴加速度数据在该预设时间段的前半部分的平均值和后半部分的平均值,最后根据X轴加速度数据和Y轴加速度数据的前半部分的平均值和后半部分的平均值的正负、X轴加速度数据的两个平均值之差与预设阈值的大小关系、以及Y轴加速度数据的两个平均值之差与预设阈值的大小关系,确定所述转腕动作的翻转方向;其中,所述X轴加速度的前半部分的平均值和后半部分的平均值的正负与X轴方向与重力加速度的方向所形成的夹角的大小相关,且Y轴加速度的前半部分的平均值和后半部分的平均值的正负与Y轴方向与重力加速度的方向所形成的夹角的大小相关。
在一例子中,以图7所示的三维坐标系朝向为例,且定义X轴和Y轴加速度的方向与重力加速度方向相同或者与重力加速度的夹角小于90°,则其加速度数据为负值;若与重力加速度的夹角等于90°,则其加速度数据为0;若与重力加速度的方向相反或者与重力加速度的夹角大于90°进行说明:所述智能穿戴设备获取预设时间段内的X轴的加速度数据和Y轴的加速度数据,若X轴加速度数据前半部分的平均值为负数、后半部分的平均值为正数、且X轴加速度数据两个平均值之差的绝对值大于指定阈值,以及Y轴加速度数据前半部分的平均值为正数、后半部分的平均值为负数、且Y轴加速度数据两个平均值之差的绝对值大于指定阈值,确定所述转腕动作转为相对于地面平行的水平方向;若X轴加速度数据前半部分的平均值为正数、后半部分的平均值为负数、且X轴加速度数据两个平均值之差的绝对值大于指定阈值,以及Y轴加速度数据前半部分的平均值为负数、后半部分的平均值为正数、且Y轴加速度数据两个平均值之差的绝对值大于指定阈值,确定所述转腕动作转为垂直于地面的竖直方向。
具体地,请参阅图8B以及9B,设X轴加速度数据前半部分的平均值为后半部分的平均值为Y轴加速度数据前半部分的平均值为后半部分的平均值为预设阈值为σ,若获取的预设时间段内的X轴的加速度数据和Y轴的加速度数据包含第一个转腕动作(用户的手臂由相对于地面垂直的竖直方向转为相对于地面平行的水平方向、或者从相对于身体垂直的竖直方向转为相对于身体平行的水平方向)的数据,如图8B(竖直方向的转腕)所示,用户右手穿戴所述智能穿戴设备做转腕动作前,呈与地面垂直的竖直方向,其X轴与重力加速度方向相同,为负值,Y轴与重力加速度垂直或者夹角大于90°,为0或者大于0,在做转腕动作后,X轴与重力加速度垂直或者夹角大于90°,为0或者大于0的正值,Y轴与重力加速度的夹角小于90°,为负值,且左手佩戴智能穿戴设备做竖直方向的转腕动作的变化趋势与图8B相同;如9B(水平方向的转腕)所示,其X轴与重力加速度夹角小于90°,为负值,Y轴与重力加速度夹角小于90°,为负值,在做转腕动作后,X轴与重力加速度垂直或者夹角大于90°,为0或者大于0的正值,Y轴与重力加速度的夹角小于90°,为负值,且左手佩戴智能穿戴设备做水平方向的转腕动作的变化趋势与图9B相同,则计算的X轴前半部分的平均值后半部分的平均值计算的Y轴前半部分的平均值后半部分的平均值此时确定所述当前内容的显示方向为水平方向,则横屏显示当前内容;
若获取的预设时间段内的Z轴的加速度数据包含第二个转腕动作的数据(用户的手臂由相对于地面平行的水平方向转为相对于地面垂直的竖直方向、或者相对于身体平行的水平方向转为相对于身体垂直的竖直方向),如图8B以及图9B所示,则其X轴与Y轴的变化趋势与第一个转腕动作的X轴与Y轴的变化趋势相反,则计算的X轴前半部分的平均值后半部分的平均值计算的Y轴前半部分的平均值后半部分的平均值此时确定所述当前内容的显示方向为竖直方向,则竖屏显示当前内容,本公开实施例有利于提高方向识别准确度;可以理解的是,本公开实施例对于所述预设时间段以及所述预设阈值的具体取值不做任何限制,可依据实际情况进行具体设置。
本公开实施例通过根据所述目标动作确定所述当前内容的显示方向,从而根据所述显示方向调整当前内容,方便用户的观看有利于提高用户的使用体验。
与前述显示方法的实施例相对应,本公开还提供了显示装置及其所应用的智能穿戴设备的实施例。
如图10所示,图10是本公开根据一示例性实施例示出的一种显示装置的结构框图,所述装置应用于智能穿戴设备中,所述智能穿戴设备包括至少两个屏幕显示区域以及对应的至少两个声音采集单元;在用户穿戴所述智能穿戴设备时,各屏幕显示区域不同时处于同一平面上。
所述装置包括目标确定模块41以及屏幕点亮模块42。
所述声音采集单元,用于采集语音信号。
所述目标确定模块41,用于所述根据所有的声音采集单元采集的语音信号,确定最靠近声源的声音采集单元。
所述屏幕点亮模块42,用于点亮与所述最靠近声源的声音采集单元对应的屏幕显示区域,以显示当前内容。
可选地,所述目标确定模块41,包括:
参数计算单元,用于分别计算各声音采集单元采集到的语音信号的预设参数;所述参数为与语音信号的能量相关的参数或者与语音信号的幅值相关的参数。
目标确定单元,用于根据所述预设参数,确定最靠近声源的声音采集单元。
可选地,所述目标确定单元包括:
若所述声音采集单元对应的预设参数的数值大于预设阈值,且与所述预设阈值的差值最大,确定其为最靠近声源的声音采集单元。
如图11所示,图11是本公开根据一示例性实施例示出的另一种显示装置的框图,该实施例在前述图10所示实施例的基础上,在所述目标确定模块之后,还包括:
语音识别模块43,用于对所述最靠近声源的声音采集单元采集的语音信号进行语音识别,以获取语音信息。
则所述屏幕点亮模块42包括:
根据所述语音信息,确定是否点亮与所述最靠近声源的声音采集单元对应的屏幕显示区域。
可选地,所述屏幕点亮模块42包括:
亮屏单元,用于若所述语音信息匹配预设文本信息,点亮所述对应的屏幕显示区域。
暗屏单元,用于若所述语音信息不匹配预设文本信息,不点亮所述对应的屏幕显示区域。
可选地,所述智能穿戴设备还包括惯性传感器。
则所述显示装置,还包括:
目标动作获取模块,用于通过所述惯性传感器采集的测量数据,获取用户的目标动作。
内容显示方向调整模块,用于根据所述目标动作确定所述当前内容的显示方向,以基于所述显示方向调整所述当前内容;所述显示方向为水平方向或者竖直方向。
上述显示装置中各个模块的功能和作用的实现过程具体详见上述显示方法中对应步骤的实现过程,在此不再赘述。
对于装置实施例而言,由于其基本对应于方法实施例,所以相关之处参见方法实施例的部分说明即可。以上所描述的装置实施例仅仅是示意性的,其中所述作为分离部件说明的模块可以是或者也可以不是物理上分开的,作为模块显示的部件可以是或者也可以不是物理模块,即可以位于一个地方,或者也可以分布到多个网络模块上。可以根据实际的需要选择其中的部分或者全部模块来实现本公开方案的目的。本领域普通技术人员在不付出创造性劳动的情况下,即可以理解并实施。
相应的,本公开还提供一种智能穿戴设备,包括:
处理器。
用于存储处理器可执行指令的存储器。
至少两个屏幕显示区域以及对应的至少两个声音采集单元。
其中,
所述声音采集单元用于采集语音信号。
所述处理器被配置为执行如上所述显示方法中的操作。
图12是根据一示例性实施例示出的一种显示装置应用的智能穿戴设备的结构示意图。
如图12所示,根据一示例性实施例示出的一种智能穿戴设备500,该智能穿戴设备500可以是手环、手表、手带、胸带、指环或者脚环等智能穿戴设备智能穿戴设备。
参照图12,智能穿戴设备500可以包括以下一个或多个组件:处理组件501,存储器502,电源组件503,多媒体组件504,音频组件505,输入/输出(I/O)的接口506,传感器组件507,以及通信组件508。
处理组件501通常控制装置500的整体操作,诸如与显示,电话呼叫,数据通信,相机操作和记录操作相关联的操作。处理组件501可以包括一个或多个处理器509来执行指令,以完成上述的方法的全部或部分步骤。此外,处理组件501可以包括一个或多个处理组件,便于处理组件501和其它组件之间的交互。例如,处理组件501可以包括多媒体模块,以方便多媒体组件505和处理组件501之间的交互。
存储器502被配置为存储各种类型的数据以支持在智能穿戴设备500的操作。这些数据的示例包括用于在智能穿戴设备500上操作的任何应用程序或方法的指令,联系人数据,电话簿数据,消息,图片,视频等。存储器502可以由任何类型的易失性或非易失性存储设备或者它们的组合实现,如静态随机存取存储器(SRAM),电可擦除可编程只读存储器(EEPROM),可擦除可编程只读存储器(EPROM),可编程只读存储器(PROM),只读存储器(ROM),磁存储器,快闪存储器,磁盘或光盘。
电源组件503为智能穿戴设备500的各种组件提供电力。电源组件503可以包括电源管理系统,一个或多个电源,及其它与为智能穿戴设备500生成、管理和分配电力相关联的组件。
多媒体组件504包括在所述智能穿戴设备500和用户之间的提供一个输出接口的屏幕。在一些实施例中,屏幕可以包括液晶显示器(LCD)和触摸面板(TP)。如果屏幕包括触摸面板,屏幕可以被实现为触摸屏,以接收来自用户的输入信号。触摸面板包括一个或多个触摸传感器以感测触摸、滑动和触摸面板上的手势。所述触摸传感器可以不仅感测触摸或滑动动作的边界,而且还检测与所述触摸或滑动操作相关的持续时间和压力。在一些实施例中,多媒体组件504包括一个前置摄像头和/或后置摄像头。当智能穿戴设备500处于操作模式,如拍摄模式或视频模式时,前置摄像头和/或后置摄像头可以接收外部的多媒体数据。每个前置摄像头和后置摄像头可以是一个固定的光学透镜系统或具有焦距和光学变焦能力。
音频组件505被配置为输出和/或输入音频信号。例如,音频组件505包括一个麦克风(MIC),当智能穿戴设备500处于操作模式,如呼叫模式、记录模式和语音识别模式时,麦克风被配置为接收外部音频信号。所接收的音频信号可以被进一步存储在存储器502或经由通信组件508发送。在一些实施例中,音频组件505还包括一个扬声器,用于输出音频信号。
I/O接口502为处理组件501和外围接口模块之间提供接口,上述外围接口模块可以是键盘,点击轮,按钮等。这些按钮可包括但不限于:主页按钮、音量按钮、启动按钮和锁定按钮。
传感器组件507包括一个或多个传感器,用于为智能穿戴设备500提供各个方面的状态评估。例如,传感器组件507可以检测到智能穿戴设备500的打开/关闭状态,组件的相对定位,例如所述组件为智能穿戴设备500的显示器和小键盘,传感器组件507还可以检测智能穿戴设备500或智能穿戴设备500一个组件的位置改变,用户与智能穿戴设备500接触的存在或不存在,智能穿戴设备500方位或加速/减速和智能穿戴设备500的温度变化。传感器组件505可以包括接近传感器,被配置用来在没有任何的物理接触时检测附近物体的存在。传感器组件507还可以包括光传感器,如CMOS或CCD图像传感器,用于在成像应用中使用。在一些实施例中,该传感器组件505还可以包括加速度传感器,陀螺仪传感器,磁传感器,压力传感器、心率信号传感器、心电图传感器、指纹传感器或温度传感器。
通信组件508被配置为便于智能穿戴设备500和其它设备之间有线或无线方式的通信。智能穿戴设备500可以接入基于通信标准的无线网络,如WiFi,2G或3G,或它们的组合。在一个示例性实施例中,通信组件508经由广播信道接收来自外部广播管理系统的广播信号或广播相关信息。在一个示例性实施例中,所述通信组件508还包括近场通信(NFC)模块,以促进短程通信。例如,在NFC模块可基于射频识别(RFID)技术,红外数据协会(IrDA)技术,超宽带(UWB)技术,蓝牙(BT)技术和其它技术来实现。
在示例性实施例中,智能穿戴设备500可以被一个或多个应用专用集成电路(ASIC)、数字信号处理器(DSP)、数字信号处理设备(DSPD)、可编程逻辑器件(PLD)、现场可编程门阵列(FPGA)、控制器、微控制器、微处理器或其它电子元件实现,用于执行上述方法。
在示例性实施例中,还提供了一种包括指令的非临时性计算机可读存储介质,例如包括指令的存储器502,上述指令可由智能穿戴设备500的处理器509执行以完成上述方法。例如,所述非临时性计算机可读存储介质可以是ROM、随机存取存储器(RAM)、CD-ROM、磁带、软盘和光数据存储设备等。
其中,当所述存储介质中的指令由所述处理器509执行时,使得智能穿戴设备500能够执行前述显示方法。
本领域技术人员在考虑说明书及实践这里公开的发明后,将容易想到本公开的其它实施方案。本公开旨在涵盖本公开的任何变型、用途或者适应性变化,这些变型、用途或者适应性变化遵循本公开的一般性原理并包括本公开未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的,本公开的真正范围和精神由下面的权利要求指出。
应当理解的是,本公开并不局限于上面已经描述并在附图中示出的精确结构,并且可以在不脱离其范围进行各种修改和改变。本公开的范围仅由所附的权利要求来限制。
以上所述仅为本公开的较佳实施例而已,并不用以限制本公开,凡在本公开的精神和原则之内,所做的任何修改、等同替换、改进等,均应包含在本公开保护的范围之内。

Claims (14)

1.一种显示方法,其特征在于,应用于智能穿戴设备上,所述智能穿戴设备包括至少两个屏幕显示区域以及对应的至少两个声音采集单元;在用户穿戴所述智能穿戴设备时,各屏幕显示区域不同时处于同一平面上;
所述方法包括:
根据所有的声音采集单元采集的语音信号,确定最靠近声源的声音采集单元;
点亮与所述最靠近声源的声音采集单元对应的屏幕显示区域,以显示当前内容。
2.根据权利要求1所述的显示方法,其特征在于,所述根据所有的声音采集单元采集的语音信号,确定最靠近声源的声音采集单元,包括:
分别计算各声音采集单元采集到的语音信号的预设参数;所述参数为与语音信号的能量相关的参数或者与语音信号的幅值相关的参数;
根据所述预设参数,确定最靠近声源的声音采集单元。
3.根据权利要求2所述的显示方法,其特征在于,所述根据所述预设参数,确定最靠近声源的声音采集单元,包括:
若所述声音采集单元对应的预设参数的数值大于预设阈值,且与所述预设阈值的差值最大,确定其为最靠近声源的声音采集单元。
4.根据权利要求1所述的显示方法,其特征在于,在所述确定最靠近声源的声音采集单元之后,还包括:
对所述最靠近声源的声音采集单元采集的语音信号进行语音识别,以获取语音信息;
则所述点亮与所述最靠近声源的声音采集单元对应的屏幕显示区域,包括:
根据所述语音信息,确定是否点亮与所述最靠近声源的声音采集单元对应的屏幕显示区域。
5.根据权利要求4所述的显示方法,其特征在于,所述根据所述语音信息,确定是否点亮与所述最靠近声源的声音采集单元对应的屏幕显示区域,包括:
若所述语音信息匹配预设文本信息,点亮所述对应的屏幕显示区域;
若所述语音信息不匹配预设文本信息,不点亮所述对应的屏幕显示区域。
6.根据权利要求1所述的显示方法,其特征在于,所述智能穿戴设备还包括惯性传感器;
则所述显示方法,还包括:
通过所述惯性传感器采集的测量数据,获取用户的目标动作;
根据所述目标动作确定所述当前内容的显示方向,以基于所述显示方向调整所述当前内容;所述显示方向为水平方向或者竖直方向。
7.一种显示装置,其特征在于,应用于智能穿戴设备上,所述智能穿戴设备包括至少两个屏幕显示区域以及对应的至少两个声音采集单元;在用户穿戴所述智能穿戴设备时,各屏幕显示区域不同时处于同一平面上;
所述装置包括目标确定模块,以及屏幕点亮模块;
所述声音采集单元,用于采集语音信号;
所述目标确定模块,用于所述根据所有的声音采集单元采集的语音信号,确定最靠近声源的声音采集单元;
所述屏幕点亮模块,用于点亮与所述最靠近声源的声音采集单元对应的屏幕显示区域,以显示当前内容。
8.根据权利要求7所述的显示装置,其特征在于,所述目标确定模块,包括:
参数计算单元,用于分别计算各声音采集单元采集到的语音信号的预设参数;所述参数为与语音信号的能量相关的参数或者与语音信号的幅值相关的参数;
目标确定单元,用于根据所述预设参数,确定最靠近声源的声音采集单元。
9.根据权利要求8所述的显示装置,其特征在于,所述目标确定单元包括:
若所述声音采集单元对应的预设参数的数值大于预设阈值,且与所述预设阈值的差值最大,确定其为最靠近声源的声音采集单元。
10.根据权利要求7所述的显示装置,其特征在于,在所述目标确定模块之后,还包括:
语音识别模块,用于对所述最靠近声源的声音采集单元采集的语音信号进行语音识别,以获取语音信息;
则所述屏幕点亮模块包括:
根据所述语音信息,确定是否点亮与所述最靠近声源的声音采集单元对应的屏幕显示区域。
11.根据权利要求10所述的显示装置,其特征在于,所述屏幕点亮模块包括:
亮屏单元,用于若所述语音信息匹配预设文本信息,点亮所述对应的屏幕显示区域;
暗屏单元,用于若所述语音信息不匹配预设文本信息,不点亮所述对应的屏幕显示区域。
12.根据权利要求1所述的显示装置,其特征在于,所述智能穿戴设备还包括惯性传感器;
则所述显示装置,还包括:
目标动作获取模块,用于通过所述惯性传感器采集的测量数据,获取用户的目标动作;
内容显示方向调整模块,用于根据所述目标动作确定所述当前内容的显示方向,以基于所述显示方向调整所述当前内容;所述显示方向为水平方向或者竖直方向。
13.一种智能穿戴设备,其特征在于,所述智能穿戴设备包括:
处理器;
用于存储所述处理器可执行指令的存储器;
至少两个屏幕显示区域以及对应的至少两个声音采集单元;
其中,
所述声音采集单元用于采集语音信号;
所述处理器,被配置为执行上述权利要求1至6任一所述的方法。
14.一种计算机可读存储介质,其特征在于,其上存储有计算机程序,当由一个或多个处理器执行时,使得处理器执行权利要求1至6任一所述的方法。
CN201910381114.8A 2019-05-08 2019-05-08 显示方法、装置、智能穿戴设备及存储介质 Active CN110187758B (zh)

Priority Applications (3)

Application Number Priority Date Filing Date Title
CN201910381114.8A CN110187758B (zh) 2019-05-08 2019-05-08 显示方法、装置、智能穿戴设备及存储介质
PCT/CN2020/089206 WO2020224641A1 (zh) 2019-05-08 2020-05-08 显示方法、装置、智能穿戴设备及存储介质
US17/514,544 US11880172B2 (en) 2019-05-08 2021-10-29 Display method, apparatus, smart wearable device and storage medium

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910381114.8A CN110187758B (zh) 2019-05-08 2019-05-08 显示方法、装置、智能穿戴设备及存储介质

Publications (2)

Publication Number Publication Date
CN110187758A true CN110187758A (zh) 2019-08-30
CN110187758B CN110187758B (zh) 2023-06-30

Family

ID=67715824

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910381114.8A Active CN110187758B (zh) 2019-05-08 2019-05-08 显示方法、装置、智能穿戴设备及存储介质

Country Status (3)

Country Link
US (1) US11880172B2 (zh)
CN (1) CN110187758B (zh)
WO (1) WO2020224641A1 (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110737422A (zh) * 2019-10-11 2020-01-31 北京地平线机器人技术研发有限公司 一种声音信号采集方法及装置
WO2020224641A1 (zh) * 2019-05-08 2020-11-12 安徽华米信息科技有限公司 显示方法、装置、智能穿戴设备及存储介质
CN112711334A (zh) * 2021-01-15 2021-04-27 维沃移动通信有限公司 屏幕控制方法、装置和电子设备
CN113220073A (zh) * 2021-05-06 2021-08-06 恒玄科技(上海)股份有限公司 一种控制方法、装置以及可穿戴设备

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115277777A (zh) * 2022-07-29 2022-11-01 歌尔科技有限公司 智能穿戴设备及其控制方法、主控终端和物联网系统

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104160686A (zh) * 2012-03-07 2014-11-19 摩托罗拉移动有限责任公司 便携式电子设备和用于基于用户运动控制其操作的方法
KR20150069856A (ko) * 2013-12-16 2015-06-24 삼성전자주식회사 스마트 워치 제어 방법 및 시스템
CN104850317A (zh) * 2014-12-31 2015-08-19 华为终端(东莞)有限公司 可穿戴设备的屏幕的显示方法及可穿戴设备
CN105681579A (zh) * 2016-03-11 2016-06-15 广东欧珀移动通信有限公司 终端及其处于导航状态时的屏幕控制方法以及装置
CN105975084A (zh) * 2016-05-31 2016-09-28 北京京东方多媒体科技有限公司 环形穿戴设备的控制方法、环形穿戴设备及智能控制系统
CN106201178A (zh) * 2016-06-29 2016-12-07 深圳市金立通信设备有限公司 一种调整屏幕显示方向控制方法及终端
CN106446728A (zh) * 2015-08-05 2017-02-22 Lg电子株式会社 移动终端及其控制方法
CN108989552A (zh) * 2018-06-28 2018-12-11 努比亚技术有限公司 屏幕点亮方法、双屏移动终端和计算机可读存储介质

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9285452B2 (en) * 2011-11-17 2016-03-15 Nokia Technologies Oy Spatial visual effect creation and display such as for a screensaver
US8988349B2 (en) * 2012-02-28 2015-03-24 Google Technology Holdings LLC Methods and apparatuses for operating a display in an electronic device
KR102116053B1 (ko) * 2013-06-20 2020-05-28 한국전자통신연구원 스마트 와치
US9705548B2 (en) * 2013-10-24 2017-07-11 Rohm Co., Ltd. Wristband-type handset and wristband-type alerting device
WO2015099723A1 (en) * 2013-12-26 2015-07-02 Intel Corporation Sensors-based automatic reconfiguration of multiple screens in wearable devices and flexible displays
KR102033334B1 (ko) * 2014-02-03 2019-10-17 한국전자통신연구원 변형가능한 기재를 가지는 손목착용형 장치
CN206759435U (zh) * 2017-03-29 2017-12-15 深圳分云智能科技有限公司 一种基于语音识别的智能穿戴装置
CN110187758B (zh) * 2019-05-08 2023-06-30 安徽华米信息科技有限公司 显示方法、装置、智能穿戴设备及存储介质

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104160686A (zh) * 2012-03-07 2014-11-19 摩托罗拉移动有限责任公司 便携式电子设备和用于基于用户运动控制其操作的方法
KR20150069856A (ko) * 2013-12-16 2015-06-24 삼성전자주식회사 스마트 워치 제어 방법 및 시스템
CN104850317A (zh) * 2014-12-31 2015-08-19 华为终端(东莞)有限公司 可穿戴设备的屏幕的显示方法及可穿戴设备
CN106446728A (zh) * 2015-08-05 2017-02-22 Lg电子株式会社 移动终端及其控制方法
CN105681579A (zh) * 2016-03-11 2016-06-15 广东欧珀移动通信有限公司 终端及其处于导航状态时的屏幕控制方法以及装置
CN105975084A (zh) * 2016-05-31 2016-09-28 北京京东方多媒体科技有限公司 环形穿戴设备的控制方法、环形穿戴设备及智能控制系统
CN106201178A (zh) * 2016-06-29 2016-12-07 深圳市金立通信设备有限公司 一种调整屏幕显示方向控制方法及终端
CN108989552A (zh) * 2018-06-28 2018-12-11 努比亚技术有限公司 屏幕点亮方法、双屏移动终端和计算机可读存储介质

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2020224641A1 (zh) * 2019-05-08 2020-11-12 安徽华米信息科技有限公司 显示方法、装置、智能穿戴设备及存储介质
US11880172B2 (en) 2019-05-08 2024-01-23 Anhui Huami Information Technology Co., Ltd. Display method, apparatus, smart wearable device and storage medium
CN110737422A (zh) * 2019-10-11 2020-01-31 北京地平线机器人技术研发有限公司 一种声音信号采集方法及装置
CN110737422B (zh) * 2019-10-11 2023-04-28 北京地平线机器人技术研发有限公司 一种声音信号采集方法及装置
CN112711334A (zh) * 2021-01-15 2021-04-27 维沃移动通信有限公司 屏幕控制方法、装置和电子设备
CN113220073A (zh) * 2021-05-06 2021-08-06 恒玄科技(上海)股份有限公司 一种控制方法、装置以及可穿戴设备
CN113220073B (zh) * 2021-05-06 2023-07-28 恒玄科技(上海)股份有限公司 一种控制方法、装置以及可穿戴设备

Also Published As

Publication number Publication date
WO2020224641A1 (zh) 2020-11-12
CN110187758B (zh) 2023-06-30
US20220121158A1 (en) 2022-04-21
US11880172B2 (en) 2024-01-23

Similar Documents

Publication Publication Date Title
CN110187758A (zh) 显示方法、装置、智能穿戴设备及存储介质
CN110187759A (zh) 显示方法、装置、智能穿戴设备及存储介质
CN108538311B (zh) 音频分类方法、装置及计算机可读存储介质
CN108008930B (zh) 确定k歌分值的方法和装置
CN108052079A (zh) 设备控制方法、装置、设备控制装置及存储介质
CN111444887A (zh) 口罩佩戴的检测方法、装置、存储介质及电子设备
CN109154858A (zh) 智能电子设备及其操作方法
KR20200031133A (ko) 자동 제스처 및 손가락 인식을 위한 정맥 스캐닝 디바이스
CN109032384A (zh) 音乐播放控制方法、装置及存储介质和穿戴式设备
KR102127390B1 (ko) 무선 리시버 및 그 제어 방법
CN112907725A (zh) 图像生成、图像处理模型的训练、图像处理方法和装置
CN109978996B (zh) 生成表情三维模型的方法、装置、终端及存储介质
CN109634688B (zh) 会话界面的显示方法、装置、终端及存储介质
CN109119057A (zh) 音乐创作方法、装置及存储介质和穿戴式设备
US20220057978A1 (en) Display Method And Apparatus, Intelligent Wearable Device, And Storage Medium
CN110123333A (zh) 一种可穿戴设备辅助运动的方法、可穿戴设备及存储介质
CN110956580A (zh) 图像换脸的方法、装置、计算机设备以及存储介质
CN109831817B (zh) 终端控制方法、装置、终端及存储介质
CN110956971A (zh) 音频处理方法、装置、终端及存储介质
CN112269559A (zh) 音量调整方法、装置、电子设备及存储介质
KR102163996B1 (ko) 사용자 기기의 비접촉식 인식 기능 성능 향상 방법 및 장치
CN115153511A (zh) 睡姿监测方法、装置、可穿戴设备及存储介质
CN113209610A (zh) 虚拟场景画面展示方法、装置、计算机设备及存储介质
CN110049248A (zh) 一种拍摄对象调控方法、设备及计算机可读存储介质
CN112559794A (zh) 歌曲质量的识别方法、装置、设备及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant