CN107479695B - 显示装置及其控制方法 - Google Patents

显示装置及其控制方法 Download PDF

Info

Publication number
CN107479695B
CN107479695B CN201710592436.8A CN201710592436A CN107479695B CN 107479695 B CN107479695 B CN 107479695B CN 201710592436 A CN201710592436 A CN 201710592436A CN 107479695 B CN107479695 B CN 107479695B
Authority
CN
China
Prior art keywords
module
attention
user
users
display screen
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201710592436.8A
Other languages
English (en)
Other versions
CN107479695A (zh
Inventor
何书维
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics Suzhou Computer Co Ltd
Samsung Electronics Co Ltd
Original Assignee
Samsung Electronics Suzhou Computer Co Ltd
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Samsung Electronics Suzhou Computer Co Ltd, Samsung Electronics Co Ltd filed Critical Samsung Electronics Suzhou Computer Co Ltd
Priority to CN201710592436.8A priority Critical patent/CN107479695B/zh
Publication of CN107479695A publication Critical patent/CN107479695A/zh
Application granted granted Critical
Publication of CN107479695B publication Critical patent/CN107479695B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G—PHYSICS
    • G05—CONTROLLING; REGULATING
    • G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D3/00—Control of position or direction
    • G05D3/12—Control of position or direction using feedback
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16—Sound input; Sound output
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/168—Feature extraction; Face representation
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09F—DISPLAYING; ADVERTISING; SIGNS; LABELS OR NAME-PLATES; SEALS
    • G09F9/00—Indicating arrangements for variable information in which the information is built-up on a support by selection or combination of individual elements

Abstract

本发明提供了一种显示装置，包括：显示屏模块；侦测模块，用于检测当前的一个或多个用户在此前的预定时间段内的注意力集中程度，根据每个用户的注意力集中程度来判定其中的主观看者；指令接受模块，接收主观看者发出的指令；指令执行模块，根据指令接受模块接收的指令对显示屏模块进行操作。本方案消除了现有技术的缺点，通过实现屏幕脸部追踪技术，对使用者进行脸部追踪，将自动旋转、注意力检测、语音检测的功能集成在一起，大大提高了产品使用的便利性。

Description

显示装置及其控制方法
技术领域
本发明涉及一种显示装置。
背景技术
现有技术中，具有较大尺寸显示屏幕的设备包括电视机、台式电脑的显示器、笔记本电脑等，此类设备的屏幕具有固定角度，用户需要根据需要手动旋转屏幕旋转，使用较为不便。
发明内容
针对现有技术中的问题，本发明目的是提供一种可以实现屏幕自动旋转功能的显示装置。
为了实现以上目的，本发明提供了一种显示装置，包括：显示屏模块；侦测模块，用于检测当前的一个或多个用户在此前的预定时间段内的注意力集中程度，根据每个用户的注意力集中程度来判定其中的主观看者；指令接受模块，接收主观看者发出的指令；指令执行模块，根据指令接受模块接收的指令对显示屏模块进行操作。
本发明的进一步改进在于，所述的侦测模块包括关注时间计算单元，用于计算当前的一个或多个用户在此前的预定时间段内的关注时间。
本发明的进一步改进在于，所述的关注时间计算单元计算显示屏模块与用户瞳孔的连线相对于用户瞳孔中心的偏离程度，当偏离程度在预定范围内，则计算当前用户的关注时间。
本发明的进一步改进在于，所述的侦测模块包括眨眼时间计算单元，用于计算当前的一个或多个用户在此前的预定时间段内的眨眼频率或眨眼频率变化率。
本发明的进一步改进在于，还包括视频类型判断模块，当视频类型进行切换时，所述的侦测单元数据重新检测当前的一个或多个用户在此前的预定时间段内的注意力集中程度。
本发明的进一步改进在于，所述的指令执行模块包括角度调整单元，所述的角度调整单元与所述的显示屏模块相连接，并且根据指令接受模块接收的指令对显示屏模块进行角度调整。
本发明的进一步改进在于，所述的侦测模块包括人脸识别单元，用于对各用户的脸部特征进行识别。
本发明的进一步改进在于，还包括运动追踪模块，用于追踪主观看者的位置并控制角度调整单元对显示屏模块进行角度调整，以使主观看者随时面对显示屏模块。
本发明的进一步改进在于，所述的指令接受模块包括语音识别单元，用于对主观看者发出的语音指令进行分析处理。
根据本发明的另一方面，提供了一种显示装置的控制方法，用于如上所述的显示装置，检测当前的一个或多个用户在此前的预定时间段内的注意力集中程度，根据每个用户的注意力集中程度来判定其中的主观看者；接收主观看者发出的指令并对显示屏模块进行操作。
本方案消除了现有技术的缺点，通过实现屏幕脸部追踪技术，对使用者进行脸部追踪，将自动旋转、注意力检测、语音检测的功能集成在一起，大大提高了产品使用的便利性。
附图说明
附图1描述了本发明的实施例一的详细方案流程图；
附图2描述了本发明的实施例二的详细方案流程图。
具体实施方式
下面对本发明的较佳实施例进行详细阐述，以使本发明的优点和特征能更易于被本领域技术人员理解，从而对本发明的保护范围做出更为清楚明确的界定。
实施例一
参见附图1所示，本实施例中的显示装置，当显示屏模块播放视频的过程中，指令接受模块的语音识别单元对主观看者发出的语音指令进行分析处理，例如可以通过“讯飞语点”技术实现语音识别。
如果检测到的语音指令是切换频道，则指令接受模块直接执行切换上一集或者下一集；或者是音量调整，则指令接受模块直接执行音量的增大或者减小或者静音。
如果检测到的语音指令是屏幕调整，例如“顺时针转”或“逆时针转”，首先判断用户是一个还是多个，如果是一个，则直接根据用户发出的指令执行显示屏模块的左右或上下的角度调整，运动追踪模块追踪用户的位置并控制角度调整单元对显示屏模块进行角度调整，以使用户随时面对显示屏模块。
如果存在多个用户，则侦测模块检测当前的多个用户在此前的预定时间段内的注意力集中程度，根据每个用户的注意力集中程度来判定其中的主观看者；指令接受模块接收主观看者发出的指令，根据指令执行显示屏模块的左右或上下的角度调整，运动追踪模块追踪用户的位置并控制角度调整单元对显示屏模块进行角度调整，以使主观看者随时面对显示屏模块。
具体的，侦测模块包括关注时间计算单元，用于计算当前的多个用户在此前的预定时间段内的关注时间，计算不同使用者注意力的时间,以此判断到底是谁发出的指令，系统会侦测出哪个人的注意力比较集中的一方，以此做出判断是谁发出的指令，这样就不容易混乱。例如对于当前剧集来说，判断哪个用户的关注时间比较长，当自动检测那个人注意力集中程度较高的人，当多个人都发出指令“转向我”的时候，会根据之前判断的结果，转向注意力程度最高的方向。关注时间的计算方法通过由关注时间计算单元计算显示屏模块与用户瞳孔的连线相对于用户瞳孔中心的偏离程度，当偏离程度在预定范围内，则计算当前用户的关注时间。
本实施中，指令执行模块包括角度调整单元，角度调整单元与显示屏模块相连接，并且根据指令接受模块接收的指令对显示屏模块进行角度调整，包括左右角度调整、俯仰角度调整。另外，侦测模块包括人脸识别单元，用于对各用户的脸部特征进行识别，通过人脸识别技术判断谁是发出命令的人，当接收指令后LCD屏幕开始旋转，当LCD再次识别到人脸时旋转停止。通过实现屏幕脸部追踪技术，对使用者进行脸部追踪，将自动旋转、注意力检测、语音检测的功能集成在一起，大大提高了产品使用的便利性。
实施例二
参见附图2所示，本实施例中的显示装置，当显示屏模块播放视频的过程中，指令接受模块的语音识别单元对主观看者发出的语音指令进行分析处理，例如可以通过“讯飞语点”技术实现语音识别。
如果检测到的语音指令是切换频道，则指令接受模块直接执行切换上一集或者下一集；或者是音量调整，则指令接受模块直接执行音量的增大或者减小或者静音。
如果检测到的语音指令是屏幕调整，例如“顺时针转”或“逆时针转”，首先判断用户是一个还是多个，如果是一个，则直接根据用户发出的指令执行显示屏模块的左右或上下的角度调整，运动追踪模块追踪用户的位置并控制角度调整单元对显示屏模块进行角度调整，以使用户随时面对显示屏模块。
如果存在多个用户，则侦测模块检测当前的多个用户在此前的预定时间段内的注意力集中程度，根据每个用户的注意力集中程度来判定其中的主观看者；指令接受模块接收主观看者发出的指令，根据指令执行显示屏模块的左右或上下的角度调整，运动追踪模块追踪用户的位置并控制角度调整单元对显示屏模块进行角度调整，以使主观看者随时面对显示屏模块。
具体的，侦测模块包括关注时间计算单元，用于计算当前的多个用户在此前的预定时间段内的关注时间，计算不同使用者注意力的时间,以此判断到底是谁发出的指令，系统会侦测出哪个人的注意力比较集中的一方，以此做出判断是谁发出的指令，这样就不容易混乱。例如对于当前剧集来说，判断哪个用户的关注时间比较长，当自动检测那个人注意力集中程度较高的人，当多个人都发出指令“转向我”的时候，会根据之前判断的结果，转向注意力程度最高的方向。关注时间的计算方法通过由眨眼时间计算单元计算当前多个用户在此前的预定时间段内的眨眼频率或眨眼频率变化率。例如当观看某个剧集的时候，用户一的眨眼间隔比平时长，而用户二的眨眼间隔比平常短，则判定用户一的注意力较为集中，用户一为主观看者，则指令接受模块仅接收主观看者发出的指令。另外，当视频类型进行切换时，侦测单元数据重新检测当前的一个或多个用户在此前的预定时间段内的注意力集中程度。
本实施中，指令执行模块包括角度调整单元，角度调整单元与显示屏模块相连接，并且根据指令接受模块接收的指令对显示屏模块进行角度调整，包括左右角度调整、俯仰角度调整。另外，侦测模块包括人脸识别单元，用于对各用户的脸部特征进行识别，通过人脸识别技术判断谁是发出命令的人，当接收指令后LCD屏幕开始旋转，当LCD再次识别到人脸时旋转停止。通过实现屏幕脸部追踪技术，对使用者进行脸部追踪，将自动旋转、注意力检测、语音检测的功能集成在一起，大大提高了产品使用的便利性。
以上实施方式只为说明本发明的技术构思及特点，其目的在于让熟悉此项技术的人了解本发明的内容并加以实施，并不能以此限制本发明的保护范围，凡根据本发明精神实质所做的等效变化或修饰、均涵盖在本发明的保护范围内。

Claims (9)

1.一种显示装置，其特征在于，包括：
显示屏模块；
侦测模块，用于检测当前的一个或多个用户在此前的预定时间段内的注意力集中程度，根据每个用户的注意力集中程度来判定其中的主观看者；所述的侦测模块包括关注时间计算单元，用于计算当前的一个或多个用户在此前的预定时间段内的关注时间；所述的侦测模块包括眨眼时间计算单元，用于计算当前的一个或多个用户在此前的预定时间段内的眨眼频率变化率;
指令接受模块，接收主观看者发出的指令；
指令执行模块，根据指令接受模块接收的指令对显示屏模块进行操作。
2.根据权利要求1所述的显示装置，其特征在于：所述的关注时间计算单元计算显示屏模块与用户瞳孔的连线相对于用户瞳孔中心的偏离程度，当偏离程度在预定范围内，则计算当前用户的关注时间。
3.根据权利要求1所述的显示装置，其特征在于：所述的侦测模块包括眨眼时间计算单元，用于计算当前的一个或多个用户在此前的预定时间段内的眨眼频率。
4.根据权利要求1所述的显示装置，其特征在于：还包括视频类型判断模块，当视频类型进行切换时，所述的侦测单元数据重新检测当前的一个或多个用户在此前的预定时间段内的注意力集中程度。
5.根据权利要求1所述的显示装置，其特征在于：所述的指令执行模块包括角度调整单元，所述的角度调整单元与所述的显示屏模块相连接，并且根据指令接受模块接收的指令对显示屏模块进行角度调整。
6.根据权利要求5所述的显示装置，其特征在于：所述的侦测模块包括人脸识别单元，用于对各用户的脸部特征进行识别。
7.根据权利要求6所述的显示装置，其特征在于：还包括运动追踪模块，用于追踪主观看者的位置并控制角度调整单元对显示屏模块进行角度调整，以使主观看者随时面对显示屏模块。
8.根据权利要求1所述的显示装置，其特征在于：所述的指令接受模块包括语音识别单元，用于对主观看者发出的语音指令进行分析处理。
9.一种显示装置的控制方法，用于如权利要求1至8中任一项所述的显示装置，其特征在于：检测当前的一个或多个用户在此前的预定时间段内的注意力集中程度，所述的注意力集中程度包括计算当前的一个或多个用户在此前的预定时间段内的关注时间；根据每个用户的注意力集中程度来判定其中的主观看者；接收主观看者发出的指令并对显示屏模块进行操作,所述的侦测模块包括眨眼时间计算单元，用于计算当前的一个或多个用户在此前的预定时间段内的眨眼频率变化率。
CN201710592436.8A 2017-07-19 2017-07-19 显示装置及其控制方法 Active CN107479695B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710592436.8A CN107479695B (zh) 2017-07-19 2017-07-19 显示装置及其控制方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710592436.8A CN107479695B (zh) 2017-07-19 2017-07-19 显示装置及其控制方法

Publications (2)

Publication Number Publication Date
CN107479695A CN107479695A (zh) 2017-12-15
CN107479695B true CN107479695B (zh) 2020-09-25

Family

ID=60596637

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710592436.8A Active CN107479695B (zh) 2017-07-19 2017-07-19 显示装置及其控制方法

Country Status (1)

Country Link
CN (1) CN107479695B (zh)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108513074B (zh) 2018-04-13 2020-08-04 京东方科技集团股份有限公司 自拍控制方法及装置、电子设备
CN109451256A (zh) * 2018-10-29 2019-03-08 四川文轩教育科技有限公司 一种基于人工智能的网络智能电视
CN110349450A (zh) * 2019-07-18 2019-10-18 广东财经大学 一种智能电子商务教学用装置
CN110572704A (zh) * 2019-09-16 2019-12-13 腾讯科技（深圳）有限公司 一种控制弹幕播放速度的方法、装置、设备及介质

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101959033A (zh) * 2009-07-15 2011-01-26 日立民用电子株式会社 广播接收装置
CN101969539A (zh) * 2010-09-30 2011-02-09 冠捷显示科技（厦门）有限公司 基于用户视角的电视自动转向方法
CN102640084A (zh) * 2009-11-27 2012-08-15 三星电子株式会社 用于多用户和系统的通信接口设备和方法
CN103201710A (zh) * 2010-11-10 2013-07-10 日本电气株式会社 图像处理系统、图像处理方法以及存储图像处理程序的存储介质
CN104182044A (zh) * 2014-05-14 2014-12-03 录可系统公司 终端自适应调节方法及系统
CN104699124A (zh) * 2015-03-24 2015-06-10 天津通信广播集团有限公司 一种基于视线观看角度检测的电视机角度调整方法
CN104750387A (zh) * 2015-03-24 2015-07-01 联想(北京)有限公司 一种信息处理方法及电子设备
CN105469025A (zh) * 2014-10-06 2016-04-06 由田新技股份有限公司 注意力侦测装置及其侦测方法

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101959033A (zh) * 2009-07-15 2011-01-26 日立民用电子株式会社 广播接收装置
CN102640084A (zh) * 2009-11-27 2012-08-15 三星电子株式会社 用于多用户和系统的通信接口设备和方法
CN101969539A (zh) * 2010-09-30 2011-02-09 冠捷显示科技（厦门）有限公司 基于用户视角的电视自动转向方法
CN103201710A (zh) * 2010-11-10 2013-07-10 日本电气株式会社 图像处理系统、图像处理方法以及存储图像处理程序的存储介质
CN104182044A (zh) * 2014-05-14 2014-12-03 录可系统公司 终端自适应调节方法及系统
CN105469025A (zh) * 2014-10-06 2016-04-06 由田新技股份有限公司 注意力侦测装置及其侦测方法
CN104699124A (zh) * 2015-03-24 2015-06-10 天津通信广播集团有限公司 一种基于视线观看角度检测的电视机角度调整方法
CN104750387A (zh) * 2015-03-24 2015-07-01 联想(北京)有限公司 一种信息处理方法及电子设备

Also Published As

Publication number Publication date
CN107479695A (zh) 2017-12-15

Similar Documents

Publication Publication Date Title
CN107479695B (zh) 显示装置及其控制方法
EP3293620B1 (en) Multi-screen control method and system for display screen based on eyeball tracing technology
US9894320B2 (en) Information processing apparatus and image processing system
US6850265B1 (en) Method and apparatus for tracking moving objects using combined video and audio information in video conferencing and other applications
US9529439B2 (en) Multi device pairing and sharing via gestures
US9813667B1 (en) System and method for providing co-delivery of content
US20020149613A1 (en) Automatic positioning of display depending upon the viewer's location
WO2014186941A1 (zh) 一种基于终端设备的屏幕调节方法及装置
EP2859732A1 (en) Providing spontaneous connection and interaction between local and remote interaction devices
US20180270428A1 (en) Electronic information board system, image processing device, and image processing method
CN106126179B (zh) 一种信息处理方法和电子设备
US10774980B2 (en) Audio-visual adjustment device and method for controlling the same
US20240054975A1 (en) Head mounted display and setting method
US10764535B1 (en) Facial tracking during video calls using remote control input
WO2013145639A1 (en) Information processing device, information processing method and program
US20140152545A1 (en) Display device and notification method
US20170324921A1 (en) Method and device for displaying multi-channel video
WO2014117675A1 (zh) 一种信息处理方法及电子设备
KR101967232B1 (ko) 차량 운전중 휴대단말의 사용 방지 시스템
US9967519B1 (en) Video conference control method and apparatus using the same
US9420012B2 (en) Computer readable recording medium, communication terminal device and teleconferencing method
US20190018478A1 (en) Sensing viewer direction of viewing to invoke accessibility menu in audio video device
WO2016161906A1 (zh) 一种终端设备的控制方法、控制设备以及终端设备
US11823706B1 (en) Voice activity detection in audio signal
US11249637B1 (en) User interface information enhancement based on user distance

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant