CN115988158A - 显示方法、显示系统以及记录介质 - Google Patents

显示方法、显示系统以及记录介质 Download PDF

Info

Publication number
CN115988158A
CN115988158A CN202211252726.5A CN202211252726A CN115988158A CN 115988158 A CN115988158 A CN 115988158A CN 202211252726 A CN202211252726 A CN 202211252726A CN 115988158 A CN115988158 A CN 115988158A
Authority
CN
China
Prior art keywords
user
brightness
image
display
eyelid
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202211252726.5A
Other languages
English (en)
Inventor
中进美孝
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Seiko Epson Corp
Original Assignee
Seiko Epson Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Seiko Epson Corp filed Critical Seiko Epson Corp
Publication of CN115988158A publication Critical patent/CN115988158A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/20Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters
    • G09G3/34Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters by control of light from an independent source
    • G09G3/3406Control of illumination source
    • G09G3/342Control of illumination source using several illumination sources separately controlled corresponding to different display panel areas, e.g. along one dimension such as lines
    • G09G3/3426Control of illumination source using several illumination sources separately controlled corresponding to different display panel areas, e.g. along one dimension such as lines the different display panel areas being distributed in two dimensions, e.g. matrix
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/18Eye characteristics, e.g. of the iris
    • G06V40/193Preprocessing; Feature extraction
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/012Head tracking input arrangements
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013Eye tracking input arrangements
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017Gesture based interaction, e.g. based on a set of recognized hand gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0412Digitisers structurally integrated in a display
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/70Determining position or orientation of objects or cameras
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/70Arrangements for image or video recognition or understanding using pattern recognition or machine learning
    • G06V10/74Image or video pattern matching; Proximity measures in feature spaces
    • G06V10/761Proximity, similarity or dissimilarity measures
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/20Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters
    • G09G3/34Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters by control of light from an independent source
    • G09G3/3406Control of illumination source
    • G09G3/3413Details of control of colour illumination sources
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/042Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means
    • G06F3/0425Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means using a single imaging device like a video camera for tracking the absolute position of a single or a plurality of objects with respect to an imaged reference surface, e.g. video camera imaging a display or a projection screen, a table or a wall surface, on which a computer generated image is displayed or projected
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V2201/00Indexing scheme relating to image or video recognition or understanding
    • G06V2201/02Recognising information on displays, dials, clocks
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00Control of display operating conditions
    • G09G2320/06Adjustment of display parameters
    • G09G2320/0626Adjustment of display parameters for control of overall brightness
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00Control of display operating conditions
    • G09G2320/06Adjustment of display parameters
    • G09G2320/0666Adjustment of display parameters for control of colour parameters, e.g. colour temperature
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2354/00Aspects of interface with display user
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/02Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the way in which colour is displayed
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/10Intensity circuits

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Computer Hardware Design (AREA)
  • Health & Medical Sciences (AREA)
  • Multimedia (AREA)
  • General Health & Medical Sciences (AREA)
  • Databases & Information Systems (AREA)
  • Artificial Intelligence (AREA)
  • Computing Systems (AREA)
  • Evolutionary Computation (AREA)
  • Medical Informatics (AREA)
  • Software Systems (AREA)
  • Ophthalmology & Optometry (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Transforming Electric Information Into Light Information (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

显示方法、显示系统以及记录介质。在多个用户同时观看的显示面中,在进行减轻眼睛疲劳的控制的情况下,还抑制显示的便利性的降低。显示方法包含:在显示面上显示图像;以及基于面部朝向所述显示面的第1用户的眼睑的运动,使所述图像中的与所述第1用户对应的第1部分的明亮度或色调不同于所述图像中的与所述第1部分不同的第2部分的明亮度或色调。

Description

显示方法、显示系统以及记录介质
技术领域
本发明涉及显示方法、显示系统以及记录介质。
背景技术
以往,开发了减轻观看显示画面的用户的眼睛疲劳的技术。例如,下述专利文献1所公开的头戴式显示装置包含显示部、光学部、检测部、定时器以及控制部。显示部显示图像。光学部使用户视觉检测显示于显示部的图像。检测部检测头戴式显示装置是否被用户佩戴。定时器计测由检测部检测到头戴式显示装置被用户佩戴且在显示部上显示图像的时间。控制部与由定时器计测出的时间的经过对应地使视觉上检测的图像变化,以抑制用户的眼睛疲劳。
专利文献1:日本特开2003-076353号公报
在上述的专利文献1所记载的技术中,通过使显示整体的亮度降低来减轻用户的眼睛疲劳。如果将该方法应用于例如假设多个用户同时使用的大型画面,则由于从远处观看大型画面时的可视性降低等,便利性有可能降低。
发明内容
本发明一个方式的显示方法包含:在显示面上显示图像;以及基于面部朝向所述显示面的第1用户的眼睑的运动,使所述图像中的与所述第1用户对应的部分即第1部分的明亮度或色调不同于所述图像中的与所述第1部分不同的第2部分的所述明亮度或色调。
本发明一个方式的显示系统具有:显示装置,其在显示面上显示图像;以及处理装置,其基于面部朝向所述显示面的第1用户的眼睑的运动,将表示使所述图像中的与所述第1用户对应的部分即第1部分的明亮度或色调不同于所述图像中的与所述第1部分不同的第2部分的所述明亮度或色调的所述图像的信号输出到所述显示装置。
本发明一个方式的显示程序使处理装置执行:使显示面显示图像;以及基于面部朝向所述显示面的第1用户的眼睑的运动,使所述图像中的与所述第1用户对应的部分即第1部分的明亮度或色调不同于所述图像中的与所述第1部分不同的第2部分的所述明亮度或色调。
附图说明
图1是表示实施方式的显示系统1的使用例的概略图。
图2A是表示投射图像PC的一例的示意图。
图2B是表示投射图像PC的一例的示意图。
图3是示意性表示显示系统1的结构的图。
图4是表示由处理装置103进行的处理步骤的流程图。
图5是示意性地表示1个对象用户UT1正观看投射图像PC的情况的图。
图6是示意性地表示多个对象用户UT2~UT5位于投射图像PC的附近的情况的图。
图7A是示意性地表示1个对象用户UT1正观看投射图像PC的情况的图。
图7B是示意性地表示1个对象用户UT1正观看投射图像PC的情况的图。
图8是示意性地表示多个对象用户UT2~UT4位于投射图像PC的附近的情况的图。
标号说明
1:显示系统;10:投影仪;12:光幕生成装置;14A:第1拍摄装置;14B:第2拍摄装置;100:输入装置;101:通信装置;102:存储装置;103:处理装置;103A:触摸检测部;103B:显示图像控制部;103C:用户检测部;103D:疲劳检测部;103E:图像处理控制部;105:投射装置;121:激光光源单元;122:射出控制装置;FP:投射区域;L:光幕;P1:第1部分;P2:第2部分;PC:投射图像;U:用户;UT:对象用户。
具体实施方式
以下,参照附图说明本发明的优选实施方式。另外,在附图中,各部分的尺寸或比例尺与实际适当不同,也有为了容易理解而示意性地示出的部分。此外,在以下的说明中,只要没有特别限定本发明的记载,则本发明的范围不限于这些方式。
[实施方式]
[1.显示系统的概要]
图1是表示实施方式的显示系统1的使用例的概略图。如图1所示,显示系统1是为了在例如车站、购物大厦等多个人聚集的空间S中显示图像而设置的。在本实施方式中,显示系统1通过投影仪10向壁面W的至少一部分投射出投射图像PC。将壁面W中的被投影仪10投射有投射图像PC的区域设为投射区域FP。也可以是,壁面W的整个面为投射区域FP。投射区域FP是显示面的一例。另外,投射图像PC是图像的一例。此外,显示系统1例如也可以是在设置于壁面W的显示器显示图像的系统。在该情况下,显示器的表面相当于显示面。
在本实施方式中,显示系统1的投射区域FP是多个用户U能够同时观看投射图像PC的大小。在该情况下,可以向投射区域FP的整体投射1个投射图像PC,多个用户U同时观看该投射图像PC,也可以向投射区域FP投射多个投射图像PC,各用户U分别观看不同的投射图像PC。此外,后者的情况下的用户U也可以是由一起行动的多个用户U构成的组。在本实施方式中,假设如前者那样,向投射区域FP投射1个投射图像PC,各用户U分别观看不同的投射图像PC的一部分区域。
另外,显示系统1通过光幕生成装置12将图3所示的光幕L射出到投射区域FP的附近。通过检测光幕L的反射光,检测由用户U触摸的投射图像PC上的位置。在显示系统1中,基于用户U对投射区域FP的触摸操作,投射图像PC的内容动态地变化。即,在显示系统1中,进行交互的图像显示。
图2A以及图2B是表示投射图像PC的一个例子的示意图。图2A和图2B示出了投射区域FP的一部分区域FP-A。图2A以及图2B的例子设想了显示系统1设置于购物大厦的情况。在初始状态下,显示于区域FP-A的图像PC-A包含多个图标IC1~IC3。例如,图标IC1对应于“吃”这样的关键词。同样地,图标IC2对应于“买”这样的关键词,图标IC3对应于“玩”这样的关键词。当用户U触摸投射了图标IC1~IC3中的任意图标的区域时,显示与该图标IC的关键词对应的、购物大厦内的店铺的一览LS。
例如,当用户U触摸投射有与“吃”对应的图标IC1的区域时,如图2B所示,显示包含购物大厦内的餐饮店的一览LS的图像PC-B。即,餐饮店的一览LS成为与用户U的触摸联动地变化的投射图像PC的一部分。
餐饮店的一览表LS包含店铺的概要信息SI,该店铺的概要信息SI包含餐饮店的店名、所提供的料理的类型、楼层等大致的位置信息。当用户U触摸投射有任意店铺的概要信息SI的区域时,显示该店铺的位置信息、营业时间信息、菜单信息等详细信息。
此外,显示系统1也可以是不进行交互的图像显示、不论有无用户U的操作都显示预先决定的图像的系统。
[2.显示系统的结构]
图3是表示显示系统1的结构的框图。显示系统1具有投影仪10、光幕生成装置12、第1拍摄装置14A和第2拍摄装置14B。如图1所示,显示系统1具有比较大的投射区域FP。因此,投影仪10、光幕生成装置12、第1拍摄装置14A和第2拍摄装置14B中的至少1个可以设置有多个。例如,也可以沿着图1的壁面W的宽度方向配置多个包含投影仪10、光幕生成装置12、第1拍摄装置14A以及第2拍摄装置14B在内的装置组。
第1拍摄装置14A具有接收红外区域和可见光区域的光的CCD(Charge CoupledDevice:电荷耦合器件)图像传感器作为拍摄元件。拍摄元件不限于CCD图像传感器,例如也可以是接收红外区域和可见光区域的光的CMOS(Complementary Metal OxideSemiconductor:互补金属氧化物半导体)图像传感器。在第1拍摄装置14A中,为了接收基于用户U的手指F等物体的、光幕L的反射光而安装有红外线滤光器。第1拍摄装置14A生成与对壁面W的投射区域FP进行拍摄而得到的第1拍摄图像对应的第1拍摄图像数据。在光幕L的一部分被物体反射的情况下,第1拍摄图像数据包含基于物体的光幕L的反射光。第1拍摄装置14A例如也可以与投影仪10一体地构成。第1拍摄装置14A将第1拍摄图像数据输出到投影仪10。
第2拍摄装置14B具有接收可见光区域的光的CCD图像传感器作为拍摄元件。拍摄元件不限于CCD图像传感器,例如也可以是接收可见光区域的光的CMOS图像传感器。第2拍摄装置14B通过对与投射区域FP对置的区域进行拍摄,输出与第2拍摄图像对应的第2拍摄图像数据。作为一例,第2拍摄装置14B将壁面W的法线方向作为拍摄方向而设置在壁面W上。这是为了将面部朝向投射区域FP的用户U的面部拍摄到第2拍摄图像中。第2拍摄装置14B将第2拍摄图像数据输出到投影仪10。
如图1所示,光幕生成装置12设置在壁面W中的投射区域FP的上方。光幕生成装置12也可以不设置于壁面W,而设置于天花板C的一部分。光幕生成装置12射出沿着壁面W的表面的平面状的光即光幕L。光幕L不限于平面状的光,也可以是其他形状的光。光幕L是红外线波段的光。在本实施方式中,光幕L沿着壁面W展开,覆盖壁面W中的至少投射区域FP。光幕L以在法线方向上从壁面W的表面隔开几毫米距离的方式射出。为了提高触摸位置TP的检测精度,优选减小光幕L与壁面W的表面的距离。另一方面,若使它们过于接近,则根据壁面W的表面状态等会产生误检测。因此,适当调整光幕L与壁面W的表面的距离。
光幕L用于检测由用户U指示的投射图像PC上的触摸位置TP。用户U对投射图像PC的触摸在多数情况下设想为通过用户U的手指F来进行,但例如也可以通过棒或者笔等来触摸投射图像PC。
具体而言,光幕生成装置12包含激光光源单元121和控制激光光源单元121的射出控制装置122。
激光光源单元121射出光幕L。如上所述,光幕L是红外线波段的光,激光光源单元121射出红外线波段的激光。激光光源单元121例如是在1个或多个LD(Laser Diode:激光二极管)上安装有准直透镜和鲍威尔透镜等光学系统部件的单元。光幕生成装置12不限于使用激光光源单元121,例如也可以是使用LED(Light Emitting Diode:发光二极管)射出光幕L的单元。
射出控制装置122控制光幕L相对于壁面W的射出角度以及光幕L在壁面W上的射出位置等。射出控制装置122包含调整激光光源单元121的朝向和位置的致动器、控制致动器的控制装置等。
如图1所示,投影仪10设置于与壁面W连接的天花板C。投影仪10也可以不设置于天花板C,而设置于壁面W的一部分。投影仪10投射图像的显示面不限于壁面W,例如也可以是屏幕等。
投影仪10包含输入装置100、通信装置101、存储装置102、处理装置103以及投射装置105。
输入装置100例如包含接受来自显示系统1的管理者的输入等的各种操作按钮、操作键或触摸面板。输入装置100也可以是将从管理者输入的信息以无线或有线的方式发送到投影仪10的遥控器。在该情况下,投影仪10具有接收遥控器发送的信息的接收装置。遥控器具有接受来自管理者的输入的各种操作按钮、操作键或触摸面板。
通信装置101是用于与其他设备之间进行通信的接口。在本实施方式中,通信装置101与未图示的图像服务器之间进行通信。通信装置101中的通信可以是无线通信,也可以是有线通信。在进行无线通信的情况下,通信装置101具有通信电路和天线等,例如通过Bluetooth或Wi-Fi进行无线通信。Bluetooth和Wi-Fi是注册商标。另外,在进行有线通信的情况下,通信装置101具有通信电路和连接通信用布线的连接器等。
存储装置102是计算机可读取的记录介质。存储装置102例如具有RAM(RandomAccess Memory:随机存取存储器)、ROM(Read Only Memory:只读存储器)以及EEPROM(Electrically Erasable Programmable Read Only Memory:电可擦可编程只读存储器)。存储装置102存储由处理装置103处理的各种信息和程序。该程序包含显示程序。
投射装置105向壁面W的投射区域FP投射出投射图像PC。投射装置105是显示装置的一例,具有图像处理电路、帧存储器、液晶光阀、光阀驱动电路、光源、投射光学系统等。图像处理电路在从处理装置103或未图示的图像服务器等图像供给装置接收到图像数据时,将该图像数据在帧存储器中展开,进行必要的图像处理。该图像处理例如是将图像数据的分辨率转换为液晶光阀的分辨率的处理、消除梯形失真的几何校正处理等。图像处理后的图像数据被转换为图像信号,通过基于图像信号驱动液晶光阀等,图像数据作为图像被投射。此外,投射装置105除了使用了上述的液晶光阀等的液晶方式之外,例如也可以是DLP(Digital Lighting Processing:数字光处理,注册商标)方式。此外,在显示装置为显示器的情况下,显示装置具有光源以及显示面板等。
处理装置103例如也可以由单个或多个处理器构成。列举一例的话,处理装置103由单个或多个CPU(Central Processing Unit:中央处理单元)构成。处理装置103的功能的一部分或者全部也可以通过DSP(Digital Signal Processor:数字信号处理器)、ASIC(Application Specific Integrated Circuit:专用集成电路)、PLD(Programmable LogicDevice:可编程逻辑器件)、FPGA(Field Programmable Gate Array:现场可编程门阵列)等电路来构成。处理装置103并行地或逐次地执行各种处理。
处理装置103通过从存储装置102读取并执行显示程序,实现触摸检测部103A、显示图像控制部103B、用户检测部103C、疲劳检测部103D、图像处理控制部103E。触摸检测部103A、显示图像控制部103B、用户检测部103C、疲劳检测部103D、图像处理控制部103E的全部或一部分可以由FPGA等硬件构成。
触摸检测部103A检测投射区域FP被触摸的情况。触摸检测部103A在第1拍摄装置14A所拍摄的第1拍摄图像数据中拍摄到光幕L的反射光的情况下,检测为投射区域FP被触摸。
另外,触摸检测部103A检测投射区域FP上的触摸位置。触摸检测部103A在投射区域FP被触摸的情况下,根据第1校准数据和第1拍摄图像数据,检测投射区域FP上的触摸位置TP。第1校准数据是将在投射装置105的帧存储器中展开的图像上的坐标与第1拍摄图像数据上的坐标对应起来的数据。帧存储器上的坐标与投射区域FP上的坐标对应。通过使用第1校准数据,触摸检测部103A能够将第1拍摄图像数据上的触摸位置转换为投射区域FP上的触摸位置TP。
显示图像控制部103B根据投射区域FP上的触摸位置TP,控制作为投射图像PC投射的图像。即,显示图像控制部103B与对投射区域FP的触摸联动地使投射图像PC的一部分变化。
显示图像控制部103B例如向图像服务器发送投射区域FP上的触摸位置TP的坐标。图像服务器根据投射区域FP上的触摸位置TP的坐标和当前在投射区域FP中显示的投射图像PC的图像数据,确定接下来应该在触摸位置TP的周边显示的图像即下一显示图像,并将下一显示图像的图像数据发送到投影仪10。若以图2A以及图2B为例进行说明,则例如设为当前投射于投射区域FP的投射图像PC是图2A的图像PC-A,触摸位置TP的坐标包含于与“吃”对应的图标IC1的显示范围。在该情况下,图像服务器将图2B所示的图像PC-B的图像数据作为下一显示图像进行发送。显示图像控制部103B将作为下一显示图像发送的图像数据作为投射图像PC投射到投射区域FP。
用户检测部103C基于由第2拍摄装置14B拍摄到的第2拍摄图像,检测观看投射区域FP的用户U。用户检测部103C例如从第2拍摄图像中确定具有与人对应的特征点的区域,并确定第2拍摄图像上的用户U的位置。另外,用户检测部103C检测各用户U的视线,从而检测视线朝向投射区域FP的用户U。以下,将观看由用户检测部103C检测出的投射区域FP的用户U称为“对象用户UT”。对象用户UT是第1用户的一例。
疲劳检测部103D基于第2拍摄图像,检测对象用户UT的眼睑的运动。另外,疲劳检测部103D判定第2拍摄图像中映现的对象用户UT的眼睑的运动是否为第1状态。第1状态例如是对象用户UT处于眼睛疲劳状态的可能性高的情况下的眼睑运动。通常,当用户U长时间观看显示图像时,眼睛疲惫。当眼睛疲惫时,与眼睛不疲惫的情况相比,用户U进行眨眼增多、眯眼等眼睑的运动具有特征的动作。另外,在本说明书中,“眼睛疲劳”和“眼睛疲惫”是相同的意思。
因此,在本实施方式中,将第1状态设为对象用户UT的每单位时间的眨眼次数与初始状态相比增加了规定值以上的状态。初始状态例如能够设为由用户检测部103C检测出对象用户UT之后的单位时间内的眨眼次数。
此外,作为与第1状态不同的状态,定义第2状态。第2状态例如为第1状态以外的状态。在本实施方式中,第2状态包含对象用户UT的每单位时间的眨眼次数与初始状态相比增加了小于规定值的情况、对象用户UT的每单位时间的眨眼次数与初始状态相比没有变化的情况、以及对象用户UT的每单位时间的眨眼次数与初始状态相比减少的情况。此外,第1状态以及第2状态不限于眨眼次数,例如,也可以通过第2拍摄图像中的眼睛的面积相对于对象用户UT的面部面积的比率等来定义。
图像处理控制部103E指示图像处理电路对投射图像PC的一部分进行图像处理。图像处理控制部103E基于面部朝向投射区域FP的对象用户UT的眼睑的运动,使投射图像PC中的与对象用户UT对应的部分即第1部分P1的明亮度或者色调不同于投射图像PC中的与第1部分P1不同的第2部分P2的明亮度或者色调。
第1部分P1的详细情况后述,但第1部分P1例如包含与对象用户UT对置的投射图像PC的部分。另外,第2部分P2是投射图像PC的除第1部分P1以外的部分。换言之,第2部分P2是与对象用户UT的眼睑的运动成为第1状态之前的第1部分P1的明亮度或者色调相同的明亮度或者色调的部分。
在本实施方式中,明亮度例如是投射图像PC的亮度。作为一例,使明亮度不同是指使亮度不同。另外,使明亮度不同例如可以是使投射图像PC的最大亮度与最小亮度之比即对比度不同,也可以是使表示输入图像信号的大小与图像的亮度的关系的γ值不同。另外,在本实施方式中,色调例如是指明度和饱和度中的至少1个。例如,也可以通过使彩色滤光片重叠于第1部分P1来改变第1部分P1的外观的明亮度。
在本实施方式中,图像处理控制部103E在对象用户UT的眼睑的运动为第1状态的情况下,使第1部分P1的明亮度比用户U的眼睑的运动为与第1状态不同的第2状态的情况下的第1部分P1的明亮度暗。如上所述,第1状态是指对象用户UT的每单位时间的眨眼次数与初始状态相比增加了规定值以上的状态,是推断为对象用户UT的眼睛疲惫的状态。
通常,投影图像PC比周围环境更亮地显示,因此如果长时间持续观看,则有时眼睛会疲惫。因此,在显示系统1中,在预测为正在观看投射图像PC的对象用户UT的眼睛疲惫的情况下,使投射图像PC中的包含对象用户UT正在观看的部分的第1部分P1的明亮度变暗。由此,对象用户UT的眼睛受到的刺激降低,能够减轻对象用户UT的眼睛疲劳。
图像处理控制部103E也可以根据第1状态下的每单位时间的眨眼次数来变更第1部分P1的明亮度。例如,第1状态是对象用户UT的每单位时间的眨眼次数与初始状态相比增加了20%以上的状态。在该情况下,在眨眼次数与初始状态相比增加了20%以上且小于30%的范围的状态下,将第1部分P1的明亮度设为-5%。另外,在眨眼次数与初始状态相比增加了30%以上且小于40%的范围的状态下,将第1部分P1的明亮度设为-10%。即,眨眼次数的增加程度越大,越降低第1部分P1的明亮度。由此,根据对象用户UT的眼睛疲惫程度来调整第1部分P1的明亮度,能够兼顾眼睛疲惫的减轻和投影图像PC的易观看性。另外,第1部分P1的明亮度例如也可以变更至-30%左右。
另外,图像处理控制部103E在对象用户UT的眼睑的运动为第1状态的情况下,也可以代替第1部分P1的明亮度使第1部分P1的色调变化,或者与明亮度一起使第1部分P1的色调变化。具体而言,例如,也可以降低第1部分P1的明度和饱和度中的至少任意一个。在该情况下,对象用户UT的眼睛受到的刺激也降低,能够减轻对象用户UT的眼睛疲劳。
另外,在对象用户UT持续地观看第1部分P1的期间,若第1部分P1的明亮度或者色调突然变化,则对象用户UT有可能感到不舒服,或者怀疑显示系统1的故障。因此,处理装置103也可以在由图像处理控制部103E使第1部分P1的明亮度或者色调不同的情况下,向对象用户UT通知使明亮度或者色调不同的情况。通知的方法是任意的,例如,可以在第1部分P1上、或者与第1部分P1的外缘相接的位置,显示表示调整了明亮度或者色调的意思的消息或者图标的图像。该通知的有无例如可以由显示系统1的管理者经由投影仪10的输入装置100进行设定。
另外,图像处理控制部103E也可以在变更了第1部分P1的明亮度或色调之后,在规定的条件成立的情况下,使第1部分P1的明亮度或色调返回到变更前的状态。规定的条件例如是在对象用户UT停止观看第1部分P1的可能性高的情况下成立的条件。所谓规定的条件,具体而言,例如可举出规定时间以上没有来自对象用户UT的触摸操作、对象用户UT的面部未朝向投射图像PC的状态持续了规定时间以上、对象用户UT与投射区域FP相隔规定距离以上等。在这些条件中的至少1个成立的情况下,对象用户UT停止观看第1部分P1的可能性高。因此,图像处理控制部103E使第1部分P1的明亮度或色调返回到变更前的状态。
即,图像处理控制部103E也可以在产生了以下的条件1至条件3中的至少任意条件的情况下,使第1部分P1的明亮度返回到对象用户UT的眼睑的运动为第2状态的情况下的第1部分P1的明亮度。条件1是在检测到投射区域FP被触摸起的第1规定时间以内,在距投射区域FP的被触摸的位置起为第2规定距离以内未再次进行触摸的情况。条件2是对象用户UT未将面部朝向投射区域FP的状态持续了第2规定时间以上的情况。条件3是对象用户UT与投射区域FP相隔第3规定距离以上的情况。另外,第2规定距离以内例如也可以是通过上次的触摸操作而变更的投射图像PC的范围内。
[3.显示系统1的动作]
图4是表示由处理装置103进行的处理步骤的流程图。处理装置103作为显示图像控制部103B发挥功能,由此向投射区域FP投射出投射图像PC(步骤S12)。处理装置103作为用户检测部103C发挥功能,由此检测观看投射区域FP的用户U、即对象用户UT(步骤S14)。处理装置103在没有对象用户UT的期间待机(步骤S14:否)。在存在对象用户UT的情况下(步骤S14:是),处理装置103作为触摸检测部103A发挥功能,由此判断投射区域FP是否被触摸(步骤S16)。在投射区域FP被触摸的情况下(步骤S16:是),处理装置103作为显示图像控制部103B发挥功能,由此基于触摸位置TP使投射图像PC的一部分变化(步骤S18)。另外,在投射区域FP未被触摸的情况下(步骤S16:否),处理装置103不使投射图像PC变化,使处理转移到步骤S20。
处理装置103作为疲劳检测部103D发挥功能,由此检测对象用户UT的眼睑的运动(步骤S20)。处理装置103作为疲劳检测部103D发挥功能,由此判定对象用户UT的眼睑的运动是否为第1状态(步骤S22)。在对象用户UT的眼睑的运动为第1状态的情况下(步骤S22:是),处理装置103作为图像处理控制部103E发挥功能,由此使投射图像PC的第1部分P1的明亮度变暗(步骤S24)。如上所述,投射图像PC的第1部分P1是对象用户UT正在观看的部分,例如是显示由于对象用户UT的触摸而发生变化的部分。另外,在对象用户UT的眼睑的运动不是第1状态的情况下(步骤S22:否),处理装置103使处理返回到步骤S16。
在步骤S24中使投射图像PC的第1部分P1的明亮度变暗之后,处理装置103作为用户检测部103C发挥功能,由此判定对象用户UT是否正在观看第1部分P1(步骤S26)。在对象用户UT正在观看第1部分P1的情况下(步骤S26:是),处理装置103使处理返回到步骤S16。在该情况下,第1部分P1的明亮度较暗的状态持续。另外,在使处理返回到步骤S16之后,对象用户UT进一步触摸投射区域FP而使投射图像PC发生变化的情况下,处理装置103将由于触摸而变化的部分作为新的第1部分P1,使明亮度变暗的状态继续。
处理装置103在对象用户UT不再观看第1部分P1时(步骤S26:否),作为图像处理控制部103E发挥功能,由此使在步骤24中变暗的第1部分P1的明亮度复原(步骤S28),使处理返回到步骤S12。
[4.第1部分P1的设定例]
如上所述,在显示系统1中,在预测为观看投射图像PC的对象用户UT的眼睛疲惫的情况下,使与对象用户UT对应的第1部分P1的明亮度变暗,减轻对象用户UT的眼睛疲劳。另一方面,在本实施方式中,投射区域FP的范围大,有可能是多个用户U同时观看投射图像PC。因此例如,若基于1个对象用户UT的眼睑运动使投射图像PC的整体变暗,则对于眼睛不疲惫的其他对象用户UT而言,自身观看的投射图像PC急剧变暗,所以有可能感到不舒服、或者难以观看图像。因此,在存在眼睛疲惫的对象用户UT的情况下,使投射图像PC的哪个部分变暗成为问题。即,将第1部分P1设为哪个区域成为问题。
[设定例1:以通过触摸而变化的图像为基准]
第1部分P1例如优选包含眼睛疲惫的对象用户UT正在观看的部分。如上所述,投射图像PC根据用户U的触摸而变化。对象用户UT观看由于自身的触摸而变化的部分的可能性高。因此,在设定例1中,将第1部分P1设为因对象用户UT的触摸而变化的投射图像PC的部分。
图5是示意性地表示1个对象用户UT1正观看投射图像PC的情况的图。图5是从后方观察对象用户UT1的图。在图5中,在投射区域FP中显示图2B所示的餐饮店的一览LS。假设对象用户UT1从图2A所示的多个图标IC中触摸与“吃”对应的图标IC1的结果是,餐饮店的一览LS被显示为投射图像PC的一部分。1个对象用户UT1正在观看投射图像PC,餐饮店的一览LS位于与对象用户UT1对置的位置。
在对象用户UT1观看餐饮店的一览LS的期间,若对象用户UT1的眼睑的运动成为第1状态,则处理装置103使餐饮店的一览LS的显示部分的亮度比其他投射图像PC的部分低。其结果,餐饮店的一览LS的显示部分的明亮度变暗。即,餐饮店的一览LS成为第1部分P1。另外,投射图像PC中的、餐饮店的一览LS以外的部分是第2部分P2,维持原来的明亮度。
图6是示意性地表示多个对象用户UT2~UT5位于投射图像PC的附近的情况的图。图6是从后方观察对象用户UT2~UT5的图。在图6中,在投射区域FP中也显示图2B所示的餐饮店的一览LS。假设对象用户UT2从图2A所示的多个图标IC中触摸与“吃”对应的图标IC1的结果是,餐饮店的一览LS被显示为投射图像PC的一部分。由于是多个对象用户UT正在观看投射图像PC,所以与餐饮店的一览LS完全对置的仅是对象用户UT2,对象用户UT3以及UT4仅与餐饮店的一览LS的一部分对置,对象用户UT5不与餐饮店的一览LS对置。
在该情况下,对象用户UT2~UT5中的谁正在观看餐饮店的一览LS成为问题。通常,观看通过对象用户UT2的触摸而显示的餐饮店的一览LS的是以与对象用户UT2相同的组行动的用户U。组例如是朋友、家人、熟人等一起行动的多个用户U。认为同一组的用户U彼此位于比组以外的他人近的位置。另外,即使是与对象用户UT2相同的组,远离餐饮店的一览LS的用户U也难以看到餐饮店的一览LS,观看投射图像PC的其他区域的可能性高。
因此,处理装置103将与餐饮店的一览LS相隔距离Dx的对象用户UT推断为正在观看餐饮店的一览LS的对象用户UT。并且,在这些对象用户UT中的至少任意1人的眼睑的运动成为第1状态的情况下,处理装置103使餐饮店的一览LS的显示部分的明亮度比其他投射图像PC的部分暗。
即,在投影仪10中,疲劳检测部103D在多个对象用户UT2~UT4与餐饮店的一览LS相隔距离Dx以内的情况下,检测对象用户UT2~UT4各自的眼睑的运动。另外,图像处理控制部103E在多个对象用户UT2~UT4中的任意1人的眼睑运动为第1状态的情况下,使餐饮店的一览LS的明亮度比对象用户UT2~UT4的全员的眼睑运动为第2状态的情况下的餐饮店的一览LS的明亮度暗。例如,对象用户UT2是第1用户的一例,对象用户UT3是第2用户的一例。距离Dx是第1距离的一例。
在图6的例子中,处理装置103从餐饮店的一览LS的宽度方向端部起取距离Dx,将与餐饮店的一览LS相隔距离Dx以内的位置对置的对象用户UT推断为正在观看餐饮店的一览LS的对象用户UT。与餐饮店的一览LS相隔距离Dx以内的位置对置的对象用户UT例如是双眼与和餐饮店的一览LS相隔距离Dx以内的位置对置的对象用户UT。该情况下,在图6的例子中,对象用户UT2~UT4被推断为正在观看餐饮店的一览LS的对象用户UT,对象用户UT5未被推断为正在观看餐饮店的一览LS的对象用户UT。
在对象用户UT2~UT4中的至少1人的眼睑的运动成为第1状态的情况下,处理装置103使餐饮店的一览LS的显示部分的明亮度比其他部分暗。即,对于对象用户UT2~UT4而言,餐饮店的一览LS成为第1部分P1。另一方面,在对象用户UT5的眼睑的运动成为第1状态的情况下,处理装置103不使餐饮店的一览LS的显示部分的明亮度变暗。即,对于对象用户UT5而言,餐饮店的一览LS不成为第1部分P1。
另外,如上所述,在成组地观看餐饮店的一览LS的情况下,除了在组内哪怕有1个眼睛疲惫的对象用户UT则使餐饮店的一览LS的明亮度变暗的方法之外,例如也可以仅在进行触摸操作的对象用户UT的眼睛疲惫的情况下,使餐饮店的一览LS的明亮度变暗。在该情况下,能够与主动操作画面的对象用户UT的眼睛状态相匹配地使投射图像PC的显示图像的明亮度变化。特别是,在成组地观看投射图像PC的情况下,能够避免投射图像PC的明亮度在短期间内变暗。另外,即使在1个对象用户UT正观看投射图像PC的情况下,通过识别进行了触摸操作的用户U,也能够更可靠地确定对象用户UT正在观看的部分。
在该情况下,用户检测部103C根据第2校准数据、由第2拍摄装置14B拍摄到的第2拍摄图像、以及由触摸检测部103A检测到的投射区域FP上的触摸位置TP,确定触摸了触摸位置TP的用户U。第2校准数据是将投射区域FP上的坐标与第2拍摄图像上的坐标对应起来的数据。通过将投射区域FP上的坐标与第2拍摄图像数据上的坐标对应起来,能够确定触摸了投射区域FP上的触摸位置TP的用户U。具体而言,用户检测部103C例如也可以检测第2拍摄图像中映现的用户U的手的运动,确定触摸了触摸位置TP的用户U。
即,图像处理控制部103E也可以在对象用户UT触摸投射区域FP、且对象用户UT的眼睑的运动为第1状态的情况下,使第1部分P1的明亮度比对象用户UT触摸投射区域FP且对象用户UT的眼睑的运动为第2状态的情况下的第1部分P1的明亮度暗。
[设定例2:以对象用户UT的位置为基准]
如上所述,第1部分P1优选包含眼睛疲惫的对象用户UT正在观看的部分。通常,对象用户UT正观看的位置在对象用户UT的附近的可能性高。因此,在设定例2中,将第1部分P1设为从对象用户UT起规定距离以内的投射图像PC的部分。
图7A以及图7B是示意性地表示1个对象用户UT1正观看投射图像PC的情况的图。图7A是从后方观察对象用户UT1的图,图7B是从侧方观察对象用户UT1的图。另外,在图7B中立体地图示了投射图像PC,但这是为了在附图上确定第1部分P1,投射图像PC实际上被投射到壁面W上。
例如,以对象用户UT1的双眼的中间点为基准点,将由半径R的球确定的区域设为特定区域SP1。半径R例如能够设为1m左右。处理装置103在对象用户UT1的眼睑的运动成为第1状态的情况下,将与对象用户UT1的特定区域SP1重叠的投射图像PC的部分设为第1部分P1。用阴影表示第1部分P1。在该情况下,对象用户UT1越接近投射区域FP,则第1部分P1越宽。另外,第1部分P1不被设定为对象用户UT1从投射区域FP远离半径R以上的部分。
由此,无论投射图像PC是否因触摸操作而变化,都能够设定第1部分P1。另外,与投射图像PC的显示内容无关地,基于距对象用户UT的距离来设定第1部分P1,因此能够减轻处理装置103中的处理负荷。
图8是示意性地表示多个对象用户UT2~UT4位于投射图像PC的附近的情况的图。图8是从后方观察对象用户UT2~UT4的图。在图8中,例如也以各对象用户UT2~UT4的双眼的中央部为基准点,设定由半径R的球确定的特定区域SP2~SP4。处理装置103在对象用户UT2~UT4中的任意一个的眼睑的运动成为第1状态的情况下,将与该对象用户UT的特定区域SP重叠的投射图像PC的部分设为第1部分P1。例如,在对象用户UT4的眼睑的运动成为第1状态的情况下,将与特定区域SP4重叠的投射图像PC的部分作为第1部分P1,使明亮度变暗。
在此,假设多个对象用户UT位于接近的位置,特定区域SP重叠。具体而言,在图8中,存在对象用户UT2的特定区域SP2与对象用户UT3的特定区域SP3重叠的重复区域SW。在该情况下,处理装置103在仅对象用户UT2和UT3中的任意一个的眼睑的运动成为第1状态时,将眼睑的运动成为第1状态的对象用户UT的特定区域SP中的、除重复区域SW以外的部分设为第1部分P1。例如,在对象用户UT2的眼睑的运动成为第1状态、且对象用户UT3的眼睑的运动未成为第1状态的情况下,将与特定区域SP2重叠且不包含于重复区域SW的投射图像PC的部分作为第1部分P1,使明亮度变暗。
由此,对象用户UT2正在观看的部分的大半明亮度变暗,另一方面,对象用户UT3正在观看的部分的明亮度不变更。即,在多个对象用户UT中仅一部分的眼睛疲惫的情况下,使眼睛疲惫的对象用户UT的视野范围变暗,另一方面,能够防止其他对象用户UT的视野变暗,从而能够提高投射图像PC的易观看性。
[5.总结]
如以上说明的那样,显示系统1基于对象用户UT的眼睑的运动,使投射图像PC中的与对象用户UT对应的部分即第1部分P1的明亮度与其他部分不同。即,显示系统1基于对象用户UT的眼睑的运动,仅变更多个用户U有可能观看的、投射图像PC中的与对象用户UT对应的第1部分P1的明亮度。由此,在变更投射图像PC的明亮度时,能够抑制对对象用户UT以外的用户的影响,因此即使在多个用户观看投射图像PC的情况下,便利性也不易降低。
另外,显示系统1在对象用户UT的眼睑的运动为第1状态的情况下,使第1部分P1的明亮度比对象用户UT的眼睑的运动为第2状态的情况下的第1部分P1的明亮度暗。由此,例如在第1状态是表示对象用户UT的眼睛疲劳的状态的情况下,能够使对象用户UT观看的部分的明亮度变暗,减轻对象用户UT的眼睛疲劳。
另外,在显示系统1中,也可以将与对投射区域FP的触摸联动地变化的投射图像的一部分设为第1部分P1。由此,能够高精度地确定对象用户UT正在观看的部分,能够抑制使第1部分P1的明亮度变暗时对其他用户U的影响。
另外,在显示系统1中,在与投射图像PC的一部分相隔规定距离以内的位置存在多个对象用户UT的情况下,也可以在多个对象用户UT的至少1人的眼睑的运动成为第1状态时,使投射图像PC的一部分的明亮度变暗。由此,能够提高成组地观看相同的投射图像PC时的便利性。
另外,在显示系统1中,也可以在进行触摸操作的对象用户UT的眼睑的运动成为第1状态时,使通过触摸操作而变化的投射图像PC的一部分的明亮度变暗。由此,仅进行了触摸操作的对象用户UT的眼睑的状态反映于投射图像PC的明亮度,能够使投射图像PC的明亮度稳定,即使在多个用户观看投射图像PC的情况下,便利性也不易降低。
另外,在显示系统1中,在对象用户UT不再观看第1部分P1的情况下,也可以使第1部分P1的明亮度复原。由此,在多个用户U使用的显示系统1中,在用户U交替的情况下,能够使投射图像PC的明亮度返回到初始状态,即使在多个用户观看投射图像PC的情况下,便利性也不易降低。
另外,在显示系统1中,也可以在使第1部分P1的明亮度不同的情况下,向对象用户UT通知该情况。由此,在投射图像PC的一部分的明亮度变暗的情况下,对象用户UT怀疑显示系统1的故障等的可能性降低,能够提高显示系统1的使用时的便利性。

Claims (10)

1.一种显示方法,其中,该显示方法包含:
在显示面上显示图像;以及
基于面部朝向所述显示面的第1用户的眼睑的运动,使所述图像中的与所述第1用户对应的第1部分的明亮度或色调不同于所述图像中的与所述第1部分不同的第2部分的明亮度或色调。
2.根据权利要求1所述的显示方法,其中,
使所述第1部分的明亮度或色调不同于所述第2部分的明亮度或色调包含:在所述第1用户的眼睑的运动为第1状态的情况下,使所述第1部分的明亮度比所述第1用户的眼睑的运动为与所述第1状态不同的第2状态的情况下的所述第1部分的明亮度暗。
3.根据权利要求2所述的显示方法,其中,该显示方法还包含:
检测所述显示面被触摸的情况;以及
响应于所述被触摸的情况,使所述图像的一部分发生变化,
所述第1部分包含所述一部分。
4.根据权利要求3所述的显示方法,其中,
该显示方法还包含:在所述第1用户和第2用户距所述一部分为第1距离以内的情况下,检测所述第1用户的眼睑的运动和所述第2用户的眼睑的运动,
使所述第1部分的明亮度或色调不同于所述第2部分的明亮度或色调包含:在所述第1用户的眼睑的运动为所述第1状态的情况下,使所述第1部分的明亮度比所述第1用户的眼睑的运动以及所述第2用户的眼睑的运动为所述第2状态的情况下的所述第1部分的明亮度暗。
5.根据权利要求3所述的显示方法,其中,
使所述第1部分的明亮度或色调不同于所述第2部分的明亮度或色调包含:在所述第1用户触摸所述显示面且所述第1用户的眼睑的运动为所述第1状态的情况下,使所述第1部分的明亮度比所述第1用户触摸所述显示面且所述第1用户的眼睑的运动为所述第2状态的情况下的所述第1部分的明亮度暗。
6.根据权利要求3~5中的任意一项所述的显示方法,其中,
在从检测到所述显示面被触摸起的第1时间以内,发生了在从所述显示面的被触摸的位置起的第2距离以内未再次进行触摸的情况、所述第1用户未将面部朝向所述显示面的状态持续了第2时间以上的情况、以及所述第1用户与所述显示面相隔第3距离以上的情况中的任意情况时,使所述第1部分的明亮度返回到所述第1用户的眼睑的运动为所述第2状态的情况下的所述第1部分的明亮度。
7.根据权利要求1~5中的任意一项所述的显示方法,其中,
该显示方法还包含:在使所述第1部分的明亮度或色调不同的情况下,向所述第1用户通知使所述第1部分的明亮度或色调不同的情况。
8.一种显示系统,其中,该显示系统具有:
显示装置,其在显示面上显示图像;以及
处理装置,其基于面部朝向所述显示面的第1用户的眼睑的运动,将表示使所述图像中的与所述第1用户对应的第1部分的明亮度或色调不同于所述图像中的与所述第1部分不同的第2部分的明亮度或色调的所述图像的信号输出到所述显示装置。
9.根据权利要求8所述的显示系统,其中,
该显示系统还具有拍摄装置,所述拍摄装置通过拍摄与所述显示面对置的区域来输出拍摄图像,
所述处理装置基于所述拍摄图像来检测所述第1用户的眼睑的运动。
10.一种记录介质,其存储有显示程序,其中,
所述显示程序使处理装置执行:
使显示面显示图像;以及
基于面部朝向所述显示面的第1用户的眼睑的运动,使所述图像中的与所述第1用户对应的第1部分的明亮度或色调不同于所述图像中的与所述第1部分不同的第2部分的明亮度或色调。
CN202211252726.5A 2021-10-15 2022-10-13 显示方法、显示系统以及记录介质 Pending CN115988158A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2021-169378 2021-10-15
JP2021169378A JP7416033B2 (ja) 2021-10-15 2021-10-15 表示方法、表示システムおよび表示プログラム

Publications (1)

Publication Number Publication Date
CN115988158A true CN115988158A (zh) 2023-04-18

Family

ID=85957054

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202211252726.5A Pending CN115988158A (zh) 2021-10-15 2022-10-13 显示方法、显示系统以及记录介质

Country Status (3)

Country Link
US (1) US11854502B2 (zh)
JP (1) JP7416033B2 (zh)
CN (1) CN115988158A (zh)

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH10187334A (ja) 1996-12-26 1998-07-14 Canon Inc 情報入力方法および情報入力装置と情報入力用記憶媒体
JP2003076353A (ja) 2001-09-04 2003-03-14 Sharp Corp ヘッドマウント型表示装置
DE102012219433A1 (de) 2012-10-24 2014-05-08 Robert Bosch Gmbh Elektrisches Gerät, insbesondere Telekommunikationsgerät, mit einer Projektionseinrichtung und Verfahren zum Betrieb eines elektrischen Geräts
US9569992B2 (en) 2012-11-15 2017-02-14 Semiconductor Energy Laboratory Co., Ltd. Method for driving information processing device, program, and information processing device
JP6205249B2 (ja) 2012-11-30 2017-09-27 株式会社半導体エネルギー研究所 情報処理装置の駆動方法
JP6051828B2 (ja) 2012-12-10 2016-12-27 セイコーエプソン株式会社 表示装置、及び、表示装置の制御方法
US9904414B2 (en) 2012-12-10 2018-02-27 Seiko Epson Corporation Display device, and method of controlling display device
JP2015152757A (ja) 2014-02-14 2015-08-24 シャープ株式会社 眼の疲労度低減装置および制御方法
EP3035656B1 (en) * 2014-12-18 2021-08-04 Samsung Electronics Co., Ltd. Method and apparatus for controlling an electronic device
US20160334868A1 (en) * 2015-05-15 2016-11-17 Dell Products L.P. Method and system for adapting a display based on input from an iris camera
CN105824560A (zh) * 2016-03-16 2016-08-03 京东方科技集团股份有限公司 一种显示面板及其亮度调节方法、显示装置
US11322113B2 (en) 2019-09-12 2022-05-03 Logitech Europe S.A. Techniques for eye fatigue mitigation

Also Published As

Publication number Publication date
US20230119949A1 (en) 2023-04-20
JP7416033B2 (ja) 2024-01-17
US11854502B2 (en) 2023-12-26
JP2023059390A (ja) 2023-04-27

Similar Documents

Publication Publication Date Title
US11616906B2 (en) Electronic system with eye protection in response to user distance
US10481685B2 (en) Method for controlling device on the basis of eyeball motion, and device therefor
US9913349B2 (en) Display apparatus and method for controlling region for luminance reduction
US9167193B2 (en) Image display device
TWI578295B (zh) 顯示器及其亮度調整方法
US20190204911A1 (en) Eye tracking device and eye tracking method applied to video glasses and video glasses
KR20200130810A (ko) 정보 처리 장치, 정보 처리 방법, 및 기록 매체
US20150271457A1 (en) Display device, image display system, and information processing method
CN111886564A (zh) 信息处理装置、信息处理方法和程序
WO2022265770A1 (en) Variable intensity distributions for gaze detection assembly
US20100123696A1 (en) Image display apparatus and method
CN112702507A (zh) 电子装置、电子装置的控制方法及存储介质
JP6143242B1 (ja) 画像表示装置
CN115988158A (zh) 显示方法、显示系统以及记录介质
CN112578562A (zh) 显示系统、显示方法以及记录介质
JP2017161759A (ja) 網膜投影型表示装置、画像表示方法、及びプログラム
US20220155856A1 (en) Electronic Devices and Corresponding Methods for Initiating Electronic Communications with a Remote Electronic Device
CN116413915A (zh) 一种近眼显示设备的亮度调节方法、近眼显示设备及介质
US20220108658A1 (en) Display device, photoelectric conversion device, electronic device, moving body, and wearable device
TW202213994A (zh) 擴增實境系統與其顯示亮度調整方法
JP2012226507A (ja) 発光体識別装置、発光体識別方法、および発光体識別プログラム
US11972742B2 (en) Display apparatus, photoelectric conversion apparatus, electronic equipment, and wearable device
US11984071B2 (en) Light emitting apparatus, control method of the same, display apparatus, photoelectric conversion apparatus, and electronic equipment
US20240112608A1 (en) Display system and display method
JP5208719B2 (ja) 撮像装置、表示装置および撮像方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination