CN103927966A - 显示控制方法及显示控制装置 - Google Patents

显示控制方法及显示控制装置 Download PDF

Info

Publication number
CN103927966A
CN103927966A CN201410132376.8A CN201410132376A CN103927966A CN 103927966 A CN103927966 A CN 103927966A CN 201410132376 A CN201410132376 A CN 201410132376A CN 103927966 A CN103927966 A CN 103927966A
Authority
CN
China
Prior art keywords
display device
indication range
nearly eye
eye display
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
CN201410132376.8A
Other languages
English (en)
Inventor
周梁
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Zhigu Ruituo Technology Services Co Ltd
Original Assignee
Beijing Zhigu Ruituo Technology Services Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Zhigu Ruituo Technology Services Co Ltd filed Critical Beijing Zhigu Ruituo Technology Services Co Ltd
Priority to CN201410132376.8A priority Critical patent/CN103927966A/zh
Publication of CN103927966A publication Critical patent/CN103927966A/zh
Priority to CN201410645331.0A priority patent/CN104598180B/zh
Priority to PCT/CN2014/095323 priority patent/WO2015149557A1/en
Priority to US15/122,918 priority patent/US9911214B2/en
Priority to US15/874,640 priority patent/US10083675B2/en
Withdrawn legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/002D [Two Dimensional] image generation
    • G06T11/60Editing figures and text; Combining figures or text
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0101Head-up displays characterised by optical features
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/017Head mounted
    • G02B27/0172Head mounted characterised by optical features
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/36Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory
    • G09G5/38Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory with means for controlling the display position
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0101Head-up displays characterised by optical features
    • G02B2027/0123Head-up displays characterised by optical features comprising devices increasing the field of view
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0101Head-up displays characterised by optical features
    • G02B2027/014Head-up displays characterised by optical features comprising information/image processing systems
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0101Head-up displays characterised by optical features
    • G02B2027/0147Head-up displays characterised by optical features comprising a device modifying the resolution of the displayed image
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/017Head mounted
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00Control of display operating conditions
    • G09G2320/06Adjustment of display parameters
    • G09G2320/068Adjustment of display parameters for control of viewing angle adjustment
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00Aspects of display data processing
    • G09G2340/04Changes in size, position or resolution of an image

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • General Engineering & Computer Science (AREA)
  • Optics & Photonics (AREA)
  • Computer Hardware Design (AREA)
  • User Interface Of Digital Computer (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

本发明实施例公开了一种显示控制方法及显示控制装置,涉及近眼显示技术领域。所述方法包括:确定主显示设备上显示的图像在用户视野内的第一显示范围;根据所述第一显示范围使用至少一个近眼显示设备显示与所述图像相关的增强信息。本发明实施例的方法及装置通过使用至少一个近眼显示设备补充用户适宜观看的距离显示时不能完全填充用户视野的设备的显示,尽可能使用增强信息充满用户视野,能够提供良好的浸入式的媒体观赏体验。

Description

显示控制方法及显示控制装置
技术领域
本申请涉及近眼显示领域,尤其涉及一种显示控制方法及显示控制装置。
背景技术
伴随着便携式设备(手机,平板电脑等)的高速普及,以及网络连接速度、便携式计算能力、显示质量的不断提高,便携式设备已经成为了一个很好的娱乐平台,消费者花费在便携式设备上时间也越来越多,例如,玩游戏、看视频等。
消费者喜欢通常尺寸较小的便携式设备,但不喜欢只能显示小图像的小显示屏。人眼视觉系统在水平方向上的视野(Field of View,FOV)有大约180度,在垂直方向有大约135度。移动设备能够显示高质量的媒体内容,但是受到屏幕尺寸限制,很难填充满整个视野范围。举例来说,按照目前主流平板电脑显示屏幕尺寸(20cm x14cm),用户观看距离为40cm,人眼视野在水平方向只有大概30度范围被图像内容填充,和人眼180度水平视野范围相差甚远。
发明内容
本申请的目的是:提供一种显示控制方法及显示控制装置,能够提供良好的观赏体验。
第一方面,本发明实施例提供了一种显示控制方法,包括:
确定主显示设备上显示的图像在用户视野内的第一显示范围;
根据所述第一显示范围使用至少一个近眼显示设备显示与所述图像相关的增强信息。
结合第一方面,在第一种可能的实现方式中,所述根据所述第一显示范围使用至少一个近眼显示设备显示与所述图像相关的增强信息包括:
根据所述第一显示范围,确定所述至少一个近眼显示设备在用户视野内的第二显示范围;
根据所述图像获取所述增强信息;
使用所述至少一个近眼显示设备在所述第二显示范围显示所述增强信息。
结合第一方面的第一种可能的实现方式,在第二种可能的实现方式中,所述第二显示范围包括:至少部分第一显示范围以及用户视野内除所述第一显示范围外的区域。
结合第一方面的第一种可能的实现方式,在第三种可能的实现方式中,所述第二显示范围包括:用户视野内除所述第一显示范围外的区域。
结合第一方面的第三种可能的实现方式,在第四种可能的实现方式中,所述第二显示范围包括:用户的边缘视力区域。
结合第一方面的第一种可能的实现方式,在第五种可能的实现方式中,所述根据所述图像获取所述增强信息中:
根据所述图像的特性获取所述增强信息。
结合第一方面的第五种可能的实现方式,在第六种可能的实现方式中,所述图像的特性包括以下中的至少一项:颜色、亮度、纹理、上下文、运动、显示属性。
结合第一方面或第一方面的上述任一种可能的实现方式,在第七种可能的实现方式中,所述方法还包括:
调整所述至少一个近眼显示设备的显示参数。
结合第一方面的第七种可能的实现方式,在第八种可能的实现方式中,在所述调整所述至少一个近眼显示设备的显示参数中:
根据所述主显示设备与用户眼睛之间的位置关系调整所述至少一个近眼显示设备的显示参数。
结合第一方面的第七种可能的实现方式,在第九种可能的实现方式中,在所述调整所述至少一个近眼显示设备的显示参数中:
根据所述主显示设备的显示特性调整所述至少一个近眼显示设备的显示参数。
结合第一方面的第九种可能的实现方式,在第十种可能的实现方式中,所述显示特性包括:所述主显示设备的显示屏弧度。
结合第一方面的第九种可能的实现方式,在第十一种可能的实现方式中,所述显示特性包括:所述主显示设备的分辨率。
结合第一方面或第一方面的上述任一种可能的实现方式,在第十二种可能的实现方式中,所述增强信息包括以下中的至少一项:与所述图像的内容相关的物体、场景、提示信息。
第二方面,本发明实施例提供了一种显示控制装置,所述装置包括:
一显示范围确定模块,用于确定主显示设备上显示的图像在用户视野内的第一显示范围;
一显示控制模块,用于根据所述第一显示范围使用至少一个近眼显示设备显示与所述图像相关的增强信息。
结合第二方面,在第一种可能的实现方式中,所述显示控制模块包括:
一显示范围确定单元,用于根据所述第一显示范围,确定所述至少一个近眼显示设备在用户视野内的第二显示范围;
一增强信息获取单元,用于根据所述图像获取所述增强信息;
一显示控制单元,用于使用所述至少一个近眼显示设备在所述第二显示范围显示所述增强信息。
结合第二方面的第一种可能的实现方式,在第二种可能的实现方式中,所述增强信息获取单元根据所述图像的特性获取所述增强信息。
结合第二方面或第二方面的上述任一种可能的实现方式,在第三种可能的实现方式中,所述装置还包括:
一调整模块,用于调整所述至少一个近眼显示设备的显示参数。
结合第二方面的第三种可能的实现方式,在第四种可能的实现方式中,所述调整模块根据所述主显示设备与用户眼睛之间的位置关系调整所述至少一个近眼显示设备的显示参数。
结合第二方面的第三种可能的实现方式,在第五种可能的实现方式中,所述调整模块根据所述主显示设备的显示特性调整所述至少一个近眼显示设备的显示参数。
第三方面,本发明实施例提供了一种近眼显示设备,包括第二方面或第二方面的上述任一种可能的实现方式的显示控制装置。
本发明实施例的方法及装置通过使用至少一个近眼显示设备补充用户适宜观看的距离显示时不能完全填充用户视野的设备的显示,尽可能使用增强信息充满用户视野,为用户提供良好的浸入式的媒体观赏体验。
附图说明
图1为本发明实施例的一种显示控制方法的流程图;
图2为本方面实施例的一种显示控制方法中与主显示设备的显示对应的用户视野示意图;
图3(a)-图3(c)为本方面实施例的一种显示控制方法中主显示设备与近眼显示设备协同显示时对应的用户视野示意图;
图4为本发明实施例的一种显示控制装置的结构示意图;
图5为本发明实施例的一种显示控制装置中显示控制模块的结构示意图;
图6为本发明实施例的另一种显示控制装置的结构示意图;
图7为本发明实施例的又一种显示控制装置的结构示意图;
图8为本申请实施例一种近眼显示设备的结构示意图。
具体实施方式
下面结合附图(若干附图中相同的标号表示相同的元素)和实施例,对本申请的具体实施方式作进一步详细说明。以下实施例用于说明本申请,但不用来限制本申请的范围。
本领域技术人员可以理解,本申请中的“第一”、“第二”等术语仅用于区别不同步骤、设备或模块等,既不代表任何特定技术含义,也不表示它们之间的必然逻辑顺序。
本发明各实施例的方法及装置用于为使用具有显示功能的设备观看图像(例如,文本、图案、视频、游戏等)的用户提供浸入式的媒体观赏体验。这样的设备在本发明各实施例中称为“主显示设备”,为图像的初始观看设备,通常指在用户适宜观看的距离显示时不能完全填充用户视野的设备,这样的设备不限于显示屏尺寸有限的便携式设备,例如,手机、平板电脑等,也可包括与图像质量相比显示能力相对有限的任意其他设备,例如,台式机、电视等。
如图1所示,本发明实施例的显示控制方法包括:
S110.确定主显示设备上显示的图像在用户视野内的第一显示范围。
人眼视觉系统在水平方向上的视野FOV有大约180度,在垂直方向有大约135度。在观看图像较舒适的观看距离的前提下,主显示设备的显示很难填充用户的整个视野范围。如图2所示,主显示设备上显示的图像填充了用户视野FOV的第一显示范围S1,除该第一显示范围S1外,用户视野FOV内还有很大的未填充区域。在本发明实施例的方法中,可通过多种方式来确定该第一显示范围S1,例如,通过检测主显示设备与用户眼睛之间的相对位置并结合主显示设备的尺寸,确定该第一显示范围S1;或者,通过采集用户眼底的成像或使用近眼显示设备采集主显示设备的图像,进一步采用图像处理和分析的方法确定该第一显示范围S1。
S120.根据所述第一显示范围使用至少一个近眼显示设备显示与所述图像的内容相关的增强信息,以尽可能的填充整个用户视野。
近眼显示设备是能够在接近用户眼睛的位置呈现图像源所提供图像的设备。这样的近眼显示设备亦称为头戴显示器(HMD),例如智能眼镜、头盔、护目镜等,当然也并不限于头戴,也包括机载、穿戴等其他可能的携带形式。近眼显示设备可在近眼位置可穿透式地呈现所述图像的虚像,通过控制其穿透式呈现虚像的位置,使得最终在用户视网膜上的成像信息除了包括近眼显示设备呈现的图像外,还包括用户视野内其余显示范围中呈现的图像,例如背景图像或其他显示设备显示的图像。近眼显示设备具有较大的可视区域,而且成本和功耗均较低、重量和尺寸也比较小。在本发明实施例的方法中,至少一个近眼显示设备包括一个或多个近眼显示设备的可能,且所述的近眼显示设备可为单目或双目近眼显示设备。此外,单个近眼显示设备可具有多种分辨率。
根据第一显示范围使用至少一个近眼显示设备显示与所述图像相关的增强信息,能够补充主显示设备有限的显示,通过尽可能填充用户视野的方式提高用户的观赏体验。增强信息为与所述图像相关的物体、场景、提示信息等等,增强信息的显示能够进一步提供用户在观看主显示设备显示的图像时的浸入式体验。
综上,本发明实施例的方法通过使用至少一个近眼显示设备补充用户适宜观看的距离显示时不能完全填充用户视野的设备的显示,能够尽可能使用增强信息充满用户视野,为用户提供良好的浸入式的媒体观赏体验。
其中,步骤S120可进一步包括:
S121.根据所述第一显示范围确定所述至少一个近眼显示设备在用户视野内的第二显示范围。
根据想要提供给用户的观赏体验的不同程度,在确定了第一显示范围后,可确定多种可能的第二显示范围。如图3(a)所示的,第二显示范围S2可包括:至少部分第一显示范围S1(图3(a)中所示为包括第一显示范围S1的边缘部分,也即第二显示范围S2与第一显示范围S1的边缘有一定的重叠)以及用户视野FOV内除所述第一显示范围S1外的区域,图3(a)中斜线所示。还可如图3(b)所示的,仅包括用户视野FOV内除所述第一显示范围S1外的区域。需要说明的是,人眼具有视力的视网膜中央凹特性:在视野范围FOV内人眼视觉的敏感度是不一样,视网膜上的Foveal Vision(视网膜中央凹视力)区域具有很高的视觉敏锐度(例如,对颜色、纹理等较敏感),而Peripheral Vision(边缘视力)区域对于运动信息更加敏感,也即,中央凹视力区域较适宜用于观看主显示设备上显示的图像,而边缘视力区域对增强信息较敏感,因此,第二显示范围S2为用户的边缘视力区域能够为用户提供最理想的观赏体验。响应于此,第一显示范围S1如果正好填充了整个视网膜中央凹视力区域,则第二显示范围S2位于边缘视力区域时二者紧邻,如图3(b)所示;如果第一显示范围S1未填满整个视网膜中央凹视力区域时,第二显示范围S2可与第一显示范围S1有一定的间隙,如图3(c)所示。
S122.根据所述图像获取所述增强信息。
增强信息为与所述图像相关的物体、场景、提示信息,增强信息能够为用户提供观看图像时的浸入式体验。在本发明实施例的方法中,可通过多种方式获取该增强信息,例如,所述图像中可能已经包含了对应的增强信息,可直接从该图像中读取增强信息;可根据所述图像的内容来确定增强信息,例如,根据所述图像的特性确定所述增强信息,其中,图像的特性包括以下内容中的至少一项:颜色、亮度、纹理、上下文、运动、显示属性(例如,帧频)等等。根据图像的特性确定增强信息可以是利用本领域已成熟的增强现实技术(AugmentedReality Technique,AR)相关的算法来确定增强信息的过程。例如:使用跟踪算法、光流分析、亮度、形状感知等检测图像中场景变化,并随着场景变化结合外推算法等,确定在主显示设备显示屏外显示的增强信息;再例如,利用自然语言处理(NLP)侦听并理解图像的上下文,利用颜色以及图像生成营造浸入式故事环境这样的增强信息,等等。本发明各实施例中的增强信息主要为可视化信息。
S123.使用所述至少一个近眼显示设备在所述第二显示范围显示所述增强信息。
确定了所述至少一个近眼显示设备的显示范围和显示内容之后,即可使用所述至少一个近眼显示设备在该第二显示范围显示该增强信息,从而为用户提供浸入式的媒体观赏体验。
需要说明的是,为了保障观赏效果,所述至少一个近眼显示设备所显示的增强信息必须在空间定位上与主显示设备所显示的内容相关,当用户转动或移动主显示设备时,第一显示范围变动,所述至少一个近眼显示设备所显示的第二显示范围也随之做相应的变化。
使用本发明实施例的方法,用户所看到的是主显示设备显示的实像以及所述至少一个近眼显示设备显示的虚像的结合,为了使近眼显示设备的显示不会干扰用户对主显示设备显示的观赏,而是起到补充甚至提高观赏体验的作用,应尽可能自然地呈现近眼显示设备显示的虚像。因此,为了保障观赏效果,本发明实施例的方法还包括:
S130.调整所述至少一个近眼显示设备的显示参数,以将增强信息清晰地呈现给用户,优化整体显示效果。
可根据所述主显示设备与用户眼睛之间的位置关系调整所述至少一个近眼显示设备的显示参数。例如,将所述至少一个近眼显示设备显示的虚像呈现在与主显示设备的显示同一个平面内,响应于此,应根据主显示设备与用户眼睛之间的距离调整所述至少一个近眼显示设备的显示参数。
还可根据所述主显示设备的显示特性调整所述至少一个近眼显示设备的显示参数。
所述显示特性可包括:所述主显示设备的显示屏弧度。例如,当主显示设备具有呈一定弧度的显示屏时,应相应地调整所述至少一个近眼显示设备的显示参数,以使所述至少一个近眼显示设备的显示与主显示设备的显示能够自然平滑的呈弧度地衔接。
所述显示特性还可包括:所述主显示设备的分辨率。根据人眼视力的视网膜中央凹特性,主显示设备可以较高的分辨率显示图像,而近眼显示设备所显示的增强信息不需要与主显示设备同样高的分辨率,因此,可根据主显示设备的分辨率调整所述至少一个近眼显示设备的分辨率,例如,调整所述至少一个近眼显示设备的分辨率低于主显示设备的分辨率。
本领域技术人员可以理解,在本申请具体实施方式的上述方法中,各步骤的序号大小并不意味着执行顺序的先后,各步骤的执行顺序应以其功能和内在逻辑确定,而不应对本申请具体实施方式的实施过程构成任何限定。
本发明实施例还提供了一种显示控制装置,该装置用于为使用主显示设备观看图像(例如,文本、图案、视频、游戏等)的用户提供浸入式的媒体观赏体验。该装置可为主显示设备或近眼显示设备本身,也可为其一部分,还可为独立于主显示设备或近眼显示设备任一方的第三方设备,或者部分属于主显示设备或近眼显示设备。如图4所示,本发明实施例的显示控制装置400包括:
显示范围确定模块410,用于确定主显示设备上显示的图像在用户视野内的第一显示范围。
人眼视觉系统在水平方向上的视野FOV有大约180度,在垂直方向有大约135度。在观看图像较舒适的观看距离的前提下,主显示设备的显示很难填充用户的整个视野范围。如图2所示,主显示设备上显示的图像填充了用户视野FOV的第一显示范围S1,除该第一显示范围S1外,用户视野FOV内还有很大的未填充区域。在本发明实施例的装置中,显示范围确定模块410可通过多种方式来确定该第一显示范围S1,例如,通过检测主显示设备与用户眼睛之间的相对位置并结合主显示设备的尺寸,确定该第一显示范围S1;或者,通过采集用户眼底的成像或借助近眼显示设备采集主显示设备的图像,采用图像处理和分析的方法确定该第一显示范围S1。
显示控制模块420,用于根据所述第一显示范围使用至少一个近眼显示设备显示与所述图像的内容相关的增强信息,以尽可能的填充整个用户视野。
近眼显示设备是能够在接近用户眼睛的位置呈现图像源所提供图像的设备。这样的近眼显示设备亦称为头戴显示器(HMD),例如智能眼镜、头盔等,当然也并不限于头戴,也包括机载、穿戴等其他可能的携带形式。近眼显示设备可在近眼位置可穿透式地呈现所述图像的虚像,无论是哪种方式,通过控制其穿透式呈现虚像的位置,使得最终在用户视网膜上的成像信息除了包括近眼显示设备呈现的图像外,还包括用户视野内其余显示范围中呈现的图像,例如背景图像或其他显示设备显示的图像。近眼显示设备具有较大的可视区域,而且成本和功耗均较低、重量和尺寸也比较小。在本发明实施例的装置中,至少一个近眼显示设备包括一个或多个近眼显示设备的可能,所述的近眼显示设备可为单目或双目近眼显示设备。此外,单个近眼显示设备可具有多种分辨率。
显示控制模块420根据第一显示范围使用至少一个近眼显示设备显示与所述图像相关的增强信息,能够补充主显示设备有限的显示屏尺寸,通过尽可能填充用户视野的方式提高用户的观赏体验。增强信息为与所述图像相关的物体、场景、提示信息等等,增强信息的显示能够进一步提供用户在观看主显示设备显示的图像信息时的浸入式体验。
综上,本发明实施例的装置通过使用至少一个近眼显示设备补充用户适宜观看的距离显示时不能完全填充用户视野的设备的显示,能够尽可能使用增强信息充满用户视野,为用户提供良好的浸入式的媒体观赏体验。
其中,如图5所示,显示控制模块420可进一步包括:
显示范围确定单元421,用于根据所述第一显示范围确定所述至少一个近眼显示设备在用户视野内的第二显示范围。
根据想要提供给用户的观赏体验的不同程度,显示范围确定单元421在确定了第一显示范围后,可确定多种可能的第二显示范围。如图3(a)所示的,第二显示范围S2可包括:至少部分第一显示范围S1(图3(a)中所示为包括第一显示范围S1的边缘部分,也即第二显示范围S2与第一显示范围S1的边缘有一定的重叠)以及用户视野FOV内除所述第一显示范围S1外的区域,图3(a)中斜线所示。还可如图3(b)所示的,仅包括用户视野FOV内除所述第一显示范围S1外的区域。需要说明的是,人眼具有视力的视网膜中央凹特性:在视野范围FOV内人眼视觉的敏感度是不一样,视网膜上的FovealVision(视网膜中央凹视力)区域具有很高的视觉敏锐度(例如,对颜色、纹理等较敏感),而Peripheral Vision(边缘视力)区域对于运动信息更加敏感,也即,中央凹视力区域较适宜用于观看主显示设备上显示的图像,而边缘视力区域对增强信息较敏感,因此,第二显示范围S2为用户的边缘视力区域能够为用户提供最理想的观赏体验。响应于此,第一显示范围S1如果正好填充了整个视网膜中央凹视力区域,则第二显示范围S2位于边缘视力区域时二者紧邻,如图3(b)所示;如果第一显示范围S1未填满整个视网膜中央凹视力区域时,第二显示范围S2可与第一显示范围S1有一定的间隙,如图3(c)所示。
增强信息获取单元422,用于根据所述图像获取所述增强信息。
增强信息为与所述图像相关的物体、场景、提示信息,增强信息能够为用户提供观看图像时的浸入式体验。在本发明实施例的装置中,增强信息获取单元422可通过多种方式获取该增强信息,例如,所述图像中可能已经包含了对应的增强信息,则直接从该图像中读取增强信息,相应地,本发明实施例的装置可包括用于获取该增强信息的通信模块,可与主显示设备通信,或与所述至少一个近眼显示设备通信获取该增强信息;可根据所述图像的内容来确定增强信息,例如,根据所述图像的特性确定所述增强信息,其中,图像的特性包括以下内容中的至少一项:颜色、亮度、纹理、上下文、运动、显示属性(例如,帧频)等等。根据图像的特性确定增强信息可以是利用本领域已成熟的增强现实技术相关的算法来确定增强信息的过程。例如:使用跟踪算法、光流分析、亮度、形状感知等检测图像中场景变化,并随着场景变化结合外推算法等,确定在主显示设备显示屏外显示的增强信息;再例如,利用自然语言处理(NLP)侦听并理解图像的上下文,利用颜色以及图像生成营造浸入式故事环境这样的增强信息,等等。相应地,为了获取增强信息,增强信息获取单元422可包括或利用近眼显示设备的部分模块或单元,获取主显示设备上显示的图像,以用于确定增强显示信息,等等。本发明各实施例中的增强信息主要为可视化信息。
显示控制单元423,用于使用所述至少一个近眼显示设备在所述第二显示范围显示所述增强信息。
确定了所述至少一个近眼显示设备的显示范围和显示内容之后,即可使用所述至少一个近眼显示设备在该第二显示范围显示该增强信息,从而为用户提供浸入式的媒体观赏体验。
需要说明的是,为了保障观赏效果,所述至少一个近眼显示设备所显示的增强信息必须在空间定位上与主显示设备所显示的内容相关,当用户转动或移动主显示设备时,第一显示范围变动,所述至少一个近眼显示设备所显示的第二显示范围也随之做相应的变化。
通过本发明实施例的装置,用户所看到的是主显示设备显示的实像以及所述至少一个近眼显示设备显示的虚像的结合,为了使近眼显示设备的显示不会干扰用户对主显示设备显示的观赏,而是起到补充甚至提高观赏体验的效果,应尽可能自然地呈现将所述至少一个近眼显示设备显示的虚像。因此,为了保障观赏效果,如图6所示,本发明实施例的装置还包括:
调整模块430,用于调整所述至少一个近眼显示设备的显示参数,以将增强信息清晰地呈现给用户。
可根据所述主显示设备与用户眼睛之间的位置关系调整所述至少一个近眼显示设备的显示参数。例如,将所述至少一个近眼显示设备显示的虚像呈现在与主显示设备的显示同一个平面内,响应于此,应根据主显示设备与用户眼睛之间的距离调整所述至少一个近眼显示设备的显示参数。
还可根据所述主显示设备的显示特性调整所述至少一个近眼显示设备的显示参数。
所述显示特性可包括:所述主显示设备的显示屏弧度。当主显示设备具有呈一定弧度的显示屏时,应相应地调整所述至少一个近眼显示设备的显示参数,以使所述至少一个近眼显示设备的显示与主显示设备的显示能够自然平滑的衔接。
所述显示特性还可包括:所述主显示设备的分辨率。根据人眼视力的视网膜中央凹特性,主显示设备可以较高的分辨率显示图像,而近眼显示设备所显示的增强信息不一定需要与主显示设备同样高的分辨率,可根据主显示设备的分辨率调整所述至少一个近眼显示设备的分辨率,例如,调整所述至少一个近眼显示设备的分辨率小于主显示设备的分辨率。
图7为本方面实施例提供的又一种显示控制装置700的结构示意图,本申请具体实施例并不对显示控制装置700的具体实现做限定。如图7所示,该显示控制装置700可以包括:
处理器(processor)710、通信接口(Communications Interface)720、存储器(memory)730、以及通信总线740。其中:
处理器710、通信接口720、以及存储器730通过通信总线740完成相互间的通信。
通信接口720,用于与比如客户端等的网元通信。
处理器710,用于执行程序732,具体可以执行上述方法实施例中的相关步骤。
具体地,程序732可以包括程序代码,所述程序代码包括计算机操作指令。
处理器710可能是一个中央处理器CPU,或者是特定集成电路ASIC(Application Specific Integrated Circuit),或者是被配置成实施本申请实施例的一个或多个集成电路。
存储器730,用于存放程序732。存储器730可能包含高速RAM存储器,也可能还包括非易失性存储器(non-volatile memory),例如至少一个磁盘存储器。程序732具体可以用于使得所述显示控制装置700执行以下步骤:
确定主显示设备上显示的图像在用户视野内的第一显示范围;
根据所述第一显示范围使用至少一个近眼显示设备显示与所述图像相关的增强信息。
程序732中各步骤的具体实现可以参见上述实施例中的相应步骤和单元中对应的描述,在此不赘述。所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,上述描述的设备和模块的具体工作过程,可以参考前述方法实施例中的对应过程描述,在此不再赘述。
如图8所示,本发明实施例还提供了一种近眼显示设备800,包括图4至图7所示实施例中所述的显示控制装置。
在本方面实施例中,所述近眼显示设备可例如为智能眼镜、头盔、护目镜等。
本领域普通技术人员可以意识到,结合本文中所公开的实施例描述的各示例的单元及方法步骤,能够以电子硬件、或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本申请的范围。
所述功能如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本申请各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
以上实施方式仅用于说明本申请,而并非对本申请的限制,有关技术领域的普通技术人员,在不脱离本申请的精神和范围的情况下,还可以做出各种变化和变型,因此所有等同的技术方案也属于本申请的范畴,本申请的专利保护范围应由权利要求限定。

Claims (20)

1.一种显示控制方法,其特征在于,所述方法包括:
确定主显示设备上显示的图像在用户视野内的第一显示范围;
根据所述第一显示范围使用至少一个近眼显示设备显示与所述图像相关的增强信息。
2.根据权利要求1所述的方法,其特征在于,所述根据所述第一显示范围使用至少一个近眼显示设备显示与所述图像相关的增强信息包括:
根据所述第一显示范围,确定所述至少一个近眼显示设备在用户视野内的第二显示范围;
根据所述图像获取所述增强信息;
使用所述至少一个近眼显示设备在所述第二显示范围显示所述增强信息。
3.根据权利要求2所述的方法,其特征在于,所述第二显示范围包括:至少部分第一显示范围以及用户视野内除所述第一显示范围外的区域。
4.根据权利要求2所述的方法,其特征在于,所述第二显示范围包括:用户视野内除所述第一显示范围外的区域。
5.根据权利要求4所述的方法,其特征在于,所述第二显示范围包括:用户的边缘视力区域。
6.根据权利要求2所述的方法,其特征在于,所述根据所述图像获取所述增强信息中:
根据所述图像的特性获取所述增强信息。
7.根据权利要求6所述的方法,其特征在于,所述图像的特性包括以下中的至少一项:颜色、亮度、纹理、上下文、运动、显示属性。
8.根据权利要求1至7中任一项所述的方法,其特征在于,所述方法还包括:
调整所述至少一个近眼显示设备的显示参数。
9.根据权利要求8所述的方法,其特征在于,在所述调整所述至少一个近眼显示设备的显示参数中:
根据所述主显示设备与用户眼睛之间的位置关系调整所述至少一个近眼显示设备的显示参数。
10.根据权利要求8所述的方法,其特征在于,在所述调整所述至少一个近眼显示设备的显示参数中:
根据所述主显示设备的显示特性调整所述至少一个近眼显示设备的显示参数。
11.根据权利要求10所述的方法,其特征在于,所述显示特性包括:所述主显示设备的显示屏弧度。
12.根据权利要求10所述的方法,其特征在于,所述显示特性包括:所述主显示设备的分辨率。
13.根据权利要求1至12中任一项所述的方法,其特征在于,所述增强信息包括以下中的至少一项:与所述图像的内容相关的物体、场景、提示信息。
14.一种显示控制装置,其特征在于,所述装置包括:
一显示范围确定模块,用于确定主显示设备上显示的图像在用户视野内的第一显示范围;
一显示控制模块,用于根据所述第一显示范围使用至少一个近眼显示设备显示与所述图像相关的增强信息。
15.根据权利要求14所述的装置,其特征在于,所述显示控制模块包括:
一显示范围确定单元,用于根据所述第一显示范围,确定所述至少一个近眼显示设备在用户视野内的第二显示范围;
一增强信息获取单元,用于根据所述图像获取所述增强信息;
一显示控制单元,用于使用所述至少一个近眼显示设备在所述第二显示范围显示所述增强信息。
16.根据权利要求15所述的装置,其特征在于,所述增强信息获取单元根据所述图像的特性获取所述增强信息。
17.根据权利要求14至16中任一项所述的装置,其特征在于,所述装置还包括:
一调整模块,用于调整所述至少一个近眼显示设备的显示参数。
18.根据权利要求17所述的装置,其特征在于,所述调整模块根据所述主显示设备与用户眼睛之间的位置关系调整所述至少一个近眼显示设备的显示参数。
19.根据权利要求17所述的装置,其特征在于,所述调整模块根据所述主显示设备的显示特性调整所述至少一个近眼显示设备的显示参数。
20.一种近眼显示设备,其特征在于,包括权利要求14至19中任一项所述的显示控制装置。
CN201410132376.8A 2014-04-02 2014-04-02 显示控制方法及显示控制装置 Withdrawn CN103927966A (zh)

Priority Applications (5)

Application Number Priority Date Filing Date Title
CN201410132376.8A CN103927966A (zh) 2014-04-02 2014-04-02 显示控制方法及显示控制装置
CN201410645331.0A CN104598180B (zh) 2014-04-02 2014-11-06 显示控制方法、装置及近眼显示设备
PCT/CN2014/095323 WO2015149557A1 (en) 2014-04-02 2014-12-29 Display control method and display control apparatus
US15/122,918 US9911214B2 (en) 2014-04-02 2014-12-29 Display control method and display control apparatus
US15/874,640 US10083675B2 (en) 2014-04-02 2018-01-18 Display control method and display control apparatus

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201410132376.8A CN103927966A (zh) 2014-04-02 2014-04-02 显示控制方法及显示控制装置

Publications (1)

Publication Number Publication Date
CN103927966A true CN103927966A (zh) 2014-07-16

Family

ID=51146171

Family Applications (2)

Application Number Title Priority Date Filing Date
CN201410132376.8A Withdrawn CN103927966A (zh) 2014-04-02 2014-04-02 显示控制方法及显示控制装置
CN201410645331.0A Active CN104598180B (zh) 2014-04-02 2014-11-06 显示控制方法、装置及近眼显示设备

Family Applications After (1)

Application Number Title Priority Date Filing Date
CN201410645331.0A Active CN104598180B (zh) 2014-04-02 2014-11-06 显示控制方法、装置及近眼显示设备

Country Status (3)

Country Link
US (1) US9911214B2 (zh)
CN (2) CN103927966A (zh)
WO (1) WO2015149557A1 (zh)

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104506846A (zh) * 2014-12-27 2015-04-08 北京智谷睿拓技术服务有限公司 高分辨率显示控制方法和装置
WO2015149557A1 (en) * 2014-04-02 2015-10-08 Beijing Zhigu Rui Tuo Tech Co., Ltd Display control method and display control apparatus
WO2016141851A1 (en) * 2015-03-12 2016-09-15 Beijing Zhigu Rui Tuo Tech Co., Ltd. Display control methods and apparatuses
WO2016177326A1 (en) * 2015-05-04 2016-11-10 Beijing Zhigu Rui Tuo Tech Co., Ltd. Display control methods and apparatuses
CN107204167A (zh) * 2017-06-30 2017-09-26 武汉华星光电技术有限公司 终端设备及显示方法
WO2018103072A1 (zh) * 2016-12-09 2018-06-14 深圳市柔宇科技有限公司 用户界面的调整方法、调整系统及头戴显示设备
US10083675B2 (en) 2014-04-02 2018-09-25 Beijing Zhigu Rui Tuo Tech Co., Ltd Display control method and display control apparatus
CN109637418A (zh) * 2019-01-09 2019-04-16 京东方科技集团股份有限公司 一种显示面板及其驱动方法、显示装置

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2017204138A1 (ja) * 2016-05-26 2017-11-30 富士フイルム株式会社 撮影装置
CN108076195B (zh) * 2016-11-07 2024-05-28 深圳市易瞳科技有限公司 实现视频透视的增强现实手机盒
CN106526867B (zh) 2017-01-22 2018-10-30 网易(杭州)网络有限公司 影像画面的显示控制方法、装置及头戴式显示设备
CN108572450B (zh) * 2017-03-09 2021-01-29 宏碁股份有限公司 头戴式显示器、其视野校正方法以及混合现实显示系统
CN110231712A (zh) * 2019-04-29 2019-09-13 成都理想境界科技有限公司 一种增强现实ar眼镜
CN110708533B (zh) * 2019-12-16 2020-04-14 杭州融梦智能科技有限公司 基于增强现实的视觉辅助方法及智能穿戴设备
CN111526293B (zh) * 2020-04-30 2021-10-15 张赛 一种基于智能终端拍摄模式的调整供电的方法和装置
DE102020215559A1 (de) * 2020-12-09 2022-06-09 Carl Zeiss Meditec Ag Verfahren zum Betreiben eines Visualisierungssystems bei einer chirurgischen Anwendung und Visualisierungssystem für eine chirurgische Anwendung
CN112882672B (zh) * 2021-02-26 2024-01-23 京东方科技集团股份有限公司 近眼显示控制方法、装置及近眼显示设备

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
FI20012209A (fi) * 2001-11-14 2003-06-24 Nokia Corp Menetelmä informaation esittämisen ohjaamiseksi elektroniikkalaitteessa ja elektroniikkalaite
US7495638B2 (en) 2003-05-13 2009-02-24 Research Triangle Institute Visual display with increased field of view
KR100809479B1 (ko) * 2006-07-27 2008-03-03 한국전자통신연구원 혼합 현실 환경을 위한 얼굴 착용형 디스플레이 장치
WO2012040386A1 (en) 2010-09-21 2012-03-29 4Iiii Innovations Inc. Head-mounted peripheral vision display systems and methods
US9213405B2 (en) * 2010-12-16 2015-12-15 Microsoft Technology Licensing, Llc Comprehension and intent-based content for augmented reality displays
US20130002724A1 (en) * 2011-06-30 2013-01-03 Google Inc. Wearable computer with curved display and navigation tool
US8754831B2 (en) * 2011-08-02 2014-06-17 Microsoft Corporation Changing between display device viewing modes
US20140002629A1 (en) 2012-06-29 2014-01-02 Joshua J. Ratcliff Enhanced peripheral vision eyewear and methods using the same
CN103577788A (zh) * 2012-07-19 2014-02-12 华为终端有限公司 增强现实的实现方法和装置
CN103927966A (zh) * 2014-04-02 2014-07-16 北京智谷睿拓技术服务有限公司 显示控制方法及显示控制装置

Cited By (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2015149557A1 (en) * 2014-04-02 2015-10-08 Beijing Zhigu Rui Tuo Tech Co., Ltd Display control method and display control apparatus
US10083675B2 (en) 2014-04-02 2018-09-25 Beijing Zhigu Rui Tuo Tech Co., Ltd Display control method and display control apparatus
US9911214B2 (en) 2014-04-02 2018-03-06 Beijing Zhigu Rui Tuo Tech Co., Ltd Display control method and display control apparatus
CN104506846A (zh) * 2014-12-27 2015-04-08 北京智谷睿拓技术服务有限公司 高分辨率显示控制方法和装置
CN104506846B (zh) * 2014-12-27 2017-01-25 北京智谷睿拓技术服务有限公司 高分辨率显示控制方法和装置
CN106034232B (zh) * 2015-03-12 2018-03-23 北京智谷睿拓技术服务有限公司 显示控制方法和装置
WO2016141851A1 (en) * 2015-03-12 2016-09-15 Beijing Zhigu Rui Tuo Tech Co., Ltd. Display control methods and apparatuses
CN106034232A (zh) * 2015-03-12 2016-10-19 北京智谷睿拓技术服务有限公司 显示控制方法和装置
US10440345B2 (en) 2015-03-12 2019-10-08 Beijing Zhigu Rui Tuo Tech Co., Ltd. Display control methods and apparatuses
WO2016177326A1 (en) * 2015-05-04 2016-11-10 Beijing Zhigu Rui Tuo Tech Co., Ltd. Display control methods and apparatuses
CN106293557A (zh) * 2015-05-04 2017-01-04 北京智谷睿拓技术服务有限公司 显示控制方法和装置
US10482666B2 (en) 2015-05-04 2019-11-19 Beijing Zhigu Rui Tuo Tech Co., Ltd. Display control methods and apparatuses
CN106293557B (zh) * 2015-05-04 2019-12-03 北京智谷睿拓技术服务有限公司 显示控制方法和装置
WO2018103072A1 (zh) * 2016-12-09 2018-06-14 深圳市柔宇科技有限公司 用户界面的调整方法、调整系统及头戴显示设备
CN107204167A (zh) * 2017-06-30 2017-09-26 武汉华星光电技术有限公司 终端设备及显示方法
WO2019000534A1 (zh) * 2017-06-30 2019-01-03 武汉华星光电技术有限公司 终端设备及显示方法
CN109637418A (zh) * 2019-01-09 2019-04-16 京东方科技集团股份有限公司 一种显示面板及其驱动方法、显示装置
CN109637418B (zh) * 2019-01-09 2022-08-30 京东方科技集团股份有限公司 一种显示面板及其驱动方法、显示装置

Also Published As

Publication number Publication date
US20170076475A1 (en) 2017-03-16
US9911214B2 (en) 2018-03-06
CN104598180A (zh) 2015-05-06
CN104598180B (zh) 2018-11-23
WO2015149557A1 (en) 2015-10-08

Similar Documents

Publication Publication Date Title
CN103927966A (zh) 显示控制方法及显示控制装置
CN103927005A (zh) 显示控制方法及显示控制装置
JP6548821B2 (ja) ヘッドマウントディスプレイの画面上でコンテンツの配置を最適化する方法
US9829989B2 (en) Three-dimensional user input
TWI669635B (zh) 用於顯示彈幕的方法、裝置以及非揮發性電腦可讀儲存介質
US20170358280A1 (en) Method of controlling head-mounted display system
CN110300994A (zh) 图像处理装置、图像处理方法以及图像系统
CN115601270A (zh) 视频数据的基于注视方向的自适应预滤波
CN105164576A (zh) 对适配于佩戴者的头戴式电光设备进行控制的方法
CN106484116A (zh) 媒体文件的处理方法和装置
US20160363763A1 (en) Human factor-based wearable display apparatus
CN106598252A (zh) 一种图像显示调节方法、装置、存储介质及电子设备
CN106293045A (zh) 显示控制方法、显示控制装置及用户设备
CN107765953A (zh) 信息的展示方法、装置、处理器及头戴式显示设备
CN103947198A (zh) 基于场景内容的预定三维视频设置的动态调整
JP6844210B2 (ja) 視覚的顕著性マップ生成装置、視覚的顕著性マップ生成方法及びプログラム
KR20180013892A (ko) 가상 현실을 위한 반응성 애니메이션
EP2583131B1 (en) Personal viewing devices
CN106257394B (zh) 用于头戴显示器的三维用户界面
CN113785258A (zh) 检测眼睛测量
US20200349766A1 (en) Methods and Systems for Viewing and Editing AR/VR Computer-based Designs Allowing Impaired Vision Simulation
CN207216145U (zh) 一种穿戴式设备
US10255676B2 (en) Methods and systems for simulating the effects of vision defects
US20180027230A1 (en) Adjusting Parallax Through the Use of Eye Movements
US10083675B2 (en) Display control method and display control apparatus

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C04 Withdrawal of patent application after publication (patent law 2001)
WW01 Invention patent application withdrawn after publication

Application publication date: 20140716