CN113835225A - 头戴式显示装置及应用该装置的画面显示方法 - Google Patents

头戴式显示装置及应用该装置的画面显示方法 Download PDF

Info

Publication number
CN113835225A
CN113835225A CN202010585826.4A CN202010585826A CN113835225A CN 113835225 A CN113835225 A CN 113835225A CN 202010585826 A CN202010585826 A CN 202010585826A CN 113835225 A CN113835225 A CN 113835225A
Authority
CN
China
Prior art keywords
load
processor
display
head
information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202010585826.4A
Other languages
English (en)
Other versions
CN113835225B (zh
Inventor
林上尧
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Acer Inc
Original Assignee
Acer Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Acer Inc filed Critical Acer Inc
Priority to CN202010585826.4A priority Critical patent/CN113835225B/zh
Publication of CN113835225A publication Critical patent/CN113835225A/zh
Application granted granted Critical
Publication of CN113835225B publication Critical patent/CN113835225B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/017—Head mounted
    • G02B27/0172—Head mounted characterised by optical features
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G02B2027/014—Head-up displays characterised by optical features comprising information/image processing systems
    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D10/00—Energy efficient computing, e.g. low power processors, power management or thermal management

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Optics & Photonics (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

本发明公开了头戴式显示装置及应用该装置的画面显示方法。头戴式显示装置包括处理器及显示器。处理器用以：判断头戴式显示装置的显示负载是否高于预设负载；当显示负载高于预设负载，从数个外部装置中选择能够让显示负载低于预设负载的至少一外部装置；及，传输一待运算信息给至少一外部装置。显示器用以：显示来自于至少一外部装置之一运算后信息。

Description

头戴式显示装置及应用该装置的画面显示方法
技术领域
本发明有关于一种显示装置及应用其之画面显示方法，且特别是有关于一种头戴式显示装置及应用该装置的画面显示方法。
背景技术
头戴式显示装置为了显示逼真及大视角的画面，必须处理大量的影像流。然而，影像流的信息量随时间的变化高低不同，当头戴式显示装置显示大信息量的影像流时，显示画面会延迟，导致显示品质下降，甚至让观看者晕眩。因此，亟需提出一种能前述问题的技术。
发明内容
因此，本发明提出一种头戴式显示装置及应用该装置的画面显示方法，可改善习知问题。
本发明一实施例提出一种头戴式显示装置(Head-mounted display,HMD)。头戴式显示装置包括一第一处理器及一显示器。第一处理器用以：判断头戴式显示装置的一显示负载是否高于一预设负载；当显示负载高于预设负载，从数个外部装置中选择能够让显示负载低于预设负载的至少一外部装置；及，传输一待运算信息给至少一外部装置。显示器用以：显示来自于至少一外部装置的一运算后信息。
本发明另一实施例提出一种头戴式显示装置的画面显示方法。画面显示方法包括以下步骤。判断一头戴式显示装置的一显示负载是否高于一预设负载；当显示负载高于预设负载，从数个外部装置中选择能够让显示负载低于预设负载的至少一外部装置；传输一待运算信息给至少一外部装置；以及，显示来自于至少一外部装置的一运算后信息。
为了对本发明的上述及其他方面有更佳的了解，下文特举实施例，并配合所附图式详细说明如下：
附图说明
图1绘示依照本发明一实施例的头戴式显示装置的功能方块图。
图2绘示图1的头戴式显示装置的画面显示方法的流程图。
附图标记说明
10:外部装置
100:头戴式显示装置
110:第一处理器
120:显示器
130:第二处理器
140:帧缓冲器
150:无线通讯单元
160:信息分配器
T1:待运算信息
T2:运算后信息
S110～S170:步骤
具体实施方式
请参照图1，其绘示依照本发明一实施例的头戴式显示装置(Head-mounteddisplay,HMD)的功能方块图。头戴式显示装置100包括第一处理器110、显示器120、至少一第二处理器130、帧缓冲器(Frame Buffer)140、无线通讯单元150及信息分配器160。
头戴式显示装置100例如是可显示延展实境(Extended Reality,XR)画面的头戴式显示装置。延展实境包含VR(虚拟实境)、AR(扩增实境)及MR(混合实境)。第一处理器110、第二处理器130、帧缓冲器140及无线通讯单元150例如是采用半导体制程形成的实体电路，如芯片、半导体封装件等。在一实施例中，第一处理器110、第二处理器130、帧缓冲器140与无线通讯单元150中至少二者可整合成单一元件，或者，第二处理器130、帧缓冲器140与无线通讯单元150中至少二者可整合至成第一处理器110。显示器120例如是液晶显示器或其它各种能够显示延展实境画面的显示器。此外，帧缓冲器140例如是存储器。
第一处理器110用以：(1).判断头戴式显示装置100的显示负载是否高于预设负载；(2).当显示负载高于预设负载，从数个外部装置10中选择能够让显示负载低于预设负载的至少一外部装置10；以及，(3).传输一待运算信息T1给至少一外部装置10。显示器120用以：显示来自于至少一外部装置10的运算后信息T2。如此，当显示负载高于预设负载时，头戴式显示装置100可将超出负载的信息量交由至少一外部装置进行处理(如运算)，使显示负载小于预设负载，以维持或提升显示器120的显示品质。
此外，待运算信息T1例如是影像流的每一帧延展实境画面，而前述「超出负载的信息量」例如是待运算信息T1的至少一部分。
在实施例中，第一处理器110例如是中央处理器(Central Processing Unit,CPU)。「负载」的判断条件包含帧率(frame rate)及/或延迟时间(latency)，其中帧率的单位例如是fps(帧/秒,frame per second)，而延迟时间的单位例如是毫秒。「显示负载高于预设负载」例如是包含下列条件至少一者：(1)帧率小于(可包含等于)90fps；(2)延迟时间大于(可包含等于)20毫秒。相反地，「显示负载低于预设负载」例如是包含下列条件至少一者：(1)帧率大于90fps；(2)延迟时间小于20毫秒。
外部装置10例如是包含笔记本电脑、台式电脑、云端服务器、平板电脑等各种具备信息运算能力的电子装置，其通常可包含类似头戴式显示装置100的第一处理器110及/或第二处理器130。待运算信息T1包含待运算数据及演算法，外部装置10可依据演算法处理(或运算)待运算数据。在实施例中，外部装置10系单纯依据演算法处理待运算数据(即，外部装置10不论处理待运算数据的目的、用途及/或功能为何，完全依照演算法处理(或运算)待运算数据)。在运算完成后，外部装置10将运算后信息T2传回头戴式显示装置100。头戴式显示装置100的无线通讯单元150接收运算后信息T2后传送给帧缓冲器140暂存。显示器120从帧缓冲器140取得运算后信息T2，并依据运算后信息T2显示对应的延展实境画面。在实施例中，运算后信息T2传回头戴式显示装置100后，不需再经过第一处理器110及第二处理器130处理，而是由显示器120直接显示，如此可增加显示画面的速度，使帧率小于90fps及/或延迟时间大于20毫秒。
头戴式显示装置100内储存有这些外部装置10的登录信息(如账号、密码等)，当头戴式显示装置100搜寻(或侦测)到外部装置10时，头戴式显示装置100与外部装置10可自动连线。在一实施例中，这些外部装置10与头戴式显示装置100可保持连线关系，如此第一处理器110可即时地直接传送待运算信息T1给外部装置10，不需花费连线时间。在另一实施例中，在显示器120持续显示画面过程中，第一处理器110可搜寻可连线的外部装置10，并向此可连线的外部装置10提出连线要求，以增加可支援的外部装置10的数量。
在一实施例中，待运算信息T1在传送给外部装置10前，可由第一处理器110先进行压缩，以减少传输时间。外部装置10接收到压缩后的待运算信息T1时，再解压缩回原始的待运算信息T1。此外，外部装置10在将运算后信息T2传送回头戴式显示装置100前，可先对运算后信息T2进行，以减少传输时间。头戴式显示装置100接收到压缩后的运算后信息T2时，再解压缩回原始的运算后信息T2。
第二处理器130例如是包含图形处理器(Graphics Processing Unit,GPU)、数字信号处理器(Digital signal processor,DSP)或其它具数据处理(运算)能力的处理器。本文的显示负载例如是头戴式显示装置100的整体负载，如第一处理器110与第二处理器130的整体负载。
帧缓冲器140电性连接于无线通讯单元150，用以暂存来自于外部装置10的运算后信息T2。无线通讯单元150用以：(1).接收来自于第一处理器110之待运算信息T1；(2).传输给待运算信息T1给至少一外部装置10；(3).接收至少一外部装置10运算后之运算后信息T2；(4).传输运算后信息T2至帧缓冲器130。在一实施例中，无线通讯单元150例如是支持第五代移动通讯技术(5G)通讯协定或802.11ad/ay，因此可以在短时间内收发大量的信息量，让显示负载低于预设负载。
信息分配器160例如是一应用程式，其包含执行前述画面显示流程的程式码。在第一处理器110载入信息分配器160后，执行本文的画面显示方法流程。此外，外部装置10也可载入类似信息分配器160的信息分配器。载入信息分配器的外部装置10方能与头戴式显示装置100进行通讯，以执行前述的画面显示方法流程。在实施例中，头戴式显示装置100例如是主机端(Server)，而外部装置10例如是用户端(Client)。头戴式显示装置100与外部装置10例如是以通讯协定(Protocol)进行通讯，此通讯协定使头戴式显示装置100及/或外部装置10进行以下动作至少一者：(1)需求内容解译；(2)定时资源状态回报；(3)是否持续在线。在一实施例中，通讯协定例如是即时传输协定(Real-time Transport Protocol,RTP)等
请参照图2，其绘示图1的头戴式显示装置100的画面显示方法的流程图。在本发明实施例头戴式显示装置100的画面显示方法系于第一处理器110载入信息分配器160后即执行，与头戴式显示装置100连线的外部装置10也载入互相支援的资源分配器。
在步骤S110中，第一处理器110判断头戴式显示装置100的显示负载是否高于预设负载。当显示负载高于预设负载时，流程进入步骤S120；当显示负载不高于预设负载时，第一处理器110继续判断头戴式显示装置100的显示负载是否高于预设负载。
在步骤S120中，当显示负载高于预设负载时，从数个外部装置10中选择能够让显示负载低于预设负载的至少一外部装置10。视待运算信息T1而定，并非所有外部装置10都需参与处理待运算信息T1。此外，当没有外部装置10能够让显示负载低于预设负载时，则头戴式显示装置100自行处理待运算信息T1。
在步骤S130中，无线通讯单元150接收来自于第一处理器110之待运算信息T1。
在步骤S140中，无线通讯单元150以无线通讯技术传输给待运算信息T1给至少一外部装置10。
在步骤S150中，无线通讯单元150接收至少一外部装置运算后之运算后信息T2。
在步骤S160中，无线通讯单元150传输运算后信息T2至帧缓冲器140。
在步骤S170中，显示器120从帧缓冲器140取得运算后信息T2，并依据运算后信息T2显示对应的延展实境画面。
此外，头戴式显示装置100对于每一帧延展实境画面(如待运算信息T1)都可执行前述步骤S110～S170的流程，并在流程中，将显示负载会高于预设负载的延展实境画面交由外部装置10进行运算，以减小头戴式显示装置100本身的运算负载。
综上所述，虽然本发明已以实施例揭露如上，然其并非用以限定本发明。本发明所属技术领域中具有通常知识者，在不脱离本发明的精神和范围内，当可作各种更动与润饰。因此，本发明的保护范围当视后附的权利要求所界定者为准。

Claims (12)

1.一种头戴式显示装置，其特征在于，包括：
一第一处理器，用以：
判断该头戴式显示装置的一显示负载是否高于一预设负载；
当该显示负载高于该预设负载，从多个外部装置中选择能够让该显示负载低于该预设负载的至少一该外部装置；及
传输一待运算信息给该至少一外部装置；以及
一显示器，用以：
显示来自于该至少一外部装置的一运算后信息。
2.如权利要求1所述的头戴式显示装置，其特征在于，该显示负载高于该预设负载包含下列条件至少一者：(1)帧率小于90fps；(2)延迟时间大于20毫秒。
3.如权利要求1所述的头戴式显示装置，其特征在于，该待运算信息包含一待运算数据及一演算法，该至少一外部装置依据该演算法处理该待运算数据。
4.如权利要求1所述的头戴式显示装置，其特征在于，该头戴式显示装置更包括至少一第二处理器，该显示负载是该第一处理器与该至少一第二处理器的一整体负载。
5.如权利要求4所述的头戴式显示装置，其特征在于，该第一处理器是中央处理器，而该至少一第二处理器包括图形处理器及数字信号处理器。
6.如权利要求1所述的头戴式显示装置，其特征在于，还包括：
一帧缓冲器；以及
一无线通讯单元，电性连接于该帧缓冲器且用以：
接收来自于该第一处理器的该待运算信息；
传输给该待运算信息给该至少一外部装置；
接收该至少一外部装置运算后的该运算后信息；
传输该运算后信息至该帧缓冲器；
该显示器更用以：
从该帧缓冲器取得该运算后信息，以显示该运算后信息。
7.一种头戴式显示装置的画面显示方法，其特征在于，包括：
判断一头戴式显示装置的一显示负载是否高于一预设负载；
当该显示负载高于该预设负载，从多个外部装置中选择能够让该显示负载低于该预设负载的至少一该外部装置；
传输一待运算信息给该至少一外部装置；以及
显示来自于该至少一外部装置的一运算后信息。
8.如权利要求7所述的画面显示方法，其特征在于，该显示负载高于该预设负载包含下列条件至少一者：(1)帧率小于90fps；(2)延迟时间大于20毫秒。
9.如权利要求7所述的画面显示方法，其特征在于，该待运算信息包含一待运算数据及一演算法，该至少一外部装置依据该演算法处理该待运算数据。
10.如权利要求7所述的画面显示方法，其特征在于，该头戴式显示装置更包括至少一第二处理器，该显示负载是该第一处理器与该至少一第二处理器的一整体负载。
11.如权利要求10所述的画面显示方法，其特征在于，该第一处理器是中央处理器，而该至少一第二处理器包括图形处理器及数字信号处理器。
12.如权利要求7所述的画面显示方法，其特征在于，还包括：
接收来自于该第一处理器的该待运算信息；
传输给该待运算信息给该至少一外部装置；
接收该至少一外部装置运算后的该运算后信息；
传输该运算后信息至该帧缓冲器；以及
从该帧缓冲器取得该运算后信息，以显示该运算后信息。
CN202010585826.4A 2020-06-24 2020-06-24 头戴式显示装置及应用该装置的画面显示方法 Active CN113835225B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010585826.4A CN113835225B (zh) 2020-06-24 2020-06-24 头戴式显示装置及应用该装置的画面显示方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010585826.4A CN113835225B (zh) 2020-06-24 2020-06-24 头戴式显示装置及应用该装置的画面显示方法

Publications (2)

Publication Number Publication Date
CN113835225A true CN113835225A (zh) 2021-12-24
CN113835225B CN113835225B (zh) 2023-08-08

Family

ID=78964432

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010585826.4A Active CN113835225B (zh) 2020-06-24 2020-06-24 头戴式显示装置及应用该装置的画面显示方法

Country Status (1)

Country Link
CN (1) CN113835225B (zh)

Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8190749B1 (en) * 2011-07-12 2012-05-29 Google Inc. Systems and methods for accessing an interaction state between multiple devices
CN105683812A (zh) * 2013-08-30 2016-06-15 英特尔公司 用于头戴式显示器的恶心和发病检测、预测和缓解
US20160225189A1 (en) * 2015-02-04 2016-08-04 Seiko Epson Corporation Head mounted display, information processing apparatus, image display apparatus, image display system, method for sharing display of head mounted display, and computer program
DE102015205921A1 (de) * 2015-04-01 2016-10-06 Bayerische Motoren Werke Aktiengesellschaft Anzuzeigende Informationstypen auf einer Datenbrille im Fahrzeugkontext
CN106537227A (zh) * 2014-07-31 2017-03-22 精工爱普生株式会社 显示装置、用于显示装置的控制方法以及程序
US20170295492A1 (en) * 2014-11-19 2017-10-12 Canon Kabushiki Kaisha Authentication management method, information processing apparatus, wearable device, and computer program
CN107436683A (zh) * 2016-05-27 2017-12-05 三星电子株式会社 显示控制器、电子装置和虚拟现实装置
US20180040301A1 (en) * 2016-08-02 2018-02-08 Samsung Electronics Co., Ltd. Display driving method, display driver integrated circuit for supporting the same, electronic device including the display driver integrated circuit
CN109359118A (zh) * 2018-08-31 2019-02-19 阿里巴巴集团控股有限公司 一种数据写入方法及装置
CN110221432A (zh) * 2019-03-29 2019-09-10 华为技术有限公司 头戴式显示器的图像显示方法及设备
US20200132996A1 (en) * 2017-08-02 2020-04-30 Sony Interactive Entertainment Inc. Rendering device, head-mounted display, image transmission method, and image correction method
CN111164654A (zh) * 2017-11-23 2020-05-15 英特尔公司 自适应中心凹形编码器以及全局运动预测因子

Patent Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8190749B1 (en) * 2011-07-12 2012-05-29 Google Inc. Systems and methods for accessing an interaction state between multiple devices
CN105683812A (zh) * 2013-08-30 2016-06-15 英特尔公司 用于头戴式显示器的恶心和发病检测、预测和缓解
CN106537227A (zh) * 2014-07-31 2017-03-22 精工爱普生株式会社 显示装置、用于显示装置的控制方法以及程序
US20170295492A1 (en) * 2014-11-19 2017-10-12 Canon Kabushiki Kaisha Authentication management method, information processing apparatus, wearable device, and computer program
US20160225189A1 (en) * 2015-02-04 2016-08-04 Seiko Epson Corporation Head mounted display, information processing apparatus, image display apparatus, image display system, method for sharing display of head mounted display, and computer program
DE102015205921A1 (de) * 2015-04-01 2016-10-06 Bayerische Motoren Werke Aktiengesellschaft Anzuzeigende Informationstypen auf einer Datenbrille im Fahrzeugkontext
CN107436683A (zh) * 2016-05-27 2017-12-05 三星电子株式会社 显示控制器、电子装置和虚拟现实装置
US20180040301A1 (en) * 2016-08-02 2018-02-08 Samsung Electronics Co., Ltd. Display driving method, display driver integrated circuit for supporting the same, electronic device including the display driver integrated circuit
US20200132996A1 (en) * 2017-08-02 2020-04-30 Sony Interactive Entertainment Inc. Rendering device, head-mounted display, image transmission method, and image correction method
CN111164654A (zh) * 2017-11-23 2020-05-15 英特尔公司 自适应中心凹形编码器以及全局运动预测因子
CN109359118A (zh) * 2018-08-31 2019-02-19 阿里巴巴集团控股有限公司 一种数据写入方法及装置
CN110221432A (zh) * 2019-03-29 2019-09-10 华为技术有限公司 头戴式显示器的图像显示方法及设备

Also Published As

Publication number Publication date
CN113835225B (zh) 2023-08-08

Similar Documents

Publication Publication Date Title
US11909984B2 (en) Video encoding and decoding for cloud gaming
US9544523B2 (en) Wireless display apparatus and method
US7522125B2 (en) Wireless device method and apparatus with drawing command throttling control
WO2018161957A1 (zh) 图层绘制控制方法、装置及移动终端
US20230215076A1 (en) Image frame display method, apparatus, device, storage medium, and program product
US8207977B1 (en) System, method, and computer program product for changing a refresh rate based on an identified hardware aspect of a display system
CN109074152B (zh) 一种虚拟现实图像发送方法及装置
US9753532B2 (en) Image processing method and image processing apparatus
CN116821040B (zh) 基于gpu直接存储器访问的显示加速方法、装置及介质
CN111068316A (zh) 游戏帧数调节方法、装置、存储介质和电子设备
US8284210B1 (en) Bandwidth-driven system, method, and computer program product for changing a refresh rate
US8194065B1 (en) Hardware system and method for changing a display refresh rate
US20070002185A1 (en) Method of improving the presentation of image data which inter-locked with video signals throughput of a terminal and a system thereof
CN115699158A (zh) 用于显示器的图像生成的功率需求降低
US9087473B1 (en) System, method, and computer program product for changing a display refresh rate in an active period
CN113835225B (zh) 头戴式显示装置及应用该装置的画面显示方法
TWI736328B (zh) 頭戴式顯示裝置及應用其之畫面顯示方法
TWI814134B (zh) 虛擬行動架構的遠端渲染系統、方法及裝置
CN113254130B (zh) 一种自适应调整云桌面分辨率的方法
EP3217256B1 (en) Interactive display system and method
TWI829350B (zh) 增強幀序列的質量的方法及系統
JP5130839B2 (ja) 画像情報圧縮転送方法及び画像転送装置
CN116599942A (zh) 一种虚拟桌面的图像处理方法、装置、服务端和存储介质
TW202245478A (zh) 螢幕顯示方法及裝置
KR101464619B1 (ko) Ｖｄｉ 클라이언트를 위한 프레임 버퍼 직접 액세스 제어 방법

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant