CN108235768B - 用于移动设备上的分屏显示的装置和方法 - Google Patents

用于移动设备上的分屏显示的装置和方法 Download PDF

Info

Publication number
CN108235768B
CN108235768B CN201680037206.9A CN201680037206A CN108235768B CN 108235768 B CN108235768 B CN 108235768B CN 201680037206 A CN201680037206 A CN 201680037206A CN 108235768 B CN108235768 B CN 108235768B
Authority
CN
China
Prior art keywords
screen
mode
display
split
display unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201680037206.9A
Other languages
English (en)
Other versions
CN108235768A (zh
Inventor
阮林
金桢和
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics Co Ltd
Original Assignee
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from US14/748,941 external-priority patent/US10043487B2/en
Application filed by Samsung Electronics Co Ltd filed Critical Samsung Electronics Co Ltd
Publication of CN108235768A publication Critical patent/CN108235768A/zh
Application granted granted Critical
Publication of CN108235768B publication Critical patent/CN108235768B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/70Protecting specific internal or peripheral components, in which the protection of a component leads to protection of the entire computer
    • G06F21/82Protecting input, output or interconnection devices
    • G06F21/84Protecting input, output or interconnection devices output devices, e.g. displays or monitors
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/14Display of multiple viewports
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/36Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory
    • G09G5/363Graphics controllers
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/332Displays for viewing with the aid of special glasses or head-mounted displays [HMD]
    • H04N13/344Displays for viewing with the aid of special glasses or head-mounted displays [HMD] with head-mounted left-right displays
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/398Synchronisation thereof; Control thereof
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W4/00Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/02Services making use of location information
    • H04W4/025Services making use of location information using location based information parameters
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00Control of display operating conditions
    • G09G2320/08Arrangements within a display terminal for setting, manually or automatically, display parameters of the display terminal
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00Aspects of display data processing
    • G09G2340/04Changes in size, position or resolution of an image
    • G09G2340/0492Change of orientation of the displayed image, e.g. upside-down, mirrored
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00Aspects of display data processing
    • G09G2340/14Solving problems related to the presentation of information to be displayed
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof

Abstract

提供了一种用于使用分屏模式的方法和系统。该方法包括将多个画面组合成最终画面以显示在用户设备的显示单元中。显示单元可操作来显示单屏模式和分屏模式。该方法还包括响应于识别分屏模式,将显示单元分成第一屏幕和第二屏幕。该方法还包括获取与分屏模式相关联的一组参数。该方法还包括根据该组参数在第一屏幕和第二屏幕两者中显示最终画面。

Description

用于移动设备上的分屏显示的装置和方法
技术领域
本申请总体涉及在用户设备中显示屏幕,并且更具体地涉及用于在显示器中分屏的方法和设备。
背景技术
随着市场上有众多的双目视频眼镜可用,存在用于传播头戴显示体验的持续努力的市场广泛趋势。随着相机、智能电话外围设备以及用于创建和消费三维(3D)内容的应用越来越多,作为3D观看的基本元素的分屏视图的越来越重要。将移动设备(例如,通常用作手持设备的智能电话)作为近眼观看显示器是虚拟或增强现实体验中相对较少得到重视的领域。智能电话需要在头戴模式下提供与手持模式相同的体验。他们需要能够显示不是针对HMD观看设计的视图、app和内容,并且使得它们在头戴且近眼观看模式下可使用。
发明内容
问题的解决方案
提供了一种用于使用分屏模式的方法。该方法包括将多个画面组合成最终画面以显示在用户设备的显示单元中。显示单元可操作来显示单屏模式和分屏模式。该方法还包括响应于识别分屏模式,将显示单元分成第一屏幕和第二屏幕。该方法还包括获取与分屏模式相关联的一组参数。该方法还包括根据该组参数在第一屏幕和第二屏幕两者中显示最终画面。
提供了一种用于使用分屏模式的用户设备。用户设备包括存储器元件和处理电路。存储器元件被配置为存储与分屏模式相关联的一组参数。处理电路耦接到存储器元件。处理电路被配置为将多个画面组合成最终画面以显示在用户设备的显示单元中。显示单元可操作来显示单屏模式和分屏模式。处理电路还被配置为响应于识别分屏模式,将显示单元分成第一屏幕和第二屏幕。处理电路还被配置成获取与分屏模式相关联的一组参数。处理电路还被配置为根据该组参数在第一屏幕和第二屏幕两者中显示最终画面。
在进行以下的具体实施方式之前,阐述贯穿本专利文档所使用的某些词语和短语的定义是有利的:术语“包含”和“包括”及其派生词意味着在没有限制的情况下的包含。术语“或”是非排除性的,意味着和/或。短语“与......相关联”和“与其相关联”以及其派生词可以意味着包括、被包括在内、与......互连、包含、被包含在内、连接到或与......连接、耦接到或与......耦接、可与......通信、与......协作、交织、并置、接近......、绑定到......或与......绑定、具有、具有......的属性等;以及术语“控制器”意味着可以控制至少一种操作的任何设备、系统或其一部分,这种设备可以实现为硬件、固件或软件、或它们中的至少两种的某种组合。应注意,与任何特定控制器相关联的功能可以是集中式或者分布式的,无论本地还是远程。贯穿本专利文档提供对于某些词语和短语的定义,本领域普通技术人员应该理解:在许多实例(如果不是大多数实例)中,这种定义适用于这样定义的词语和短语的现有以及将来使用。
附图说明
为了更加完整地理解本公开及其优点,现在结合附图来参考以下描述,在附图中类似的附图标记表示类似的部件:
图1示出了根据本公开的示例无线网络;
图2示出了根据本公开的示例eNB;
图3示出了根据本公开的示例UE;
图4示出了根据本公开的实施例的图形流水线的过程;
图5示出了根据本公开的实施例的横向分屏的示例;
图6示出了根据本公开的实施例的默认观看模式的示例;
图7A和图7B示出了根据本公开的实施例的屏幕大小调整的示例;
图8示出了根据本公开的实施例的屏幕位置的示例;
图9示出了根据本公开的实施例的屏幕高度定位的示例;
图10示出了根据本公开的实施例的产生负空间的屏幕大小的示例;
图11示出了根据本公开的实施例的负空间中的控制元素的示例;
图12示出了根据本公开的实施例的用于显示单屏模式和分屏模式的过程;
图13示出了根据本公开的实施例的用于显示单屏模式和分屏模式的过程;
图14示出了根据本公开的实施例的用于分屏模式的过程;以及
图15示出了根据本公开的实施例的具有图形子系统的移动设备。
具体实施方式
以下讨论的图1至图15和用于描述本专利文档中的本公开的原理的各种实施例仅仅是说明性的,而决不应以任何方式解释为限制本公开的范围。本领域的技术人员将理解,本公开的原理可在任何适当布置的系统和方法中实现。
本公开的各种实施例提供了一种具有图形子系统的移动设备,该图形子系统包括屏幕编辑器(composer)、显示器以及可在不同模式下操作的至少两个显示更新器。第一模式采用第一显示更新器,用填充整个显示的最终帧数据来更新显示。第二模式采用第二显示更新器,根据可配置参数(如显示取向)将最终帧数据发送给并排的屏幕位置两次。响应于用户或应用输入、传感器输入、系统命令等而发生模式改变。它还利用第二种模式下在最终帧显示周围和外部的屏幕空间来提供GUI。
图1示出了根据本公开的示例无线网络100。图1所示的无线网络100的实施例仅用于说明。可以使用无线网络100的其他实施例,而不脱离本公开的范围。
如图1所示,无线网络100包括eNodeB(eNB)101、eNB 102和eNB 103。eNB 101与eNB102和eNB 103进行通信。eNB 101还与诸如互联网、专用IP网络或其他数据网络之类的至少一个互联网协议(IP)网络130进行通信。
eNB 102为eNB 102的覆盖区域120内的第一多个用户设备(UE)提供对网络130的无线宽带接入。第一多个UE包括:可以位于小企业(SB)内的UE 111;可以位于企业(E)内的UE 112;可以位于WiFi热点(HS)内的UE 113;可以位于第一住所(R)内的UE 114;可以位于第二住所(R)内的UE 115;和UE 116,其可以是移动设备(M),如蜂窝电话、无线膝上型计算机、无线PDA等。eNB 103为eNB 103的覆盖区域125内的第二多个UE提供对网络130的无线宽带接入。第二多个UE包括UE 115和UE 116。在一些实施例中,eNB 101-103中的一个或多个可以使用5G、LTE、LTE-A、WiMAX、WiFi或其他无线通信技术彼此通信以及与UE 111-116通信。
根据网络类型,可以使用其他公知术语(例如,“基站”或“接入点”)来代替“eNodeB”或“eNB”。为了方便起见,在本专利文献中使用术语“eNodeB”和“eNB”以指代向远程终端提供无线接入的网络基础设施组件。此外,根据网络类型,可以使用其他公知的术语来代替“用户设备”或“UE”,例如“移动台”、“订户台”、“远程终端”、“无线终端”或“用户设备”。为了方便起见,本专利文献中使用术语“用户设备”和“UE”以指代无线地接入eNB的远程无线设备,无论UE是移动设备(诸如移动电话或智能电话)还是通常被认为是固定设备(例如台式计算机或自动售货机)。
虚线示出了覆盖区域120和125的近似范围,其仅为了说明和解释的目的而被示出为近似圆形。应当清楚地理解,与eNB(例如覆盖区域120和125)相关联的覆盖区域可以具有其他形状,包括不规则形状,这取决于eNB的配置以及在与自然和人为障碍相关联的无线电环境中的变化。
尽管图1示出了无线网络100的一个示例,但是可以对图1进行各种改变。例如,无线网络100可以包括在任何合适的布置中的任何数量的eNB和任何数量的UE。此外,eNB 101可以直接与任何数量的UE通信,并且向那些UE提供对网络130的无线宽带接入。类似地,每个eNB 102-103可以直接与网络130通信,并且向UE提供对网络130的直接无线宽带接入。此外,eNB 101、102和/或103可以提供对诸如外部电话网络或其他类型的数据网络之类的其它或附加外部网络的接入。
图2示出了根据本公开的示例eNB 102。图2所示的eNB 102的实施例仅用于说明,并且图1的eNB 101和103可以具有相同或相似的配置。然而,eNB具有各种各样的配置,并且图2不将本公开的范围限制于eNB的任何特定实现。
如图2所示,eNB 102包括多个天线205a-205n、多个RF收发器210a-210n、发送(TX)处理电路215和接收(RX)处理电路220。eNB 102还包括控制器/处理器225、存储器230、以及回程或网络接口235。
RF收发器210a-210n从天线205a-205n接收诸如由网络100中的UE发送的信号之类的输入RF信号。RF收发器210a-210n对输入RF信号进行降频转换以生成IF或基带信号。IF或基带信号被发送给RX处理电路220,RX处理电路220通过对基带或IF信号进行滤波、解码和/或数字化来生成经处理的基带信号。RX处理电路220向控制器/处理器225发送经处理的基带信号用于进一步处理。
TX处理电路215从控制器/处理器225接收模拟或数字数据(诸如语音数据、web数据、电子邮件或交互式视频游戏数据)。TX处理电路215对输出基带数据进行编码、复用和/或数字化,以生成经处理的基带或IF信号。RF收发器210a-210n接收来自TX处理电路215的输出的经处理基带或IF信号,并将基带或IF信号升频转换为经由天线205a-205n发送的RF信号。
控制器/处理器225可以包括控制eNB 102的整体操作的一个或多个处理器或其他处理设备。例如,根据众所周知的原理,处理器225可以通过RF收发器210a-210n、RX处理电路220和TX处理电路215控制前向信道信号的接收和反向信道信号的发送。控制器/处理器225也可以支持附加功能,诸如更先进的无线通信功能。例如,控制器/处理器225可以支持波束成形或定向路由操作,其中来自多个天线205a-205n的输出信号被不同地加权以有效地将输出信号控制在期望的方向。控制器/处理器225可以在eNB 102中支持各种其他功能中的任何一种。在一些实施例中,控制器/处理器225包括至少一个微处理器或微控制器。
控制器/处理器225还能够执行在存储器230中驻留的程序和其他进程,诸如基本OS。控制器/处理器225可以根据执行进程的要求将数据移入或移出存储器230。
控制器/处理器225还耦接到回程或网络接口235。回程或网络接口235允许eNB102通过回程连接或通过网络与其他设备或系统通信。接口235可以支持通过任何合适的有线或无线连接进行通信。例如,当eNB 102被实现为蜂窝通信系统(例如,支持5G、LTE或LTE-A的蜂窝通信系统)的一部分时,接口235可以允许eNB 102通过有线或无线回程连接与其他eNB进行通信。当eNB 102被实现为接入点时,接口235可以允许eNB 102通过有线或无线局域网或通过有线或无线连接到较大网络(例如互联网)来进行通信。接口235包括支持通过有线或无线连接(诸如以太网或RF收发器)进行通信的任何合适的结构。
存储器230耦接到控制器/处理器225。存储器230的一部分可以包括RAM,并且存储器230的另一部分可以包括闪速存储器或其他ROM。
尽管图2示出了eNB 102的一个示例,但是可以对图2进行各种改变。例如,eNB 102可以包括图2所示的每种组件的任何数量。作为特定示例,接入点可以包括多个接口235,并且控制器/处理器225可以支持路由功能以在不同的网络地址之间路由数据。作为另一个特定示例,虽然示出为包括TX处理电路215的单个实例和RX处理电路220的单个实例,但是eNB102可以包括每个处理电路的多个实例(例如针对每个RF收发器有一个TX/RX处理电路)。同样,图2中的各种组件可以组合,进一步细分或省略,并且可以根据特定需要添加附加组件。
图3示出了根据本公开的示例UE 116。图3所示的UE 116的实施例仅用于说明,并且图1的UE 111-115可以具有相同或相似的配置。然而,UE具有各种各样的配置,并且图3不将本公开的范围限制于UE的任何特定实现。
如图3所示,UE 116包括天线305、射频(RF)收发器310、发送(TX)处理电路315、麦克风320和接收(RX)处理电路325。UE 116还包括扬声器330、主处理器340、输入/输出(I/O)接口(IF)345、小键盘350、显示器355和存储器360。存储器360包括基本操作系统(OS)程序361和一个或多个应用362。如这里所使用的,显示器355也可以被称为屏幕。显示器355可以是触摸屏。另外,小键盘350可以是触摸屏的一部分,例如触摸屏上的虚拟小键盘或虚拟按钮。小键盘350还可以包括在UE 116上的附加物理按钮,例如音量按钮、主屏幕按钮等。
RF收发器310从天线305接收由网络100的eNB发送的输入RF信号。RF收发器310降频转换输入RF信号以生成中频(IF)或基带信号。IF或基带信号被发送给RX处理电路325,RX处理电路325通过滤波、解码和/或数字化基带或IF信号来生成经处理的基带信号。RX处理电路325将经处理的基带信号发送给扬声器330(例如针对语音数据)或主处理器340用于进一步处理(例如针对web浏览数据)。
TX处理电路315接收来自麦克风320的模拟或数字语音数据或来自主处理器340的其他输出基带数据(例如,web数据、电子邮件或交互式视频游戏数据)。TX处理电路315对输出基带数据进行编码、复用和/或数字化,以生成经处理的基带或IF信号。RF收发器310从TX处理电路315接收输出的经处理的基带或IF信号,并将基带或IF信号升频转换为通过天线305发送的RF信号。
主处理器340可以包括一个或多个处理器或其他处理设备,并且执行存储在存储器360中的基本OS程序361,以便控制UE 116的整体操作。例如,根据众所周知的原理,主处理器340可以通过RF收发器310、RX处理电路325和TX处理电路315控制前向信道信号的接收和反向信道信号的发送。在一些实施例中,主处理器340包括至少一个微处理器或微控制器。
主处理器340也能够执行驻留在存储器360中的其他进程和程序。主处理器340可以根据执行进程的要求将数据移入或移出存储器360。在一些实施例中,主处理器340被配置为基于OS程序361或响应于从eNB或操作者接收的信号来执行应用362。主处理器340还耦接到I/O接口345,I/O接口345向UE 116提供连接到诸如膝上型计算机和手持式计算机之类的其他设备的能力。I/O接口345是这些附件和主处理器340之间的通信路径。
主处理器340还耦接到小键盘350和显示器单元355。UE 116的操作者可以使用小键盘350将数据输入到UE 116中。显示器355可以是能够呈现例如来自web站点的文本和/或至少有限图形的液晶显示器或其他显示器。
存储器360耦接到主处理器340。存储器360的一部分可以包括随机存取存储器(RAM),并且存储器360的另一部分可以包括闪速存储器或其他只读存储器(ROM)。
尽管图3示出了UE 116的一个示例,但是可以对图3进行各种改变。例如,图3中的各种组件可以组合,进一步细分或省略,并且可以根据特定需要添加附加组件。作为特定示例,主处理器340可以被划分为多处理器,诸如一个或多个中央处理单元(CPU)和一个或多个图形处理单元(GPU)。而且,尽管图3示出被配置为移动电话或智能电话的UE 116,但是UE可以被配置为作为其他类型的移动或固定设备操作。
在本公开的实施例中,诸如智能电话的移动设备可以被头戴装置包住,包括至少一个处理器、传感器和控件、显示器和第一和第二显示更新器,其中所述头戴装置被设计成将移动设备保持在用户的眼睛的前方。本公开的另一个实施例提供了一种采用不同的组件和参数以及用于控制组件和参数的用户界面,在不同模式下操作移动设备的方法。
图4示出了根据本公开的实施例的图形流水线400的过程。图4所示的图形流水线400的实施例仅用于说明。然而,图形流水线可以具有各种各样的配置,并且图4不将本公开的范围限制于图形流水线的任意特定实现。
在本公开的实施例中,在用户设备的应用画出其画面402a-n之后,屏幕编辑器440将画面402组合成最终画面406。画面402可以是在用户设备上显示的内容的不同应用组件。例如,画面可以是包括标题的屏幕的一部分,包括收藏的应用的屏幕的一部分等。在一个或多个实施例中,最终屏幕406可以是启动器屏幕。当组成最终画面406时,最终画面406被发送给显示更新器408。
本公开的各种实施例提供了第一显示更新器408a和第二显示更新器408b。第一显示更新器408a显示一次最终画面406,填充用户设备的整个显示器410,并且考虑诸如设备取向(旋转)、显示屏分辨率和尺寸等的基本显示参数。第二显示更新器408b在显示器410上显示两次最终画面406,所述最终画面406根据可以由系统、app或最终用户调整的参数来调整大小、取向和定位。在一个实施例中,第二显示更新器408b还包含表示将被显示的图形用户界面元素的数据(如果由配置启用的话)。
本公开的各种实施例提供不同的设备操作模式。模式之间的转换可以响应于环境的传感器读数(当移动设备检测到其位置、取向、与物体的接近度等的变化时)、用户输入(当设备的端用户因为任何理由希望看到分屏或全屏的显示)以及来自应用的输入(用于app视图的默认观看模式等)而发生。
本公开的各种实施例提供采用第一显示更新器408a的第一操作模式和采用第二显示更新器408b的第二操作模式。第一操作模式也可以被称为单屏模式,第二操作模式可以被称为分屏模式。例如,当移动设备是手持设备时,第一操作模式可以处理显示。例如,当设备被包含在头戴装置中或其他任何用途时,第二操作模式可以处理分视图显示。此外,可以为不同的用户或环境配置设置定制模式。每当操作模式发生变化时,系统都可以获取一组参数来适当地配置操作模式。每种操作模式都可以包含一组参数。
图5示出了根据本公开的实施例的横向分屏的示例。图5所示的分屏的实施例仅用于说明。然而,分屏可以具有各种各样的配置,图5不将本公开的范围限制于分屏的任意特定实现。
在一个实施例中,该组参数之一是取向参数。当模式改变到分屏模式以适应头戴环境时,系统获取所期望的显示取向。例如,分屏模式下的期望显示取向可以被设置为与模式改变时的显示取向相同。
在图5中,显示器500包括顶部502和底部504。关于用户设备,顶部502靠近用于通信的扬声器所在的用户设备的上端。底部504靠近用于通信的麦克风所在的用户设备的下端。在分屏模式期间,显示第一屏幕506和第二屏幕508。第一屏幕506和第二屏幕508以横向模式显示在显示器500中,屏幕506和508中的每一个中的最终画面处于横向模式。屏幕的取向和画面的取向可以被一起配置,也可以彼此分开配置,或者可以是相同的参数。换句话说,尽管根据上述实施例屏幕的取向和画面的取向被示为不同的参数,但是根据其他一些实施例,屏幕的取向和画面的取向可以被无差别地定义为单个参数。在单屏模式下,最终画面可以已在横向模式下显示,而在分屏模式下,最终画面在纵向模式下显示,以便更好地观看。
分屏模式也可以被配置,使得每个应用设置默认模式下或者头戴模式下显示器应该采取什么取向,其中在默认模式下自然设备取向被分配给任何启动器活动或应用。当模式改变时,系统获取此时的活动应用的显示取向,并且由分屏模式根据获取的信息来处理显示。
也可以响应于通过分配的用户界面输入的用户输入来调整分屏模式下的显示取向,所述用户输入可以是运动手势、显示器上的图形用户界面(GUI)、外部控制器等。显示取向信息也可以包括一布尔值,一旦设置了期望的取向,所述布尔值将禁用更新取向。
图6示出了根据本公开的实施例的默认观看模式的示例。图6中所示的默认观看模式的实施例仅用于说明。然而,默认观看模式可以具有各种各样的配置,图6不将本公开的范围限制于默认观看模式的任意特定实现。
默认查看模式可以被设置为各种级别,例如,操作系统(OS)级别、应用级别、活动级别、观看级别等。例如,如果3D媒体播放器的活动将其默认查看模式设置为分屏视图,则即使启动活动时的模式是单屏模式,在活动开始时,模式也将切换到分屏模式。在图6中,显示器600显示3D视频。由于3D视频已经分割了屏幕,因此系统可以将默认模式设置为单屏模式,以防止3D视频的四个馈送。第一屏幕506和第二屏幕508中的每一个示出了具有一组控件的单个视频馈送以创建视频的3D效果。如本文中在任何不同实施例中所使用的,为了3D效果,两个屏幕可以稍微不同,但是每个屏幕上的图像是相同的。
图7A和图7B示出了根据本公开的实施例的屏幕大小调整的示例。图7A和7B中所示的屏幕大小调整的实施例仅用于说明。然而,屏幕大小调整可以具有各种各样的配置,并且图7A和图7B不将本公开的范围限制于屏幕大小调整的任何特定实现。
在分屏模式下最终画面可以调整到的大小可以由系统默认设置,以便适合头戴装置的近眼观看,并且可以在各种级别进行调整或由端用户进行调整。例如,在图7A中,端用户可以使用所分配的UI来放大/缩小内容,如同在手持模式下的显示器700上的捏放缩放手势一样。而且,例如,在图7B中,应用可以针对其目的将最终画面显示的大小调整到适当的大小。某些应用可能会将其内容配置为占据整个显示器的一半,并相应地设置大小。在一个示例实施例中,显示器752示出仅占据显示器的每个半区的一部分的第一屏幕和第二屏幕,而显示器754示出占据显示器的整个半区的第一屏幕和第二屏幕。
图8示出了根据本公开的实施例的屏幕位置的示例。图8所示的屏幕位置的实施例仅用于说明。然而,屏幕位置可以具有各种各样的配置,图8不将本公开的范围限制于屏幕位置的任意特定实现。
在分屏模式下最终画面将被显示的在显示屏幕上的位置由系统默认设置,以便适合头戴装置的近眼观看,并且可以在各种级别进行调整或由最终用户进行调整。例如,应用可以调整最终画面内容的屏幕位置以配置其自己的分屏视图的组成。
在图8中,显示器800包括具有第一屏幕的第一半区802和具有由分隔部806分开的第二屏幕的第二半区804。每一个半区内的每个屏幕可以通过大小参数和位置参数来设置。这些参数可以被设置为在用户的头戴装置中提供最佳的近眼观看。
图9示出了根据本公开的实施例的屏幕高度定位的示例。图9所示的屏幕高度定位的实施例仅用于说明。然而,屏幕高度定位可以具有各种各样的配置,图9不将本公开的范围限制于屏幕高度定位的任意特定实现。
在图9中,显示902示出了启动器页面,而显示904示出了游戏。当处于分屏(HMD)模式时,系统可以选择增加显示904中的内容的高度,使得屏幕顶部的界面不阻挡用户的有效视野。系统可以在分屏模式下将显示905中的内容的位置设置为高于针对显示904的启动页面设置的默认位置,以适应增加的高度。
图10示出了根据本公开的实施例的产生负空间的屏幕大小的示例。图10所示的负空间的实施例仅用于说明。然而,负空间可以具有各种各样的配置,图10不将本公开的范围限制于负空间的任意特定实现。
在图10中,在分屏模式下,要在每个分视图区域(第一屏幕1002和第二屏幕1004)中显示的内容可以小于产生负空间1006的区域。在一个实施例中,处理器根据系统、应用或最终用户设置的配置来呈现图形用户界面项目,并且将其包含在屏幕区域的负空间中以由最终用户进行交互。
图11示出了根据本公开的实施例的负空间中的控制元素的示例。图11所示的控制元素的实施例仅用于说明。然而,控制元素可以具有各种各样的配置,图11不将本公开的范围限制于控制元素的任意特定实现。
在本公开的实施例中,显示1100以分屏模式提供负空间中的GUI元素的示例实现。画面内容左侧的按钮表示音量键,内容右侧的三个按钮表示用户设备的主页键和两个软键。键和按钮可以在焦点或用户焦点(通过光标或眼睛跟踪)在内容区域内时隐藏并且不显示,并且一旦焦点或用户焦点在第一和第二屏幕之外并且移动到负空间中时变成可见。用户可以移动焦点或用户焦点以在这些元素上悬停,并与设备上的物理控件类似地与它们交互。焦点可以是显示设备上的当前光标位置或眼睛跟踪位置。在示例实施例中,当焦点是眼睛跟踪位置时,焦点可以是用户眼睛聚焦在显示设备上的位置。
在本公开的一个实施例中,当在画面内容周围存在负屏幕空间时,可以显示GUI,所述画面内容小于屏幕区域的一半。即使在被启用时,GUI显示也可能是隐藏的以供使用。例如,当用户焦点位于曲面内容区域内时,GUI显示可以保持隐藏。只有当焦点移动到画面内容区域之外并进入负空间时,它才会变得可见。当第一屏幕和第二屏幕完全填满显示器时,可以禁用GUI控制元素。
图12示出了根据本公开的实施例的用于显示单屏模式和分屏模式的过程1200。图13所示的过程1300的实施例仅用于说明。然而,过程1300具有各种各样的配置,图13不将本公开的范围限制于过程1300的任意特定实现。过程1300可以由本文描述的多个设备或元件来实现。例如,过程1300可以由控制器、处理器或处理电路来实现。
在操作1202,应用启动。在操作1204,处理器确定是否存在超覆模式。如果存在超覆模式,则在操作1206,处理器获取超覆模式。在操作1208,处理器将模式设置为覆盖模式。例如,如果覆盖模式是单屏模式,则处理器将模式设置为单屏模式。
覆盖模式允许应用不自动分屏,但允许将应用的显示屏幕显示为其生成时的样子。这种模式的例子是已经将显示器分成左显示和右显示的应用,例如3D电影播放器。覆盖模式防止已经分割的显示再次被分割,这将导致应用的不正确显示。可以使用术语“超覆模式”代替“覆盖模式”。
如果在操作1204处不存在覆盖模式,则在操作1212,处理器确定应用或活动是否具有默认观看模式。如果存在默认观看模式,则在操作1214,处理器获取应用或活动观看模式。在操作1216,处理器将模式设置为默认观看模式。在操作1210,处理器获取所设置的观看模式。
在操作1218,处理器确定所获取的观看模式是否是第一操作模式。在一个实施例中,第一操作模式是单屏模式。如果模式是第一操作模式,则在操作1220,处理器采用第一显示更新器。然后在操作1222,处理器将用于第一操作模式的数据发送给显示器。
如果在操作1218,模式是第二操作模式,则在操作1224,处理器采用第二显示更新器。在操作1226,处理器确定应用或活动是否设置了显示取向。如果应用或活动设置了显示取向,则在操作1228,处理器获取应用或活动显示取向。然后在操作1230,处理器更新显示更新器的取向。如果在操作1226,应用或活动没有设置取向,则在操作1232,处理器获取帧大小和位置信息。
在操作1234,处理器确定在屏幕周围是否存在负空间(也被称为帧)。如果不存在负空间,则在操作1240,处理器将数据发送给显示器。如果存在负空间,则在操作1236,处理器确定负空间GUI是否被配置有控制元素。如果GUI未被配置,则在操作1240,处理器将数据发送给显示器。如果GUI被配置,则在操作1238,处理器获取并且并入GUI元素。然后在操作1240,处理器将数据发送给显示器。
图13示出了根据本公开的实施例的用于显示单屏模式和分屏模式的过程1300。图13所示的过程1300的实施例仅用于说明。然而,过程1300具有各种各样的配置,图13不将本公开的范围限制于过程1300的任意特定实现。过程1300可以由本文描述的多个设备或元件来实现。例如,过程1300可以由控制器、处理器或处理电路来实现。
在操作1302,移动设备可以被封在头戴装置中。在操作1304,处理器在封住之前保存最后的显示取向。在操作1306,处理器确定操作模式。在操作1308,处理器控制显示更新器处理。在操作1310,处理器控制显示单元显示显示更新器处理的结果。显示更新处理是选择显示更新器并配置操作模式的参数的过程。
图14示出了根据本公开的实施例的用于显示分屏模式的过程1400。图13所示的过程1300的实施例仅用于说明。然而,过程1300具有各种各样的配置,图13不将本公开的范围限制于过程1300的任意特定实现。过程1300可以由本文描述的多个设备或元件来实现。例如,过程1300可以由控制器、处理器或处理电路来实现。
在步骤1410,处理器将显示模式确定为分屏模式。显示模式(如果存在覆盖模式)被设置为覆盖模式,并且处理器将显示模式确定为单屏模式。如果不存在覆盖模式,则处理器识别已执行应用并获取默认观看模式。处理器将显示模式设置为默认观看模式,并将默认观看模式确定为分屏模式。
在步骤1420,处理器获取与分屏模式相关联的参数。参数包括显示取向、大小和位置。参数由已执行应用或用户输入来确定。
在步骤1430,显示单元在第一屏幕和第二屏幕中显示帧数据。如果存在负空间,即,显示单元的区域的剩余区域,则处理器获取图形用户界面(GUI)并将GUI元素包含在帧数据中。
图15示出了根据本公开实施例的具有图形子系统1500的移动设备。图15所示的移动设备1500的实施例仅用于说明。然而,移动设备1500可以具有各种各样的配置,图15不将本公开的范围限制于移动设备1500的任意特定实现。
图形子系统包括屏幕编辑器1515、显示单元1530和至少两个显示更新器。第一操作模式采用第一显示更新器1520a,用填满整个显示器的最终帧数据来更新显示单元。第二操作模式采用第二显示更新豁,根据存储在存储器1540中的可配置参数将最终数据发送给并排的屏幕位置两次。
在图15中,屏幕编辑器1515和显示更新器1520a、1520b被图示为处理器1510的一部分。屏幕编辑器1515和显示更新器1520a、1520b可以通过硬件、软件或其组合来实现。根据一些其他实施例,屏幕编辑器1515和显示更新器1520a、1520b可以由不同硬件、硬件执行的不同软件或其组合来实现。
尽管已经利用示例实施例描述了本公开,但是本领域技术人员可以明了各种改变和修改。本公开意在包括落在所附权利要求范围内的这些改变和修改。

Claims (14)

1.一种用于在移动设备的显示单元中提供分屏的方法,所述方法包括:
将显示模式确定为分屏模式;
获取焦点数据,所述焦点数据是用户眼睛聚焦的位置的数据;
将所述显示单元中的屏幕分成并排放置的第一屏幕和第二屏幕;
获取与分屏模式相关联的至少一个参数;以及
根据所述至少一个参数在所述第一屏幕和所述第二屏幕两者中显示帧数据,其中,所述至少一个参数包括所述第一屏幕和所述第二屏幕的可调大小和位置,使得当所述第一屏幕和所述第二屏幕的区域小于所述显示单元的区域时,所述显示单元的区域的剩余区域是包括至少一个控制元素在内的负空间,
其中,当在所述显示单元中的所述屏幕中填充了所述第一屏幕和所述第二屏幕的区域时,禁用所述至少一个控制元素,
其中,所述至少一个控制元素基于所述焦点数据是隐藏的或可见的。
2.根据权利要求1所述的方法,其中,将显示模式确定为分屏模式包括:
获取用于已执行应用的默认操作模式;以及
将所述默认操作模式确定为分屏模式。
3.根据权利要求1所述的方法,
其中显示模式可以通过输入来切换,
其中所述输入包括传感器读数、用户输入、来自应用的输入。
4.根据权利要求1所述的方法,其中,根据所述至少一个参数在第一屏幕和第二屏幕两者中显示帧数据包括:
识别已执行应用设置显示取向;
获取所述显示取向;以及
根据所述显示取向显示帧数据。
5.根据权利要求1所述的方法,
其中所述至少一个参数包括用于显示帧数据的取向、大小或位置,或者
其中所述至少一个参数由已执行应用或用户输入来确定。
6.根据权利要求1所述的方法,其中,根据所述至少一个参数在第一屏幕和第二屏幕两者中显示帧数据还包括:
在所述负空间中显示所述至少一个控制元素,
其中所述负空间是用户设备的显示单元的剩余区域。
7.根据权利要求6所述的方法,
其中所述至少一个控制元素执行与用户设备的物理按钮的功能对应的功能。
8.一种用户设备,包括:
存储器,存储至少一个参数;以及
处理电路,耦接到存储器;以及
显示单元,耦接到处理电路,
其中,处理电路被配置为:
将显示模式确定为分屏模式,
获取焦点数据,所述焦点数据是用户眼睛聚焦的位置的数据;
将所述显示单元中的屏幕分成并排放置的第一屏幕和第二屏幕;
获取与分屏模式相关联的至少一个参数,以及
根据所述至少一个参数在所述第一屏幕和所述第二屏幕两者中显示帧数据,其中,所述至少一个参数包括所述第一屏幕和所述第二屏幕的可调大小和位置,使得当所述第一屏幕和所述第二屏幕的区域小于所述显示单元的区域时,所述显示单元的区域的剩余区域是包括至少一个控制元素在内的负空间,
其中,当在所述显示单元中的所述屏幕中填充了所述第一屏幕和所述第二屏幕的区域时,禁用所述至少一个控制元素,
其中,所述至少一个控制元素基于所述焦点数据是隐藏的或可见的。
9.根据权利要求8所述的用户设备,其中,将显示模式确定为分屏模式包括:
获取用于已执行应用的默认操作模式,以及
将所述默认操作模式确定为分屏模式。
10.根据权利要求8所述的用户设备,其中,所述显示模式可以通过输入来切换,
其中所述输入包括传感器读数、用户输入、来自应用的输入。
11.根据权利要求8所述的用户设备,其中,根据所述至少一个参数在第一屏幕和第二屏幕两者中显示帧数据包括:
识别已执行应用设置显示取向;
获取所述显示取向,以及
根据所述显示取向显示帧数据。
12.根据权利要求8所述的用户设备,其中,所述至少一个参数包括用于显示帧数据的取向、大小或位置,或者
其中所述至少一个参数由已执行应用或用户输入来确定。
13.根据权利要求8所述的用户设备,
所述处理电路还被配置为在所述负空间中显示所述至少一个控制元素,
其中所述负空间是用户设备的显示单元的剩余区域。
14.根据权利要求13所述的用户设备,
其中所述至少一个控制元素执行与用户设备的物理按钮的功能对应的功能。
CN201680037206.9A 2015-06-24 2016-06-02 用于移动设备上的分屏显示的装置和方法 Active CN108235768B (zh)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US14/748,941 2015-06-24
US14/748,941 US10043487B2 (en) 2015-06-24 2015-06-24 Apparatus and method for split screen display on mobile device
KR10-2015-0132441 2015-09-18
KR1020150132441A KR102492555B1 (ko) 2015-06-24 2015-09-18 분할 화면 디스플레이를 위한 방법 및 장치
PCT/KR2016/005834 WO2016208885A1 (en) 2015-06-24 2016-06-02 Apparatus and method for split screen display on mobile device

Publications (2)

Publication Number Publication Date
CN108235768A CN108235768A (zh) 2018-06-29
CN108235768B true CN108235768B (zh) 2022-02-22

Family

ID=57585235

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201680037206.9A Active CN108235768B (zh) 2015-06-24 2016-06-02 用于移动设备上的分屏显示的装置和方法

Country Status (2)

Country Link
CN (1) CN108235768B (zh)
WO (1) WO2016208885A1 (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109388324B (zh) * 2018-09-28 2021-03-19 维沃移动通信有限公司 一种显示控制方法及终端
CN112732211A (zh) * 2020-12-31 2021-04-30 联想(北京)有限公司 一种控制方法和电子设备

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101365117A (zh) * 2008-09-18 2009-02-11 中兴通讯股份有限公司 一种自定义分屏模式的方法
CN101377920A (zh) * 2007-08-30 2009-03-04 三星电子株式会社 显示控制方法、和使用该方法的显示装置和显示系统
CN102547069A (zh) * 2012-01-19 2012-07-04 西安联客信息技术有限公司 移动终端及其图像分屏处理方法

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070250867A1 (en) * 2006-04-20 2007-10-25 Matsushita Electric Industrial Co., Ltd. Display system, video processing apparatus, and video processing method
US20080278628A1 (en) * 2006-10-06 2008-11-13 Sharp Kabushiki Kaisha Content display device, content display method, content display system, content display program, and recording medium
US8928559B2 (en) * 2007-06-04 2015-01-06 Standardvision, Llc Methods and systems of large scale video display
KR20150014553A (ko) * 2013-07-29 2015-02-09 삼성전자주식회사 멀티비전 스크린을 구성하는 방법 및 이를 지원하는 전자장치

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101377920A (zh) * 2007-08-30 2009-03-04 三星电子株式会社 显示控制方法、和使用该方法的显示装置和显示系统
CN101365117A (zh) * 2008-09-18 2009-02-11 中兴通讯股份有限公司 一种自定义分屏模式的方法
CN102547069A (zh) * 2012-01-19 2012-07-04 西安联客信息技术有限公司 移动终端及其图像分屏处理方法

Also Published As

Publication number Publication date
CN108235768A (zh) 2018-06-29
WO2016208885A1 (en) 2016-12-29

Similar Documents

Publication Publication Date Title
KR102492555B1 (ko) 분할 화면 디스플레이를 위한 방법 및 장치
US10820039B2 (en) Video playing method and terminal device
CN107369197B (zh) 图片处理方法、装置及设备
US20200380936A1 (en) System, apparatus, and method for optimizing viewing experience on an intelligent terminal
JP7123128B2 (ja) インタフェース表示方法及び装置
JP6563043B2 (ja) 映像表示システム
KR102234928B1 (ko) 가상 현실 경험 공유
CN107071539B (zh) 基于vr设备的终端上信息资源同步显示方法及系统
US8589815B2 (en) Control of timing for animations in dynamic icons
US10976808B2 (en) Body position sensitive virtual reality
EP3163866B1 (en) Self-adaptive display method and device for image of mobile terminal, and computer storage medium
US20140372945A1 (en) Method for outputting images, apparatus and mobile terminal therefor
WO2016001771A1 (en) Image generation method and apparatus, and mobile terminal
US20210220738A1 (en) Perspective rotation method and apparatus, device, and storage medium
US10897435B2 (en) Instant messaging method and system, and electronic apparatus
CN108235768B (zh) 用于移动设备上的分屏显示的装置和方法
WO2016065514A1 (zh) 图像显示方法、用户终端和视频接收设备
KR102508148B1 (ko) 디지털 디바이스 및 그를 이용한 컬러 제어 시스템 및 방법
KR20140141419A (ko) 디스플레이장치 및 그 제어방법
US11388282B2 (en) Method and apparatus for controlling video
US20220319102A1 (en) Information processing apparatus, method of operating information processing apparatus, and program
CN114706549A (zh) 显示方法、智能终端及存储介质
US20200319835A1 (en) Display device and display system including same
CN108140357B (zh) 信息处理装置
KR101695387B1 (ko) 모바일 게임 유저들 간에 채팅 서비스를 제공하는 채팅 서비스 시스템

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant