CN107533448A - 图像输出控制方法、图像输出控制程序以及显示装置 - Google Patents

图像输出控制方法、图像输出控制程序以及显示装置 Download PDF

Info

Publication number
CN107533448A
CN107533448A CN201580079658.9A CN201580079658A CN107533448A CN 107533448 A CN107533448 A CN 107533448A CN 201580079658 A CN201580079658 A CN 201580079658A CN 107533448 A CN107533448 A CN 107533448A
Authority
CN
China
Prior art keywords
screen
display device
display
function
application program
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201580079658.9A
Other languages
English (en)
Inventor
时田忍武
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujitsu Client Computing Ltd
Original Assignee
Fujitsu Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujitsu Ltd filed Critical Fujitsu Ltd
Publication of CN107533448A publication Critical patent/CN107533448A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1423Digital output to display device ; Cooperation and interconnection of the display device with other functional units controlling a plurality of local displays, e.g. CRT and flat panel display
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/12Synchronisation between the display unit and other units, e.g. other display units, video-disc players
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/14Display of multiple viewports
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2354/00Aspects of interface with display user
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2360/00Aspects of the architecture of display systems
    • G09G2360/04Display device controller operating with a plurality of display units

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Hardware Design (AREA)
  • Multimedia (AREA)
  • Human Computer Interaction (AREA)
  • General Engineering & Computer Science (AREA)
  • User Interface Of Digital Computer (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Digital Computer Display Output (AREA)

Abstract

提供一种图像输出控制方法,由计算机执行如下处理:使用屏幕的功能存在差异的多个显示装置的屏幕来输出图像,在因所述屏幕的功能差异而使得所述多个显示装置中的一个显示装置不能实现屏幕的功能的情况下,用该多个显示装置中的另一个显示装置来实现屏幕的功能,用所述另一个显示装置实现了屏幕的功能后,将作为图像的输出目标的显示装置切换为所述一个显示装置。

Description

图像输出控制方法、图像输出控制程序以及显示装置
技术领域
本发明涉及一种图像输出控制方法、图像输出控制程序以及显示装置。
背景技术
对搭载6~8英寸左右的小屏幕的平板型的终端连接大屏幕的外部显示器或投影仪,使用小屏幕和大屏幕。例如公知以下的技术:能够切换使便携终端和外部显示装置的屏幕上显示同一数据的镜像显示模式和显示不同的数据的扩展显示模式,基于规定的应用程序的启动来选择扩展显示模式(例如参照专利文献1)。
现有技术文献
专利文献
专利文献1:日本特开2011-217236号公报
专利文献2:日本特开2014-53014号公报
发明内容
发明所要解决的课题
但是,当利用具有大屏幕的外部显示器或投影仪显示针对具有小屏幕的终端创建的应用程序时,应用程序以未预想的大尺寸显示图像,布局走样地显示。
例如,平板型终端用的应用程序以对搭载于平板终端的小屏幕最佳的设计创建。将这样的应用程序显示于外部显示器的情况下,设计为小屏幕用的应用程序在大屏幕上显示。因此,在外部显示器上,文字或按键的尺寸显示成大于预想的,根据分辨率而存在布局走样或者不适合屏幕的呈现区域的情况。
因此,一方面,本发明的目的在于,解决对屏幕的功能存在差异的多个显示装置输出图像时的缺陷。
用于解决课题的手段
在一个方案中,提供一种图像输出控制方法,由计算机执行如下处理:使用屏幕的功能存在差异的多个显示装置的屏幕来输出图像,在因所述屏幕的功能的差异而使得所述多个显示装置中的一个显示装置不能实现屏幕的功能的情况下,用该多个显示装置中的另一个显示装置来实现屏幕的功能,用所述另一个显示装置实现了屏幕的功能后,将作为图像的输出目标的显示装置切换为所述一个显示装置。
发明效果
根据一个方面,能够消除对屏幕的功能存在差异的多个显示装置输出图像时的缺陷。
附图说明
图1是示出一个实施方式的显示装置的整体结构的一例的图。
图2是示出一个实施方式的显示模式的一例的表。
图3是用于说明大屏幕的布局走样的情况的图。
图4是示出一个实施方式的平板终端的功能结构的一例的图。
图5是示出一个实施方式的每个显示模式的应用程序启动时的动作例的图。
图6是示出一个实施方式的呈现区域的一例的图。
图7是示出一个实施方式的平板终端的硬件结构的一例的图。
图8是示出一个实施方式的平板终端的软件结构的一例的图。
图9是示出一个实施方式的应用程序启动处理的一例的流程图。
图10是示出一个实施方式的应用程序启动处理的结果的屏幕例的图。
图11是示出一个实施方式的应用程序启动处理的结果的屏幕例的图。
图12是示出一个实施方式的应用程序结束处理的一例的流程图。
图13是示出一个实施方式的启动器(launcher)显示屏幕和显示属性信息表的一例的图。
图14是示出一个实施方式的变形例的应用程序启动处理的一例的流程图。
具体实施方式
以下参照附图,对本发明的实施方式进行说明。另外,在本说明书及附图中,对实质上具有相同的功能结构的结构要素,通过标注相同的标号来省略重复的说明。
[整体结构]
首先,参照图1,对本发明的一个实施方式的显示装置的整体结构的一例进行说明。本实施方式的显示装置具有平板终端10和外部显示器20。平板终端10与外部显示器20连接。在本实施方式中,平板终端10和外部显示器20的两个屏幕被一体地管理。平板终端10和外部显示器20是显示装置的一例。
搭载于平板终端10的屏幕为6~8英寸左右,比外部显示器20的屏幕小。因此,近年来,如图1所示,对小屏幕的平板终端10连接大屏幕的外部显示器20或投影仪,使用多个显示装置,使得像PC的替代机那样发挥功能。
平板终端10和外部显示器20是屏幕的功能存在差异的多个显示装置的一例。平板终端10的屏幕(以下亦称作“主体屏幕”。)和外部显示器20的屏幕(以下亦称作“外部屏幕”。)是多个显示装置的屏幕的一例。多个显示装置的屏幕的功能的差异包括屏幕分辨率的差异和屏幕触摸功能的有无中的至少任一个。
在本实施方式中,具有平板终端10作为主体,应用程序在该平板终端10的操作系统(Operating System)上动作时,执行后述的本实施方式的屏幕输出控制处理。
外部显示器20如果是具有比平板终端10的主体屏幕大型的屏幕的显示装置,则也可以是电视机、投影仪、标牌,还可以是其他的显示装置。用于与外部显示器20连接的线缆可以使用HDMI(登记商标)(High-Definition Multimedia Interface:高清多媒体接口)线缆或DisplayPort线缆。也可以使用DVI(Digital Visual Interface:数字视频接口)线缆或者模拟RGB线缆。平板终端10与外部显示器20也可以无线连接(Wireless Display)。
在本实施方式中,在图1所示的显示装置的结构中,根据需要,在内置于平板终端10的主体的主体屏幕和外部显示器20的外部屏幕间进行图像的输出目标的切换。图2中示出在平板终端10的主体屏幕及外部显示器20的外部屏幕中作为图像的输出目标的组合考虑的模式(以下亦称作“显示模式”。)。基于操作系统的规格,例如如果是Windows(登记商标),则可以选择图2的显示模式中的任意模式进行屏幕输出。以下说明各显示模式1~5。
■显示模式1
在显示模式1下,仅主体屏幕上进行画面显示。该情况下,主体屏幕上显示操作系统管理的画面,即使外部显示器20与平板终端10连接,外部屏幕在非工作状态下也是不显示任何内容的状态。
■显示模式2
在显示模式2下,平板终端10的主体屏幕为主显示器,外部显示器20的外部屏幕为第二显示器,扩展显示于两个屏幕。该情况下,操作系统为将主体屏幕与外部屏幕的显示区域管理为连续的呈现区域的状态,主体屏幕及外部屏幕上显示不同的内容。特别是在该状态下,对主体屏幕设定坐标原点,主体屏幕的左上成为坐标原点(0,0)(参照图6)。该情况下,例如桌面的图标或任务栏等显示于主体屏幕。以下将这样在主体屏幕上设定了坐标原点的扩展显示记载为扩展显示(1)。
■显示模式3
显示模式3是外部屏幕为主显示器、主体屏幕为第二显示器,扩展显示于两个屏幕。该情况下,操作系统为将主体屏幕与外部屏幕的显示区域管理为连续的呈现区域的状态,主体屏幕和外部屏幕上显示不同的内容。特别是在该状态下,对外部屏幕设定坐标原点,外部屏幕的左上成为坐标原点(0,0)。该情况下,例如桌面的图标或任务栏等显示于外部屏幕。以下将这样在外部屏幕上设定了坐标原点的扩展显示记载为扩展显示(2)。
■显示模式4
显示模式4是复制显示于主体屏幕及外部屏幕这两个屏幕。该情况下,将主体屏幕及外部屏幕看作相同分辨率的呈现区域,在两者的屏幕上显示相同的内容。
■显示模式5
显示模式5仅在外部屏幕进行画面显示。该情况下,外部屏幕上显示操作系统管理的画面,即使外部显示器20与平板终端10连接,主体屏幕在非工作状态下也是不显示任何内容的状态。
[布局走样的情况]
平板终端10用的应用程序中存在具有以下功能的应用程序:在显示于搭载在平板终端10的小型的主体屏幕时创建最佳设计的图像,易见地显示在主体屏幕上。此外,存在在容易通过主体屏幕上的触摸面板操作的用户界面创建的应用程序。
将那样的应用程序显示于外部屏幕的情况下,由于设计为小屏幕用的应用程序显示于大屏幕,因此存在文字、按键的尺寸显示得比预想的大的情况。此外,根据分辨率,存在布局走样、图像从屏幕的呈现区域伸出这样的显示状况的情况。
此外,即使以通过触摸面板或数字化仪操作时容易触摸的方式创建平板终端10用的应用程序,在未搭载触摸面板的外部显示器20中也不能通过触摸进行输入操作,结果是损害用户的操作性。例如,参照图3,说明根据主体屏幕的分辨率与外部屏幕的分辨率的异同而可能发生的显示状况。
(主体屏幕的分辨率=外部屏幕的分辨率)
若在主体屏幕的分辨率与外部屏幕的分辨率相同的情况下,设定为显示模式5(仅显示于外部显示器20),则如图3的(a)所示,显示于主体屏幕的图像不会布局走样,直接显示于外部屏幕。主体屏幕上成为不显示图像的状态。
但是,在以容易在6英寸左右的小尺寸屏幕上对设计成平板终端10用的应用程序进行触摸操作的方式创建画面的情况下,在外部屏幕上,有时图像显示得比所需的程度大。例如,如图3的(b)所示,在最大化地显示于主体屏幕的整个屏幕,其中配置4个左右的按键(用户界面)的情况下,外部显示器20的外部屏幕仅显示4个按键。此外,在用投影仪进行展示的期间,应用程序启动了的情况下,这样的显示被呈现在屏幕的一面。此外,如果外部显示器20未搭载触摸面板的功能,则由于显示于外部屏幕的按键等不能直接触摸操作,因此必须使用鼠标等来操作,用户的操作性及利便性不足。
(主体屏幕的分辨率>外部屏幕的分辨率)
若在主体屏幕的分辨率比外部屏幕的分辨率高的情况下,同样地设定为显示模式5(仅显示于外部显示器20),则显示于分辨率高的主体屏幕的图像显示于分辨率低的外部屏幕。因此,应用程序被操作系统执行时,难以直接在外部屏幕再现显示于主体屏幕的布局。
实际上如何显示取决于操作系统的结构或应用程序。例如在自动调整屏幕上的部件(各图像)的尺寸以使得构成应用程序的按键等部件容纳于主体屏幕的情况下,即使UI部件容纳于外部屏幕,布局有时也不能正确地表现。此外,在不进行那样的自动调整的情况下,如图3的(c)所示,有时超出了外部屏幕的呈现区域。此外,如果外部显示器20未搭载触摸面板的功能,则不能直接对显示于外部屏幕的按键等进行触摸操作。此外,即使外部显示器20搭载有触摸面板的功能,也不能触摸超出了的部分的按键。
(主体屏幕的分辨率<外部屏幕的分辨率)
若在主体屏幕的分辨率比外部屏幕的分辨率低的情况下,同样地设定为显示模式5(仅显示于外部显示器20),则将显示为分辨率低的主体图像的图像显示于分辨率高的外部屏幕。因此,如图3的(d)所示,外部屏幕的呈现区域中足够容纳,但可能显示极端小的图像。在该情况下,如果外部显示器20也未搭载触摸面板的功能,则不能直接对显示于外部屏幕的按键等进行触摸操作。此外,即使外部显示器20搭载有触摸面板的功能,在显示极端小的图像的情况下,也难以触摸,可能会误操作,成为实际上难以触摸的显示状态。
因此,在本实施方式中,如上所述,由于平板终端10的主体屏幕与外部显示器20的外部屏幕的尺寸、分辨率不同,因此在外部显示器显示平板终端10用的应用程序时,消除布局走样等缺陷。此外,解决了因显示于未搭载触摸面板的外部显示器20而不能进行触摸操作的课题。
[功能结构]
执行本实施方式的图像输出控制方法的应用程序例如如图4所示,在平板终端10的操作系统2上启动。本实施方式中执行的应用程序1具有启动处理部11和主处理部12。启动处理部11在应用程序1启动时执行图像输出控制。主处理部12通过应用程序1进行必要的处理。
启动处理部11具有屏幕显示状态判定部13、呈现区域指定部14、屏幕切换处理部15。屏幕显示状态判定部13在应用程序1启动时检查屏幕的显示状态。呈现区域指定部14指定显示通过执行应用程序1而创建的图像的屏幕上的区域。屏幕切换处理部15根据需要向操作系统S要求切换屏幕的输出目标(显示目标)。
操作系统2具有屏幕管理部16。屏幕管理部16管理具有主体屏幕的平板终端10、具有外部屏幕的外部显示器20等显示器设备的连接状态、以及显示于哪个显示器的显示状态。
此外,操作系统2中安装有显示驱动程序17。显示驱动程序17具有屏幕切换控制部18。屏幕切换控制部18根据来自操作系统2的屏幕切换的要求,对图形控制器(参照图6)进行屏幕输出目标的切换控制。
当应用程序1开始启动时,屏幕显示状态判定部13从操作系统2的屏幕管理部16取得该时刻的外部显示器20等其他显示装置的连接状态、屏幕输出目标的信息。在本实施方式中,显示器的连接状态能够通过检测HDMI线缆等连接线与平板终端10和外部显示器20连接的情况来把握。
屏幕显示状态判定部13通过从屏幕管理部16取得屏幕模式来得到屏幕输出目标的信息。屏幕模式被设定在屏幕模式设定表4。图5中示出屏幕模式设定表4的一例。屏幕模式设定表4中,设定了屏幕模式41和应用程序启动前的显示模式42,定义了各显示模式42的应用程序1启动时的屏幕动作43。在该时刻设定的显示模式42的屏幕模式41中设定了“启动(ON)”。另外,各显示模式与图2的显示模式对应。屏幕模式设定表4存储于平板终端10的存储部3。另外,在本实施方式的变形例中对存储部3中存储的登记表5进行说明。
在图5的例子中,在屏幕模式设定表4中设定的应用程序启动前的显示模式42为“1”的情况下,应用程序1启动时的动作43被定义成在主体屏幕上直接启动应用程序。该情况下,不发生屏幕输出目标的切换。
应用程序1启动前的显示模式42为“2”的情况下,应用程序1启动时的动作43是在组合主体屏幕与外部屏幕而成的呈现区域中的、主体屏幕的呈现区域内启动应用程序1。该情况下,不发生屏幕输出目标的切换。
应用程序1启动前的显示模式42为“3”的情况下,应用程序1启动时的动作43是在组合主体屏幕与外部屏幕而成的呈现区域中的、主体屏幕的呈现区域内启动应用程序1。该情况下,不发生屏幕输出目标的切换。
应用程序1启动前的显示模式42为“4”的情况下,应用程序1启动时的动作43为,将输出目标切换为“扩展显示(2)”,在主体屏幕的呈现区域中启动应用程序1。
应用程序1启动前的显示模式42为“5”的情况下,应用程序1启动时的动作43为,将输出目标切换为“扩展显示(2)”,在主体屏幕的呈现区域中启动应用程序1。
在图5的例子中,显示模式5的屏幕模式41为启动。该情况下,为用户仅对与平板终端10连接的外部显示器20输出画面来使用的状态,主体屏幕无效。因此,取得屏幕模式41的屏幕切换处理部15向操作系统2的屏幕管理部16要求切换屏幕输出目标。操作系统接受该要求,向显示驱动程序17要求切换屏幕。由此,主体屏幕有效,能够在主体屏幕进行显示。
不必切换的情况或者完成了屏幕的切换时,应用程序1的呈现区域指定部14根据从操作系统2的屏幕管理部16取得的呈现区域的信息,进行控制,使得在属于主体屏幕的呈现区域显示应用程序1的窗口。
图6示出本实施方式的呈现区域指定部14设定的呈现区域的一例。图6中示出对两个屏幕进行扩展显示时操作系统2管理的呈现区域。例如在Windows等操作系统中,两个屏幕的呈现区域作为连续的一个区域来进行管理。
例如,如图6的(a)所示,平板终端10的主体屏幕与外部显示器20的外部屏幕的分辨率相同的情况下,连接相同尺寸的两个呈现区域的区域作为呈现区域来进行管理。
另一方面是,不同的分辨率的主体屏幕与外部屏幕连接的情况下,如图6的(b)所示,不同尺寸的呈现区域被连接而作为一个呈现区域来进行管理。应用程序1的窗口W1~W3能够在该呈现区域内自由地配置。
组合主体屏幕与外部屏幕的显示模式的一例如图2所示。在本实施方式中,在图2所示的各个显示模式的状态下启动应用程序1时,进行图5所示的应用程序启动时的动作43,由此将已启动的应用程序1显示于主体屏幕。
[硬件结构]
接下来,参照图7,对平板终端10的硬件结构的一例进行说明。平板终端10具有中央处理器(CPU)100、主存储器201、eMMC(embedded Multi Media Card:嵌入式多媒体卡)202、及内置显示器204。中央处理器100具有图形控制器101、内存控制器102、存储控制器103、USB控制器104。
内存控制器102管理平板终端10的主存储器(主存储)201。图形控制器101进行屏幕的显示内容的管理、外部显示器20等显示装置的管理。图形控制器101将主存储器201内的一部分区域作为VRAM(Video RAM:视频RAM)区域来进行管理,使用主存储器201管理呈现区域的状态。图形控制器101与内置显示器204连接。此外,可以使用HDMI线缆等将图形控制器101与外部显示器20连接。
存储控制器103与eMMC202等非易失存储器(辅助存储)连接。eMMC202等中存储有操作系统2或应用程序1。例如,触摸面板203能够通过内置显示器204的屏幕上的触摸来进行输入操作。由此,平板终端10作为输入装置发挥功能,向用户提供操作手段。在图7的例子中,触摸面板203通过USB控制器104来连接,但也可以通过其他的接口连接。此外,在平板终端10中可以不搭载触摸面板而搭载数字化仪,或者搭载这两者。
另外,在该例中,中央处理器100中包含内存控制器102、图形控制器101,但这些控制器可以由与中央处理器100不同的芯片构成。
如以上所说明的那样,主体搭载有内置显示器204,一般而言不搭载键盘,利用触摸面板203或者数字化仪,通过直接触摸平板终端10的主体屏幕,能够在屏幕上进行输入操作。此处记载为平板终端10,但终端侧也可以是搭载了键盘的PC(个人计算机)。此外,终端侧可以是智能手机、便携式信息终端(PDA:Personal Digital Assistant(个人数字助理)、移动电话、便携式音乐设备、游戏设备等便携设备。
[软件结构]
接下来,参照图8,对平板终端10的软件结构的一例进行说明。另外,在本实施方式中,在平板终端10中,应用程序1受中央处理器100的控制而在操作系统2中动作。
在操作系统2中为了使各种设备动作,安装有各个设备用的设备驱动程序。在本实施方式中,特别是为了使用显卡的功能,图8中安装有显示驱动程序17。此外,操作系统2中安装有作为本实施方式的主体的应用程序1。由应用程序1对设备驱动程序进行的处理通过操作系统2或设备驱动程序从公开规格的API(Application Programming Interface:应用程序编程接口)进行访问来执行。因此,应用程序1在平板终端10的主体屏幕与外部显示器20的外部屏幕之间进行屏幕输出目标的切换的情况下,应用程序1使用API向操作系统2委托切换。操作系统2对显示驱动程序17要求切换。最终,显示驱动程序17基于软件的处理,控制硬件的图形控制器101,从而实现必要的处理。以上为实现本实施方式的图像输出控制方法的情况下的显示装置的整体结构、功能结构、硬件结构、软件结构以及基本的动作方针。图6的各部的功能通过如下方式实现:操作系统2中安装的图像输出控制程序使中央处理器101执行使用主体屏幕及外部屏幕来输出图像的处理。
以下示出往应用程序1安装图像输出控制处理的方法。在本实施方式中,作为往应用程序1安装图像输出控制处理的方法,考虑了第1方法和第2方法这两种方法。第1方法是安装于设计成平板终端10用的特定的应用程序1的方法。第2方法是安装于用于启动应用程序组的启动器(launcher)的方法。第1方法在本实施方式中如下进行说明,第2方法在本实施方式的变形例中进行说明。
(安装于特定的应用程序1的情况:第1方法)
该情况下,在设计成小屏幕用的应用程序1自身安装本实施方式的功能。具体而言,在应用程序1的处理中最初被引起的启动、初期化等处理中安装本实施方式的图像输出控制处理的功能。参照图9来说明应用程序1启动时执行的图像输出控制处理的流程。
首先,启动处理部11判定有没有连接外部显示器20(步骤S10)。此处,判定为未连接外部显示器20的情况下,仅主体屏幕为输出目标。因此,启动处理部11不特别进行追加的处理就使应用程序1进行动作(步骤S14),结束本处理。
另一方面,在判定为连接有外部显示器20的情况下,屏幕显示状态判定部13根据屏幕模式设定表4判定屏幕的输出目标(步骤S12)。屏幕显示状态判定部13根据在图5所示的屏幕模式设定表4中设定的屏幕模式41判定屏幕输出目标。
例如,在屏幕模式41被设定(启动)为显示模式1的情况下,屏幕的输出目标仅为主体屏幕。该情况下,不必将屏幕输出目标切换为主体屏幕。因而,启动处理部11不特别进行追加的处理就对主体屏幕启动应用程序1(步骤S14),结束本处理。
在屏幕模式41被设定(启动)为显示模式2或显示模式3的情况下,屏幕的输出目标为组合了主体屏幕与外部屏幕的呈现区域,扩展显示于两个屏幕。该情况下,屏幕切换处理部15无论主体屏幕是主显示器还是第二显示器,都指定主体屏幕的呈现区域,切换坐标原点,使得屏幕输出目标为主体屏幕。启动处理部11在切换后对主体屏幕启动应用程序1(步骤S16),结束本处理。
另外,主体屏幕的指定方法在将主体屏幕与外部屏幕设为连续的呈现区域的情况下,不限于指定属于主体屏幕的呈现区域的坐标的方法。例如,在操作系统2管理唯一识别各个屏幕的ID,由此能指定应用程序1的显示目标的情况下,可以使用识别该屏幕的ID来将应用程序1的显示目标指定为主体屏幕。
在屏幕模式41被设定(启动)为显示模式4的情况下,屏幕输出目标是组合了主体屏幕与外部屏幕的呈现区域,复制显示于两个屏幕。此外,如图5所示,在屏幕模式41被设定(启动)为显示模式5的情况下,屏幕输出目标仅为外部显示器。这些情况下,必须使主体屏幕有效,将屏幕输出目标切换为主体屏幕。因此,呈现区域指定部14在主体屏幕无效的情况下,将主体屏幕指定为呈现区域,将切换前的屏幕输出目标的信息记录于主存储器201等(步骤S18)。之后,屏幕切换处理部15将屏幕输出目标切换为扩展显示(2)。启动处理部11在主体屏幕的呈现区域启动应用程序1(步骤S20),结束本处理。
根据以上所说明的图像输出控制处理,启动应用程序1时,应用程序1始终显示于主体屏幕。由此,在本实施方式中,启动最适合于平板终端10的小屏幕的设计的特定的应用程序1时,连接外部显示器20或投影仪,能够消除对其输出画面的情况下的显示的缺陷。即,在本实施方式中,通过使该应用程序1必定显示在平板终端10的主体屏幕的呈现区域内,能够消除显示的缺陷。
例如,在欲启动应用程序1时,将屏幕输出目标仅设为外部显示器20而使主体屏幕无效的显示模式5的情况下,由于主体屏幕本来就无效,因此不能在主体屏幕上显示图像。
因此,在本实施方式中,该情况下欲启动应用程序1时,切换屏幕输出目标,在使无效的主体屏幕有效的基础上,启动应用程序1,能够在主体屏幕显示应用程序1。此时,“使主体屏幕有效”具体而言是指切换为显示模式3的扩展显示(2)。由此,使主体屏幕有效,同时外部显示器20侧的显示也保持有效,且能够将外部显示器20指定为主显示器,从而变更屏幕的输出目标。由此,至此显示于外部显示器20的内容能够保持显示在外部显示器20上。其结果是,在将屏幕的显示从本实施方式的屏幕显示切换至原来的屏幕显示时,通过将外部显示器20侧设为主显示器,能够继续进行顺畅的作业而不会改变外部屏幕上的作业环境。
图10中示出动作的情形的一例。平板终端10连接有外部显示器20。在图10的(a)的例子中,画面仅被输出到外部显示器20,平板终端10无效。在显示于外部显示器20的桌面屏幕上显示有窗口W1及图标Q。从该屏幕状态,用户使用鼠标点击图标Q,选择特定的应用程序1来使其启动。此时,在本实施方式的屏幕输出控制处理的功能安装于应用程序1的情况下,首先屏幕输出目标根据扩展显示(2)的定义而变更。由此,主体屏幕有效。接下来,如图10的(b)所示,由应用程序1生成的图像R显示在主体屏幕的呈现区域内。另外,显示于外部显示器20的内容保持显示在外部显示器20上的状态。
在图11的例子中,平板终端10连接有外部显示器20,成为在主体屏幕与外部屏幕上显示相同内容的图像的复制显示的状态。该情况下,从显示于外部显示器20的桌面屏幕选择用图标Q表示的特定的应用程序1,由此启动应用程序1。此时,与图10的例子同样地将屏幕输出目标变更为扩展显示(2)后,在主体屏幕的呈现区域内显示由应用程序1生成的图像R。
由此,设计成最适合平板终端10的屏幕尺寸的应用程序1的画面根据分辨率的不同,较小地显示于外部显示器20,能避免超出地显示的情况。此外,通过使无效的主体屏幕有效,由应用程序1生成的画面显示于主体屏幕。由此,能够通过平板终端10的触摸面板从屏幕上进行输入操作。此外,即使在外部显示器侧做了什么作业,也维持外部显示器侧的显示,因此能够直接继续作业。
此外,在启动应用程序1时,通过本实施方式的图像输出控制处理切换屏幕输出目标的情况下,结束应用程序1时执行图12所示的结束处理。在应用程序1的结束处理中,呈现区域指定部14判定启动时是否已变更了屏幕输出目标(步骤S22)。判定为已变更的情况下,呈现区域指定部14根据主存储器201中记录的原来的屏幕输出目标的信息,使屏幕输出目标恢复至应用程序1启动前的状态(步骤S24),并结束本处理。判定为未变更的情况下,本处理立即结束。
[变形例]
(安装于启动器的情况:第2方法)
最后,参照图13和图14,对本实施方式的变形例的屏幕输出控制处理进行说明。在变形例中,例举将屏幕输出控制的功能安装于启动器的情况进行说明。
该情况下,对用于启动应用程序1的启动器安装上述屏幕输出控制的功能。因此,应启动的设计成平板终端10用的应用程序1不必安装上述屏幕输出控制的功能。因此,能够对启动器包含的全部应用程序提供由上述屏幕输出控制得到的同样的效果。
启动器提供如下的手段:通过事先登记用户经常使用的多个应用程序,一览地显示这些应用程序,从而用户能够立即启动。例如,图13的平板终端10中登记有一览地显示了用于启动用户经常使用的多个应用程序的图标L1~L12的启动器。
在启动器中登记应用程序时,在登记表5中必须登记应用程序名称52、安装文件夹53等的显示属性信息。可以按照应用程序名称称52登记图标51。在本变形例中,这些显示属性信息中附加了表示是否在主体屏幕上启动欲登记的应用程序的启动屏幕信息54。在用户希望一定在主体屏幕上启动欲登记于启动器的应用程序的情况下,对启动屏幕信息54指定主体屏幕并登记。
图14中示出从启动器选择应用程序而开始启动所选择的应用程序的情况下的流程。首先,启动器基于登记表5,根据与由用户指定的图标51链接的应用程序(应用程序名称52、安装文件夹53)的显示属性信息54判定是否在主体屏幕上启动。(步骤S30)此处,在为未登记成在主体屏幕上启动的应用程序的情况下,不需要执行上述图像输出控制处理的功能,直接启动指定的应用程序(步骤S14),结束本处理。
另一方面,在为登记成在主体屏幕上启动的应用程序的情况下,进入步骤S10,执行步骤S10之后的步骤。在步骤S10之后的步骤标注与图9所示的屏幕输出控制处理相同的步骤编号,由于是同一处理,因此省略此处的说明。
此外,安装于启动器的情况也与上述实施方式同样,在启动指定的应用程序时切换屏幕的输出目标的情况下,事先记录切换前的输出目标(原来的输出目标)。并且,在应用程序结束时执行使屏幕输出目标恢复至应用程序启动前的状态的处理。该情况下,在启动器识别到指定的应用程序的处理已结束的时刻,执行屏幕的切换处理(图12)。
如以上所说明的那样,根据本实施方式的变形例的屏幕输出控制方法,在启动了启动器中登记的应用程序时,必定在平板终端10的主体屏幕上显示应用程序的生成画面。由此,画面显示于大屏幕的外部显示器或投影仪,即使画面的布局走样,在外部显示器20中难以进行触摸操作,也能够在平板终端10的主体屏幕上进行触摸操作。此外,必定在主体侧显示应用程序的生成画面,由此即使在外部显示器20中未搭载有触摸面板的情况下,也能够确保通过触摸屏幕而实现的输入操作。
此外,在为了将主体屏幕从无效状态设为有效的状态而执行了切换屏幕输出目标的动作的情况下,也保持用户至此进行了作业的外部显示器20的显示内容。因此,不妨碍用户的作业,得到上述效果。
综上,根据本实施方式及其变形例的屏幕输出控制方法,能够消除对屏幕功能存在差异的多个显示装置输出图像时的缺陷。
以上,根据上述实施方式对图像输出控制方法、图像输出控制程序及显示装置进行了说明,但本发明的图像输出控制方法、图像输出控制程序以及显示装置不限于上述实施方式,能够在本发明的范围内进行各种变形及改良。此外,存在多个上述实施方式及变形例的情况下,能够在不矛盾的范围内进行组合。
例如,上述实施方式及其变形例的显示装置的结构为一例,当然不限定本发明的范围,根据用途或目的具有各种系统结构例。例如,连接有平板终端的显示装置不限于一台,也可以是多台。
此外,在上述实施方式及其变形例中,将屏幕功能存在差异的多个显示装置中的外部显示器设为一个显示装置、平板终端设为另一个显示装置,在一个显示装置中不能实现屏幕功能的情况下,在另一个显示装置中实现了屏幕的功能。但是,不限于此,也可以是,一个显示装置为屏幕功能存在差异的多个显示装置中的任意一方,另一个显示装置是屏幕功能存在差异的多个显示装置中的其他显示装置。
标号说明
1:应用程序;
2:操作系统;
4:屏幕模式设定表;
5:登记表;
10:平板终端;
11:启动处理部;
12:主处理部;
13:屏幕显示状态判定部;
14:呈现区域指定部;
15:屏幕切换处理部;
16:屏幕管理部;
17:显示驱动程序;
18:屏幕切换控制部;
20:外部显示器;
100:中央处理器;
101:图形控制器;
102:内存控制器;
103:存储控制器;
104:USB控制器;
201:主存储器;
202:eMMC;
203:触摸面板;
204:内置显示器。

Claims (9)

1.一种图像输出控制方法,由计算机执行使用屏幕的功能存在差异的多个显示装置的屏幕来输出图像的处理,
在因所述屏幕的功能的差异而使得所述多个显示装置中的一个显示装置不能实现屏幕的功能的情况下,用该多个显示装置中的另一个显示装置来实现屏幕的功能,
在用所述另一个显示装置实现了屏幕的功能之后,将作为图像输出目标的显示装置切换为所述一个显示装置。
2.根据权利要求1所述的图像输出控制方法,其中,
在所操作的应用程序启动时,向所述另一个显示装置输出图像,用该另一个显示装置实现屏幕的功能,
在所述应用程序结束时,将作为图像输出目标的显示装置切换为所述一个显示装置。
3.根据权利要求2所述的图像输出控制方法,其中,
在启动器中登记的多个应用程序中的、登记有表示图像输出目标的显示属性信息的应用程序被操作了的情况下,在该应用程序启动时用根据所述显示属性信息确定的所述多个显示装置中的任意显示装置来实现屏幕的功能。
4.一种图像输出控制程序,该图像输出控制程序用于使计算机执行使用屏幕的功能存在差异的多个显示装置的屏幕来输出图像的处理,
在因所述屏幕的功能差异而使得所述多个显示装置中的一个显示装置不能实现屏幕的功能的情况下,用该多个显示装置中的另一个显示装置来实现屏幕的功能,在用所述另一个显示装置实现了屏幕的功能之后,将作为图像输出目标的显示装置切换为所述一个显示装置。
5.根据权利要求4所述的图像输出控制程序,其中,
在所操作的应用程序启动时,向所述另一个显示装置输出图像,用该另一个显示装置实现屏幕的功能,
在所述应用程序结束时,将作为图像输出目标的显示装置切换为所述一个显示装置。
6.根据权利要求5所述的图像输出控制程序,其中,
在启动器中登记的多个应用程序中的、登记有表示图像输出目标的显示属性信息的应用程序被操作了的情况下,在该应用程序启动时用根据所述显示属性信息确定的所述多个显示装置中的任意显示装置来实现屏幕的功能。
7.一种显示装置,该显示装置使用屏幕的功能存在差异的自身屏幕和其他显示装置的屏幕来输出图像,
在因所述屏幕的功能的差异而使得所述显示装置和所述其他显示装置中的一个显示装置不能实现屏幕的功能的情况下,用所述显示装置和所述其他显示装置中的另一个显示装置来实现屏幕的功能,
所述显示装置具有屏幕切换处理部,在用所述另一个显示装置实现了屏幕的功能之后,所述屏幕切换处理部将作为图像输出目标的显示装置切换为所述一个显示装置。
8.根据权利要求7所述的显示装置,其中,
在所操作的应用程序启动时,所述屏幕切换处理部向所述另一个显示装置输出图像,用该另一个显示装置实现屏幕的功能,
在所述应用程序结束时,所述屏幕切换处理部将作为图像输出目标的显示装置切换为所述一个显示装置。
9.根据权利要求8所述的显示装置,其中,
在启动器中登记的多个应用程序中的、登记有表示图像输出目标的显示属性信息的应用程序被操作了的情况下,在该应用程序启动时所述屏幕切换处理部用根据所述显示属性信息确定的所述多个显示装置中的任意显示装置来实现屏幕的功能。
CN201580079658.9A 2015-05-08 2015-05-08 图像输出控制方法、图像输出控制程序以及显示装置 Pending CN107533448A (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2015/063281 WO2016181436A1 (ja) 2015-05-08 2015-05-08 画像出力制御方法、画像出力制御プログラム及び表示装置

Publications (1)

Publication Number Publication Date
CN107533448A true CN107533448A (zh) 2018-01-02

Family

ID=57248948

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201580079658.9A Pending CN107533448A (zh) 2015-05-08 2015-05-08 图像输出控制方法、图像输出控制程序以及显示装置

Country Status (5)

Country Link
US (1) US20180039470A1 (zh)
EP (1) EP3296859A4 (zh)
JP (1) JP6504248B2 (zh)
CN (1) CN107533448A (zh)
WO (1) WO2016181436A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110399080A (zh) * 2019-07-31 2019-11-01 联想(北京)有限公司 一种输出控制方法、终端及多设备系统

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6988060B2 (ja) * 2016-05-25 2022-01-05 株式会社リコー 画像処理装置、画像処理システム、画像処理方法及びプログラム
WO2019045144A1 (ko) * 2017-08-31 2019-03-07 (주)레벨소프트 의료용 항법 장치를 위한 의료 영상 처리 장치 및 의료 영상 처리 방법
CN107728838A (zh) * 2017-09-28 2018-02-23 努比亚技术有限公司 一种终端显示管理方法、移动终端及计算机可读存储介质
US10346122B1 (en) * 2018-10-18 2019-07-09 Brent Foster Morgan Systems and methods for a supplemental display screen

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005267450A (ja) * 2004-03-19 2005-09-29 Clarion Co Ltd 情報処理装置、その制御方法及びプログラム
US20060085753A1 (en) * 2004-10-19 2006-04-20 Vance Scott L Systems, methods and computer program products for displaying content on multiple display screens using handheld wireless communicators
US20130016040A1 (en) * 2011-07-11 2013-01-17 Samsung Electronics Co. Ltd. Method and apparatus for displaying screen of portable terminal connected with external device
US20130135177A1 (en) * 2011-11-24 2013-05-30 Kabushiki Kaisha Toshiba Electronic device, control method for electronic device, and control program for electronic device
CN103530032A (zh) * 2012-07-06 2014-01-22 Lg电子株式会社 移动终端、图像显示装置及使用其的用户接口提供方法

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE602005008266D1 (de) * 2004-10-19 2008-08-28 Sony Ericsson Mobile Comm Ab Videokonferenzverfahren, tragbares drahtloses kommunikationsgerät und computerprogrammprodukt für videokonferenzen
JP2008164988A (ja) * 2006-12-28 2008-07-17 Rockridgesound Japan Co Ltd マルチディスプレイシステム
JP5611286B2 (ja) * 2012-07-26 2014-10-22 キヤノン株式会社 画像処理装置及びその制御方法、情報処理装置及びその制御方法、プログラム
JP2013114698A (ja) * 2013-01-21 2013-06-10 Toshiba Corp 電子機器、電子機器の制御方法、電子機器の制御プログラム

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005267450A (ja) * 2004-03-19 2005-09-29 Clarion Co Ltd 情報処理装置、その制御方法及びプログラム
US20060085753A1 (en) * 2004-10-19 2006-04-20 Vance Scott L Systems, methods and computer program products for displaying content on multiple display screens using handheld wireless communicators
US20130016040A1 (en) * 2011-07-11 2013-01-17 Samsung Electronics Co. Ltd. Method and apparatus for displaying screen of portable terminal connected with external device
US20130135177A1 (en) * 2011-11-24 2013-05-30 Kabushiki Kaisha Toshiba Electronic device, control method for electronic device, and control program for electronic device
CN103530032A (zh) * 2012-07-06 2014-01-22 Lg电子株式会社 移动终端、图像显示装置及使用其的用户接口提供方法

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110399080A (zh) * 2019-07-31 2019-11-01 联想(北京)有限公司 一种输出控制方法、终端及多设备系统

Also Published As

Publication number Publication date
EP3296859A4 (en) 2018-04-25
JPWO2016181436A1 (ja) 2018-02-15
US20180039470A1 (en) 2018-02-08
EP3296859A1 (en) 2018-03-21
WO2016181436A1 (ja) 2016-11-17
JP6504248B2 (ja) 2019-04-24

Similar Documents

Publication Publication Date Title
US10057482B2 (en) Electronic camera, image display device, and storage medium storing image display program
CN109074276B (zh) 系统任务切换器中的选项卡
US20140223490A1 (en) Apparatus and method for intuitive user interaction between multiple devices
CN108694012B (zh) 在屏幕上显示对象的方法和系统
US20060020903A1 (en) Window split system and method
US20070109580A1 (en) Information processing device, information processing method, program, and storage medium
CN107533448A (zh) 图像输出控制方法、图像输出控制程序以及显示装置
US20100134432A1 (en) Method and apparatus to provide user interface
US20150301731A1 (en) User interface apparatus
US20140359435A1 (en) Gesture Manipulations for Configuring System Settings
KR20160013162A (ko) 다수의 디스플레이들을 위한 사용자 인터페이스 요소
US20150074576A1 (en) Information processing methods and electronic devices
JP2008027455A (ja) データ伝送方法、情報端末装置、ホスト装置、プログラム、記録媒体
AU2014251190A1 (en) Multiple displays for displaying workspaces
US9530385B2 (en) Display device, display device control method, and recording medium
WO2023030115A1 (zh) 界面显示方法和装置
JP5875262B2 (ja) 表示制御装置
KR101154996B1 (ko) 이동통신 단말기 및 그 메뉴화면 구성 방법
US20140165011A1 (en) Information processing apparatus
CN104335151B (zh) 终端设备、显示控制方法和程序
CN114679546A (zh) 一种显示方法及其装置、电子设备和可读存储介质
JP4765893B2 (ja) タッチパネル搭載装置、外部装置、及び外部装置の操作方法
CN104571844B (zh) 一种信息处理方法及电子设备
US9639247B2 (en) Information processing device, information processing method, and computer-readable medium
CN104820489A (zh) 管理低延时直接控制反馈的系统和方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
TA01 Transfer of patent application right

Effective date of registration: 20190123

Address after: Kanagawa

Applicant after: Fujitsu Personal Computer Co., Ltd.

Address before: Kawasaki, Kanagawa, Japan

Applicant before: Fujitsu Ltd.

TA01 Transfer of patent application right
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20180102

WD01 Invention patent application deemed withdrawn after publication