CN105103116A - 移动终端设备、图像生成方法和存储程序的非暂时性计算机可读介质 - Google Patents

移动终端设备、图像生成方法和存储程序的非暂时性计算机可读介质 Download PDF

Info

Publication number
CN105103116A
CN105103116A CN201480012077.9A CN201480012077A CN105103116A CN 105103116 A CN105103116 A CN 105103116A CN 201480012077 A CN201480012077 A CN 201480012077A CN 105103116 A CN105103116 A CN 105103116A
Authority
CN
China
Prior art keywords
display unit
screen
display
unit
mobile terminal
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201480012077.9A
Other languages
English (en)
Other versions
CN105103116B (zh
Inventor
日高伸二
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
NEC Corp
Original Assignee
NEC Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by NEC Corp filed Critical NEC Corp
Publication of CN105103116A publication Critical patent/CN105103116A/zh
Application granted granted Critical
Publication of CN105103116B publication Critical patent/CN105103116B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482Interaction with lists of selectable items, e.g. menus
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1454Digital output to display device ; Cooperation and interconnection of the display device with other functional units involving copying of the display data of a local workstation or window to a remote workstation or window so that an actual copy of the data is displayed simultaneously on two or more displays, e.g. teledisplay
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16Constructional details or arrangements
    • G06F1/1613Constructional details or arrangements for portable computers
    • G06F1/1633Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
    • G06F1/1637Details related to the display arrangement, including those related to the mounting of the display in the housing
    • G06F1/1641Details related to the display arrangement, including those related to the mounting of the display in the housing the display being formed by a plurality of foldable display components
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16Constructional details or arrangements
    • G06F1/1613Constructional details or arrangements for portable computers
    • G06F1/1633Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
    • G06F1/1637Details related to the display arrangement, including those related to the mounting of the display in the housing
    • G06F1/1647Details related to the display arrangement, including those related to the mounting of the display in the housing including at least an additional display
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04842Selection of displayed objects or displayed text elements
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1423Digital output to display device ; Cooperation and interconnection of the display device with other functional units controlling a plurality of local displays, e.g. CRT and flat panel display
    • G06F3/1431Digital output to display device ; Cooperation and interconnection of the display device with other functional units controlling a plurality of local displays, e.g. CRT and flat panel display using a single graphics controller
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/147Digital output to display device ; Cooperation and interconnection of the display device with other functional units using display panels
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/239Interfacing the upstream path of the transmission network, e.g. prioritizing client content requests
    • H04N21/2393Interfacing the upstream path of the transmission network, e.g. prioritizing client content requests involving handling client requests
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44209Monitoring of downstream path of the transmission network originating from a server, e.g. bandwidth variations of a wireless network
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/61Network physical structure; Signal processing
    • H04N21/6106Network physical structure; Signal processing specially adapted to the downstream path of the transmission network
    • H04N21/6131Network physical structure; Signal processing specially adapted to the downstream path of the transmission network involving transmission via a mobile phone network
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/65Transmission of management data between client and server
    • H04N21/658Transmission by the client directed to the server
    • H04N21/6581Reference data, e.g. a movie identifier for ordering a movie or a product identifier in a home shopping application
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/63Control of cameras or camera modules by using electronic viewfinders
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1423Digital output to display device ; Cooperation and interconnection of the display device with other functional units controlling a plurality of local displays, e.g. CRT and flat panel display
    • G06F3/1446Digital output to display device ; Cooperation and interconnection of the display device with other functional units controlling a plurality of local displays, e.g. CRT and flat panel display display composed of modules, e.g. video walls
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2300/00Aspects of the constitution of display devices
    • G09G2300/02Composition of display devices
    • G09G2300/026Video wall, i.e. juxtaposition of a plurality of screens to create a display screen of bigger dimensions
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00Aspects of display data processing
    • G09G2340/04Changes in size, position or resolution of an image
    • G09G2340/0407Resolution change, inclusive of the use of different resolutions for different screen areas
    • G09G2340/0421Horizontal resolution change

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Computer Hardware Design (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Computer Graphics (AREA)
  • Databases & Information Systems (AREA)
  • User Interface Of Digital Computer (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Digital Computer Display Output (AREA)

Abstract

提供了根据显示单元的选择状态来使用软件容易地生成表示在一个或多个显示单元上显示的屏幕的数据的手持式终端、图像生成方法和包含程序的非暂时性计算机可读介质。第一显示单元(2)和第二显示单元(4)显示图像。显示控制构件(6)使用一个或更多个软件来在第一显示单元(2)和第二显示单元(4)上显示至少一个内容。选择构件(8)选择第一显示单元(2)和/或第二显示单元(4)。显示屏幕获取构件(10)获取表示在由选择构件(8)选择的(多个)显示单元上显示的屏幕的屏幕数据。图像数据生成构件(12)基于由显示屏幕获取构件(10)获取的屏幕数据来生成图像数据。

Description

移动终端设备、图像生成方法和存储程序的非暂时性计算机可读介质
技术领域
本发明涉及移动终端设备、图像生成方法和存储程序的非暂时性计算机可读介质,并且特别是涉及生成指示被显示的屏幕的图像数据的移动终端设备、图像生成方法和存储程序的非暂时性计算机可读介质。
背景技术
在诸如移动电话或智能电话的移动终端设备的领域中,可以通过放大屏幕的尺寸来提高用户的便利性。然而,当屏幕的尺寸被过度放大时,整个移动终端设备的尺寸变得太大,并且由此存在移动终端设备的携带变得不便利的可能性。可以通过在移动终端设备中设置多于一个屏幕(即,窗口)并且将移动终端设备制作成可折叠或可滑动的结构来防止移动终端设备的携带变得不便利。
一方面,存在用以生成指示在显示装置上显示的屏幕的图像数据并且用以存储图像数据(诸如屏幕快照、屏幕捕获、屏幕转储或打印屏幕)的技术。该技术还被应用于移动电话等。
关于以上技术,专利文献1公开了移动电话,该移动电话在第一显示单元上显示节目内容并且在第二显示单元上显示图像捕获按钮以利用图像捕获单元来捕获在第一显示单元上显示的节目内容的图像。
而且,专利文献2公开了移动电话,该移动电话能够捕获由第一相机单元输入的图像、由第二相机单元输入的图像和接收到的图像中的至少一个图像并且将它存储在存储单元中作为静态图像或运动图像,并且能够捕获多个图像以从它们的图像合成一个图像并且存储它。
引用列表
专利文献
专利文献1:WO2008/016031
专利文献2:日本未审查专利申请公开No.2007-82223。
发明内容
技术问题
专利文献1的技术仅仅捕获在一个显示单元上显示的内容的图像。更进一步地,当由两个相机获得的图像被显示在两个屏幕中时,专利文献2的技术仅仅捕获这些图像以从这些图像合成一个图像。即,在专利文献1和专利文献2的技术中,当使用应用软件将内容显示在多个显示单元中的至少一个上时,难以选择其屏幕(即,图像)应被捕获的显示单元以生成指示在所选择的显示单元中显示的屏幕(即,图像)的数据。
已经作出本发明以解决以上提到的问题,并且本发明的目的是提供能够取决于显示单元的选择状态容易地生成指示使用软件而在显示单元上显示的屏幕的数据的移动终端设备、图像生成方法和存储程序的非暂时性计算机可读介质。
对问题的解决方案
根据本发明的移动终端设备包括:多个显示单元,其显示图像;显示控制构件,用于通过使用一个或更多个软件来引起多个显示单元中的至少一个显示内容;选择构件,用于选择多个显示单元中的一个或更多个;显示屏幕获取构件,用于获取指示在由选择构件选择的显示单元上显示的屏幕的屏幕数据;以及图像数据生成构件,用于基于由显示屏幕获取构件获取的屏幕数据来生成图像数据。
根据本发明的图像生成方法包括:通过使用一个或更多个软件来引起被提供在移动终端设备中并且显示图像的多个显示单元中的至少一个显示内容;选择多个显示单元中的一个或更多个;获取指示在所选择的显示单元上显示的屏幕的屏幕数据;以及基于获取的屏幕数据来生成图像数据。
在非暂时性计算机可读介质中存储的程序引起移动终端设备的计算机执行:通过使用一个或更多个软件来引起被提供在移动终端设备中并且显示图像的多个显示单元中的至少一个显示内容的显示步骤控制构件;选择多个显示单元中的一个或更多个的选择步骤;获取指示在选择步骤中选择的显示单元上显示的屏幕的屏幕数据的显示屏幕获取步骤;以及基于在显示屏幕获取步骤中获取的屏幕数据来生成图像数据的图像数据生成步骤。
发明的有益效果
根据本发明,可以提供能够取决于显示单元的选择状态容易地生成指示使用软件而在显示单元上显示的屏幕的数据的移动终端设备、图像生成方法和存储程序的非暂时性计算机可读介质。
附图说明
图1是示出根据本发明的示例性实施例的移动终端设备的慨况的示图;
图2是示出根据第一示例性实施例的移动终端设备的外观的平面图;
图3是示出根据第一示例性实施例的移动终端设备的示图;
图4是示出根据第一示例性实施例的由控制单元实现的每个部件的示图;
图5是示出根据第一示例性实施例的由控制单元进行的处理的流程图;
图6是示出根据第一示例性实施例的由控制单元进行的处理的流程图;
图7A是被用于根据第一示例性实施例的由控制单元进行的处理的解释的示图;
图7B是被用于根据第一示例性实施例的由控制单元进行的处理的解释的示图;
图8是被用于根据第一示例性实施例的由控制单元进行的处理的解释的示图;
图9是被用于根据第一示例性实施例的由控制单元进行的处理的解释的示图;
图10A是被用于根据第一示例性实施例的由控制单元进行的处理的解释的示图;
图10B是被用于根据第一示例性实施例的由控制单元进行的处理的解释的示图;
图11是被用于根据第一示例性实施例的由控制单元进行的处理的解释的示图;
图12A是被用于根据第一示例性实施例的由控制单元进行的处理的解释的示图;
图12B是被用于根据第一示例性实施例的由控制单元进行的处理的解释的示图;
图12C是被用于根据第一示例性实施例的由控制单元进行的处理的解释的示图;
图13是被用于根据第一示例性实施例的由控制单元进行的处理的解释的示图;
图14是示出根据第二示例性实施例的由控制单元进行的处理的流程图;
图15A是被用于根据第二示例性实施例的处理的解释的示图;
图15B是被用于根据第二示例性实施例的处理的解释的示图;
图15C是被用于根据第二示例性实施例的处理的解释的示图;
图16是被用于根据第二示例性实施例的处理的解释的示图;
图17A是被用于根据第二示例性实施例的处理的解释的示图;以及
图17B是被用于根据第二示例性实施例的处理的解释的示图。
具体实施方式
(根据本发明的示例性实施例的慨况)
在给出示例性实施例的解释之前,参照图1来解释根据本发明的示例性实施例的移动终端设备的概况。图1是示出根据本发明的示例性实施例的移动终端设备1的概况的示图。如图1中示出的那样,移动终端设备1包括作为多个显示单元的第一显示单元2和第二显示单元4、显示控制构件6、选择构件8、显示屏幕获取构件10和图像数据生成构件12。
第一显示单元2和第二显示单元4显示图像。显示控制构件6通过使用一个或更多个软件来引起第一显示单元2和第二显示单元4中的至少一个显示内容。选择构件8选择第一显示单元2和第二显示单元4中的一个或更多个。显示屏幕获取构件10获取指示在由选择构件8选择的显示单元上显示的屏幕的屏幕数据。图像数据生成构件12基于由显示屏幕获取构件10获取的屏幕数据来生成图像数据。
按照根据本发明的示例性实施例的移动终端设备1,可能的是取决于显示单元的选择状态来容易地生成指示使用软件而在显示单元上显示的屏幕的数据。附加地,根据由移动终端设备1或能够被合并在移动终端设备1中的程序进行的方法,还可能的是取决于显示单元的选择状态来容易地生成指示使用软件而在显示单元上显示的屏幕的数据
(第一示例性实施例)
在下文中,参照附图来解释第一示例性实施例。图2是示出根据第一示例性实施例的移动终端设备100的外观的平面图。图3是示出根据第一示例性实施例的移动终端设备100的示图。注意的是,相同的符号被分配给实际上相同的部件。
移动终端设备100是例如移动电话、智能电话、平板PC(个人计算机)或便携游戏装置。移动终端设备1包括第一机架102和第二机架104。第一显示单元112被提供在第一机架102中。第二显示单元114被提供在第二机架104中。
第一显示单元112和第二显示单元114中的至少一个被配置为其中组合有显示装置和输入装置的触摸屏幕。换言之,移动终端设备100被配置为使得用户能够通过利用诸如用户的手指的操作体触摸第一显示单元112或第二显示单元114的表面来操作它。
移动终端设备100被配置为使得第一机架102和第二机架104彼此重叠以使得移动终端设备100在它不正被使用时能够被容易地到处携带。例如,移动终端设备100可以是沿着被装配在第一机架102和第二机架104之间的铰链(未示出)可折叠的。更进一步地,例如,移动终端设备100可以被配置为使得第一机架102和第二机架104是跨彼此可滑动的,并且由此当移动终端设备100未被使用时,移动终端设备100可以被配置为使得第二机架104能够在第一机架102下移动或第一机架102能够在第二机架104下移动。
而且,输入键120被提供在例如第二机架104的侧处。输入键120是例如由电源按钮120a、音量增加按钮120b和音量减小按钮120c组成的。通过按电源按钮120a,移动终端设备100能够被开机或关机。按音量增加按钮120b使得与移动终端设备100相关的音量能够被增加。按音量减小按钮120c使得与移动终端设备100相关的音量能够被减小。
通过以预先确定的方式操作输入键120来开始之后提到的显示屏幕获取处理。显示屏幕获取处理意味着用以生成指示在第一显示单元112和第二显示单元114中的至少一个上显示的屏幕的图像数据(屏幕数据)的处理,图像数据诸如为屏幕快照、屏幕捕获、屏幕转储或打印屏幕。
成像单元130被提供在第一机架102或第二机架104处。成像单元130是例如相机。成像单元130拍摄主体的图像并且生成指示所拍摄的图像的图像数据。麦克风132和扬声器134被提供在第一机架102或第二机架104处。在后来提到的控制单元200的控制下点亮的LED(发光二极管)136被提供在第一机架102或第二机架104处。
无线电通信单元140、语音转换单元144、存储单元146、存储器148和控制单元200被提供在第一机架102或第二机架104内。无线电通信单元140经由天线140a与另一设备进行无线电通信,并且发送和接收信息。语音转换单元144将由无线电通信单元140接收到的语音数据转换为语音并且引起扬声器134输出语音。语音转换单元144将从控制单元200输出的语音数据转换为语音并且引起扬声器134输出该语音。语音转换单元144将由麦克风132获取的语音转换为语音数据并且将语音数据输出到无线电通信单元140或控制单元200。
存储单元146是例如ROM(只读存储器)或RAM(随机存取存储器)。存储单元146在控制单元200的控制下存储进行各个类型的功能的应用软件。存储器148是例如非易失性存储器。存储器148在控制单元200的控制下存储各个类型的数据。控制单元200可以包括例如中央处理单元(CPU)、主存储或输入/输出端口等。控制单元200使用存储在存储单元146中的各个类型的应用软件(程序)来进行各个类型的控制。控制单元200响应于输入键120或在第一显示单元112或第二显示单元114处提供的输入装置的用户的操作,来控制第一显示单元112、第二显示单元114、成像单元130、LED136、无线电通信单元140、存储单元146和存储器148的移动。
特别是,控制单元200执行应用软件(在下文中,仅仅被提及为“应用”)以生成各个类型的内容。控制单元200引起第一显示单元112和/或第二显示单元114显示所生成的内容。而且,控制单元200能够同时执行多个应用。在该情况下,控制单元200能够引起第一显示单元112和第二显示单元114分别显示多个所生成的内容。控制单元200能够进行显示屏幕获取处理以获取指示包括在第一显示单元112和第二显示单元114处显示的内容的屏幕的屏幕数据。在下文中给出详细的解释。
图4是示出根据图3中示出的第一示例性实施例的由控制单元200实现的每个部件的示图。图5和图6是示出根据第一示例性实施例的由控制单元200进行的处理的流程图。图7A至图13是被用于根据第一示例性实施例的由控制单元200进行的处理的解释的示图。
如图4中示出的那样,控制单元200包括应用执行单元202、显示控制单元204、屏幕获取操作接收单元206、显示屏幕获取单元210、选择单元212、选择操作接收单元214、图像数据生成单元220和图像数据存储单元222。
更进一步地,由控制单元200实现的每个部件能够例如通过在作为计算机的、被装配在控制单元200处的计算装置(未示出)的控制下执行程序而被实现。更具体地,控制单元200将存储在存储单元146中的程序加载到主存储(未示出)中,并且在计算装置的控制下执行程序,由此实现每个部件。替换地,替代这样的实现被限制为通过程序仅由软件来完成,每个部件可以由任何硬件、固件和软件的组合来实现,。
控制单元200执行应用以引起第一显示单元112和第二显示单元114中的至少一个显示内容(S102)。具体地,应用执行单元202从存储单元146获取应用数据以执行应用。应用执行单元202通过执行应用来生成与应用对应的内容。应用执行单元202将所生成的内容输出到显示控制单元204。显示控制单元204对由应用执行单元202生成的内容执行必要的处理,诸如转换处理。显示控制单元204进行控制使得第一显示单元112和第二显示单元114中的至少一个显示内容。
例如,当应用执行单元202执行应用A以生成内容A时,如在作为示例的图7A中示出的那样,显示控制单元204可以引起第一显示单元112显示内容A。注意的是,在该情况下,显示控制单元204可以控制其上没有显示内容的第二显示单元114,以致于关断它的显示。这使得功率消耗能够被减少。例如,当应用执行单元202执行应用B以生成内容B时,如在作为示例的图7B中示出的那样,显示控制单元204可以引起第二显示单元114显示内容B。注意的是,在该情况下,显示控制单元204可以控制其上没有显示内容的第一显示单元112,以致于关断它的显示。
例如,当应用执行单元202执行应用A以生成内容A时,如在作为示例的图8中示出的那样,显示控制单元204可以引起第一显示单元112和第二显示单元114两者显示内容A。在该情况下,显示控制单元204可以生成指示内容A的右侧的内容Aa并且生成指示内容A的左侧的内容Ab。而且,显示控制单元204可以引起第一显示单元112显示内容Aa并且引起第二显示单元114显示内容Ab。
更进一步地,应用执行单元202可以同时执行应用A和应用B。在该情况下,应用执行单元202可以通过应用A的执行来生成内容A并且通过应用B的执行来生成内容B。在该情况下,显示控制单元204可以引起第一显示单元112显示内容A并且引起第二显示单元114显示内容B。
接下来,控制单元200接收用于开始显示屏幕获取处理的显示屏幕获取操作(S104)。具体地,当用户进行输入键120的预先确定的操作时,屏幕获取操作接收单元206接收指示屏幕获取操作的信号并且将该信号输出到显示屏幕获取单元210。以该方式,显示屏幕获取单元210开始显示屏幕获取处理。例如,当用户按电源按钮120a和音量减小按钮120c时,屏幕获取操作接收单元206可以接收指示屏幕获取操作的信号。
接下来,控制单元200确定内容是否被显示在第一显示单元112和第二显示单元114两者上(S106)。具体地,显示屏幕获取单元210确定显示控制单元204是否引起第一显示单元112和第二显示单元114两者显示内容。
当内容被显示在第一显示单元112和第二显示单元114中的仅一个上时(S106处的否),控制单元200确定内容被显示在第一显示单元112还是第二显示单元114上(S108)。具体地,当显示控制单元204引起第一显示单元112显示内容时,例如,如图7A中示出的那样,选择单元212选择“第一显示单元112”。另一方面,当显示控制单元204引起第二显示单元114显示内容时,例如,如图7B中示出的那样,选择单元212选择“第二显示单元114”。显示屏幕获取单元210确定选择单元212选择第一显示单元112还是第二显示单元114。
当确定内容被显示在第一显示单元112上时(S108处的“第一”),控制单元200获取指示在第一显示单元112上显示的屏幕的屏幕数据(S110)。具体地,显示屏幕获取单元210获取指示在第一显示单元112上显示的屏幕的屏幕数据。作为用于获取屏幕数据的方式的示例,可以获取从控制单元200传送到第一显示单元112的信号,并且可以从该信号生成屏幕数据,或者成像单元130可以拍摄在第一显示单元112上显示的屏幕的图像。
接下来,控制单元200生成与在第一显示单元112上显示的屏幕对应的图像数据(S112)。具体地,图像数据生成单元200对由显示屏幕获取单元210获取的屏幕数据进行必要的处理,诸如数据格式的转换,并且由此生成图像数据。例如,当包括内容A的屏幕被显示在第一显示单元112上时,如在作为示例的图7A中示出的那样,图像数据生成单元220生成指示包括内容A的屏幕的图像的图像数据,如在作为示例的图10A中示出的那样。接下来,控制单元200的图像数据存储单元222将由图像数据生成单元220生成的图像数据存储在存储器148中(S114)。
当确定内容被显示在第二显示单元114上时(S108处的“第二”),控制单元200获取指示在第二显示单元114上显示的屏幕的屏幕数据(S120)。具体地,显示屏幕获取单元210以与S110的处理类似的方式获取指示在第二显示单元114上显示的屏幕的屏幕数据。
接下来,控制单元200生成与在第二显示单元114上显示的屏幕对应的图像数据(S122)。具体地,图像数据生成单元220对由显示屏幕获取单元210获取的屏幕数据进行必要的处理,诸如数据格式的转换,并且由此生成图像数据。例如,当包括内容B的屏幕被显示在第二显示单元114上时,如在作为示例的图7B中示出的那样,图像数据生成单元220生成指示包括内容B的屏幕的图像的图像数据,如在作为示例的图10B中示出的那样。接下来,控制单元200的图像数据存储单元222将由图像数据生成单元220生成的图像数据存储在存储器148中(S114)。
以该方式,当内容被显示在这两个显示单元中的仅一个上时,可以生成与其上显示有内容的显示单元上显示的屏幕有关的图像数据。在该情况下,在没有进行任何操作的情况下,在用户进行显示屏幕获取操作之后,能够生成与在显示单元上显示的屏幕有关的图像数据
另一方面,当内容被显示在第一显示单元112和第二显示单元114两者上时(S106处的是),控制单元200确定是否通过同一应用将内容显示在第一显示单元112和第二显示单元114两者上(S130)。具体地,例如,如在作为示例的图8中示出的那样,当显示控制单元204通过一个应用(在图8的示例中,应用A)来引起第一显示单元112和第二显示单元114两者显示内容时,选择单元212选择“第一显示单元112”和“第二显示单元114”两者。换言之,当通过同一应用将内容显示在第一显示单元112和第二显示单元114两者上时,选择单元212自动选择“第一显示单元112”和“第二显示单元114”中的两者。
另一方面,例如,如在作为示例的图9中示出的那样,当显示控制单元204通过多个应用(在图9的示例处,应用A和应用B)来引起第一显示单元112和第二显示单元114两者显示内容时,选择单元212未进行显示单元的选择。在该情况下,在进行选择操作之后,选择单元212根据选择操作来选择“第一显示单元112”和“第二显示单元114”中的至少一个,如下面提到的那样。
显示屏幕获取单元210确定选择单元212选择第一显示单元112还是第二显示单元114。当通过同一应用将内容显示在第一显示单元112和第二显示单元114两者上时(即,选择单元212选择“第一显示单元112”和“第二显示单元114”两者)(S130处的是),控制单元200获取指示分别被显示在第一显示单元112和第二显示单元114两者上的屏幕的两个屏幕数据(S132)。
具体地,显示屏幕获取单元210通过与S110的处理类似的方式来获取指示在第一显示单元112上显示的屏幕的屏幕数据。以相同的方式,显示屏幕获取单元210获取指示在第二显示单元114上显示的屏幕的屏幕数据。例如,在图8的示例中,显示屏幕获取单元210获取指示包括内容Aa的、被显示在第一显示单元112上的屏幕a的屏幕数据a。以相同的方式,显示屏幕获取单元210获取指示包括内容Ab的、被显示在第二显示单元114上的屏幕b的屏幕数据b。
接下来,控制单元200生成与在第一显示单元112和第二显示单元114上显示的屏幕对应的图像数据(S134)。具体地,图像数据生成单元220组合由显示屏幕获取单元210获取的两个屏幕数据。图像数据生成单元220对其中屏幕数据被组合以变成一个数据的屏幕数据进行必要的处理,诸如数据格式的转换,并且由此生成图像数据。
例如,当如在作为示例的图8中示出的那样,包括内容Aa的屏幕a被显示在第一显示单元112上并且包括内容Ab的屏幕b被显示在第二显示单元114上时,如在作为示例的图11中示出的那样,图像数据生成单元220生成指示屏幕a和屏幕b被组合成的图像的图像数据。即,如在作为示例的图8中示出的那样,已经通过作为一个应用的应用A将内容A分离地显示在两个显示单元上。另一方面,如在作为示例的图11中示出的那样,通过显示屏幕获取处理生成的图像数据处于其中图像数据被组合成一个而非保持分离的图像数据的状态中。
接下来,控制单元200的图像数据存储单元222将由图像数据生成单元220生成的图像数据存储在存储器148中(S114)。
另一方面,当通过不同的应用将内容显示在第一显示单元112和第二显示单元114两者上时(即,选择单元212未进行显示单元的选择)(S130处的否),控制单元200迁移到显示单元选择操作模式(S140)。
具体地,选择单元212控制选择操作接收单元214以将它放置到接收用于选择显示单元的操作的状态(显示单元选择操作模式)中。当在在该显示单元选择操作模式中用户进行预先确定的操作时,用户能够选择(即,确定)在哪个显示单元获取所显示的屏幕(即,用户能够选择显示要被获取的屏幕的显示单元)。例如,当第一显示单元112被配置为触摸屏幕时,用户通过轻击第一显示单元112的表面能够进行选择操作(第一操作)。注意的是,“轻击”是其中用户将手指触摸到显示单元的表面并且在预先确定的时间内(例如,在一秒内)将手指从该表面分离的操作。
首先,在如在作为示例的图12A中示出的那样第一显示单元112和第二显示单元114两者明亮地点亮的状态下,当用户轻击第一显示单元112并且选择操作接收单元214接收该轻击操作时,如在作为示例的图12B中示出的那样,显示控制单元204将第二显示单元114的显示的亮度控制为比第一显示单元112的显示的亮度更暗。当在该状态中未在预先确定的时间内(例如,五秒内)进行轻击操作时,选择单元212选择“第一显示单元112”。
另一方面,当用户在预先确定的时间内再次轻击第一显示单元112并且选择操作接收单元214接收该轻击操作时,显示控制单元204将第一显示单元112的显示的亮度控制为比第二显示单元114的显示的亮度更暗,并且将第二显示单元114的显示的亮度控制为比第一显示单元112的显示的亮度更明亮,如在作为示例的图12C中示出的那样。当在该状态中未在预先确定的时间内(例如,五秒内)进行轻击操作时,选择单元212选择“第二显示单元114”。
另一方面,当用户在预先确定的时间内再次轻击第一显示单元112并且选择操作接收单元214接收该轻击操作时,如在作为示例的图12A中示出的那样,显示控制单元204进行控制以使得第一显示单元112和第二显示单元114两者被等同地照明。当在该状态中未在预先确定的时间内(例如,五秒内)进行轻击操作时,选择单元212选择“第一显示单元112和第二显示单元114”。
以该方式,因为每次用户进行选择操作(例如,轻击操作)时第一显示单元112和第二显示单元114的显示改变,所以用户能够容易地理解如果在该状态中用户不在预先确定的时间内进行选择操作则哪个显示单元将被选择(换言之,哪个显示单元是要被选择的候选(选择候选))。而且,用户能够利用诸如轻击操作的容易的操作来进行对选择候选的以上描述的切换。
接下来,控制单元200确定是否已经完成显示单元的选择操作(S142)。具体地,如以上提到的那样,选择单元212确定是否在预先确定的时间内没有进行选择操作。当确定未完成显示单元的选择操作时(即,当在预先确定的时间内已经进行选择操作时)(S142处的否),控制单元200重复S140的处理。
另一方面,当确定已经完成显示单元的选择操作时(即,当在预先确定的时间内未进行选择操作时)(S142处的是),控制单元200确定已经选择第一显示单元112和第二显示单元114中的哪个显示单元(S146)。具体地,显示屏幕获取单元210确定选择单元212已经选择“第一显示单元112”、“第二显示单元114”还是“第一显示单元112和第二显示单元114”。
当确定已经选择“第一显示单元112”时(S146处的“第一”),控制单元200获取指示在第一显示单元112上显示的屏幕的屏幕数据(S150)。具体地,显示屏幕获取单元210以与S110的处理类似的方式来获取指示在第一显示单元112上显示的屏幕的屏幕数据。接下来,控制单元200生成与在第一显示单元112上显示的屏幕对应的图像数据(S152)。具体地,图像数据生成单元220对由显示屏幕获取单元210获取的屏幕数据进行必要的处理,诸如数据格式的转换,并且由此生成图像数据。
例如,在包括内容A的屏幕被显示在第一显示单元112上并且包括内容B的屏幕被显示在第二显示单元114上的情况下,如在作为示例的图9中示出的那样,当如在作为示例的图12B中示出的那样已经选择第一显示单元112时,图像数据生成单元220生成指示包括内容A的屏幕的图像的图像数据,如在作为示例的图10A中示出的那样。
接下来,控制单元200的图像数据存储单元222将由图像数据生成单元220生成的图像数据存储在存储器148中(S154)。
另一方面,当确定已经选择“第二显示单元114”时(S146处的“第二”),控制单元200获取指示在第二显示单元114上显示的屏幕的屏幕数据(S160)。具体地,显示屏幕获取单元210以与S120的处理类似的方式获取指示在第二显示单元114上显示的屏幕的屏幕数据。接下来,控制单元200生成与在第二显示单元114上显示的屏幕对应的图像数据(S162)。具体地,图像数据生成单元220对由显示屏幕获取单元210获取的屏幕数据进行必要的处理,诸如数据格式的转换,并且由此生成图像数据。
例如,当如在作为示例的图9中示出的那样包括内容A的屏幕被显示在第一显示单元112上并且包括内容B的屏幕被显示在第二显示单元114上,并且如在作为示例的图12C中示出的那样已经选择第二显示单元114时,那么图像数据生成单元220生成指示包括内容B的屏幕的图像的图像数据,如在作为示例的图10B中示出的那样。
接下来,控制单元200的图像数据存储单元222将由图像数据生成单元220生成的图像数据存储在存储器148中(S154)。
另一方面,当确定已经选择“第一显示单元112和第二显示单元114”时(S146处的“两者”),控制单元200获取指示在第一显示单元112和第二显示单元114两者上分别显示的屏幕的两个屏幕数据(S170)。具体地,以与S132的处理类似的方式,显示屏幕获取单元210获取指示在第一显示单元112上显示的屏幕的屏幕数据。以类似的方式,显示屏幕获取单元210获取指示在第二显示单元114上显示的屏幕的屏幕数据。
接下来,控制单元200生成与在第一显示单元112和第二显示单元114上显示的屏幕对应的图像数据(S172)。具体地,图像数据生成单元220组合由显示屏幕获取单元210获取的两个屏幕数据。图像数据生成单元220对其中屏幕数据被组合以变成一个数据的屏幕数据进行必要的处理,诸如数据格式的转换,并且由此生成图像数据。
例如,在如在作为示例的图9中示出的那样包括内容A的屏幕A被显示在第一显示单元112上并且包括内容B的屏幕B被显示在第二显示单元114上的情况下,当已经选择第一显示单元112和第二显示单元114两者时,如在作为示例的图13中示出的那样,图像数据生成单元220生成指示屏幕A和屏幕B被组合成的图像的图像数据。
接下来,控制单元200的图像数据存储单元222将由图像数据生成单元220生成的图像数据存储在存储器148中(S154)。
以该方式,用户能够重复选择操作(例如,轻击操作)以取决于进行选择操作的次数来选择想要的屏幕。在图12A至图12C的示例中,例如,假设显示单元最初处于图12A的状态中。当在该状态中用户将选择操作进行一次时,显示单元的状态变成图12B的状态。相应地,选择单元212选择第一显示单元112。即,显示屏幕获取单元210能够获取第一显示单元112的显示屏幕。当用户将选择操作进行两次时,显示单元的状态变成图12C的状态。相应地,选择单元212选择第二显示单元114。即,显示屏幕获取单元210能够获取第二显示单元114的显示屏幕。
当用户将选择操作进行三次时,显示单元的状态变成图12A的状态。相应地,选择单元212选择第一显示单元112和第二显示单元114。即,显示屏幕获取单元210能够获取第一显示单元112的显示屏幕和第二显示单元114的显示屏幕。然后,图像数据生成单元220通过组合第一显示单元112的显示屏幕和第二显示单元114的显示屏幕能够生成图像数据。
因此,用于选择操作的专门的操作和输入键装置是不必要的。更进一步地,当在预先确定的时间内未进行选择操作时,自动选择显示单元。因此,用户通过仅重复诸如轻击操作的一个操作就能够容易地获取与想要的屏幕有关的图像数据。
(第二示例性实施例)
接下来,解释第二示例性实施例。在第二示例性实施例中,修改其中在第一示例性实施例中通过同一应用将内容显示在第一显示单元112和第二显示单元114两者上的处理。在下文中,解释其中已经修改了在图5处的“S106的是”之后的处理的处理。
图14是示出根据第二示例性实施例的由控制单元200进行的处理的流程图。图14处的流程图是对图5处的S130到S134的替代。图15A到图17B是被用于根据第二示例性实施例的处理的解释的示图。
当内容被显示在第一显示单元112和第二显示单元114两者上时,控制单元200确定是否通过同一应用将内容显示在第一显示单元112和第二显示单元114两者上(S202)。具体地,显示屏幕获取单元210确定显示控制单元204是否通过一个应用(在图8的示例处,应用A)来引起第一显示单元112和第二显示单元114两者显示内容。
当通过不同的应用将内容显示在第一显示单元112和第二显示单元114两者上时(S202处的是),进行图6处示出的S140的处理,并且然后进行与第一示例性实施例的那些处理类似的处理。另一方面,当通过同一应用将内容显示在第一显示单元112和第二显示单元114两者上时(S202处的是),控制单元200迁移到显示单元选择操作模式(S204)。
具体地,选择单元212控制选择操作接收单元214以将它放置到接收用于选择显示单元的操作的状态(显示单元选择操作模式)中。当在该显示单元选择操作模式中用户进行预先确定的操作时,用户能够选择(即,确定)在哪个显示单元获取所显示的屏幕(即,用户能够选择显示要被获取的屏幕的显示单元)。而且,在获取在第一显示单元112和第二显示单元114两者上显示的屏幕的情况下,可以选择生成它们的屏幕被组合到其中的图像数据还是在不组合各屏幕的情况下生成分离的图像数据。例如,当与第一示例性实施例类似地第一显示单元112被配置为触摸屏幕时,用户通过轻击第一显示单元112的表面能够进行选择操作。
首先,在如在作为示例的图15A中示出的那样第一显示单元112和第二显示单元114两者明亮地点亮的状态下,当用户轻击第一显示单元112并且选择操作接收单元214接收该轻击操作时,如在作为示例的图15B中示出的那样显示控制单元204将第二显示单元114的显示的亮度控制为比第一显示单元112的显示的亮度更暗。当在该状态中未在预先确定的时间内(例如,五秒内)进行轻击操作时,选择单元212选择“第一显示单元112”。
另一方面,当用户在预先确定的时间内再次轻击第一显示单元112并且选择操作接收单元214接收该轻击操作时,显示控制单元204将第一显示单元112的显示的亮度控制为比第二显示单元114的显示的亮度更暗,并且将第二显示单元114的显示的亮度控制为比第一显示单元112的显示的亮度更明亮,如在作为示例的图15C中示出的那样。当在该状态中未在预先确定的时间内(例如,五秒内)进行轻击操作(选择操作)时,选择单元212选择“第二显示单元114”。
另一方面,当用户在预先确定的时间内再次轻击第一显示单元112并且选择操作接收单元214接收该轻击操作时,显示控制单元204再次控制显示单元的状态以使得每经预先确定的时间(例如,每0.2秒)交替地第一显示单元112的显示的亮度比第二显示单元114的显示的亮度更明亮以及第二显示单元114的显示的亮度比第一显示单元112的显示的亮度更明亮,如在作为示例的图16中示出的那样。
换言之,显示控制单元204首先使第一显示单元112的显示的亮度比第二显示单元114的显示的亮度更明亮,并且然后,当0.2秒等经过时,使第二显示单元114的显示的亮度比第一显示单元112的显示的亮度更明亮。更进一步地,当0.2秒经过时,显示控制单元204使第一显示单元112的显示的亮度比第二显示单元114的显示的亮度更明亮。之后,显示控制单元204重复地使一个显示更明亮并且使另一个更暗。当在该状态中未在预先确定的时间内(例如,五秒内)进行轻击操作时,选择单元212选择“第一显示单元112和第二显示单元114”和“无组合”。
另一方面,当用户在预先确定的时间内(例如,在五秒内)再次轻击第一显示单元112并且选择操作接收单元214接收该轻击操作时,如在作为示例的图15A中示出的那样显示控制单元204进行控制以使得第一显示单元112和第二显示单元114被等同地照明。当在该状态中未在预先确定的时间内(例如,五秒内)进行轻击操作时,选择单元212选择“第一显示单元112和第二显示单元114”和“组合”。
以该方式,因为每次用户进行选择操作(例如,轻击操作)时第一显示单元112和第二显示单元114的显示改变,所以用户能够容易地理解如果在该状态中用户在预先确定的时间内未进行选择操作则哪个显示单元将被选择(换言之,哪个显示单元是要被选择的候选)。
接下来,控制单元200确定是否已经完成显示单元的选择操作(S206)。具体地,如以上提到的那样,选择单元212确定是否在预先确定的时间内未进行选择操作。当确定未完成显示单元的选择操作时(即,当在预先确定的时间内已经进行选择操作时)(S206处的否),控制单元200重复S204的处理。
另一方面,当确定已经完成显示单元的选择操作时(即,当在预先确定的时间内未进行选择操作时)(S206处的否),控制单元200确定已经选择第一显示单元112和第二显示单元114中的哪个显示单元(S208)。具体地,显示屏幕获取单元210确定选择单元212已经选择“第一显示单元112”、“第二显示单元114”还是“第一显示单元112和第二显示单元114”。
当确定已经选择“第一显示单元112”时(S208处的“第一”),控制单元200获取指示在第一显示单元112上显示的屏幕的屏幕数据(S210)。具体地,显示屏幕获取单元210以与第一示例性实施例的S110的处理类似的方式来获取指示在第一显示单元112上显示的屏幕的屏幕数据。接下来,控制单元200生成与在第一显示单元112上显示的屏幕对应的图像数据(S212)。具体地,图像数据生成单元220对由显示屏幕获取单元210获取的屏幕数据进行必要的处理,诸如数据格式的转换,并且由此生成图像数据。
例如,在包括内容Aa(内容Aa是内容A的一部分)的屏幕被显示在第一显示单元112上并且包括内容Ab(内容Ab是内容A的一部分)的屏幕被显示在第二显示单元114上的情况下,如在作为示例的图8中示出的那样,当如在作为示例的图15B中示出的那样已经选择第一显示单元112时,图像数据生成单元220生成指示包括内容Aa的屏幕的图像的图像数据,如在作为示例的图17A中示出的那样。
接下来,控制单元200的图像数据存储单元222将由图像数据生成单元220生成的图像数据存储在存储器148中(S214)。
另一方面,当确定已经选择“第二显示单元114”时(S208处的“第二”),控制单元200获取指示在第二显示单元114上显示的屏幕的屏幕数据(S220)。具体地,显示屏幕获取单元210以与第一示例性实施例的S120的处理类似的方式来获取指示在第二显示单元114上显示的屏幕的屏幕数据。接下来,控制单元200生成与在第二显示单元114上显示的屏幕对应的图像数据(S222)。具体地,图像数据生成单元220对由显示屏幕获取单元210获取的屏幕数据进行必要的处理,诸如数据格式的转换,并且由此生成图像数据。
例如,在包括内容Aa(内容Aa是内容A的一部分)的屏幕被显示在第一显示单元112上并且包括内容Ab(内容Ab是内容A的一部分)的屏幕被显示在第二显示单元114上的情况下,如在作为示例的图8中示出的那样,当如在作为示例的图15C中示出的那样已经选择第二显示单元114时,图像数据生成单元220生成指示包括内容Aa的屏幕的图像的图像数据,如在作为示例的图17B中示出的那样。
接下来,控制单元200的图像数据存储单元222将由图像数据生成单元220生成的图像数据存储在存储器148中(S214)。
另一方面,当确定已经选择“第一显示单元112和第二显示单元114”时(S208处的“两者”),控制单元200确定是否组合在显示单元中的两者上显示的屏幕(S230)。具体地,显示屏幕获取单元210确定选择单元212已经选择“组合”还是“无组合”。
当确定屏幕被组合时(S230处的是),控制单元200以与第一示例性实施例的S132的处理类似的方式获取指示分别被显示在第一显示单元112和第二显示单元114两者上的屏幕的两个屏幕数据(S240)。接下来,控制单元200以与第一示例性实施例的S134的处理类似的方式生成与在第一显示单元112和第二显示单元114上显示的屏幕对应的图像数据(S242)。具体地,图像数据生成单元220组合由显示屏幕获取单元210获取的两个屏幕数据。图像数据生成单元220对其中屏幕数据被组合以变成一个数据的屏幕数据进行必要的处理,诸如数据格式的转换,并且由此生成图像数据。
例如,在如在作为示例的图8中示出的那样包括内容Aa的屏幕a被显示在第一显示单元112上并且包括内容Ab的屏幕b被显示在第二显示单元114上的情况下,当已经选择第一显示单元112和第二显示单元114两者并且选择组合它们中的两者的屏幕时,如在作为示例的图15A中示出的那样,然后如在作为示例的图11中示出的那样,图像数据生成单元220生成指示屏幕a和屏幕b被组合成的图像的图像数据。即,如在作为示例的图8中示出的那样已经通过作为一个应用的应用A将内容A分离地显示在两个显示单元上,但是通过显示屏幕获取处理生成的图像数据处于其中图像被组合为一个而非保持被分离的状态中,如在作为示例的图11中示出的那样。
接下来,控制单元200的图像数据存储单元222将由图像数据生成单元220生成的图像数据存储在存储器148中(S214)。
另一方面,当确定屏幕不被组合时(S230处的否),控制单元200获取指示分别被显示在第一显示单元112和第二显示单元114两者上的屏幕的两个屏幕数据(S250)。具体地,显示屏幕获取单元210以与第一示例性实施例的S110的处理类似的方式来获取指示在第一显示单元112上显示的屏幕的屏幕数据。类似地,显示屏幕获取单元210获取指示在第二显示单元114上显示的屏幕的屏幕数据。例如,在图8的示例中,显示屏幕获取单元210获取指示被显示在第一显示单元112上的包括内容Aa的屏幕a的屏幕数据a。类似地,显示屏幕获取单元210获取指示被显示在第二显示单元114上的包括内容Ab的屏幕b的屏幕数据b。
接下来,图像数据生成单元220分离地生成分别与在第一显示单元112和第二显示单元114上显示的屏幕对应的图像数据(S252)。具体地,图像数据生成单元220对指示在第一显示单元112上显示的屏幕的屏幕数据进行必要的处理,诸如数据格式的转换,并且由此生成图像数据。类似地,图像数据生成单元220对指示在第二显示单元114上显示的屏幕的屏幕数据进行必要的处理,诸如数据格式的转换,并且由此生成图像数据。
例如,在如在作为示例的图8中示出的那样包括内容Aa的屏幕a被显示在第一显示单元112上并且包括内容Ab的屏幕b被显示在第二显示单元114上的情况下,当第一显示单元112和第二显示单元114两者已经被选择并且选择不组合它们中的两者的屏幕时,如在作为示例的图16中示出的那样,然后,如在作为示例的图17A和图17B中示出的那样,图像数据生成单元220分离地生成指示包括内容Aa的屏幕的图像的图像数据(图17A)和指示包括内容Ab的屏幕的图像的图像数据(图17B)。接下来,控制单元200的图像数据存储单元222将由图像数据生成单元220生成的两个图像数据存储在存储器148中(S214)。
以该方式,用户能够重复选择操作(例如,轻击操作)以取决于进行选择操作的次数来选择想要的屏幕。而且,用户还能够选择是否组合多个屏幕。在图15A到图15C和图16的示例中,例如,假设显示单元最初处于图15A的状态中。当在该状态中用户将选择操作进行一次时,显示单元的状态变成图15B的状态。相应地,选择单元212选择第一显示单元112。即,显示屏幕获取单元210能够获取第一显示单元112的显示屏幕。当用户将选择操作进行两次时,显示单元的状态变成图15C的状态。相应地,选择单元212选择第二显示单元114。即,显示屏幕获取单元210能够获取第二显示单元114的显示屏幕。
当用户将选择操作进行三次时,显示单元的状态变成图16的状态。相应地,选择单元212选择第一显示单元112和第二显示单元114。即,显示屏幕获取单元210能够获取第一显示单元112的显示屏幕和第二显示单元114的显示屏幕。然后,图像数据生成单元220能够分离地针对第一显示单元112的显示屏幕和第二显示单元114的显示屏幕生成图像数据。
当用户将选择操作进行三次时,显示单元的状态变成图15A的状态。相应地,选择单元212选择第一显示单元112和第二显示单元114。即,显示屏幕获取单元210能够获取第一显示单元112的显示屏幕和第二显示单元114的显示屏幕。然后,图像数据生成单元220通过组合第一显示单元112的显示屏幕和第二显示单元114的显示屏幕能够生成图像数据。
因此,用于选择操作的专门的操作和输入键装置是不必要的。更进一步地,当在预先确定的时间内未进行选择操作时,自动地选择显示单元并且选择是否组合屏幕。因此,用户通过仅重复诸如轻击操作的一个操作就能够容易地获取与想要的屏幕有关的图像数据。
在上面提到的第二示例性实施例中,已经解释了通过一个应用将内容显示在第一显示单元112和第二显示单元114两者上的情况。然而,第二示例性实施例能够被应用于其中通过不同的应用将内容显示在第一显示单元112和第二显示单元114两者上的状态。具体地,可以利用与第二示例性实施例的图14中示出的流程图的S230到S252对应的处理来替代第一示例性实施例的在图6中示出的流程图的S170和S172的处理。
通过该配置,即使如果通过不同的应用将内容显示在第一显示单元112和第二显示单元114两者上并且用户选择显示单元的两者,第一显示单元112的显示屏幕和第二显示单元114的显示屏幕也不总是被组合。换言之,用户能够选择组合还是分离第一显示单元112的显示屏幕和第二显示单元114的显示屏幕。相应地,例如如在图9中示出的那样,在其中通过不同的应用将内容显示在第一显示单元112和第二显示单元114两者上的状态下,当用户想分离地获取第一显示单元112和第二显示单元114的显示屏幕时,那么用户不必要进行麻烦的处理,诸如选择第一显示单元112以生成与第一显示单元112的显示屏幕有关的图像数据(图10A)并且然后选择第二显示单元114以生成与第二显示单元114的显示屏幕有关的图像数据(图10A)。
(经修改的示例)
注意的是,本发明不被限制于上面描述的示例性实施例,并且在不背离本发明的精神和范围的情况下能够如想要的那样修改它们。例如,在上面描述的示例性实施例中,存在两个机架。然而,可以存在一个或多于两个的机架。进一步地,在上面描述的示例性实施例中,存在两个显示单元。然而,可以存在多于两个的显示单元。
进一步地,在上面描述的示例性实施例中,操作体是用户的手指。然而,操作体不被限制于用户的手指。例如,操作体可以是触控笔等。进一步地,在上面描述的示例性实施例中,选择操作是轻击操作。然而,选择操作不被限制于轻击操作。例如,选择操作可以是轻划操作或对输入键120的按压。
进一步地,上面描述的示例性实施例中示出的部件中的两个或更多个可以被配置为一个集成部件。例如,显示屏幕获取单元210和选择单元212可以与彼此集成,或者,例如,显示屏幕获取单元210可以包括选择单元212的功能。
进一步地,在图5、图6和图14中示出的流程图中,能够如适当地那样改变各处理(各步骤)的顺序。而且,一个处理(步骤)可以被进行于其它处理(步骤)的执行期间。而且,多个处理(步骤)中的一个或更多个可以被省略。
进一步地,在上面描述的示例性实施例中,参照图12A到图12C和图15A到图15C,并非为选择候选的显示单元被显示得比作为选择候选的显示单元更暗。然而,使用显示的亮度以在选择候选和非选择候选之间进行区分是不必要的。例如,显示控制单元204可以将预先确定的标记(例如,叉标记或诸如“未被选择”的字符等)添加到并非为选择候选的显示单元的屏幕。替换地,例如,显示控制单元204可以将预先确定的标记(例如,圈或诸如“被选择”的字符等)添加到作为选择候选的显示单元的屏幕。
进一步地,上面描述的示例性实施例参照图12A到图12C、图15A到图15C和图16来解释取决于进行选择操作的次数来改变显示单元的显示的状态和选择候选。然而,改变的顺序不被限制于在图12A到图12C、图15A到图15C和图16中示出的顺序。能够由本领域技术人员如想要的那样确定改变的顺序。
能够使用任何类型的非暂时性计算机可读介质来将程序存储并且提供到计算机。非暂时性计算机可读介质包括任何类型的有形存储介质。非暂时性计算机可读介质的示例包括磁存储介质(诸如软盘、磁带、硬盘驱动器等)、光磁存储介质(例如,磁光盘)、CD-ROM(只读存储器)、CD-R、CD-R/W和半导体存储器(诸如掩模ROM、PROM(可编程ROM)、EPROM(可擦除PROM)、闪速ROM、RAM(随机存取存储器)等)。可以使用任何类型的暂时性计算机可读介质将程序提供到计算机。暂时性计算机可读介质的示例包括电信号、光学信号和电磁波。暂时性计算机可读介质能够经由有线通信线路(诸如电导线或光纤)或无线通信线路将程序提供到计算机。
尽管已经参照示例性实施例解释了本发明,但是本发明不由上面的示例性实施例来限制。能够在发明的范围内对本发明的配置和细节作出对于本领域技术人员来说明显的各种修改。
该申请基于并且要求来自2013年3月5日提交的日本专利申请No.2013-42735的优先权的权益,其公开被通过引用而在其整体上被合并在此。
参考标记列表
1移动终端设备
2第一显示单元
4第二显示单元
6显示控制构件
8选择构件
10显示屏幕获取构件
12图像数据生成构件
100移动终端设备
112第一显示单元
114第二显示单元
120输入键
120a电源按钮
120b音量增加按钮
120c音量减小按钮
146存储单元
148存储器
200控制单元
202应用执行单元
204显示控制单元
206屏幕获取操作接收单元
210显示屏幕获取单元
212选择单元
214选择操作接收单元
220图像数据生成单元
222图像数据存储单元

Claims (13)

1.一种移动终端设备,包括:
多个显示单元,其显示图像;
显示控制构件,用于通过使用一个或更多个软件来引起所述多个显示单元中的至少一个显示内容;
选择构件,用于选择所述多个显示单元中的一个或更多个;
显示屏幕获取构件,用于获取指示在由所述选择构件选择的所述显示单元上显示的屏幕的屏幕数据;以及
图像数据生成构件,用于基于由所述显示屏幕获取构件获取的所述屏幕数据来生成图像数据。
2.根据权利要求1所述的移动终端设备,进一步包括用于接收由用户进行的第一操作的操作接收构件,
其中,所述选择构件取决于所述操作接收构件已经接收到所述第一操作的次数来选择所述多个显示单元中的一个或更多个。
3.根据权利要求2所述的移动终端设备,其中,当所述显示控制构件通过使用多个软件来引起所述多个显示单元分别显示内容时,所述选择构件取决于所述操作接收构件已经接收到所述第一操作的次数来选择所述多个显示单元中的一个或更多个。
4.根据权利要求2或3所述的移动终端设备,其中,当在接收到所述第一操作之后所述操作接收构件未在预先确定的时间内接收到随后的第一操作时,所述选择构件选择所述多个显示单元中的一个或更多个。
5.根据权利要求1至4中任一项所述的移动终端设备,进一步包括用于接收由用户进行的第一操作的操作接收构件,
其中,当所述操作接收构件已经接收到所述第一操作时,所述显示控制构件改变所述多个显示单元的至少一个显示状态。
6.根据权利要求5所述的移动终端设备,其中,当所述显示控制构件取决于所述操作接收构件已经接收到所述第一操作来改变所述多个显示单元的至少一个显示状态时,所述显示控制构件对所述多个显示单元进行控制,从而已经作为要由所述选择构件选择的候选的所述显示单元的显示状态不同于并非为要由所述选择构件选择的候选的所述显示单元的显示状态。
7.根据权利要求1至6中任一项所述的移动终端设备,其中,
所述多个显示单元中的至少一个被配置为使得显示构件和输入构件被组合,以及
所述选择构件取决于触摸所述显示单元的所述显示构件的操作体来改变作为要被选择的候选的所述显示单元。
8.根据权利要求1至7中任一项所述的移动终端设备,其中,当所述显示控制构件通过使用一个软件来引起所述多个显示单元显示内容时,所述图像数据生成构件组合分别被显示在所述多个显示单元上的屏幕以生成所述图像数据。
9.根据权利要求2所述的移动终端设备,其中,当所述显示控制构件使用一个软件来引起所述多个显示单元显示内容时,所述选择构件取决于所述操作接收构件已经接收到所述第一操作的次数来选择所述多个显示单元中的一个或更多个,并且进一步地,如果所述选择构件选择所述显示单元中的两个或更多个,则所述选择构件选择是否由所述图像数据生成构件组合分别被显示在所选择的两个或更多个显示单元上的屏幕。
10.一种图像生成方法,包括:
通过使用一个或更多个软件来引起被提供在移动终端设备中并且显示图像的多个显示单元中的至少一个显示内容;
选择所述多个显示单元中的一个或更多个;
获取指示在所选择的显示单元上显示的屏幕的屏幕数据;以及
基于所获取的屏幕数据来生成图像数据。
11.根据权利要求10所述的图像生成方法,包括:
接收由用户进行的第一操作,
取决于已经接收到所述第一操作的次数来选择所述多个显示单元中的一个或更多个。
12.一种存储程序的非暂时性计算机可读介质,所述程序用于引起移动终端设备的计算机执行:
通过使用一个或更多个软件来引起被提供在所述移动终端设备中并且显示图像的多个显示单元中的至少一个显示内容的显示步骤;
选择所述多个显示单元中的一个或更多个的选择步骤;
获取指示在所述选择步骤中选择的所述显示单元上显示的屏幕的屏幕数据的显示屏幕获取步骤;以及
基于在所述显示屏幕获取步骤中获取的所述屏幕数据来生成图像数据的图像数据生成步骤。
13.根据权利要求12所述的存储所述程序的非暂时性计算机可读介质,所述程序引起所述移动终端设备的计算机执行:
接收由用户进行的第一操作的操作接收步骤,
其中,所述选择步骤取决于在所述操作接收步骤中已经接收到所述第一操作的次数来选择所述多个显示单元中的一个或更多个。
CN201480012077.9A 2013-03-05 2014-02-25 移动终端设备、图像生成方法和存储程序的非暂时性计算机可读介质 Active CN105103116B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2013042735 2013-03-05
JP2013-042735 2013-03-05
PCT/JP2014/000970 WO2014136400A1 (ja) 2013-03-05 2014-02-25 携帯端末装置、画像生成方法及びプログラムが格納された非一時的なコンピュータ可読媒体

Publications (2)

Publication Number Publication Date
CN105103116A true CN105103116A (zh) 2015-11-25
CN105103116B CN105103116B (zh) 2018-09-21

Family

ID=51490939

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201480012077.9A Active CN105103116B (zh) 2013-03-05 2014-02-25 移动终端设备、图像生成方法和存储程序的非暂时性计算机可读介质

Country Status (5)

Country Link
US (1) US10222940B2 (zh)
EP (1) EP2966556B1 (zh)
JP (1) JP6245250B2 (zh)
CN (1) CN105103116B (zh)
WO (1) WO2014136400A1 (zh)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9880799B1 (en) * 2014-08-26 2018-01-30 Sprint Communications Company L.P. Extendable display screens of electronic devices
US10860273B2 (en) * 2015-05-14 2020-12-08 Lg Electronics Inc. Display device and operation method therefor
JP6988060B2 (ja) 2016-05-25 2022-01-05 株式会社リコー 画像処理装置、画像処理システム、画像処理方法及びプログラム
US11093197B2 (en) * 2017-07-31 2021-08-17 Stmicroelectronics, Inc. System and method to increase display area utilizing a plurality of discrete displays
US10230826B1 (en) 2017-08-22 2019-03-12 Futurewei Technologies, Inc. Foldable mobile device
JP7290095B2 (ja) * 2019-09-30 2023-06-13 富士通株式会社 表示制御プログラム、表示制御方法および表示制御装置

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101046736A (zh) * 2006-03-29 2007-10-03 株式会社东芝 屏幕传输设备,屏幕显示方法和计算机可读介质
CN101796526A (zh) * 2007-09-04 2010-08-04 国际商业机器公司 用于验证电子文档的系统和方法
CN101866234A (zh) * 2009-01-05 2010-10-20 索尼公司 信息处理装置、信息处理方法和程序
CN102023834A (zh) * 2009-09-21 2011-04-20 联想(北京)有限公司 一种背景图片的显示方法及主机
US20110154248A1 (en) * 2009-12-22 2011-06-23 Junya Tsuruoka Information processing apparatus and screen selection method
CN102141851A (zh) * 2010-01-29 2011-08-03 株式会社泛泰 多显示器装置及其控制方法
US20120072866A1 (en) * 2010-09-16 2012-03-22 Nintendo Co., Ltd. Information processing apparatus, storage medium, information processing system and information processing method
CN102742168A (zh) * 2010-02-04 2012-10-17 三星电子株式会社 具有双显示单元的移动设备及用于控制双显示单元的方法
CN102754066A (zh) * 2010-02-10 2012-10-24 三星电子株式会社 具有多个显示单元的移动终端及其数据处理方法
US20120274540A1 (en) * 2011-04-26 2012-11-01 Kyocera Corporation Portable terminal apparatus

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH09102918A (ja) * 1995-10-05 1997-04-15 Matsushita Electric Ind Co Ltd 映像信号表示装置
JP4189315B2 (ja) 2003-12-26 2008-12-03 任天堂株式会社 ゲーム装置およびゲームプログラム
CN1933883B (zh) 2004-03-22 2010-05-05 任天堂株式会社 游戏装置以及游戏控制方法
JP5004435B2 (ja) 2005-05-13 2012-08-22 株式会社カプコン ゲームプログラム及びゲーム装置
US8049678B2 (en) 2005-09-09 2011-11-01 Lg Electronics, Inc. Image capturing and displaying method and system
JP5186373B2 (ja) 2006-07-31 2013-04-17 株式会社Access 電子機器、表示システム、表示方法およびプログラム
US20110209101A1 (en) * 2010-02-25 2011-08-25 Hinckley Kenneth P Multi-screen pinch-to-pocket gesture
JP5598207B2 (ja) 2010-09-24 2014-10-01 日本電気株式会社 表示装置、表示方法およびプログラム
JP5749043B2 (ja) 2011-03-11 2015-07-15 京セラ株式会社 電子機器

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101046736A (zh) * 2006-03-29 2007-10-03 株式会社东芝 屏幕传输设备,屏幕显示方法和计算机可读介质
CN101796526A (zh) * 2007-09-04 2010-08-04 国际商业机器公司 用于验证电子文档的系统和方法
CN101866234A (zh) * 2009-01-05 2010-10-20 索尼公司 信息处理装置、信息处理方法和程序
CN102023834A (zh) * 2009-09-21 2011-04-20 联想(北京)有限公司 一种背景图片的显示方法及主机
US20110154248A1 (en) * 2009-12-22 2011-06-23 Junya Tsuruoka Information processing apparatus and screen selection method
CN102141851A (zh) * 2010-01-29 2011-08-03 株式会社泛泰 多显示器装置及其控制方法
CN102742168A (zh) * 2010-02-04 2012-10-17 三星电子株式会社 具有双显示单元的移动设备及用于控制双显示单元的方法
CN102754066A (zh) * 2010-02-10 2012-10-24 三星电子株式会社 具有多个显示单元的移动终端及其数据处理方法
US20120072866A1 (en) * 2010-09-16 2012-03-22 Nintendo Co., Ltd. Information processing apparatus, storage medium, information processing system and information processing method
US20120274540A1 (en) * 2011-04-26 2012-11-01 Kyocera Corporation Portable terminal apparatus

Also Published As

Publication number Publication date
EP2966556A1 (en) 2016-01-13
EP2966556A4 (en) 2016-10-26
US10222940B2 (en) 2019-03-05
EP2966556B1 (en) 2019-10-09
CN105103116B (zh) 2018-09-21
JP6245250B2 (ja) 2017-12-13
JPWO2014136400A1 (ja) 2017-02-09
US20150355791A1 (en) 2015-12-10
WO2014136400A1 (ja) 2014-09-12

Similar Documents

Publication Publication Date Title
CN105103116A (zh) 移动终端设备、图像生成方法和存储程序的非暂时性计算机可读介质
CN105867730B (zh) 状态栏的显示方法及装置
US20230005254A1 (en) Image detection method and apparatus, and electronic device
CN104516887B (zh) 一种网页数据搜索方法、装置和系统
CN102118476A (zh) 手机菜单的显示方法及手机
US20170220102A1 (en) Method and device for implementing virtual button through camera, and computer-readable recording medium
CN110351424A (zh) 手势交互方法和终端
CN106204423A (zh) 一种基于增强现实的图片调整方法、装置及终端
JP2016511875A (ja) 画像サムネイルの生成方法、装置、端末、プログラム、及び記録媒体
CN112148171B (zh) 一种界面切换方法、装置及电子设备
CN109067981A (zh) 分屏应用切换方法、装置、存储介质和电子设备
CN115392332A (zh) Ai模型部署方法、系统及存储介质
CN112188001B (zh) 快捷设置方法、快捷设置装置、电子设备和可读存储介质
CN108932094A (zh) 分屏应用切换方法、装置、存储介质和电子设备
CN113360062A (zh) 显示控制方法、装置、电子设备和可读存储介质
KR20150023148A (ko) 전자기기에서 이미지를 관리하는 방법 및 장치
CN112799622A (zh) 一种应用的控制方法、装置及电子设备
CN109960581A (zh) 硬件资源配置方法、装置、移动终端及存储介质
CN110543276B (zh) 图片的筛选方法及其终端设备
KR20130134546A (ko) 동영상의 섬네일 이미지 생성 방법 및 그 전자 장치
CN112416199A (zh) 控制方法、装置和电子设备
CN110336917A (zh) 一种图片展示方法、装置、存储介质及终端
CN111435276A (zh) 图像处理方法、装置及电子设备
CN111813741B (zh) 文件的共享方法及电子设备
WO2015039567A1 (en) Method and user apparatus for window coloring

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant