CN109426412A - 显示装置及其控制方法 - Google Patents

显示装置及其控制方法 Download PDF

Info

Publication number
CN109426412A
CN109426412A CN201810951083.0A CN201810951083A CN109426412A CN 109426412 A CN109426412 A CN 109426412A CN 201810951083 A CN201810951083 A CN 201810951083A CN 109426412 A CN109426412 A CN 109426412A
Authority
CN
China
Prior art keywords
image
display
area
exterior terminal
electronic equipment
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201810951083.0A
Other languages
English (en)
Inventor
姜守真
金东赫
金秀娥
金容求
朴绍正
裴贤胜
元东熙
李省慧
李在珖
崔铉昊
韩荣兰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics Co Ltd
Original Assignee
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Samsung Electronics Co Ltd filed Critical Samsung Electronics Co Ltd
Publication of CN109426412A publication Critical patent/CN109426412A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04817Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance using icons
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0483Interaction with page-structured environments, e.g. book metaphor
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04842Selection of displayed objects or displayed text elements
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04845Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/0485Scrolling or panning
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04886Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures by partitioning the display area of the touch-screen or the surface of the digitising tablet into independently controllable areas, e.g. virtual keyboards or menus
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1454Digital output to display device ; Cooperation and interconnection of the display device with other functional units involving copying of the display data of a local workstation or window to a remote workstation or window so that an actual copy of the data is displayed simultaneously on two or more displays, e.g. teledisplay
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44Arrangements for executing specific programs
    • G06F9/451Execution arrangements for user interfaces
    • G06F9/452Remote windowing, e.g. X-Window System, desktop virtualisation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04BTRANSMISSION
    • H04B5/00Near-field transmission systems, e.g. inductive or capacitive transmission systems
    • H04B5/70Near-field transmission systems, e.g. inductive or capacitive transmission systems specially adapted for specific purposes
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04BTRANSMISSION
    • H04B5/00Near-field transmission systems, e.g. inductive or capacitive transmission systems
    • H04B5/70Near-field transmission systems, e.g. inductive or capacitive transmission systems specially adapted for specific purposes
    • H04B5/72Near-field transmission systems, e.g. inductive or capacitive transmission systems specially adapted for specific purposes for local intradevice communication

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Software Systems (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Controls And Circuits For Display Device (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

提供了一种电子设备及其控制方法。该电子设备的控制方法可以包括:从外部终端接收由外部终端显示的图像;在显示器的一个区域上显示接收到的图像;以及响应于接收到用于复制接收到的图像的复制命令用户命令的输入,复制在复制命令被输入时在所述一个区域上显示的接收到的图像,并在与所述一个区域不同的区域上显示所复制的图像。

Description

显示装置及其控制方法
相关申请的交叉引用
本申请要求于2017年8月22日向韩国知识产权局递交的韩国专利申请No.10-2017-0106066的优先权,并且本申请基于上述韩国专利申请,其公开内容通过引用方式整体并入本文中。
技术领域
本发明涉及一种电子设备及其控制方法,更具体地,涉及包括大尺寸显示器的电子设备及其控制方法。
背景技术
通常,诸如电子黑板之类的具有大屏幕的电子设备在设备中执行交互操作,例如经由显示屏接收和显示从外部终端发送的内容或显示预先存储的内容等。
然而,在接收和显示从外部终端发送的内容的情况下,电子设备在屏幕上仅显示从外部终端接收的内容,并且通常不能将另一内容与接收到的内容一起显示在用于显示接收到的内容的屏幕上。
此外,还存在另一问题,即当在屏幕上显示从外部终端接收的内容时,不可能在显示内容的屏幕上执行诸如复制所显示的内容或文档任务(例如,输入文本)之类的编辑操作。
诸如电子黑板之类的具有大尺寸屏幕的电子设备被用于用户主动地相互交流的场所,但是使用这种电子设备难以促进这些用户之间的交流。
发明内容
实施例的一个方面涉及通过提供大屏幕显示器的电子设备提供各种交互环境。
根据本公开的一个方面,提供了一种电子设备的控制方法,包括:从外部终端接收由所述外部终端显示的图像;在所述电子设备的显示器的第一区域上显示接收到的图像;以及响应于从用户接收到用于复制接收到的图像的复制命令,复制在所述复制命令被输入时在第一区域上显示的接收到的图像,并在所述显示器的与第一区域不同的第二区域上显示所复制的图像。
所述电子设备和所述外部终端可以包括用于近场通信(NFC)通信的NFC模块。
所述方法还可以包括:响应于所述外部终端被附于所述电子设备,使用所述NFC模块与所述外部终端进行通信连接。
在所述显示器的第一区域上显示接收到的图像可以包括:显示以下至少一项:第一图标,用于引导与所述外部终端连接以发送要在第一区域上显示的第一图像;以及第二图标,用于向所述外部终端发送在所述显示器的除第一区域之外的剩余区域上显示的第二图像。
在所述显示器的第一区域上显示接收到的图像可以包括:显示用于复制在第一区域上显示的接收到的图像的图标,并且其中,用于复制接收到的图像的所述复制命令可以包括选择用于复制接收到的图像的图标。
在所述显示器的第一区域上显示接收到的图像可以包括:显示用于编辑在第一区域上显示的接收到的图像的尺寸、位置和方向中的至少一项的图标;接收对所述图标的用户选择;以及根据对所述图标的用户选择,编辑接收到的图像的尺寸、位置和方向中的至少一项。
在与第一区域不同的第二区域上显示所复制的图像可以包括:在第一区域上显示接收到的图像并在第二区域上显示所复制的图像。
所述方法还可以包括:响应于在显示接收到的图像和所复制的图像的同时从用户接收到用于删除接收到的图像的删除命令,删除在第一区域上显示的接收到的图像。
所述显示器可以显示多个页面中的至少一个页面,并且在所述显示器的第一区域上显示接收到的图像可以包括:在基于来自用户的用于滚动在所述显示器上显示的页面中的至少一个页面的滚动命令而滚动页面的同时,在第一区域上固定地显示接收到的图像。
在所述显示器的第一区域上显示接收到的图像可以包括:在所述显示器中除第一区域之外的区域上显示用于引导所述多个页面的导航窗口。
所述方法还可以包括:响应于在第一区域上显示接收到的图像的同时在第一区域中感测到来自用户的第一触摸,向所述外部终端发送与感测到的第一触摸相对应的触摸信息;以及响应于在第一区域上显示接收到的图像的同时在除第一区域之外的剩余区域中感测到来自用户的第二触摸,根据第二触摸执行绘图功能。
响应于接收到用于复制接收的图像的所述复制命令,可以同时显示所复制的图像和接收到的图像。
根据本公开的另一方面,提供了一种电子设备,包括:通信器;显示器;以及处理器,被配置为:经由所述通信器从外部终端接收由所述外部终端显示的图像;控制所述显示器在所述显示器的第一区域上显示接收到的图像,响应于从用户接收到用于复制接收到的图像的复制命令,复制在所述复制命令被输入时在所述显示器的第一区域上显示的接收到的图像,并在所述显示器的除第一区域之外的第二区域上显示所复制的图像。
所述通信器可以包括:近场通信(NFC)模块,被配置为与所述外部终端执行NFC通信。
所述处理器还可以控制所述通信器响应于所述外部终端被附于所述电子设备而使用所述NFC模块与所述外部终端进行通信连接。
所述处理器还可以被配置为:控制所述显示器显示以下至少一项:第一图标,用于引导与所述外部终端连接以发送要在第一区域上显示的第一图像;以及第二图标,用于向所述外部终端发送在所述显示器的除第一区域之外的剩余区域上显示的第二图像。
所述处理器还可以被配置为控制所述显示器显示用于复制在第一区域上显示的接收到的图像的图标,并且用于复制接收到的图像的所述复制命令可以包括选择用于复制接收到的图像的图标。
所述处理器还可以被配置为控制所述显示器显示用于编辑在第一区域上显示的接收到的图像的尺寸、位置和方向中的至少一项的图标;以及响应于接收到对所述图标的用户选择,根据对所述图标的用户选择来编辑接收到的图像的尺寸、位置和方向中的至少一项。
所述处理器还可以被配置为:控制所述显示器在第一区域上显示接收到的图像并在第二区域上显示所复制的图像,并且响应于在显示接收到的图像和所复制的图像的同时从用户接收到用于删除接收到的图像的删除命令,删除在第一区域上显示的接收到的图像。
所述显示器可以被配置为显示多个页面中的至少一个页面,并且其中所述处理器还可以被配置为:控制所述显示器在基于来自用户的用于滚动在所述显示器上显示的页面中的至少一个页面的滚动命令而滚动页面的同时,在第一区域上固定地显示接收到的图像。
所述处理器还可以被配置为控制所述显示器在所述显示器中除第一区域之外的区域上显示用于引导所述多个页面的导航窗口。
所述处理器还可以被配置为响应于在第一区域上显示接收到的图像的同时在第一区域中感测到来自用户的第一触摸,而控制所述通信器向所述外部终端发送与感测到的第一触摸相对应的触摸信息,并且所述处理器还被配置为响应于在第一区域上显示接收到的图像的同时在除第一区域之外的剩余区域中感测到用户的第二触摸,而根据第二触摸执行绘图功能。
根据本公开的另一方面,提供了一种电子黑板,包括:显示器;以及处理器,被配置为:从外部终端接收图像;在所述电子黑板的显示器的第一区域上显示接收到的图像;以及从用户接收用于复制接收到的图像的复制命令;复制在接收到所述复制命令时在第一区域上显示的接收到的图像;以及在第一区域上显示接收到的图像的同时,在与第一区域不同的第二区域上显示所复制的图像。
根据以上示例实施例,电子设备可以提供各种交互环境。
附图说明
图1是示出了根据实施例的用于画中画(PIP)复制交互的系统的整体操作的示例的图;
图2是示出了根据实施例的电子设备的示例的框图;
图3是示出了根据实施例的显示器的示例结构的图;
图4是示出了根据实施例的电子设备的示例的框图;
图5是示出了根据实施例的外部终端的示例的框图;
图6A和图6B是示出了根据实施例的在电子设备中复制图像的示例的图;
图7A、图7B、图8A、图8B、图9A、图9B、图10A和图10B是示出了根据实施例的在电子设备中编辑从外部终端接收的图像的示例的图;
图11A和图11B是示出了根据实施例的在电子设备中根据用户命令显示PIP图像的示例的图;
图12是示出了根据实施例的在电子设备中显示导航窗口的示例的图;
图13是示出了根据实施例的在电子设备中以PIP模式根据用户命令执行操作的示例的图;以及
图14是示出了根据实施例的电子设备的示例控制方法的流程图。
具体实施方式
在具体描述实施例之前,将简要描述实施例中使用的术语。
关于本公开的实施例中使用的术语,考虑到关于本公开的功能,选择当前和广泛使用的一般术语。然而,术语可以根据在相关领域中实践的技术人员的意图、新技术的出现等而变化。在特定情况下,可以任意地选择术语,并且在这种情况下,将在相应公开的描述中描述其定义。因此,本说明书中使用的术语不一定被解释为术语的简单名称,而是基于实施例的术语和整体内容的含义来定义。
实施例可以改变,并且可以提供在不同实施例中。将参考附图来描述各种实施例。然而,这不一定将实施例的范围限制为具体实施例形式。相反,可以采用本描述所公开的概念和技术范围中包括的修改、等同物和替换。在描述实施例的同时,如果确定关于已知技术的描述会使本公开的主旨模糊,则可以省略具体描述。
在说明书和权利要求书中可以使用包括序数词(比如,“第一”、“第二”等)在内的术语,以将元件彼此区分。这些术语仅用于将组件彼此区分的目的,而不是限制性的。
除非另有说明,否则单数术语包括复数形式。说明书的术语“包括”、“包含”、“(被)配置为”等用于指示存在特征、数目、步骤、操作、元件、部件或其组合,并且不排除组合或添加一个或多个特征、数目、步骤、操作、元件、部件或其组合的可能性。
在实施例中,“模块”或“单元”执行至少一个功能或操作,并且可以实现为硬件、软件或其组合。此外,除了必须由特定硬件实现的“模块”或“单元”之外,可以将多个“模块”或多个“单元”集成到至少一个模块中并且实现为至少一个处理器(未示出)。
在实施例中,在某个部件“连接”到另一部件的情况下,它不仅可以包括该部件“直接连接”到另一部件的情况,还可以包括该部件通过其间插入的其它元件“电连接”到另一部件的情况。
下面将以本领域普通技术人员将理解的方式更详细地描述本公开的实施例。然而,实施例可以实现为各种不同的形式,并且不限于本文描述的实施例。而且,未详细描述公知的功能或结构,这是因为这会以不必要的细节模糊本发明,并且在整个说明书中,类似的附图标记用于类似的元件。
在下文中,将参考附图更详细地描述各种实施例。
图1是示出了根据实施例的用于画中画(PIP)复制交互的系统的整体操作的图。
如图1中所示,根据实施例,系统可以包括电子设备100和外部终端200。
电子设备100可以是大屏幕显示设备,例如在用户之间进行各种通信的演讲室或会议室中使用的电子黑板、或者安装在建筑物的外墙上的电子广告板。
外部终端200可以是与电子设备100通信并向电子设备100发送数据和从电子设备100接收数据的便携式终端设备(例如,智能电话、平板电脑等),或者可以是诸如智能TV之类的显示设备。
例如,与电子设备100连接以进行通信的外部终端200可以向电子设备100发送在外部终端200上显示的图像信息。因此,电子设备100可以基于从外部终端200接收的图像信息在显示器的第一区域上显示与在外部终端200上显示的图像相同的图像(下文中,称为第一图像10)。
当在第一区域中显示第一图像10的同时在第一区域中感测到用户触摸时,电子设备100可以向发送第一图像10的外部终端200发送与感测到的用户触摸相对应的触摸信息。
例如,如果在第一区域中显示的第一图像10是视频,则当在第一区域中感测到用户触摸时,电子设备100可以向发送第一图像10的外部终端200发送诸如暂停、高速再现、倒回等之类的触摸信息。
当在第一区域中显示第一图像10的同时在第一区域以外的剩余区域中感测到用户触摸时,电子设备100可以根据用户触摸执行绘图功能并且在感测到用户触摸的区域中显示绘图图像。
电子设备100可以在第一区域上将用于复制第一图像10的图标11与第一图像10一起显示。当图标11被选择时,电子设备100可以复制在显示器的第一区域上显示的第一图像10,并在与第一区域不同的区域上显示复制的图像(下文中称为第一复制图像20)。换言之,当图标11被选择时,电子设备100可以在显示器的第一区域中显示第一图像,并且以PIP模式进行操作,在所述PIP模式下在与第一区域不同的区域上显示从第一图像复制的图像。
例如,如果在第一区域中显示的第一图像10是静止图像,则当图标11被选择时,电子设备10可以生成与第一图像10相关的第一复制图像20,并在与第一区域不同的区域中显示复制图像。
如果在第一区域中显示的第一图像10是视频,则电子设备100可以生成与形成第一图像10的多个图像帧之中的在图标11被选择时所显示的图像帧有关的第一复制图像20,并在与第一区域不同的区域中显示复制图像20。
电子设备100可以在第一区域上将用于编辑第一图像10的图标12与第一图像10一起显示。当图标12被选择时,电子设备100可以编辑在显示器的第一区域中显示的第一图像10的尺寸、位置和方向中的至少一项。
电子设备100可以在显示器上显示多个页面中的至少一个,在显示至少一个页面的显示器的第一区域中显示第一图像10,并且在与第一区域不同的第二区域中显示第一复制图像20。
在如上所述显示第一复制图像20的同时,当在显示第一复制图像20的第二区域上输入用户触摸时,电子设备100可以编辑在第二区域中显示的第一复制图像20的位置、尺寸和方向中的至少一项。
如上所述,当在显示器上显示至少一个页面、第一图像10和第二复制图像20的同时输入用于滚动页面的用户命令时,电子设备10可以在与用户命令相对应的方向上滚动页面。一旦页面滚动,电子设备10可以在第一区域中显示滚动页面和第一图像10。
根据实施例,显示器可以具有层叠结构,在该层叠结构中堆叠多个层,并且可以在所述多个层中的第一层中显示多个页面中的第一页面和从第一图像10复制的第一复制图像20,并且可以在第二层中的第一区域中显示从外部终端100接收的第一图像10。
因此,当输入用于滚动页面的用户命令时,电子设备100可以在第二层中固定并显示第一图像10,并且根据用户命令将第一页面改变为滚动页面并且显示滚动页面。因此,当根据用于滚动页面的用户命令改变页面时,电子设备100可以在显示器的第一区域中仅显示第一图像10。
已经根据实施例描述了用于画中画(PIP)复制交互的系统的操作。在以下描述中,将详细描述电子设备100和外部终端200的示例配置。
图2是示出了根据实施例的电子设备的示例的框图。
如图2中所示,电子设备100可以包括通信器110、显示器120和处理器130。
通信器110可以无线地或通过线缆与诸如智能电话、平板PC、PC等的外部终端200进行数据通信,并且从外部终端200接收与外部终端200显示的图像有关的数据。
根据实施例,通信器110可以使用近场通信(NFC)模块与外部终端200进行数据通信,并且从外部终端200接收与外部终端200显示的图像有关的数据。
例如,当能够执行NFC通信的外部终端200靠近被设置在电子设备100的一侧中的NFC通信模块时,通信器110可以与外部终端200进行NFC通信并接收与外部终端200显示的图像有关的数据。
根据另一实施例,当输入用于与外部终端200进行通信连接的用户命令时,通信器110可以通过广播方法发送用于通信连接的消息。当多个外部终端200中接收用于通信连接的消息的一个外部终端被选择时,通信器110可以基于从所选择的外部终端200接收的响应消息来执行与用户选择的外部终端200的通信连接。通信器110可以接收与所连接的外部终端200显示的图像有关的数据。
下面将参考图4更详细地描述通信器110。
可以基于从与电子设备100连接的外部终端200接收的数据在显示器120的一个区域中显示要由外部终端200显示的图像。此外,可以在与显示该图像的一个区域不同的区域中显示与该图像有关的复制图像。
处理器130可以控制与电子设备100的元件有关的整体操作。当经由通信器110从外部终端200接收由外部终端200显示的图像时,处理器可以控制显示器120在显示器120的一个区域中显示接收到的图像。因此,可以在显示器120的一个区域中显示外部终端200所显示的图像。
例如,当经由通信器130从外部终端200接收到与外部终端200所显示的图像有关的数据时,处理器130可以生成与外部终端200所显示的图像相同的图像(下文中,被称为第一图像),并控制显示器120显示所生成的第一图像。因此,可以在显示器120的一个区域(下文中,称为第一区域)中显示第一图像。
当输入用于复制在显示器120的第一区域中显示的第一图像的用户命令时,处理器130可以在用户命令被输入时复制在第一区域中显示的第一图像,并控制显示器120在与第一区域不同的区域(下文中称为第二区域)中显示复制图像。因此,第一图像可以显示在显示器120的第一区域中,并且从第一图像复制的图像可以显示在第二区域中。
处理器130可以控制显示器120在第一区域中将用于复制第一图像的图标(下文中称为第一图标)与第一图像一起显示。因此,可以在显示器120的第一区域中显示第一图像以及用于复制第一图像的第一图标。当选择第一图标时,处理器130可以确定用于复制第一图像的用户命令被输入,复制在第一图标被选择时显示的第一图像,并且在显示器120的第二区域中显示所复制的图像。
根据另一实施例,处理器130可以控制显示器显示以下图标中的至少一个:用于引导与外部终端200的连接的图标(下文中称为第二图标),该外部终端200发送与要在第一区域中显示的第一图像有关的数据;以及用于向外部终端200发送在显示器120的除显示器120的第一区域之外的区域中显示的图像的图标(在下文中称为第三图标)。根据实施例,第三图标用于向外部终端200发送在显示器120的第二区域中显示的复制图像。
因此,可以在与显示器120的显示第一图像和复制图像的第一区域和第二区域不同的区域上显示第二图标和第三图标。
当在显示第二图标和第三图标的同时输入用于第二图标的用户命令时,处理器130可以提供包括能够与电子设备100连接以进行通信的多个外部终端200的列表。当列表中包括的多个外部终端200中的一个外部终端被选择时,处理器130可以控制通信器110从所选择的外部终端200接收由外部终端200显示的图像。因此,通信器110可以从用户选择的外部终端200接收与外部终端200显示的图像有关的数据。
当用于第三图标的用户命令被输入时,处理器130可以提供包括能够与电子设备100连接以进行通信的多个外部终端200的列表。当列表中包括的多个外部终端200中的一个外部终端被选择时,处理器130可以控制通信器110向所选择的外部终端200发送在除第一区域之外的区域中显示的图像。因此,通信器110可以向用户选择的外部终端200发送与在除第一区域之外的区域中显示的图像有关的数据。根据实施例,当列表中包括的多个外部终端200中的一个外部终端被选择时,处理器130可以控制通信器110向外部终端200发送在显示器120的第二区域中显示的复制图像。因此,通信器110可以向用户选择的外部终端200发送与在显示器120的第二区域中显示的复制图像有关的数据。
根据另一实施例,处理器130可以控制显示器120在第一区域中将用于编辑第一图像的尺寸、位置和方向中的至少一项的图标(在下文中称为第四图标)与第一图像一起显示。当在显示第一图像的第一区域中显示第四图标的同时通过第四图标输入用户命令时,处理器130可以根据用户命令编辑在第一区域中显示的第一图像的尺寸、位置和方向中的至少一项。因此,可以在显示器120的第一区域中显示尺寸、位置和方向中的至少一项被编辑的第一图像。
根据另一实施例,当在第一区域中显示第一图像并且在第二图像中显示与第一图像有关的复制图像的同时输入用于删除第一图像的用户命令时,处理器130可以删除在一个区域中显示的第一图像。
根据另一实施例,当在通过显示器120显示多个页面中的至少一个页面的同时输入用于滚动显示器120上显示的至少一个页面的用户命令时,处理器130可以基于输入的用户命令来控制显示器120在滚动页面的同时在第一区域中固定并显示第一图像。因此,仅第一图像可以被固定并显示在滚动页面中的第一区域中。
根据另一实施例,处理器130可以在显示器120的另一区域(下文中称为第三区域)中显示用于引导多个页面的导航窗口。
此外,当在第一区域中显示第一图像的同时在第一区域中感测到用户触摸时,处理器130可以控制通信器110向发送第一图像的外部终端200发送与感测到的用户触摸相对应的触摸信息。因此,通信器110可以向发送第一图像的外部终端200发送触摸信息。
如果确定在第一区域中显示第一图像的同时在除第一区域之外的剩余区域中感测到用户触摸,则处理器130可以根据用户触摸执行绘图功能。因此,可以在显示器120上感测到用户触摸的区域中显示绘图图像。
显示器可以被配置有多个层。下面将描述本实施例。
图3是示出了根据实施例的显示器的示例结构的图。
如图3中所示,显示器120可以配置有多个层310、320和330。
多个层310、320和330中的第一层310可以显示多个页面中的至少一个以及与用户触摸相对应的绘图图像。此外,可以在第一层310中显示根据从外部终端200接收的第一图像复制的图像。
第二层320可以布置在第一层310的上端,并且可以在第二层320中显示从外部终端200接收的第一图像。例如,可以在第一区域中显示从外部终端200接收的第一图像。
第三层330可以布置在第二层320的上端,并且可以在第三层330中显示各种UI。
根据实施例,可以在第三层330中显示第一UI 30和第二UI 40,其中第一UI 30包括用于复制从外部终端200接收的第一图像的图标和用于引导与外部终端200进行连接的图标,第二UI 40包括用于向外部终端200发送在第一区域中显示的第一图像的图标和用于编辑第一图像的尺寸、位置和方向中的至少一项的图标。
显示器120可以实现为第一至第三层310、320和330,当输入用于滚动页面的用户命令时,处理器130可以根据用户命令控制显示器120在第一层310的第一区域中固定并显示第一图像,并将第二层320中显示的第一页面改变为滚动页面。处理器130可以控制显示器120固定并显示在第三层330中显示的UI,而不管用于滚动页面的用户命令。
因此,当显示从第一图像复制的图像的第一页面滚动至第二页面时,在第三层330中显示的页面可以从第一页面改变为第二页面,同时保持在第一层310和第二层320中显示第一图像和UI。
然而,实施例不限于上述示例。多个层310、320和330可以与上述布置不同地布置。
图4是示出了根据实施例的电子设备的示例的框图。
如上所述,如果电子设备100是诸如安装在建筑物外墙上的电子黑板或电子广告之类的大屏幕显示器,则除了如图4所示的通信器110、显示器120和处理器130之外,电子设备100还可以包括输入单元140、图像处理器150、音频输出单元160和存储器170。
通信器110可以包括近场通信器模块11、无线通信器模块112和连接器113。
近场通信模块111可以与位于附近的外部终端200中的至少一个进行近场无线通信,并且可以包括蓝牙模块、ZigBee模块、NFC模块等中的至少一个。
无线通信模块112可以根据诸如IEEE之类的无线通信协议连接到外部网络,并且经由网络执行通信。然而,实施例不限于上述示例,并且无线通信模块112可以访问移动通信网络并根据诸如第3代(3G)、第3代合作伙伴计划(3GPP)、长期演进(LTE)等的各种移动通信标准来执行通信。
连接器113可以提供与多种源设备的接口(例如,USB 2.0、USB 3.0、HDMI和IEEE1394等)。连接器113可以根据处理器130的控制命令,经由连接到连接器113的线缆接收与从外部终端200或外部服务器(未示出)发送的图像有关的数据,或者向外部记录介质发送与预定图像有关的数据。连接器还可以经由物理地连接到连接器113的线缆从电源接收电力。
输入单元140可以接收各种用户命令并向处理器130发送用户命令,并且可以包括操纵单元141和触摸输入单元142。
操纵单元141可以实现为包括各种功能键、数字键、特殊键、文本键等的键区。触摸输入单元142可以实现为触摸板,其与显示器120形成交互层结构。在这种情况下,触摸输入单元142可以接收与通过显示器120显示的各种UI相关的图标的选择命令。
显示器120可以实现为液晶显示器(LCD)、有机发光显示器(OLED)等。
图像处理器150可以处理与从外部终端200接收的第一图像有关的数据,以成为能够经由电子设备100的显示器120和音频输出单元160中的至少一个输出的信号。
音频输出单元160可以经由扬声器(未示出)以可听声音的形式输出在与从外部终端200接收的第一图像有关的数据中包括的音频数据。
存储器170可以存储从外部终端200接收的图像和音频数据以及与关于第一图像的复制图像有关的数据。此外,存储器170还可以存储用于控制电子设备100的操作的操作程序。当电子设备100开机时,操作程序可以被存储器170读取、被编译并且成为用于操作电子设备100的元件的程序。
处理器130可以包括RAM 131、ROM 132、CPU 133、和GPU 134,并且RAM 131、ROM132、CPU 133和GPU 134可以经由总线135相互连接。
CPU 133可以访问存储器170,并使用存储器170中存储的O/S来执行引导。CPU 133可以使用存储在存储器170中的各种程序、内容、数据等来执行各种操作。
GPU 134可以生成包括诸如图标、图像、文本等各种对象的显示屏幕。例如,GPU134可以基于接收到的控制命令来计算诸如坐标值、形状、尺寸、颜色等的属性值,并基于所计算的属性值生成包括对象的各种布局的屏幕,其中,每个对象根据所述属性值被显示为符合屏幕的布局。
ROM 131可以存储用于引导系统的命令字集等。一旦输入开机命令并供电,CPU133可以响应于ROM 131中存储的命令字而复制存储器170中存储的O/S,并通过执行O/S来引导系统。一旦引导完成,CPU 133可以将存储器170中存储的各种应用程序复制到RAM 132中,并且通过执行被复制到RAM 132中的应用程序来执行各种操作。
处理器可以与上述元件组合,并且可以实现为片上系统(SOC)。
处理器130的操作可以通过在存储器170中存储的程序来执行。存储器170可以被实现为ROM 131、RAM 132或可附着到电子设备100且可从电子设备100拆卸的存储卡(例如,SD卡、记忆棒)、非易失性存储器、易失性存储器、硬盘驱动器(HDD)或固态驱动器(SSD)中的至少一个。
已经描述了电子设备100的元件。在以下描述中,将详细描述向电子设备100提供图像的外部终端200的每个元件。
图5是示出了根据实施例的外部终端的示例的框图。
外部终端200可以是诸如智能电话、平板电脑等的便携式终端设备,或者可以是诸如智能TV之类的显示设备。
例如,如果外部终端200是便携式终端设备,则外部终端200可以包括输入单元210、通信器220、拍摄单元230、传感器240、输出单元250、存储器260和处理器270,如图5所示。
输入单元210可以接收各种用户命令并且向处理器270发送用户命令,并且可以包括接收用户语音的麦克风(未示出)、被实现为包括各种功能键、数字键、特殊键、文本键等的键区的操纵单元(未示出)、以及接收用户的触摸命令的触摸输入单元(未示出)等。
通信器220可以无线地或经由线缆与在公共网络的范围内的附近终端(未示出)进行数据通信,或者使用NFC通信模块与电子设备100进行近场通信。
例如,通信器220可以使用诸如近场通信(NFC)之类的距离通信模块(未示出)向电子设备200发送图像相关数据。通信器220还可以使用诸如蓝牙模块、Wi-Fi模块和Zigbee模块之类的近场通信模块(未示出)使得电子设备200与附近终端(未示出)进行数据通信。
此外,通信器220可以根据诸如IEEE等的无线通信协议,使用无线RAN模块连接到外部网络并且执行通信,或者可以访问移动通信网络并根据诸如第3代(3G)、第3代合作伙伴计划(3GPP)、长期演进(LTE)等各种移动通信标准执行通信。
拍摄单元230可以拍摄与周围环境有关的图像,并且传感器240可以感测外部终端200的运动或用户的各种运动。根据实施例,传感器240可以包括感测外部终端200的运动的运动传感器、追踪用户的瞳孔的瞳孔追踪传感器、使用地磁场检测方位的地磁传感器、通过检测重力施加方向来感测外部终端200的移动方向的重力传感器等。
输出单元240可以输出与用户命令相对应的内容,并且可以通过显示器(未示出)显示内容中包括的图像数据,并且经由扬声器(未示出)以可听声音的形式输出内容中包括的音频数据。
存储器250可以存储各种内容和用于控制外部终端200的操作的操作程序。当外部终端200开机时,操作程序可以被存储器250读取、被编译、并且成为用于操作外部终端200的元件的程序。
处理器260可以控制与外部终端200的元件有关的整体操作。例如,当外部终端200开机时,处理器260可以使用与存储器250中存储的操作系统(O/S)相关的操作程序来执行引导,并且一旦引导完成,处理器260就可以执行存储器250中存储的各种操作程序,并控制与外部终端200的元件相关的操作。
当外部终端200与电子设备100连接以使用NFC通信模块进行通信时,处理器260可以控制通信器220发送与经由输出单元输出的图像有关的数据。例如,如果经由输出单元240输出的图像是静止图像,则处理器260可以控制通信器220向电子设备100发送与静止图像有关的图像数据。此外,如果经由输出单元240输出的图像是视频,则处理器260可以控制通信器220向电子设备100发送与视频有关的图像和音频数据。
处理器还可以根据来自与外部终端200连接以进行通信的电子设备100的请求,来控制通信器220经由输出单元240向电子设备100输出图像(静止图像或视频)。
此外,在处理器260向电子设备100发送图像之后,如果从电子设备100接收到用于图像的控制命令,则处理器260可以基于接收到的控制命令控制经由输出单元240输出的图像。例如,如果在向电子设备100发送视频之后接收到与暂停视频有关的控制命令,则处理器260可以响应于接收到的控制命令而暂停经由输出单元240输出的视频。
上面已经根据实施例描述了外部终端200的元件。在以下描述中,将根据各种实施例详细描述电子设备100执行的操作。
图6A和图6B是示出了根据实施例的在电子设备中复制图像的示例的图。
如图6A中所示,当外部终端200靠近被布置在电子设备100的一侧中的NFC通信模块610并且开始电子设备100和外部终端200之间的NFC通信时,电子设备100可以从外部终端200接收与外部终端200所显示的图像有关的数据。
电子设备100可以基于从外部终端200接收的数据在显示器120的第一区域中显示与外部终端200显示的图像相对应的图像620(下文中称为第一图像)。电子设备100还可以在第一区域中将包括用于接收与第一图像620有关的用户命令的输入的多个图标在内的UI630与第一图像620一起显示。
当UI 630中所显示的图标中用于复制第一图像620的第一图标631被选择时,电子设备200可以复制在第一图标631被选择时在第一区域中显示的第一图像620。电子设备200可以在与第一区域不同的第二区域中显示从第一图像620(如图6A所示)复制的图像。
然而,实施例不限于以上示例,并且如图6B中所示,当生成与在第一区域中显示的第一图像620有关的第一复制图像640时,电子设备100可以将在第一区域中显示的第一图像620移动到一侧并进行显示,并在未显示第一图像620的区域之中的预定第二区域中显示第一复制图像640。
电子设备100可以响应于用户命令而编辑在第二区域中显示的第一复制图像630。
例如,当在触摸显示第一复制图像640的区域之后输入用于移动第一复制图像640的用户触摸时,电子设备100可以将第二区域中显示的第一复制图像640移动到与输入用户触摸的第一方向相对应的区域,并在该区域中显示第一复制图像640。
此外,当触摸显示第一复制图像640的区域的用户触摸被输入达预定阈值时间或更长时间时,电子设备100可以在显示第一复制图像640的第二区域周围显示用于编辑第一复制图像640(例如,对图像的删除、复制等)的UI。当在显示UI的同时输入用户命令时,电子设备100可以执行编辑操作,例如删除或复制在第二区域中显示的第一复制图像640。
电子设备100可以在显示器120的第三区域中显示用于引导与外部终端200进行连接的图标651(在下文中称为第二图标)、以及用于向外部终端200发送在第一区域中显示的第一图像620的图标652(在下文中称为第三图标)。
例如,当第二图标651被选择时,电子设备100可以通过广播方法发送用于通信连接的消息,并且当从至少一个外部终端200接收到响应消息时,电子设备100可以显示与发送响应消息的外部终端200有关的列表。当列表中的多个外部终端200中的一个外部终端被选择时,电子设备100可以与所选择的外部终端200进行通信连接。当从所连接的外部终端200接收到与外部终端200显示的图像有关的数据时,电子设备100可以基于接收到的数据在显示器120的第一区域中显示与外部终端200显示的图像相对应的第一图像620。
此外,当第三图标652被选择时,电子设备100可以向外部终端200发送除了在显示器120的第一区域中显示的第一图像620之外的图像。根据实施例,当第三图标652被选择时,电子设备100可以向外部终端200发送在显示器120的第二区域中显示的复制图像640。
根据实施例,当第三图标652被选择时,电子设备100可以向发送图像的外部终端200发送复制图像640。
根据另一实施例,当第三图标652被选择时,电子设备100可以基于预先接收的响应消息显示与发送响应消息的外部终端200有关的列表。如果没有响应消息,则电子设备100可以通过广播方法接收用于通信连接的消息,并且当从至少一个外部终端200接收到响应消息时,电子设备可以显示与发送响应消息的外部终端200有关的列表。
当列表中的多个外部终端200中的至少一个外部终端被选择时,电子设备100可以与所选择的至少一个外部终端200进行通信连接,并且向所连接的至少一个外部终端200发送复制图像640。
图7A、图7B、图8A、图8B、图9A、图9B、图10A和图10B是示出了根据实施例的在电子设备中编辑从外部终端接收的图像的示例的图。
如图6A和图6B中所示,电子设备100可以在显示器120的第一区域中将包括用于接收与第一图像620有关的用户命令的输入的多个图标在内的UI 630与第一图像620一起显示。
例如,如图7A所示,电子设备100可以在显示器120的第一区域中将包括用于复制第一图像620的第一图标631和用于编辑第一图像620的第四图标632在内的UI 630与第一图像620一起显示。
当在显示UI 630的同时输入用于第四图标632的用户命令时,电子设备100可以显示用于引导对第一图像620的编辑的编辑UI 710,如图7B所示。因此,用户可以使用编辑UI710来编辑第一图像620。
例如,当在显示编辑UI 710的同时输入用户触摸时,电子设备100可以识别用户触摸被输入的点是否在编辑UI 710内。如果确定用户触摸被输入的点在编辑UI 710内,则电子设备100可以识别用户触摸是单点触摸还是多点触摸。
如图8A所示,电子设备100可以确定在显示编辑UI 710的区域中的用户触摸是触摸第一点810的单点触摸。在这种情况下,如图8B所示,电子设备100可以沿一个方向旋转第一图像620,并且显示沿一个方向旋转后的经编辑图像820。
同时,如图9A和图9B所示,电子设备100可以确定在显示编辑UI 710的区域内的用户触摸是触摸第二点910和第三点920的多点触摸。在确定用户触摸是多点触摸的同时,当感测到沿第一方向和第二方向移动的捏放用户触摸时,电子设备100可以将第一图像620的尺寸放大到与沿第一方向和第二方向移动的用户触摸相对应的尺寸,并显示放大后的编辑图像930。
例如,当感测到捏放用户触摸时,电子设备100可以根据作为第一多点触摸和捏放用户触摸点的第二点910和第三点920之间的距离差来放大第一图像620的尺寸,并显示放大后的经编辑图像930。
当感测到捏合用户触摸时,电子设备100可以根据作为第一多点触摸和捏合用户触摸点的第二点910和第三点920之间的距离差来减小第一图像620的尺寸,并显示尺寸减小的第一图像620。
在电子设备100中的第一区域中与第一图像620一起显示的UI630还可以包括用于删除第一图像620的第五图标633。因此,当输入与UI 630中显示的第五图标633有关的用户命令时,可以删除在第一区域中显示的第一图像620。
如图10A所示,电子设备100可以确定在显示编辑UI 710的区域内的用户触摸是触摸第一点1010的单点触摸。当在确定用户触摸是单点触摸的同时感测到沿第一方向移动的用户触摸时,电子设备100可以将要显示第一图像620的第一区域改变为与第一方向相对应的区域,将第一图像620移动到改变后的区域并显示第一图像620’,如图10B所示。
图11A和图11B是示出了根据实施例的在电子设备中响应于用户命令而显示PIP图像的示例的图。
如图11A所示,电子设备100可以在显示器120的显示多个页面中的第一页面1140的第一区域中显示从外部终端200接收的第一图像1110,并且在第二区域和第三区域中显示第一复制图像1120和第二复制图像1130。可以从第一图像1110复制第一复制图像和第二复制图像1120。然而,实施例不限于上述示例,可以从与第一图像1110不同的图像复制第一复制图像和第二复制图像1120中的一个。
在第一图像1110以及第一复制图像1120和第二复制图像1130显示在显示第一页面1140的显示器120上的同时,当输入用于滚动页面的用户命令时,电子设备100可以响应于用户命令而滚动页面。
如图11B所示,电子设备100可以响应于用于滚动页面的用户命令在显示器120上显示第一页面1140和第二页面1141。当显示第一页面1140和第二页面1141时,电子设备100可以将第一图像1110固定并显示在第一区域中。此外,电子设备100可以沿着与第一页面1140移动的方向相对应的方向来移动显示第一复制图像1120和第二复制图像1130的区域。
换言之,电子设备100可以沿着第一页面1140移动的方向改变显示第一复制图像1120和第二复制图像1130的区域。因此,电子设备100可以沿着第一页面1140移动的方向在改变后的区域中显示第一复制图像1120′和第二复制图像1130′。
图12是示出了根据实施例的电子设备中的导航窗口的示例的图。
如图12所示,电子设备100可以在显示器的显示多个页面中的第一页面1200的第一区域中显示从外部终端200接收的第一图像1210,在第二区域中显示第一复制图像1220和第二复制图像1230,并且在第三区域中显示引导多个页面的导航窗口1240。
例如,电子设备100可以在第三区域中显示包括与多个页面中的每个页面相对应的页面元素在内的导航窗口1240。电子设备可以形成导航窗口1240,使得多个页面元素中与显示器120上显示的第一页面相对应的第一页面元素1241与其他页面元素不同地显示,并且显示导航窗口1240。
例如,电子设备100可以形成导航窗口1240,使得在与显示器120上显示的第一页面相对应的第一页面元素1241中显示高亮,并显示导航窗口1240。
此外,电子设备100可以形成导航窗口1240,使得第一页面元素1241包括在显示器120上显示的第一图像1210和分别指示第一复制图像1220和第二复制图像1230的图像,并且显示导航窗口1240。
如上所述,当响应于用于滚动页面的用户命令而将第一页面滚动到第二页面时,电子设备100可以将第一图像1210固定并显示在显示器120的第一区域中,并显示滚动的第二页面。
电子设备100还可以形成导航窗口1240,使得响应于用于滚动页面的用户命令而使高亮从第一页面元素1241改变至与第二页面相对应的页面元素并进行显示,并显示滚动的第二页面。此外,电子设备100可以形成导航窗口1241,使得第一页面元素1241中仅包括第一页面元素1241中包括的多个图像中的指示第一复制图像1220和第二复制图像1230的图像,并且与第二页面相对应的页面元素中包括指示第一图像1210的图像。
图13是示出了根据电子设备的在电子设备中以PIP模式根据用户命令执行操作的示例的图。
如图13中所示,电子设备100可以在显示器120的第一区域中显示从外部终端200接收的第一图像1310,并且在第二区域中显示从第一图像1310复制的第一复制图像1320。在第一区域中显示的第一图像1310可以是由外部终端200再现的视频。
当在显示第一图像1310和第一复制图像1320的同时感测到对显示第一图像1310的第一区域的用户触摸时,电子设备100可以显示用于控制第一图像1310的再现的图标1311。当响应于用户命令而选择在第一图像1311上显示的图标1311时,电子设备100可以向发送第一图像的外部终端200发送与所选择的图标1311相对应的控制命令。因此,外部终端200可以基于从电子设备100接收的控制命令来控制对视频的再现。
当在除了显示第一图像1310的第一区域之外的剩余区域中感测到用户触摸时,电子设备100可以根据用户触摸执行绘图功能并显示绘图图像。
换言之,当在包括显示第一复制图像1320的第二区域的剩余区域中输入使用用户的手指或诸如手写笔之类的输入设备进行的用户触摸时,电子设备100可以显示绘图图像1321。
然而,本公开不限于以上内容,并且如果在显示第一复制图像1320的第二区域中感测到用户触摸,则电子设备100可以在感测到用户触摸的第二区域上显示与用户触摸相对应的绘图图像1321。
在以下描述中,将根据实施例详细描述电子设备100的控制方法。
图14是示出了根据实施例的电子设备的控制方法的流程图。
如图14所示,电子设备100可以与外部终端200进行通信连接(S1410)。根据实施例,电子设备100和外部终端200可以包括用于NFC通信的NFC模块。当外部终端200被附于(tagged t0)电子设备100时,电子设备100可以使用NFC模块与外部终端200连接以进行通信。
一旦电子设备100与外部终端200连接以进行通信,电子设备100可以接收由外部终端200显示的图像,并在显示器的一个区域上显示接收到的图像(S1420)。
此外,电子设备100可以在一个区域中将用于复制从外部终端200接收到的图像的图标与该接收到的图像一起显示。电子设备100还可以在显示从外部终端200接收到的图像的一个区域中显示用于编辑该接收到的图像的尺寸、位置和方向中的至少一项的图标。
电子设备100还可以在除了显示从外部终端200接收的图像的一个区域之外的剩余区域中显示至少一个图标。例如,电子设备100可以显示以下至少一项:用于引导与发送要在一个区域中显示的图像的外部终端200进行连接的图标、以及用于向外部终端200发送在显示器的一个区域中显示的图像的图标。
当在一个区域和剩余区域中显示多个图标时,电子设备100可以通过图标接收用户命令的输入。如果通过图标输入的用户命令是来自用户的用于复制从外部终端200接收的图像的第一命令,则电子设备100可以复制在第一命令被输入时在一个区域中显示的图像,并且在与该一个区域不同的区域中显示复制图像(S1430和S1440)。
如果在以PIP形式显示从外部终端200接收的图像和从该图像复制的图像的同时通过图标输入的用户命令是来自用户的用于编辑从外部终端200接收的图像的第二命令,则电子设备100可以响应于第二命令而编辑从外部终端200接收的图像的尺寸、位置和方向中的至少一项(S1450和S1460)。
电子设备100可以在一个区域中显示从外部终端200接收的图像,并且当在显示所复制的图像的同时感测到用户触摸时,电子设备100可以向外部终端200发送触摸信息或者执行绘图功能(S1470)。
电子设备100可以在一个区域中显示从外部终端200接收的图像,并且当在不同区域中显示复制图像的同时感测到用户触摸时,电子设备100可以确定感测到用户触摸的点。作为确定的结果,如果用户触摸在显示从外部终端200接收的图像的一个区域内,则电子设备100可以向外部终端200发送与用户触摸相对应的触摸信息。
如果感测到用户触摸的点在除了显示从外部终端200接收的图像的一个区域之外的剩余区域中,则电子设备可以根据感测到的用户触摸执行绘图功能。因此,电子设备100可以在感测到用户触摸的点处显示与用户触摸相对应的绘图图像。
根据另一实施例,在以PIP形式显示从外部终端200接收的图像和从该图像复制的图像的同时,电子设备100可以根据用于删除从外部终端200接收的图像的用户命令而删除在一个区域中显示的图像。
电子设备还可以通过显示器显示多个页面中的至少一个页面。因此,当输入用于滚动显示器中显示的页面中的至少一个页面的用户命令时,电子设备100可以基于输入的用户命令来滚动页面。在响应于用户命令而滚动页面的同时,电子设备100可以固定并显示在一个区域中显示的图像。
电子设备还可以显示导航窗口,该导航窗口用于在除了显示从外部终端200接收的图像的一个区域和显示从接收到的图像复制的图像的区域之外的不同区域中引导多个页面。
根据一个或多个实施例的电子设备100的控制方法可以被编码为软件并且存储在非暂时性可读介质中。非暂时性可读介质可以设置在各种设备中以供使用。
非暂时性计算机可读介质可以指代半永久地存储数据的机器可读介质或设备,而不是短时间内存储数据的机器可读介质或设备(例如,寄存器、高速缓存器、存储器等)。上述各种应用或程序可以存储在非暂时性计算机可读介质如致密盘(CD)、数字多功能盘(DVD)、硬盘、蓝光盘、通用串行总线(USB)棒、存储卡、ROM等中。
以上实施例和优点仅是示例,而不应解释为限制实施例。实施例的描述旨在是说明性的,而非限制由所附权利要求限定的发明构思的范围,并且对于本领域技术人员而言,很多备选方案、改型和变型将是显而易见的。

Claims (15)

1.一种电子设备的控制方法,包括:
从外部终端接收由所述外部终端显示的图像;
在所述电子设备的显示器的第一区域上显示接收到的图像;以及
响应于从用户接收到用于复制接收到的图像的复制命令,复制在所述复制命令被输入时在第一区域上显示的接收到的图像,并在所述显示器的与第一区域不同的第二区域上显示所复制的图像。
2.根据权利要求1所述的方法,其中,所述电子设备和所述外部终端两者包括用于近场通信NFC通信的NFC模块,并且
其中,所述方法还包括:
响应于所述外部终端被附于所述电子设备,使用所述NFC模块执行与所述外部终端的通信连接。
3.根据权利要求1所述的方法,其中,在所述显示器的第一区域上显示接收到的图像包括:
显示以下至少一项:第一图标,用于引导与所述外部终端连接以发送要在第一区域上显示的第一图像;以及第二图标,用于向所述外部终端发送在所述显示器的除第一区域之外的剩余区域上显示的第二图像。
4.根据权利要求1所述的方法,其中,在所述显示器的第一区域上显示接收到的图像包括:
显示用于复制在第一区域上显示的接收到的图像的图标,并且
其中,用于复制接收到的图像的所述复制命令包括选择用于复制接收到的图像的所述图标。
5.根据权利要求1所述的方法,其中,在所述显示器的第一区域上显示接收到的图像包括:
显示用于编辑在第一区域上显示的接收到的图像的尺寸、位置和方向中的至少一项的图标;
接收对所述图标的用户选择;以及
根据对所述图标的用户选择,编辑接收到的图像的尺寸、位置和方向中的至少一项。
6.根据权利要求1所述的方法,其中,在与第一区域不同的第二区域上显示所复制的图像包括:在第一区域上显示接收到的图像并在第二区域上显示所复制的图像,并且
其中,所述方法还包括:响应于在显示接收到的图像和所复制的图像的同时从用户接收到用于删除接收到的图像的删除命令,删除在第一区域上显示的接收到的图像。
7.根据权利要求1所述的方法,其中,所述显示器显示多个页面中的至少一个页面,并且
其中,在所述显示器的第一区域上显示接收到的图像包括:在基于来自用户的用于滚动在所述显示器上显示的页面中的至少一个页面的滚动命令而滚动页面的同时,在第一区域上固定地显示接收到的图像。
8.根据权利要求7所述的方法,其中,在所述显示器的第一区域上显示接收到的图像包括:在所述显示器中除第一区域之外的区域上显示用于引导所述多个页面的导航窗口。
9.根据权利要求1所述的方法,还包括:
响应于在第一区域上显示接收到的图像的同时在第一区域中感测到来自用户的第一触摸,向所述外部终端发送与感测到的第一触摸相对应的触摸信息;以及
响应于在第一区域上显示接收到的图像的同时在除第一区域之外的剩余区域中感测到来自用户的第二触摸,根据第二触摸执行绘图功能。
10.根据权利要求1所述的方法,其中,响应于接收到用于复制接收到的图像的复制命令,同时显示所复制的图像和接收到的图像。
11.一种电子设备,包括:
通信器;
显示器;以及
处理器,被配置为:
经由所述通信器从外部终端接收由所述外部终端显示的图像;
控制所述显示器在所述显示器的第一区域上显示接收到的图像,并且
响应于从用户接收到用于复制接收到的图像的复制命令,复制在所述复制命令被输入时在所述显示器的第一区域上显示的接收到的图像,并在所述显示器的除第一区域之外的第二区域上显示所复制的图像。
12.根据权利要求11所述的电子设备,其中,所述通信器包括:近场通信NFC模块,被配置为与所述外部终端执行NFC通信;并且
其中,响应于所述外部终端被附于所述电子设备,所述处理器还被配置为控制所述通信器使用所述NFC模块与所述外部终端进行通信连接。
13.根据权利要求11所述的电子设备,其中,所述处理器还被配置为:
控制所述显示器显示以下至少一项:第一图标,用于引导与所述外部终端连接以发送要在第一区域上显示的第一图像;以及第二图标,用于向所述外部终端发送在所述显示器的除第一区域之外的剩余区域上显示的第二图像。
14.根据权利要求11所述的电子设备,其中,所述处理器还被配置为控制所述显示器显示用于复制在第一区域上显示的接收到的图像的图标,并且
其中,用于复制接收到的图像的所述复制命令包括选择用于复制接收到的图像的所述图标。
15.根据权利要求12所述的电子设备,其中,所述处理器还被配置为控制所述显示器显示用于编辑在第一区域上显示的接收到的图像的尺寸、位置和方向中的至少一项的图标;以及
响应于接收到对所述图标的用户选择,根据对所述图标的用户选择来编辑接收到的图像的尺寸、位置和方向中的至少一项。
CN201810951083.0A 2017-08-22 2018-08-20 显示装置及其控制方法 Pending CN109426412A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020170106066A KR20190021016A (ko) 2017-08-22 2017-08-22 전자 장치 및 그 제어 방법
KR10-2017-0106066 2017-08-22

Publications (1)

Publication Number Publication Date
CN109426412A true CN109426412A (zh) 2019-03-05

Family

ID=63254488

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810951083.0A Pending CN109426412A (zh) 2017-08-22 2018-08-20 显示装置及其控制方法

Country Status (5)

Country Link
US (1) US20190065030A1 (zh)
EP (1) EP3447626A3 (zh)
KR (1) KR20190021016A (zh)
CN (1) CN109426412A (zh)
WO (1) WO2019039739A1 (zh)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2020153890A1 (en) 2019-01-25 2020-07-30 Flatfrog Laboratories Ab A videoconferencing terminal and method of operating the same
KR20200122651A (ko) * 2019-04-18 2020-10-28 삼성전자주식회사 전자 장치 및 그 제어 방법
CN115793950A (zh) 2019-08-29 2023-03-14 荣耀终端有限公司 一种应用于投屏场景的控制方法以及相关设备
US20230009306A1 (en) * 2019-12-06 2023-01-12 Flatfrog Laboratories Ab An interaction interface device, system and method for the same
CN115039063A (zh) 2020-02-10 2022-09-09 平蛙实验室股份公司 改进的触摸感测设备
CN111522497B (zh) * 2020-04-16 2022-09-13 深圳市颍创科技有限公司 Pip模式中触摸控制显示设备子画面大小和位置的方法

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100640808B1 (ko) * 2005-08-12 2006-11-02 엘지전자 주식회사 촬상 이미지의 듀얼 디스플레이 기능을 갖는 이동통신단말기 및 그 방법
WO2009143294A2 (en) * 2008-05-20 2009-11-26 Citrix Systems, Inc. Methods and systems for using external display devices with a mobile computing device
KR102043810B1 (ko) * 2012-08-20 2019-11-12 삼성전자주식회사 플렉서블 디스플레이 장치 및 그 제어 방법
KR102084633B1 (ko) * 2013-09-17 2020-03-04 삼성전자주식회사 화면 미러링 방법 및 그에 따른 소스 기기
IN2013CH04818A (zh) * 2013-10-25 2015-08-07 Samsung India Software Operations Pvt Ltd

Also Published As

Publication number Publication date
WO2019039739A1 (en) 2019-02-28
EP3447626A2 (en) 2019-02-27
KR20190021016A (ko) 2019-03-05
US20190065030A1 (en) 2019-02-28
EP3447626A3 (en) 2019-05-22

Similar Documents

Publication Publication Date Title
CN109426412A (zh) 显示装置及其控制方法
US10915225B2 (en) User terminal apparatus and method of controlling the same
JP5805588B2 (ja) 電子機器、制御方法及び制御プログラム
CN105378623B (zh) 插入式动态内容预览窗格
CN105359121B (zh) 使用接收数据的应用远程操作
CN107850978A (zh) 用于在文档编辑中提供手写支持的设备和方法
CN105229590A (zh) 具有笔的用户终端装置和用户终端装置的控制方法
CN107408014A (zh) 设备配置用户界面
CN110083278A (zh) 电子设备及其方法
WO2014129828A1 (en) Method for providing a feedback in response to a user input and a terminal implementing the same
CN104462039B (zh) 一种生成批注的方法和装置
US20150339018A1 (en) User terminal device and method for providing information thereof
CN105264476A (zh) 用于提供导航和搜索功能的装置、方法和图形用户界面
CN107408012A (zh) 使用可旋转输入机构来控制系统缩放放大率
KR20140143971A (ko) 홈 화면 공유 장치 및 방법
CN106164891A (zh) 幻灯片展示表面
WO2019179054A1 (zh) 房屋立体化虚拟带看方法、装置、移动终端和存储介质
CN105518604A (zh) 对套索选择的反馈
CN106716327A (zh) 利用无缝转换的阅读和编辑的合并体验
CN105518634B (zh) 与外部终端交互的方法、装置和记录介质
US11169700B2 (en) Electronic device and control method thereof
CN103631434B (zh) 具有使用多点触摸的手写功能的移动设备及其控制方法
CN107787478A (zh) 在用户界面显示器中选择内容项
CN108055399A (zh) 一种文本复制方法及移动终端
CN108696642A (zh) 整理图标的方法和移动终端

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20190305

WD01 Invention patent application deemed withdrawn after publication