CN108694032A - 使用外部设备的画面输出方法和用于支持其的电子设备 - Google Patents

使用外部设备的画面输出方法和用于支持其的电子设备 Download PDF

Info

Publication number
CN108694032A
CN108694032A CN201810276097.7A CN201810276097A CN108694032A CN 108694032 A CN108694032 A CN 108694032A CN 201810276097 A CN201810276097 A CN 201810276097A CN 108694032 A CN108694032 A CN 108694032A
Authority
CN
China
Prior art keywords
electronic equipment
display
processor
external
touch
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201810276097.7A
Other languages
English (en)
Other versions
CN108694032B (zh
Inventor
李正杓
宣荣圭
宋佳进
张东镐
卞炯燮
全镛俊
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics Co Ltd
Original Assignee
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Samsung Electronics Co Ltd filed Critical Samsung Electronics Co Ltd
Priority to CN202311234792.4A priority Critical patent/CN117289885A/zh
Priority to CN202311240629.9A priority patent/CN117289886A/zh
Publication of CN108694032A publication Critical patent/CN108694032A/zh
Application granted granted Critical
Publication of CN108694032B publication Critical patent/CN108694032B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0416—Control or interface arrangements specially adapted for digitisers
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16—Constructional details or arrangements
    • G06F1/1613—Constructional details or arrangements for portable computers
    • G06F1/1626—Constructional details or arrangements for portable computers with a single-body enclosure integrating a flat display, e.g. Personal Digital Assistants [PDAs]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30—Authentication, i.e. establishing the identity or authorisation of security principals
    • G06F21/31—User authentication
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30—Authentication, i.e. establishing the identity or authorisation of security principals
    • G06F21/31—User authentication
    • G06F21/32—User authentication using biometric data, e.g. fingerprints, iris scans or voiceprints
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0354—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of 2D relative movements between the device, or an operating part thereof, and a plane or surface, e.g. 2D mice, trackballs, pens or pucks
    • G06F3/03547—Touch pads, in which fingers can move on a surface
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0412—Digitisers structurally integrated in a display
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0416—Control or interface arrangements specially adapted for digitisers
    • G06F3/04162—Control or interface arrangements specially adapted for digitisers for exchanging data with external devices, e.g. smart pens, via the digitiser sensing hardware
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04812—Interaction techniques based on cursor appearance or behaviour, e.g. being affected by the presence of displayed objects
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04886—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures by partitioning the display area of the touch-screen or the surface of the digitising tablet into independently controllable areas, e.g. virtual keyboards or menus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1423—Digital output to display device ; Cooperation and interconnection of the display device with other functional units controlling a plurality of local displays, e.g. CRT and flat panel display
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1454—Digital output to display device ; Cooperation and interconnection of the display device with other functional units involving copying of the display data of a local workstation or window to a remote workstation or window so that an actual copy of the data is displayed simultaneously on two or more displays, e.g. teledisplay
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44—Arrangements for executing specific programs
    • G06F9/451—Execution arrangements for user interfaces
    • G06F9/452—Remote windowing, e.g. X-Window System, desktop virtualisation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2200/00—Indexing scheme relating to G06F1/04 - G06F1/32
    • G06F2200/16—Indexing scheme relating to G06F1/16 - G06F1/18
    • G06F2200/161—Indexing scheme relating to constructional details of the monitor
    • G06F2200/1614—Image rotation following screen orientation, e.g. switching from landscape to portrait mode
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048—Indexing scheme relating to G06F3/048
    • G06F2203/04803—Split screen, i.e. subdividing the display area or the window area into separate subareas
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0354—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of 2D relative movements between the device, or an operating part thereof, and a plane or surface, e.g. 2D mice, trackballs, pens or pucks
    • G06F3/03543—Mice or pucks
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1423—Digital output to display device ; Cooperation and interconnection of the display device with other functional units controlling a plurality of local displays, e.g. CRT and flat panel display
    • G06F3/1431—Digital output to display device ; Cooperation and interconnection of the display device with other functional units controlling a plurality of local displays, e.g. CRT and flat panel display using a single graphics controller
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1423—Digital output to display device ; Cooperation and interconnection of the display device with other functional units controlling a plurality of local displays, e.g. CRT and flat panel display
    • G06F3/1438—Digital output to display device ; Cooperation and interconnection of the display device with other functional units controlling a plurality of local displays, e.g. CRT and flat panel display using more than one graphics controller
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2330/00—Aspects of power supply; Aspects of display protection and defect management
    • G09G2330/02—Details of power systems and of start or stop of display operation
    • G09G2330/021—Power management, e.g. power saving
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00—Aspects of display data processing
    • G09G2340/14—Solving problems related to the presentation of information to be displayed
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2370/00—Aspects of data communication
    • G09G2370/12—Use of DVI or HDMI protocol in interfaces along the display data pipeline
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2370/00—Aspects of data communication
    • G09G2370/16—Use of wireless transmission of display information
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2380/00—Specific applications
    • G09G2380/02—Flexible displays

Abstract

提供了一种电子设备。该电子设备包括用于接收触摸输入的显示器、通信电路、至少一个处理器和存储器。存储器存储指令，所述指令可由至少一个处理器执行以：检测电子设备是否经由通信电路与外部显示设备通信，经由通信电路向外部显示设备发送用于在外部显示设备上呈现扩展用户界面的数据，检测电子设备是否经由通信电路与外部指点设备连接，以及当外部指点设备未连接到电子设备时，提供显示器的至少一部分以用作指点设备。

Description

使用外部设备的画面输出方法和用于支持其的电子设备
相关申请的交叉引用
本申请基于并要求于2017年3月29日在韩国知识产权局提交的韩国专利申请No.10-2017-0040004的优先权，并通过全文引用的方式将其公开内容并入本文中。
背景技术
本公开涉及用于在外部显示设备上输出画面的方法以及用于支持其的电子设备。
技术领域
对移动电子设备(如智能电话、平板个人计算机(PC)和可穿戴设备)的使用日益增长。电子设备可以在这些设备上执行各种功能，例如呼叫、无线通信、视频回放或web搜索等。电子设备可以独立使用，或者在连接到外部显示设备(例如，监视器、电视“TV”等)时使用。例如，电子设备可以有线或无线连接到监视器或TV，并且可以向外部显示设备输出内容(例如，图像、文本等)。
提出以上信息作为背景信息以辅助理解本公开。并未确定和断言上述任何内容是否可用作关于本公开的现有技术。
发明内容
使用移动电子设备的环境或者移动电子设备的操作系统(OS)可能不同于使用台式或膝上型PC的环境或者台式或膝上型PC的OS。移动电子设备可以具有相对小的显示器并且可以以适合于小显示器的形式来输出内容。另一方面，台式或膝上型PC等设备可以具有相对大的显示器，并且可以同时向用户提供大量内容。
当移动电子设备连接到诸如TV或监视器之类的外部显示设备以输出其内容时，内容可以通过镜像方案输出。最近，移动电子设备可以向外部显示设备提供与其画面不同的重新配置的画面，以增强用户的便利性。
当移动电子设备与外部输入设备(例如外部鼠标或外部键盘)交互工作时，其可以向外部显示设备提供使用外部输入设备的用户输入。当移动电子设备不与诸如外部鼠标或外部键盘之类的外部输入设备交互工作时，其可以向外部显示设备提供显示器上的触摸输入。在这种情况下，用户应该通过移动电子设备的触摸操作来执行应用或者应该通过移动电子设备的触摸操作来选择图标。
本公开的各个方面是为了至少解决上述问题和/或缺点，并且至少提供以下描述的优点。因此，本公开的一方面在于提供一种用于检测是否与外部指点设备连接并且将触摸显示器的至少一部分操作为触摸板的电子设备以及画面输出方法。
根据本公开的一个方面，提供了一种电子设备。该电子设备可以包括：外壳，包括第一表面和面向与第一表面相反方向的第二表面；显示器，被配置为接收触摸输入，该显示器通过第一表面的至少一部分暴露；通信电路，设置在外壳中；至少一个处理器，设置在外壳中并与显示器和通信电路电连接；以及存储器，设置在外壳中并与至少一个处理器电连接，其中存储器存储指令，该指令可执行以使至少一个处理器：检测电子设备是否经由通信电路与外部显示设备通信，经由通信电路向外部显示设备发送用于在外部显示设备上呈现扩展用户界面的数据，检测电子设备是否经由通信电路与外部指点设备连接，并且当外部指点设备未连接到电子设备时，提供显示器的至少一部分以用作指点设备。
根据本发明的一个方面，公开了一种电子设备，其包括：显示器，被配置为接收触摸输入；通信电路；处理器；和存储器，该处理器被配置为：检测经由通信电路的与外部显示设备的连接，检测指定的外部指点设备是否经由通信电路连接到电子设备，并且当外部指点设备没有连接到电子设备时，操作显示器的至少一部分作为指点设备。
根据本发明的一个方面，公开了一种在能够与外部显示设备连接的电子设备中的画面输出方法，该方法包括：检测电子设备是否经由电子设备的通信电路与外部显示设备通信连接，经由通信电路向外部显示设备发送用于在外部显示设备上呈现扩展用户界面的数据，检测电子设备是否经由通信电路与外部指点设备连接，以及当外部指点设备没有连接到电子设备时，提供显示器的至少一部分以用作指点设备。
当移动电子设备连接到要使用的PC、监视器或TV时，根据本公开的各种实施例的电子设备和画面输出方法可以根据连接到电子设备的外围设备(例如，鼠标或键盘)的状态和执行应用的状态来将电子设备的显示器的一部分作为输入设备来操作。
根据本公开的各种实施例的电子设备和画面输出方法可以提供电子设备的显示器的一部分作为输入设备，并且可以通过显示器中的另一部分来提供对用户界面的输出。
根据以下结合附图公开了本公开的各种实施例的详细描述，本公开的其它方面、优点和显著特征对于本领域技术人员将变得显而易见。
附图说明
根据结合附图的以下描述，本公开的特定实施例的上述和其它方面、特征以及优点将更清楚，在附图中：
图1是示出了根据各种实施例的操作电子设备的环境的图；
图2是示出了根据各种实施例的电子设备的配置的框图；
图3A是示出了根据各种实施例的中介设备的配置的图；
图3B是示出了根据各种实施例的画面输出方法的流程图；
图4是示出了根据各种实施例的电子设备的画面输出的图；
图5是示出了根据各种实施例的在显示器作为触摸板进行操作时打开/关闭触摸板操作的流程图；
图6是示出了根据各种实施例的横向模式下触摸板的设置的信号序列图；
图7是示出了根据各种实施例的纵向模式下触摸板的设置的信号序列图；
图8是示出了根据各种实施例的分割输出模式的画面的图；
图9是示出了根据各种实施例的分割输出模式下触摸板的设置的信号序列图；
图10是示出了根据各种实施例的分割输出模式下第二用户界面的图；
图11是示出了根据各种实施例的分割输出模式下图像输出的图；
图12是示出了根据各种实施例的触摸控制器的图；
图13是示出了根据各种实施例的电子设备的配置的框图；以及
图14是示出了根据各种实施例的程序模块的配置的框图。
具体实施方式
在下文中，将参考附图来描述本公开的各种实施例。因此，本领域的普通技术人员将认识到在不背离本公开的情况下可以对本文所述的各种实施例进行各种修改、等同和/或替换。关于附图描述，相似的组件可用相似的附图标记来标记。
在本文公开的公开内容中，本文使用的表述“具有”、“可以具有”、“包含”和“包括”或“可以包含”和“可以包括”表示存在相应的特征(例如，诸如数值、功能、操作或组件之类的元素)，但是不排除存在附加的特征。
在本文公开的公开内容中，本文使用的表述“A或B”、“A或/和B中的至少一个”、或者“A或/和B中的一个或多个”等可以包括关联列出项中的一个或多个的任意以及所有组合。例如，术语“A或B”、“A和B中的至少一个”、或“A或B中的至少一个”可指代以下所有情况：(1)包括至少一个A，(2)包括至少一个B，或(3)包括至少一个A和至少一个B这二者。
本文中使用的诸如“第一”、“第二”等的术语可指代本公开各种实施例的各种元素，但不限制元素。例如，这样的术语用于将元素与另一元素区分开，并且不限制元素的顺序和/或优先级。例如，第一用户设备和第二用户设备可以表示不同的用户设备(不考虑顺序或重要性)。例如，在不脱离本公开的范围的情况下，可以将第一元素称为第二元素，并且类似地，可以将第二元素称为第一元素。
应当理解的是：当元素(例如，第一元素)被称为“操作地或通信地”与另一元素(例如，第二元素)耦接/耦接到另一元素或“连接到”另一元素时，可以直接与另一元素耦接/耦接到另一元素或连接到另一元素，或可以存在中间元素(例如，第三元素)。相反，当元素(例如，第一元素)被称为“直接与另一元素(例如，第二元素)耦接/直接耦接到另一元素”或“直接连接至另一元素”时，应理解，不存在中间元素(例如，第三元素)。
根据情况，本文中所使用的表述“被配置为”可以用作例如表述“适用于”、“具有…的能力”、“被设计为”、“适于”、“被制造为”或者“能够”。术语“被配置为(或设置为)”不意味着仅在硬件中“专门设计为”。相反，表述“被配置为...的设备”可以意指该设备与另一设备或其它组件一起操作“能够...”。以CPU为例，“被配置为(或设置为)执行A、B和C的处理器”可以表示用于执行相应操作的专用处理器(例如，嵌入式处理器)、或可以通过执行存储设备中存储的一个或多个软件程序来执行相应操作的通用处理器(例如，中央处理单元(CPU)或应用处理器)。
本说明书中所用的术语用于描述本公开的指定实施例，而不旨在限制本公开的范围。除非另有指定，否则单数形式的术语可以包括复数形式。除非本文另有定义，否则本文使用的所有术语(包括技术或科学术语)可以具有与本领域的技术人员通常所理解的含义相同的含义。还应当理解，在字典中定义并且常用的术语还应当被解释为有关相关技术中的惯例，而不是理想化或过度正式的检测，除非在本文在本公开的各种实施例中明确地如此定义。在一些情况下，即使术语是在本说明书中限定的术语，它们也不能解释为排除本公开的实施例。
根据本公开的各种实施例的电子设备可以包括以下至少一项：智能电话、平板个人计算机(PC)、移动电话、视频电话、电子书阅读器、台式PC、膝上型PC、上网本计算机、工作站、服务器、个人数字助理(PDA)、便携式多媒体播放器(PMP)、MP3播放器、移动医疗设备、相机和可穿戴设备。根据本公开的各种实施例，可穿戴设备可以包括配饰(例如，手表、戒指、手链、脚链、眼镜、隐形眼镜或头戴式设备(HMD))、衣服集成类型(例如，电子衣服)、身体附着类型(例如，皮肤垫或纹身)或可植入类型(例如，可植入电路)。
在本公开的一些实施例中，电子设备可以是家用电器之一。家用电器可以包括例如以下至少一项：数字视频盘(DVD)播放器、音响、冰箱、空调、吸尘器、烤箱、微波炉、洗衣机、空气净化器、机顶盒、家庭自动控制面板、安保控制面板、TV盒(例如，三星HomeSyncTM、苹果TVTM或谷歌TVTM)、游戏机(例如，XboxTM或PlayStationTM)、电子词典、电子钥匙、便携式摄像机或电子面板。
在本公开的另一实施例中，电子设备可以包括以下至少一项：各种医疗设备(例如，各种便携式医疗测量设备(血糖仪、心率测量设备、血压测量设备和体温测量设备)、磁共振血管造影(MRA)、磁共振成像(MRI)设备、计算机断层摄影(CT)设备、拍摄设备和超声设备)、导航系统、全球导航卫星系统(GNSS)、事件数据记录器(EDR)、飞行数据记录器(FDR)、车辆信息娱乐设备、船用电子设备(例如，船用导航设备和陀螺罗盘)、航空电子设备、安保设备、车头单元、工业或家庭机器人、金融公司的自动柜员机(ATM)、商店的销售点(POS)或物联网(例如，灯泡、各种传感器、电表或燃气表、洒水器、火警设备、恒温器、电线杆、烤面包机、运动器材、热水箱、加热器和锅炉)。
根据本公开的一些实施例，电子设备可以包括以下至少一项：家具或建筑物/结构的一部分、电子板、电子签名接收设备、投影仪或各种测量设备(例如，水服务、电、燃气或电波测量设备)。在本公开的各种实施例中，电子设备可以是前述设备中的一个或组合。根据本公开的一些实施例的电子设备可以是柔性电子设备。此外，根据本公开的实施例的电子设备不限于上述设备，而是可以包括由于技术的发展而生产的新的电子设备。
下文中，将参考附图来描述根据本公开的实施例的电子设备。本文使用的术语“用户”可以表示使用电子设备的人，或者可以表示使用电子设备的设备(例如，人造电子设备)。
图1是示出了根据各种实施例的操作电子设备的环境的图。
参考图1，电子设备110可以与中介设备120和外部显示设备130连接。电子设备110可以是移动设备，其显示器111的尺寸相对小。电子设备110可以是设备，例如智能电话、平板PC或可穿戴设备。
根据各种实施例，电子设备110的显示器111可以包括触摸面板(或触摸传感器)。显示器111可以接收用户的触摸输入。显示器111可以将用户的触摸输入转换成电信号，并且可以向电子设备110中的处理器发送经转换的电信号。
根据各种实施例，显示器111可以根据指定的条件(例如，电子设备是否是与外部显示设备130连接、该电子设备是否是与外部指点设备140连接等)至少部分地作为输入设备(例如，触摸板)进行操作。例如，当显示器111作为触摸板进行操作时，可以在外部显示设备的画面上输出的鼠标指针或光标的移动或点击操作中反映用户的触摸输入。
根据各种实施例，电子设备110的显示器111可以包括压力传感器。压力传感器可以检测用户按压显示器111的强度。压力传感器可以根据所施加的压力的强度将用户的输入转换成电信号，并且可以向电子设备110中的处理器发送经转换的电信号。
根据各种实施例，电子设备110可以形成为包括外壳，该外壳具有第一表面(例如，显示器111被暴露的表面)和面向与第一表面相反方向的第二表面。外壳可容纳附加装置和输入设备，诸如物理按钮、传感器、相机等。
中介设备120可以将电子设备110与外部显示设备130连接。中介设备120可以是例如坞(例如，扩展坞)。中介设备120可以包括用于物理地接收电子设备110的保持器。在图1中，示例实施例示出了电子设备110在纵向模式下设置在中介设备120中。然而本发明的实施例不限于此。例如，中介设备120可以形成为接受电子设备110在横向模式下的插入。中介设备120可以通过输入/输出接口(例如，通用串行总线(USB)端口)与电子设备110连接。
中介设备120可以通过单独的电缆(例如高清多媒体接口“HDMI”电缆等)与外部显示设备130连接。例如，中介设备120可以向外部显示设备130发送用于输出从电子设备110发送的画面的电信号。
根据各种实施例，中介设备120可以包括用于接收与外部输入设备(例如，外部指点设备140、外部键盘设备150等)的有线连接的端口。当外部输入设备连接到端口时，可以向电子设备110提供关于与外部输入设备的连接的信息。
在图1中，实施例被例示为电子设备110经由中介设备120与外部显示设备130连接。然而，实施例不限于此。例如，电子设备110可以通过单独的电缆等直接与外部显示设备130连接，或者可以与外部显示设备130无线连接。
外部显示设备130可以是输出从电子设备110提供的内容的设备(例如，监视器或TV)。外部显示设备130可以输出(或镜像)与电子设备110的显示器111相同的画面，或者可以至少部分地输出与显示器111不同的画面。
外部显示设备130可以经由中介设备120连接到电子设备110。备选地，外部显示设备130可以通过单独的电缆(例如，迷你HDMI电缆)直接与电子设备110连接。
根据各种实施例，外部显示设备130可以包括用于显示器输出的元件(例如，电源模块、模拟数字(AD)板、显示面板、显示驱动集成电路(DDI)等)，并且可以不包括用于单独的算术运算的处理器(例如，应用处理器(AP)或中央处理单元(CPU))。
根据各种实施例，当电子设备110与外部显示设备130连接时(或者当电子设备110处于可通信状态时)，其可以在外部显示设备130上输出内容(例如，图像、文本、图标等)。电子设备110可以重新配置在显示器111上显示的内容的至少一部分，并且可以在外部显示设备130上输出经重新配置的画面(下文中下称为“扩展用户界面”)。例如，电子设备110可以在外部显示设备130的显示器131上输出与使用台式PC类似的扩展用户界面(下文中称为“桌面模式”)。
扩展用户界面可以至少部分地不同于在电子设备110的显示器111上输出的用户界面(下文中称为“移动用户界面”)。例如，当在电子设备110中正在执行多个应用时，移动用户界面可以以有限的方式输出由多个应用输出的窗口。例如，可以提供一些应用的画面，或者可以需要画面移位(或任务移位)来验证正在执行的应用。另一方面，可以以多个应用彼此不重叠的形式来输出扩展用户界面，或者以多个应用中的一些(例如，作为窗口135和窗口136)彼此重叠的形式来输出扩展用户界面。
电子设备110可以与外部输入设备(例如外部指点设备140(例如，鼠标、触摸板等)、外部键盘设备150(例如键盘))有线或无线连接。电子设备110可以通过外部指点设备140或外部键盘设备150来接收用户输入。用户可以使用外部指点设备140或外部键盘设备150来控制在电子设备110或外部显示设备130上输出的内容。
根据各种实施例，当电子设备110与外部显示设备130连接时，可以在扩展用户界面中反映使用外部指点设备140或者外部键盘设备150发生的用户输入。例如，响应于用户的输入，可以移动扩展用户界面的鼠标指针或光标或者可以输出文本。
根据各种实施例，在电子设备110在外部显示设备130上输出扩展用户界面的状态下，当电子设备110不识别外部指点设备140时(例如，当存在外部指点设备140时，当外部指点设备140在通信距离之外时，当外部指点设备140断电时等)，其可以将显示器111的至少一部分作为输入设备(例如，触摸板)进行操作。例如，当在显示器111上发生用户的触摸输入或通过压力的输入时，可以移动在外部显示设备130上显示的鼠标指针或光标，或者可以执行诸如单击、双击等的操作。
图2是示出了根据各种实施例的电子设备的配置的框图。
参考图2，电子设备110可以包括处理器220、通信电路225、存储器230、触摸传感器250、触摸控制器255、显示驱动集成电路(DDI)260以及显示面板270。在一些实施例中，电子设备110可以不包括元件中的至少一个，或还可以包括其他元件。
处理器220可包括中央处理单元(CPU)、应用处理器(AP)、或通信处理器(CP)中的一项或多项。例如，处理器220可以执行与电子设备110的至少一个其他元件的控制和/或通信相关联的算术运算或数据处理。在各种实施例中，处理器220可以根据指定的条件(例如，电子设备110是否与图1的外部显示设备130连接或者电子设备110是否与图1的外部指点设备140连接)将显示面板270的至少一部分作为触摸板进行操作。
通信电路225可以在电子设备110与外部设备(例如，图1的中介设备120、外部指点设备140、图1的外部键盘设备150等)之间进行通信。通信电路225可以支持例如以下至少一项：无线保真(Wi-Fi)、蓝牙、蓝牙低功率(BLE)、Wi-Fi直连、Zigbee、近场通信(NFC)、磁安全传输、射频(RF)或身体区域网(BAN)。
存储器230可以包括易失性和/或非易失性存储器。例如，存储器230可以存储例如与电子设备110的至少一个其他元件相关联的指令或数据。根据实施例，存储器230可以存储软件和/或程序240。
程序240可以包括例如内核241、框架243和/或应用程序(或“应用”)247。内核241或框架243中的至少一部分可以被称为“操作系统(OS)”。
例如，内核241可以控制或管理例如用于执行其他程序(例如，框架243或应用程序247)的操作或功能的系统资源。此外，内核241可以提供允许框架243或应用程序247访问电子设备110的分立元件以控制或管理系统资源的接口。
根据各种实施例，内核241可以包括输入设备驱动程序280。输入设备驱动程序280可以与能够连接到电子设备110的各种输入设备(例如，外部指点设备140、外部键盘设备150、外部触摸屏151、外部轨迹球152等)交互。输入设备驱动程序280可以根据类型来管理输入设备。输入设备驱动程序280可以包括与每个输入设备相对应的驱动程序。
根据各种实施例，输入设备驱动程序280可以包括触摸板驱动程序281和触摸屏驱动程序282，其处理在触摸传感器250上发生的触摸输入。
当触摸传感器250作为触摸板进行操作时，触摸板驱动程序281可以提供接口。触摸板驱动程序281可以处理从触摸控制器255发送的与用户的触摸输入相对应的电信号，以应用于扩展用户界面中以在外部显示设备130上输出。
当触摸传感器250作为触摸屏操作时，触摸屏驱动程序282可以提供接口。触摸屏驱动程序282可以处理从触摸控制器255发送的用于用户的触摸输入的电信号，以应用于电子设备110的移动用户界面中。
根据各种实施例，根据与外部显示设备130的连接方案、电子设备110是否与外部指点设备140连接、电子设备110的输出方向(例如，横向模式或纵向模式)等等，可以同时执行触摸板驱动程序281和触摸屏驱动程序282，或者可以执行触摸板驱动程序281或触摸屏驱动程序282之一。与执行触摸板驱动程序281和触摸屏驱动程序282的方案相关的附加信息可以通过单独的图提供。
框架243可以执行例如中介角色，使得应用程序247与内核241进行通信以交换数据。此外，框架243可以按照优先级顺序来处理从应用程序247接收到的一个或多个任务请求。例如，框架243可以向应用程序247中的至少一个分配优先级，并且可以处理该一个或多个任务请求，该优先级使得有可能使用电子设备110的系统资源。
根据各种实施例，框架243可以包括虚拟设备管理器291、窗口管理器292和输入管理器293。
虚拟设备管理器291可以请求窗口管理器292基于与从桌面模式服务294提供的图1的外部显示设备130或中介设备120的连接信息来生成扩展用户界面。
当生成应用的活动时，窗口管理器292可以注册活动的窗口。窗口管理器292可以向应用的注册窗口发送事件。窗口管理器292可以向当前活动再次发送该事件，并且可以通过向视图再次发送该事件的过程来处理该事件。例如，窗口管理器292可以在扩展用户界面上输出的窗口的上部标题(upper header)上显示提供功能的图标，诸如“返回”、“最小化”、“最大化”或“关闭”。
输入管理器293可以包括事件中枢293a、输入读取器293b和输入调度器293c。事件中枢293a可以负责诸如“设备打开、关闭或读取”之类的任务。事件中枢293a可以扫描设备驱动程序的各设备并且可以打开这些设备来管理句柄(读取事件)，从而将事件入栈到事件队列中。输入读取器293b可以调用对应的方法。输入调度器293c可以将来自事件队列的事件出栈并且可以调用窗口管理器292的调度方法。
应用程序(或“应用”)247可以包括桌面模式服务294。桌面模式服务294可以输出用于执行桌面模式的用户界面。桌面模式服务294可以收集关于与外部显示设备130或中介设备120的连接的信息，并且可以向虚拟设备管理器291发送所收集的连接信息。
触摸传感器面板250可以感测用户的触摸输入。触摸传感器250可以通过来自用户的触摸而以指定的物理量(例如，电压、光量、电阻、电荷量、电容等)改变。在实施例中，触摸传感器250可以被包括在显示面板270中或者可以与显示面板270集成。
触摸控制器255可以与触摸传感器250电连接并且可以检测触摸传感器250中的物理量的变化。触摸控制器255可以包括以下至少一部分：驱动器电路、传感器电路、控制逻辑、振荡器、延迟表、模数转换器或微控制器单元(MCU)。基于触摸传感器250中的物理量(例如，电压、电阻、电容等)的变化，触摸控制器255可以产生关于触摸的数据(例如，执行触摸的位置的坐标数据(X，Y))。
根据各种实施例，触摸控制器255可以向内核241提供根据用户的触摸输入或通过压力的输入(例如，执行触摸的位置的坐标数据(X，Y)、关于压力的强度的数据等等)的数据。
DDI 260可以与显示面板270电连接并且可以向显示面板270提供与从处理器220接收的图像数据相对应的图像信号。可以参考图11来提供关于DDI 260的操作的附加信息。
显示面板270可以基于从DDI 260提供的图像信号来输出内容(例如，文本、图像、视频、图标、符号等)。显示面板270可以包括例如液晶显示器(LCD)、发光二极管(LED)显示器、有机LED(OLED)显示器、微机电系统(MEMS)显示器或电子纸显示器。
根据各种实施例，显示面板270可以具有包括触摸传感器250的形式并且可以接收使用用户身体或电子笔的一部分的触摸、手势、接近或悬停输入。当显示面板270包括触摸传感器250时，显示面板270可以根据指定的条件至少部分地用作触摸板。
图3A是示出了根据各种实施例的中介设备的配置的图。根据各种实施例的中介设备可以包括图1的中介设备120的全部或至少一些元件。
中介设备120可以在其外壳301中保持或支持电子设备(例如，图1或图2的电子设备110)，并且可以将所保持的电子设备与另一个附加设备(例如，图1的外部显示设备130)或网络连接。例如，中介设备120可以使用包括的电源连接器向所保持的电子设备供电，并且还可以通过使用包括的HDMI连接器与诸如监视器或TV之类的视频电器连接，还可以使用包括的局域网(LAN)连接器与有线网络连接，或者可以通过包括通用串行总线(USB)连接器来提供与各种输入/输出设备或存储设备的连接。
外壳301可以包括用于与外部电子设备的连接的公连接器(例如第一连接构件)和用于连接另一个附加设备、输入/输出设备等的多个母连接器(例如多个第二连接构件)。第一连接构件可以通过印刷电路板(PCB)与多个第二连接构件中的每一个第二连接构件连接。
根据各种实施例，外壳301可以包括第一表面F1、面向与第一表面F1相反方向的第二表面F2、以及至少部分地围绕第一表面F1和第二表面F2之间的空间的侧表面。在本公开的详细实施例中，示出了示例实施例，其中，外壳301通常设置成圆柱形或圆形、截头圆锥的形状。然而，本公开的实施例不限于此。例如，外壳301的第一表面F1或第二表面F2可以形成为具有多边形形状。例示了作为侧表面F3具有凸面形状的实施例。然而，实施例不限于此。例如，侧表面F3可以具有平面或凹面形状。
根据各种实施例，一个或多个连接孔315a、315b、315c和315d可以设置在外壳301的外表面中，例如设置在侧表面F3中。至少一个连接孔315a至315d可以被设置为例如电源连接器、HDMI连接器、LAN连接器、USB连接器等。与至少一个连接孔315a至315d分别对应的第二连接构件可以位于外壳301中。
在实施例中，保持槽311a可以形成为用于提供例如电子设备(例如，图1的电子设备110)可以被摘下的空间，并且可以包括能够接收电子设备的一部分的大小和形状。例如，电子设备可以通过安装在保持槽311a上而被附加或固定在外壳301中。在一些实施例中，可以在保持槽311a中设置与电子设备连接的公连接器，例如连接构件317e。连接构件317e可以是例如符合USB Type C标准的连接器，并且可以通过外壳301中嵌入的PCB与其他连接构件连接。例如，外壳301可以将保持槽311a中保持的电子设备与外部电源或网络(例如，诸如LAN之类的有线网络)或输入/输出设备(诸如键盘或鼠标、外部存储设备等)连接。
根据各种实施例，中介设备120还可以包括滑动外壳302。滑动外壳302可以可滑动地安装并且可以打开和关闭保持槽311a。位于保持槽311a中的连接构件317e可以通过滑动外壳302打开。例如，可以在滑动外壳302倾斜的状态下将电子设备保持在外壳301(例如，保持槽311a)中。在另一个实施例中，滑动外壳302可以设置成支持在外壳中保持的电子设备的一个表面。
根据各种实施例，滑动外壳302可以包括弯曲壳体302a和平坦壳体302b。平坦壳体302b可以与弯曲壳体302a组合，并且可以沿滑动外壳302的可滑动移动来定位在第一表面F1上，或者可以朝向第一表面(或第二表面F2)倾斜。根据实施例，设置在保持槽311a中的连接构件317e布置的方向可以大体上垂直于平坦壳体302b(例如，外侧)在打开位置下面向的方向。
根据各种实施例，滑动外壳302可以装载有各种电气组件。例如，滑动外壳302可以装载有冷却风扇、环形天线等。在实施例中，冷却风扇可以抑制和减少所保持的电子设备的发热并且可以建立中介设备120与所保持的电子设备之间的通信。在一些实施例中，环形天线可以用于无线电力传输。当所保持的电子设备具有无线充电功能时，其可以通过环形天线来接收充电电力等。根据实施例，无线充电功能可以在滑动外壳302关闭保持槽311a的状态下提供。例如，当具有无线充电功能的电子设备被放置在第一表面F1上或处于关闭位置的滑动外壳302上时，环形天线可以无线地发送电力。在另一个实施例中，滑动外壳302可以装载有扬声器(未示出)，并且可以通过保持槽311a中设置的连接构件317e、环形天线等从电子设备接收声音信号。例如，扬声器可以通过保持槽311a中设置的连接构件317e以有线方式或者通过环形天线以蓝牙模式从电子设备接收声音信号。在一些实施例中，当冷却风扇、扬声器等被装载到滑动外壳302中时，可以设置用于空气流动或声音输出的排气孔329。例如，可以在曲面壳体302a和/或平坦壳体302b中形成多个通孔以平稳地允许空气流动或平稳地输出声音。
根据各种实施例，滑动外壳302中装载的电气部件可以与外壳301中嵌入的PCB电连接。
图3B是示出了根据各种实施例的画面输出方法的流程图。
根据各种实施例的电子设备可以包括图2的电子设备110的全部或至少一些元件。
参考图3B，在操作351中，图2的处理器220可以检测电子设备110是否经由通信电路(例如，使用有线或无线通信的图2的通信电路225)与外部显示设备130连接。当利用有线通信时，电子设备110可以经由中介设备(诸如图2的120)连接到外部显示设备130，或者可以通过电缆直接连接到外部显示设备130而没有单独的中间设备。
在操作352中，当电子设备110与外部显示设备130连接时，处理器220可以经由通信电路225向外部显示设备130发送用于在外部显示设备130的显示器131上呈现扩展用户界面的数据。
根据实施例，扩展用户界面可以具有重新配置电子设备110的显示器111上输出的移动用户界面的形式。因此，电子设备110上输出的移动用户界面可以至少部分地不同于在外部显示设备130上输出的扩展用户界面。
例如，当在电子设备110中正在执行多个应用时，移动用户界面可以显示由多个应用输出的窗口中的一些窗口。可能需要画面(或任务)转移来验证未显示的窗口。另一方面，可以以多个应用彼此不重叠的形式或多个应用程序中的一些应用彼此重叠的形式来输出扩展用户界面。扩展用户界面可以提供与用户使用典型桌面PC或典型膝上型PC的环境相类似的用户环境。
根据各种实施例，处理器220可以经由通信电路225来接收与从外部显示设备130输出的图像相关的信息(例如，设备识别信息、分辨率信息、大小信息、画面比例信息等)。处理器220可以基于所接收的信息来配置扩展用户界面。
在操作353中，处理器220可以检测外部指点设备140(例如，鼠标)是否经由通信电路225连接到电子设备110。外部指点设备140可以以无线或有线方式连接到电子设备110。例如，在无线连接的情况下，外部指点设备140可以通过诸如蓝牙之类的短距离通信来连接到电子设备110。在又一示例中，在有线连接的情况下，外部指点设备140可以通过附接的电缆来连接到中介设备120上安装的端口。在这种情况下，当电子设备110被保持在中介设备120中时，处理器220可以识别连接到中介设备120的外部指点设备140。
在操作354中，当外部指点设备140连接到电子设备110时，处理器220可以在屏幕关闭状态下或作为触摸屏来操作图2的触摸传感器250(或显示面板270)。
当触摸传感器250处于屏幕关闭状态时，图2的触摸控制器255不向处理器220发送触摸传感器250检测到的触摸信号。因此，可以减少电子设备110消耗的电力量。
当触摸传感器250作为触摸屏操作并且当在触摸传感器250上发生用户的触摸时，触摸控制器255可以向图2的内核241发送对应的电信号。内核241的触摸屏驱动程序282可以处理接收到的触摸相关信号。
在操作355中，当外部指点设备140没有连接到电子设备110的通信电路225时(例如，当没有外部指点设备140时、当外部指点设备140在通信距离外时、当外部指点设备140断电时等)，处理器220可以允许显示器111的至少一部分作为指点设备(例如，作为触摸板)进行操作。在下文中，例示了显示器111的至少一部分作为触摸板进行操作的实施例。然而，实施例不限于此。
当在外部指点设备140未连接到电子设备110的状态下在触摸传感器250上发生用户触摸时，触摸控制器255可向内核241发送对应的电信号。内核241的触摸板驱动程序281可以处理对应的触摸信号。
触摸板驱动程序281可以将根据触摸输入的电信号转换为相对坐标值等，并且可以向图2的窗口管理器292发送经转换的相对坐标值。窗口管理器292可以反映与扩展用户界面中的触摸输入的改变相关的信息。例如，当用户在上/下/左/右方向上滑动显示器111时，外部显示设备130上输出的鼠标指针或光标可以在上/下/左/右方向上移动。
根据实施例，处理器220可以允许显示器111的整个区域作为触摸板来操作，或者可以允许显示器111的整个区域的一部分作为触摸板来操作。
当显示器111的整个区域的一部分作为触摸板操作时，处理器220可以控制显示器111显示用于区分在显示器111中作为触摸板进行操作的操作和其他区域的指示(下文中称为“第一用户界面”)。例如，处理器220可以控制显示器111使用方框或拐角来显示作为触摸板操作的区域。
根据实施例，在除了作为触摸板操作的区域(在下文中称为“板区域”)之外的其他区域上可以输出黑屏或另一单独的用户界面(例如，用于虹膜识别的指导图像)。
根据各种实施例，当处理器220在显示器111的至少一部分作为触摸板操作的同时识别出外部指点设备140时，其可以结束显示器111的触摸板操作。
图4是示出了根据各种实施例的电子设备的画面输出的图。
根据各种实施例的电子设备可以包括图2的电子设备110的全部或至少一些元件。
参考图4，当外部电子设备(例如，图1的外部显示设备130)连接到图1的电子设备110时(或者当检测到外部显示设备130时)，图2的处理器220可以控制图1的显示器111输出用于接收电子设备110的操作模式的模式选择画面410。
根据实施例，模式选择画面410可以包括桌面模式启动按钮411和画面镜像按钮412。当用户选择桌面模式启动按钮411时，处理器220可以验证图1的外部指点设备140是否连接到电子设备110。
当用户选择画面镜像按钮412时，处理器220可以控制外部显示设备130输出与在移动用户界面上显示的画面相同的画面。
根据实施例，当用户选择桌面模式启动按钮411时，可以根据指定的条件来输出屏幕关闭画面420或触摸板画面430、440和450。
根据实施例，当外部指点设备140有线或无线连接到电子设备110时，处理器220可控制显示器111输出屏幕关闭画面420。在实施例中，当用户生成单独的输入(诸如电子设备110的按钮输入)时，处理器220可以控制显示器111输出移动用户界面。
根据实施例，当外部指点设备140没有有线或无线地连接到电子设备110并且当满足指定的条件时(例如，当电子设备110通过单独的电缆连接到外部显示设备130而没有图1的中介设备120时，当电子设备110沿横向方向被保持在中介设备120中时，当电子设备110通过其传感器检测到横向方向时等)，处理器220可以控制显示器111输出横向模式的触摸板画面430。
显示器111的整个或部分区域可以是有效地作为触摸板操作的区域。处理器220可通过方框指示等来区分板区域431和在板区域431周围的区域(例如，触摸非识别区域)。
根据实施例，外部指点设备140可能无法有线或无线地连接到电子设备110，而电子设备110可以通过中介设备120连接到外部显示设备130。在这种情况下，处理器220可以控制显示器111输出纵向模式的触摸板画面440。显示器111的整个或部分区域可以是有效地作为触摸板操作的区域。处理器220可通过方框指示等来区分板区域441和在板区域441周围的区域(例如，触摸非识别区域)。
根据各种实施例，当显示器111的至少一部分作为触摸板操作时，处理器220可以转换并处理关于横向模式的触摸输入。纵向模式下的触摸输入可以通过匹配触摸输入的坐标来处理以对应于横向模式。
当在显示器111的至少一部分作为触摸板操作的同时执行指定的功能(或指定的应用)时，处理器220可以控制显示器111输出画面450，画面450包括在板区域周围的区域上用于执行该功能的用户界面(在下文中被称为“第二用户界面”)。
例如，在显示器111在纵向模式下作为触摸板操作的状态下，当执行用于虹膜识别的应用时，纵向模式的板区域441可以是缩小的板区域451。可以在板区域451周围的区域上输出用于向用户提供用于虹膜识别的指导的用户界面452。
图5是示出了根据各种实施例的在显示器作为触摸板进行操作时打开/关闭触摸板操作的流程图。
根据各种实施例的电子设备可以包括图2的电子设备110的全部或至少一些元件。
参考图5，在操作510中，电子设备110可以将其自身作为输入设备操作，并且可以进入用于在图1的外部显示设备130上输出内容的模式(下文中称为“桌面模式”)。例如，当检测到与外部显示设备130的连接(或通信)时，图2的处理器220可以输出用于进入桌面模式的用户界面(例如，弹出)。当从用户接收到对桌面模式的选择时，处理器220可以进入桌面模式。又例如，处理器220可根据指定的条件(例如，在连接之后经过诸如10秒之类的预定时间时)自动进入桌面模式。
在操作520中，当电子设备110进入桌面模式时，处理器220可以验证外部指点设备140是否连接到电子设备110。
在操作530中，当外部指点设备140连接到电子设备110时，处理器220可以允许图1的显示器111在屏幕关闭状态下操作或作为触摸屏操作。用户可以通过外部指点设备140来控制外部显示设备130上输出的鼠标指针或光标。
在操作531中，在外部指点设备140连接到电子设备110之后，处理器220可连续或周期性地检测连接是否被释放(例如，鼠标是否被物理去除、蓝牙“BT”通信是否被关闭、鼠标是否超出BT可通信距离等)。
根据各种实施例，在外部指点设备140连接到电子设备110之后，当外部指点设备140临时进入休眠状态时(例如，当外部指点设备140因为它在预定时间段期间不被使用而进入休眠状态时)，处理器220可能无法将显示器111作为触摸板操作。因此，可以减少由于频繁改变为触摸板而能够给用户带来的不便之处。
在操作532中，当与外部指点设备140的连接被释放时，处理器220可以将显示器111作为指点设备(例如，触摸板)来操作。
在操作540中，当外部指点设备140未连接到电子设备110时，处理器220可以允许显示器111的至少一部分作为指点设备(例如，触摸板)操作。
在显示器111的至少一部分作为指点设备操作的同时，在操作541中，处理器220可以验证在显示器111上没有发生单独的用户输入之后是否经过了指定的时间(例如，10秒)。
在操作542中，当经过指定的时间时，处理器220可以结束显示器111的作为指点设备(例如，触摸板)的操作。当确定为用户不使用触摸板的状态时，处理器220可以结束显示器111的作为触摸板的操作以降低电力使用。在各种实施例中，当单独的用户输入(例如，物理按钮输入或通过传感器的输入)发生时，处理器220可以再次将显示器111作为触摸板进行操作。
图6是示出了根据各种实施例的横向模式下触摸板的设置的信号序列图。
参考图6，在操作605中，桌面模式服务294可以进入桌面模式。桌面模式服务294可以收集关于与图1的外部显示设备130的连接模式的信息(例如，关于电子设备110是否经由图1的中介设备120连接到外部显示设备130的信息、关于电子设备110是否通过单独的电缆直接连接到外部显示设备130的信息等)(下文中称为“连接状态信息”)。在实施例中，连接状态信息可以包括关于图1的显示器111是处于横向模式还是处于纵向模式的信息。
根据各种实施例，桌面模式服务294可验证图1的外部指点设备140是否连接到电子设备110以确定是否将显示器111的至少一部分作为触摸板操作。例如，当外部指点设备140未连接到电子设备110时，桌面模式服务294可开始设置要由图2的触摸板驱动程序281处理的用户的触摸输入的过程(操作610到650)。
当进入桌面模式时，在操作610中，桌面模式服务294可向图2的框架243的虚拟设备管理器291提供连接状态信息或关于电子设备110的输出方向的信息。例如，当电子设备110在没有中介设备120的情况下通过单独的电缆连接到外部显示设备130时，当电子设备110沿横向方向被保持在中介设备120中时，或者当电子设备110通过其传感器检测到横向方向时，桌面模式服务294可以向虚拟设备管理器291通知：显示器111处于横向模式。
在操作620中，虚拟设备管理器291可以请求窗口管理器292基于连接状态信息来生成用于配置扩展用户界面的窗口。
在操作630中，窗口管理器292可以在触摸屏类型与触摸板类型之间将窗口类型设置为触摸板类型。
在操作635中，窗口管理器292可以向输入管理器293发送关于窗口类型的信息。
在操作640中，输入管理器293可以请求内核241向触摸板驱动程序281设置与图2的触摸传感器250相对应的驱动程序。
在操作645中，内核241可以处于它作为触摸屏操作的状态。从触摸传感器250接收的信号可以由图2的触摸屏驱动程序282来处理。例如，在电子设备110进入桌面模式之后并且在与触摸传感器250相对应的驱动程序改变为触摸板驱动程序281之前，内核241(或者与触摸传感器250相对应的驱动程序)可以处于它作为触摸屏操作的状态。
在操作650中，内核241可以向触摸板驱动程序281设置与触摸传感器250相对应的驱动程序。当用户触摸触摸传感器250时，内核241可以通过触摸板驱动程序281接收与发生触摸输入的位置相关的信息或作为相对坐标移动信息的与触摸输入的改变相关的信息。
触摸板驱动程序281可以将从触摸传感器250接收的触摸信号转换为相对坐标值等，并且可以向窗口管理器292提供经转换的相对坐标值等。窗口管理器292可以将与作为触摸板的操作有关的信息反映在扩展用户界面中。
图7是示出了根据各种实施例的纵向模式下触摸板的设置的信号序列图。
参考图7，操作705可以与图6中的操作605相同或相似。
当进入桌面模式时，在操作710中，桌面模式服务294可以向图2的框架243的虚拟设备管理器291提供连接状态信息。例如，桌面模式服务294可以向虚拟设备管理器291通知：图1的电子设备110经由图1的中介设备120连接到图1的外部显示设备130并且处于纵向模式。
在操作720中，虚拟设备管理器291可以请求窗口管理器292基于连接状态信息来生成用于配置扩展用户界面的窗口。
在操作730和735中，窗口管理器292可以在触摸屏类型和触摸板类型之间将窗口类型设置为触摸板类型。窗口管理器292可以向输入管理器293发送与窗口类型相关的信息。此外，窗口管理器292可以向输入管理器293通知：显示器111的输出方向处于与被设置为默认的横向模式不同的纵向模式下。
在操作740中，输入管理器293可以将纵向模式的坐标值转换成与横向模式的坐标值匹配的旋转或相对坐标值。输入管理器293可以请求图2的内核241基于匹配的坐标值向图2的触摸板驱动程序281设置与图2的触摸传感器250相对应的驱动程序。
在操作745中，内核241可以处于它作为触摸屏操作的状态。从触摸传感器250接收的信号可以由图2的触摸屏驱动程序282来处理。
在操作750中，内核241可以向触摸板驱动程序281设置与触摸传感器250相对应的驱动程序。当用户触摸触摸传感器250时，内核241可以通过触摸板驱动程序281来接收与发生触摸输入的位置相关的信息或作为相对坐标移动信息的与触摸输入的改变相关的信息。
根据实施例，内核241可以基于从输入管理器293接收的匹配坐标值来改变触摸信号的坐标移动信息，并且可以向窗口管理器292提供经改变的信息。
根据各种实施例，在能够与外部显示设备连接的电子设备中执行画面输出方法。该方法包括：检测电子设备是否经由电子设备的通信电路与外部显示设备通信连接，经由通信电路向外部显示设备发送用于在外部显示设备上呈现扩展用户界面的数据，检测电子设备是否经由通信电路与外部指点设备连接，并且当外部指点设备未连接到电子设备时，提供显示器的至少一部分作为指点设备使用。
根据各种实施例，提供显示器的至少一部分作为指点设备包括：在显示器的第一部分上显示第一用户界面作为指点设备使用，并且在显示器的第二部分上显示用于用户认证的第二用户界面。
根据各种实施例，显示第一用户界面包括：基于在第一部分上的触摸输入，向外部显示设备提供提供用于扩展用户界面的方向数据。
根据各种实施例，显示第二用户界面包括：显示用于使用电子设备的生物特征传感器的指导。
根据各种实施例，提供显示器的至少一部分作为指点设备使用包括：通过第一输入驱动程序来处理在第一部分上接收的所发生的用户输入，并且通过第二输入驱动程序来处理在第二部分上接收的所发生的用户输入。
图8是示出了根据各种实施例的分割输出模式的画面的图。图8是示例，但不限于此。
根据各种实施例的电子设备可以包括图2的电子设备110的全部或一些元件。
参考图8，图2的处理器220可以将显示器111的至少一部分设置为板区域810，并且可以将显示器111中的其它部分设置为输出第二用户界面的画面区域820(在下文中被称为“分割输出模式”)。第二用户界面可以是在执行指定功能(或应用)时的用户界面输出。例如，处理器220可以在显示器111的一个区域(例如，下端)上输出板区域810(或第一区域)，并且可以输出画面区域820(或第二区域)，其中，第二用户界面在纵向模式下在显示器111的其它区域(例如，上端)上输出用于虹膜识别的指导画面。
例如，当用户在桌面模式下执行诸如支付之类的功能时，可以在画面区域820(或第二区域)上输出由与该功能关联的应用生成的指导消息(例如，弹出窗口“看这里”)或指导图像(例如，用户的眼睛的图像)。
根据各种实施例，处理器220可将板区域810的坐标数据(例如，参考点、水平大小、竖直大小等)存储在图2的存储器230中。
根据各种实施例，在板区域810上发生的触摸输入可以由图2的内核241的触摸板驱动程序281来处理，并且在画面区域820上发生的触摸输入可以由内核241的触摸板驱动程序282来处理。
例如，触摸板驱动程序281可以将板区域810上发生的触摸输入应用于图1的外部显示设备130上的鼠标指针或光标的移动，并且触摸屏驱动程序282可以将画面区域820上发生的触摸输入应用于在电子设备110中执行的相关应用。
图9是示出了根据各种实施例的分割输出模式下触摸板的设置的信号序列图。
根据各种实施例的电子设备可以包括图2的电子设备110的全部或一些元件。
参考图9，在操作905中，在图1的电子设备110在桌面模式和触摸板(例如，在纵向模式下)下操作的状态下，因为图1的外部指点设备140未连接到电子设备110，所以桌面模式服务294可以根据对指定应用(例如，支付应用)的执行来接收进入分割输出模式的请求。因此，桌面模式服务294可以发起更新板区域的过程。
当在外部指点设备140未连接到电子设备110的状态下接收到进入分割输出模式的请求时，在操作910中，桌面模式服务294可以向虚拟设备管理器291通知：它处于分割输出模式下。
在操作920中，虚拟设备管理器291可以向窗口管理器292发送更新板区域的请求。
在操作930和935中，窗口管理器292可以向输入管理器293通知与要用作触摸板的板区域(下文中称为“有效板区域”)相关的信息(例如，参考点、水平宽度或竖直宽度)。
在操作940中，基于与有效板区域相关的信息，输入管理器293可以请求内核241向图2的触摸板驱动程序281设置与图2的触摸传感器250对应的驱动程序。
在操作945中，内核241可以处于它作为触摸板操作的状态。从触摸传感器250接收到的信号可以由触摸板驱动程序281来处理。
在操作950中，内核241可以设置要通过触摸板驱动程序281来处理的在有效板区域上发生的触摸输入。当用户在有效板区域上触摸触摸传感器250时，内核241可以通过触摸板驱动程序281来接收与发生触摸输入的位置相关的信息或作为相对坐标移动信息的与触摸输入的改变相关的信息。内核241可以改变触摸信号的坐标移动信息并且可以向窗口管理器292提供经改变的信息。
根据各种实施例，在除了有效的板区域之外的另一区域上发生的触摸输入可以被忽略或者可以由图2的触摸屏驱动程序282来处理以向另一应用(例如，支付应用)提供。
图10是示出了根据各种实施例的在分割输出模式下的第二用户界面的图。
根据各种实施例的电子设备可以包括图2的电子设备110的全部或一些元件。
参考图10，图2的处理器220可以将图1的显示器111的至少一部分设置为板区域810，并且可以将显示器111的其它部分设置为输出第二用户界面的画面区域820。第二用户界面可以是在执行指定功能(或应用)的过程中输出的用户界面。
根据各种实施例，可以在画面区域820上输出用于各种类型的安全相关内容的画面。
例如，可以在画面区域820上输出用于解锁电子设备110的画面的图案输入画面1001。用户可以在图案输入画面1001上输入预定图案。用户的输入可以由图2的内核241的触摸屏驱动程序282来处理，以向图2的处理器220提供。
又例如，可以在画面区域820上输出用于用户的指纹识别的指导画面1002。用户可以以指定的方式在指纹传感器(例如，物理按钮或指导画面1002)上输入他或她的指纹。在这种情况下，在画面区域820上发生的用户的触摸输入可被忽略或可由触摸屏驱动程序282处理以向处理器220提供。
又例如，可以在画面区域820上输出用于输入用于用户认证的密码的画面1003。用户可以输入预定的密码并且可以进行用户认证。用户的输入可以由内核241的触摸屏驱动程序282来处理以向处理器220提供。处理器220可以向相关的应用提供认证结果。
图11是示出了根据各种实施例的在分割输出模式下输出的图像的图。
根据各种实施例的电子设备可以包括图2的电子设备110的全部或一些元件。
参考图11，DDI 260可以与显示面板(例如，图2的显示面板270)电连接并且可以向显示面板270提供与从处理器220接收的图像数据相对应的图像信号。DDI 260可以以指定帧速率向显示面板270提供图像信号。
DDI 260可以包括图形随机存取存储器(GRAM)261。DDI 260还可以包括接口模块、图像处理单元、复用器、显示时序控制器(T-con)、源极驱动器、栅极驱动器、振荡器等。
处理器220可以向DDI 260发送与图像信号相对应的图像数据。在活动状态下，处理器220可以使用比不活动状态(或休眠状态)相对更高的频率来提供图像数据。
在处理器220的不活动状态(或休眠状态)下，DDI 260可以基于嵌入式GRAM 261中存储的图像数据以比处理器220的活动状态(或唤醒状态)相对较低的帧速率向显示面板270提供相应图像信号。
在这种情况下，处理器220可暂时在活动状态(或唤醒状态)下操作以向DDI 260提供图像信息(图像数据)。此后，处理器220可以在不活动状态(或休眠状态)下操作，并且可能无法参与DDI 260的内部操作。
处理器220可以与DDI 260交互。例如，处理器220可以向DDI260中包括的GRAM 261提供在触摸面板(例如，图2的触摸传感器250)中的至少部分区域(例如，板区域810或者画面区域820)上输出的内容(例如，文本、图像、图形用户界面(GUI)对象等)的图像数据。
处理器220可暂时在活动状态(或唤醒状态)下操作以向GRAM261提供图像数据。在向DDI 260提供图像数据之后，处理器220可以被改变为非活动状态(或休眠状态)。
处理器220可以例如在周期性或非周期性的基础上向GRAM 261提供图像数据。例如，处理器220可以在周期性的基础上向GRAM 261提供以指定时间间隔来更新的图像数据(例如，数字手表图像)。又例如，当发生通知时，处理器220可以在非周期性的基础上向GRAM261提供指示通知的图像数据(例如，能够包括即时消息(IM)应用的图标图像在内的图像数据)。
根据实施例，DDI 260可以将从处理器220提供的图像数据存储在GRAM 261中。DDI260可以根据从处理器220接收的内部设置或控制信息将GRAM 261中存储的图像数据转换为图像信号。图像信号可以由DDI 260向显示面板270提供，并且可以通过图像信号在显示面板270中的至少部分区域(例如，板区域810或画面区域820)上输出内容(例如，文本、图像、GUI对象等)。
例如，DDI 260可以从在活动状态(或唤醒状态)下操作的处理器220接收包括内容(诸如图标、数字和图像)在内的一个图像数据。在向DDI 260提供一个图像数据提供给之后，处理器220可以改变为非活动状态(或休眠状态)。
之后，在处理器220的不活动状态(或休眠状态)下，DDI 260可以将从处理器220接收的控制信息(例如，指示通知内容的控制信息)与先前接收的一个图像数据中包括的图标、数字、图像等组合。DDI 260可以使用内部操作向显示面板270输出和/或更新组合结果图像。
根据各种实施例，在分割输出模式下，GRAM 261可以被划分成多个存储区域(例如，第一存储区域261a和第二存储区域261b)。GRAM 261可以分开存储负责显示面板270的每个区域(例如，板区域810或画面区域820)的存储区域。DDI 260可以以不同的速率向显示面板270发送每个存储区域中存储的图像数据。
例如，DDI 260可以向画面区域发送图像信号以用于以相对快的帧速率(例如，与处理器220的活动状态下的帧速率相同的帧速率)来指导虹膜识别，以提供对用户的输入的快速响应。另一方面，DDI260可以以相对低的帧速率向作为触摸板操作的板区域810发送图像信号。由于板区域810具有相对小的内容变化，所以DDI 260可以以与处理器220的不活动状态下的帧速率相同的帧速率来发送图像信号。因此，可以减少功耗。
图12是示出了根据各种实施例的触摸控制器的图。
根据各种实施例的电子设备可以包括图2的电子设备110的全部或一些元件。
参考图12，触摸控制器255可以包括寄存器或存储器。寄存器或存储器可以在分割输出模式下存储与有效板区域相关的数据256。有效板区域数据256可以包括参考点坐标(X，Y)、宽度数据W和高度数据H。在各种实施例中，与有效范围相关的信息或数据256可以基于显示面板270中包括的像素用字节来表示。
根据各种实施例，触摸控制器255可向图2的内核241发送在根据与有效范围相关的信息或数据256来确定的板区域810内发生的触摸输入，并且可忽略在除了板区域810之外的区域上发生的触摸输入，从而降低功耗。
根据各种实施例，触摸控制器255可以存储有效的触摸数据257。有效触摸数据257可以包括执行有效触摸的位置的坐标数据(X，Y)。坐标数据可以由图2的处理器220来读取。
有效触摸数据257可以包括在指定区域中的执行有效触摸的“分割区域”的识别信息Icon ID，以检测有效触摸。识别信息可以包括与有效触摸的类型相关的信息258。与类型相关的信息258可以包括包含第一触摸和第二触摸在内的双重触摸、在指定时间或更长时间期间执行的向下触摸、以及以指定压力或更高压力执行的压力触摸、接近触摸(悬停)等。
图13是示出了根据本公开实施例的电子设备的框图。
参考图13，电子设备1301可以包括例如图1所示的电子设备110的一部分或整体。电子设备1301可以包括至少一个处理器(例如，AP)1310、通信模块1320、订户识别模块(SIM)1329、存储器1330、传感器模块1340、输入设备1350、显示器1360、接口1370、音频模块1380、相机模块1391、电源管理模块1395、电池1396、指示器1397和电机1398。
处理器1310可以运行操作系统或应用程序，从而控制连接到处理器1310的多个硬件或软件元件，并且可以处理各种数据并执行操作。例如，处理器1310可以用片上系统(SoC)来实现。根据本公开实施例，处理器1310还可以包括图形处理单元(GPU)和/或图像信号处理器。处理器1310可以包括图13所示的元件中的至少一部分(例如，蜂窝模块1321)。处理器1310可以将从至少一个其他元件(例如，非易失性存储器)接收到的指令或数据加载到易失性存储器上以处理该指令或数据，而且可以将各种数据存储在非易失性存储器中。
通信模块1320可以具有与图2的通信电路225的配置相同或类似的配置。通信模块1320可以包括例如蜂窝模块1321、Wi-Fi模块1322、蓝牙(BT)模块1323、GNSS模块1324(例如，GPS模块、GLONASS模块、北斗模块或伽利略模块)、NFC模块1325、MST模块1326和射频(RF)模块1327。
蜂窝模块1321可以通过通信网络来提供例如语音呼叫服务、视频呼叫服务、文本消息服务或互联网服务。蜂窝模块1321可以使用订户识别模块(SIM)1329(例如SIM卡)在通信网络中对电子设备1301执行识别和认证。蜂窝模块1321可以执行能够由处理器1310提供的功能的至少一部分。蜂窝模块1321可以包括通信处理器(CP)。
Wi-Fi模块1322、蓝牙模块1323、GNSS模块1324和NFC模块1325中的每一个都可以包括例如用于处理通过各模块发送/接收的数据的处理器。根据本公开的各种实施例，蜂窝模块1321、Wi-Fi模块1322、蓝牙模块1323、GNSS模块1324和NFC模块1325中的至少一部分(例如，两个或更多个)可被包括在一个集成芯片(IC)或IC封装中。
RF模块1327可以发送/接收例如通信信号(例如，RF信号)。RF模块1327可以包括例如收发机、功率放大模块(PAM)、频率滤波器、低噪放大器(LNA)、天线等。根据本公开的另一实施例，蜂窝模块1321、Wi-Fi模块1322、蓝牙模块1323、GNSS模块1324或NFC模块1325中的至少一个可以通过单独的RF模块来发送/接收RF信号。
SIM 1329可以包括例如嵌入式SIM和/或包含订户身份模块在内的卡，并可以包括唯一识别信息(例如，集成电路卡标识符(ICCID))或订户信息(例如，国际移动订户身份(IMSI))。
例如，存储器1330(例如，存储器230)可以包括内部存储器1332或者外部存储器1334。内部存储器1332可以包括以下至少一项：易失性存储器(例如，动态RAM(DRAM)、静态RAM(SRAM)、同步动态RAM(SDRAM)等)、非易失性存储器(例如，一次性可编程ROM(OTPROM)、可编程ROM(PROM)、可擦除可编程ROM(EPROM)、电可擦除可编程ROM(EEPROM)、掩膜型ROM、闪存ROM、闪存(例如，NAND闪存、NOR闪存等))、硬盘驱动器或固态驱动器(SSD)。
外部存储器1334还可以包括闪存驱动器，例如高密度型闪存(CF)、安全数字(SD)、微型SD、迷你型SD、极限数字(xD)、多媒体卡(MMC)、记忆棒等。外部存储器1334可以通过各种接口与电子设备1301操作地连接和/或物理地连接。
传感器模块1340例如可以测量物理量或检测电子设备1301的操作状态，以便将测量的或检测的信息转换为电信号。传感器模块1340可以包括例如以下至少一项：手势传感器1340A、陀螺仪传感器1340B、气压传感器1340C、磁传感器1340D、加速度传感器1340E、握持传感器1340F、接近传感器1340G、颜色传感器1340H(例如，红/绿/蓝(RGB)传感器)、生物特征传感器1340I、温度/湿度传感器1340J、照度传感器1340K或紫外线(UV)传感器1340M。附加地或者备选地，传感器模块1340可以包括例如嗅觉传感器(电子鼻传感器)、肌电图(EMG)传感器、脑电图(EEG)传感器、心电图(ECG)传感器、红外(IR)传感器、虹膜识别传感器和/或指纹传感器。传感器模块1340还可以包括用于控制其中包括的至少一个传感器的控制电路。在本公开的各种实施例中，电子设备1301还可以包括作为处理器1310的一部分或与处理器1310分离的、被配置为控制传感器模块1340的处理器，使得当处理器1310处于休眠状态时控制传感器模块1340。
输入设备1350可以包括例如触摸面板1352、(数字)笔传感器1354、按键1356或超声输入设备1358。触摸面板1352可使用电容型、电阻型、红外型和超声感测方法中的至少一种。触摸面板1352还可以包括控制电路。触摸面板1352还可以包括触觉层，以向用户提供触觉反馈。
(数字)笔传感器1354可以包括例如作为触摸面板的一部分的或单独的识别片。按键1356可以包括例如物理按钮、光学按钮或键区。超声输入设备1358可以通过麦克风1388来感测由输入工具产生的超声波，以识别与所感测的超声波相对应的数据。
显示器1360(例如，显示面板270)可以包括面板1362、全息设备1364或投影仪1366。面板1362可以具有与图2的显示面板270的配置相同或类似的配置。面板1362可以是例如柔性的、透明的或可穿戴的。面板1362和触摸面板1352可被集成在单个模块中。全息设备1364可以使用光的干涉现象在空中显示立体图像。投影仪1366可以将光投射到屏幕上以显示图像。该屏幕可以布置在电子设备1301的内部或外部。根据本公开的实施例，显示器1360还可以包括用于控制面板1362、全息设备1364或投影仪1366的控制电路。
接口1370可以包括例如HDMI 1372、USB 1374、光学接口1376或D-超小型(D-sub)1378。例如，接口1370可被包括在图2中示出的通信接口225中。附加地或备选地，接口1370可以包括例如移动高清链路(MHL)接口、SD卡/多媒体卡(MMC)接口或红外数据协会(IrDA)接口。
例如，音频模块1380可以将声音信号转换为电信号，反之亦然。音频模块1380可以处理通过扬声器1382、听筒1384、耳机1386或麦克风1388输入或输出的声音信息。
相机模块1391例如是用于拍摄静止图像或视频的设备。根据本公开实施例，相机模块1391可以包括至少一个图像传感器(例如，前置传感器或后置传感器)、镜头、图像信号处理器(ISP)或闪光灯(例如，LED或氙灯)。
电源管理模块1395可以管理电子设备1301的电源。根据本公开实施例，电源管理模块1395可以包括电源管理集成电路(PMIC)、充电集成电路(IC)、或电池或表。PMIC可以使用有线和/或无线充电方法。无线充电方法可以包括例如磁谐振方法、磁感应方法、电磁方法等。还可以提供用于无线充电的附加电路，例如线圈回路、谐振电路、整流器等。例如，当对电池充电时，电池量表可以测量电池1396的剩余容量及其电压、电流或温度。例如，电池1396可以包括可再充电电池和/或太阳能电池。
指示器1397可以显示电子设备1301或其一部分(例如，处理器1310)的具体状态，例如引导状态、消息状态、充电状态等。电机1398可以将电信号转换为机械振动，并可以产生振动或触觉效果。尽管未示出，但是电子设备1301可以包括用于支持移动TV的处理设备(例如，GPU)。用于支持移动TV的处理设备可以处理符合数字多媒体广播(DMB)、数字视频广播(DVB)、MediaFloTM等的标准的媒体数据。
本文所述的每个元件可被配置为一个或多个组件，且元件名称可以根据电子设备的类型而改变。在本公开的各种实施例中，电子设备可以包括本文描述的元件中的至少一个，并且可以省略一些元件，或者可以添加其他附加元件。此外，可以将电子设备的某些元件彼此组合，以便形成一个实体，使得与组合之前相同的方式来执行这些元件所执行的功能。
根据各种实施例，一种电子设备包括：外壳，包括第一表面和面向与第一表面相反方向的第二表面；显示器，被配置为接收触摸输入，该显示器通过第一表面的至少一部分暴露；通信电路，设置于外壳中；至少一个处理器，设置于外壳中并且与显示器和通信电路电连接；以及存储器，设置于外壳中并且与至少一个处理器电连接，其中，存储器存储指令，指令可执行以使至少一个处理器：检测电子设备是否经由通信电路与外部显示设备通信；经由通信电路向外部显示设备发送用于在外部显示设备上呈现扩展用户界面的数据；检测电子设备是否经由通信电路与外部指点设备连接；以及当外部指点设备未连接到电子设备时，提供显示器的至少一部分以用作指点设备。
根据各种实施例，指令使至少一个处理器在显示器的第一部分上显示用于指点设备的第一用户界面，并且在显示器的第二部分上显示用于用户认证的第二用户界面。
根据各种实施例，指令使至少一个处理器基于第一部分上的触摸输入向外部显示设备提供用于扩展用户界面的方向数据。
根据各种实施例，电子设备还包括生物特征传感器，其通过第一表面中的另一部分暴露，其中，第二用户界面包括对用于使用生物特征传感器的指导的显示。
根据各种实施例，生物特征传感器包括虹膜传感器或指纹传感器中的至少一个。
根据各种实施例，指令使至少一个处理器在显示器的该至少一部分用作指点设备时，在显示器的该至少一部分上显示黑色触摸区域。
根据各种实施例，指令使至少一个处理器通过第一输入驱动程序来处理在第一部分上接收的用户输入，并且通过第二输入驱动程序来处理在第二部分上接收的用户输入。
根据各种实施例，指令使至少一个处理器忽略通过第二用户界面接收的用户输入。
根据各种实施例，电子设备还包括显示驱动集成电路(DDI)，其被配置为向显示器提供图像信号，DDI包括图形随机存取存储器(GRAM)，其中，指令使至少一个处理器控制GRAM分开存储用于第一部分的第一图像数据和用于第二部分的第二图像数据。
根据各种实施例，指令使至少一个处理器控制DDI以不同帧速率在显示器上显示第一图像数据和第二图像数据。
根据各种实施例，指令使至少一个处理器在显示器的该至少一部分作为指点设备操作并且识别出外部指点设备时，终止显示器作为指点设备的操作。
根据各种实施例，指令使至少一个处理器在显示器的至少一部分作为指点设备操作时并且在预先指定的时间上未检测到对显示器的用户输入时，终止显示器作为指点设备的操作。
根据各种实施例，指令使至少一个处理器在显示器上显示可作为指点设备来操作的区域。
根据各种实施例，指令使至少一个处理器将显示器设置为在横向模式下作为指点设备操作，并且响应于从用户接收到请求改变为纵向模式的输入时，将显示器设置为在纵向模式下作为指点设备操作。
根据各种实施例，电子设备包括：显示器，被配置为接收触摸输入；通信电路；处理器；以及存储器，其中，处理器被配置为检测经由通信电路与外部显示设备的连接，检测是否指定的外部指点设备经由通信电路连接到电子设备；以及当外部指点设备未连接到电子设备时，将显示器的至少一部分作为指点设备操作。
图14是示出了根据本公开实施例的程序模块的框图。
参考图14，程序模块1410可以包括用于控制与电子设备(例如电子设备110)相关的资源的操作系统(OS)和/或在OS上运行的各种应用。操作系统可以是例如Android、iOS、Windows、Symbian、Tizen等。
程序模块1410可以包括内核1420、中间件1430、API 1460和/或应用1470。程序模块1410的至少一部分可以被预先加载到电子设备上或者可以从外部电子设备下载。
内核1420可以包括例如系统资源管理器1421或设备驱动程序1423。系统资源管理器1421可以执行系统资源的控制、分配或者取回。根据本公开实施例，系统资源管理器1421可以包括进程管理单元、存储器管理单元、文件系统管理单元等。设备驱动程序1423例如可以包括显示器驱动程序、相机驱动程序、蓝牙驱动程序、共享存储器驱动程序、USB驱动程序、键区驱动程序、Wi-Fi驱动程序、音频驱动程序或进程间通信(IPC)驱动程序。
中间件1430例如可以提供应用1470共同所需的功能，或可以通过API 1460向应用1470提供各种功能，以便应用1470可以有效地使用电子设备中有限的系统资源。根据本公开的一个实施例，中间件1430可以包括以下至少一项：运行库1435、应用管理器1441、窗口管理器1442、多媒体管理器1443、资源管理器1444、电源管理器1445、数据库管理器1446、包管理器1447、连接性管理器1448、通知管理器1449、位置管理器1450、图形管理器1451和安全管理器1452。
运行库1435可以包括例如库模块，在应用1470运行时，编译器使用库模块来通过编程语言添加新的功能。运行库1435可以执行用于输入/输出管理、存储器管理或算术功能的功能。
应用管理器1441可以管理例如应用1470中的至少一个应用的生命周期。窗口管理器1442可以管理在屏幕中使用的GUI资源。多媒体管理器1443可以识别用于播放各种媒体文件所需的格式，并可以使用与格式匹配的编解码器对媒体文件进行编码或解码。资源管理器1444可以管理应用1470中的至少一个应用的资源，例如源代码、存储器或存储空间。
电源管理器1445例如可以连同基本输入/输出系统(BIOS)一同操作，以便管理电池或电源，并可以提供用于操作电子设备所需的电源信息。数据库管理器1446可以生成、搜索或修改要在至少一个应用1470中使用的数据库。包管理器1447可以管理以包文件格式分发的应用的安装或更新。
连接管理器1448可以管理Wi-Fi、蓝牙等的无线连接。通知管理器1449可以用不打扰用户的方式来显示或通知事件，例如消息到来、约会和接近告警。位置管理器1450可以管理电子设备的位置信息。图形管理器1451可以管理要向用户提供的图形效果或与其相关的用户界面。安全管理器1452可以提供用于系统安全或用户认证所需的各种安全功能。根据本公开实施例，在电子设备(例如，电子设备110)包括电话功能的情况下，中间件1430还可以包括电话管理器，用于管理电子设备的语音呼叫功能或视频呼叫功能。
中间件1430可以包括中间件模块，用于形成上述元件的各种功能的组合。中间件1430可以提供针对每种类型的操作系统而被专门化的模块，以提供不同的功能。此外，中间件1430可以动态地删除一部分已有元件和/或添加新的元件。
例如作为API编程功能的集合的API 1460可以根据操作系统以不同配置来提供。例如，在安卓或iOS的情况下，可以针对每个平台提供一个API集，而在Tizen的情况下，可以针对每个平台提供至少两个API集。
应用1470例如可以包括能够提供如下功能的至少一个应用：例如，主页1471、拨号器1472、SMS/MMS 1473、即时消息(IM)1474、浏览器1475、相机1476、闹铃1477、联系人1478、语音拨号1479、电子邮件1480、日历1481、媒体播放器1482、相册1483、时钟1484、健康护理(例如，测量运动量或血糖)或环境信息提供(例如，提供气压、湿度或温度信息)。
根据本公开的实施例，应用1470可以包括用于支持电子设备(例如，电子设备110)和外部电子设备之间的信息交换的信息交换应用。例如，信息交换应用可以包括用于向外部电子设备中继特定信息的通知中继应用或者用于管理外部电子设备的设备管理应用。
例如，通知中继应用可以具有用于向外部电子设备中继在电子设备的另一应用(例如SMS/MMS应用、电子邮件应用、健康护理应用、环境信息应用等)中产生的通知信息的功能。此外，通知中继应用可以从外部电子设备接收通知信息，并可以向用户提供接收到的通知信息。
设备管理应用例如可以管理(例如，安装、删除或更新)与该电子设备通信的外部电子设备的至少一个功能(例如，外部电子设备本身(或一些元件)的开启/关闭、或显示器的亮度(或分辨率)调整)、在外部电子设备中运行的应用、或从外部电子设备提供的服务(例如，呼叫服务、消息服务等)。
根据本公开的实施例，应用1470可以包括根据外部电子设备的属性指定的应用(例如，移动医疗设备的健康护理应用)。应用1470可以包括从外部电子设备接收的应用。应用1470可包括预加载的应用或可从服务器下载的第三方应用。所示的程序模块1410的各元件的名称可以根据操作系统的类型而变化。
根据本公开的各种实施例，程序模块1410的至少一部分可以用软件、固件、硬件或其组合来实现。例如，程序模块1410的至少一部分可以由处理器(例如，处理器1310)来实现(例如，执行)。程序模块1410的至少一部分可以例如包括用于执行至少一个功能的模块、程序、例程、指令集或进程。
本文使用的术语“模块”可以表示例如包括硬件、软件和固件之一或其组合在内的单元。术语“模块”可以与术语“单元”、“逻辑”、“逻辑块”、“组件”和“电路”互换使用。“模块”可以是集成组件的最小单元或者可以是其一部分。“模块”可以是用于执行一个或多个功能的最小单元或其一部分。可以用机械方式或电子方式来实现“模块”。例如，“模块”可以包括用于执行已知的或将来开发的一些操作的专用集成电路(ASIC)芯片、现场可编程门阵列(FPGA)和可编程逻辑器件中的至少一种。
根据本公开各种实施例的设备的至少一部分(例如，其模块或功能)或方法的至少一部分(例如，操作)可以实现为以程序模块形式存储在计算机可读存储介质中的指令。在通过处理器(例如，处理器220)来执行指令的情况下，处理器可以执行与指令相对应的功能。例如，计算机可读存储介质可以是例如存储器230。
计算机可读记录介质可以包括硬盘、软盘、磁介质(例如，磁带)、光学介质(例如，CD-ROM、数字多功能盘(DVD))、磁光介质(例如，光磁软盘)、或硬件设备(例如，ROM、RAM、闪存)等。程序指令可以包括由编译器产生的机器语言代码以及可由计算机使用解释器执行的高级语言代码。上述硬件设备可被配置为操作为一个或多个软件模块，以执行本公开各种实施例的操作，反之亦然。
根据本公开各种实施例的模块或程序模块可以包括上述元件中的至少一个元件，并且可以省略一些元件，或可以添加其他额外的元件。由根据本公开各种实施例的模块、程序模块或其他元件执行的操作可以按照顺序、并行、迭代或启发式的方式执行。另外，一些操作可以按不同顺序执行，或者可以被省略，或者可以增加其他操作。
尽管已经参考本公开的各种实施例示出并描述了本公开，但是本领域技术人员将理解，在不脱离由所附权利要求及其等同物限定的本公开的情况下，可以在其中进行形式和细节上的各种改变。

Claims (15)

1.一种电子设备，包括：
外壳，包括第一表面和面向与第一表面相反方向的第二表面；
显示器，被配置为接收触摸输入，所述显示器通过所述第一表面的至少一部分暴露；
通信电路，设置在所述外壳中；
至少一个处理器，设置在所述外壳中并与所述显示器和所述通信电路电连接；以及
存储器，设置在所述外壳中并与所述至少一个处理器电连接，其中，所述存储器存储指令，所述指令能够执行以使所述至少一个处理器：
检测所述电子设备是否经由所述通信电路与外部显示设备通信；
经由所述通信电路向所述外部显示设备发送用于在所述外部显示设备上呈现扩展用户界面的数据；
检测所述电子设备是否经由所述通信电路与外部指点设备连接；以及
当所述外部指点设备未连接到所述电子设备时，提供所述显示器的至少一部分以用作指点设备。
2.根据权利要求1所述的电子设备，其中，所述指令使所述至少一个处理器：
在所述显示器的第一部分上显示用于所述指点设备的第一用户界面；以及
在所述显示器的第二部分上显示用于用户认证的第二用户界面。
3.根据权利要求2所述的电子设备，其中，所述指令使所述至少一个处理器：
基于所述第一部分上的特定触摸输入向所述外部显示设备提供用于所述扩展用户界面的方向数据。
4.根据权利要求2所述的电子设备，还包括：
通过所述第一表面的另一部分暴露的生物特征传感器，
其中，所述第二用户界面包括对关于使用所述生物特征传感器的向导的显示。
5.根据权利要求1所述的电子设备，其中，所述指令使所述至少一个处理器：
当所述显示器的所述至少一部分被用作所述指点设备时，在所述显示器的所述至少一部分上显示黑色触摸区域。
6.根据权利要求2所述的电子设备，其中，所述指令使所述至少一个处理器：
通过第一输入驱动程序来处理在所述第一部分上接收到的用户输入；以及
通过第二输入驱动程序来处理在所述第二部分上接收到的用户输入。
7.根据权利要求2所述的电子设备，其中，所述指令使所述至少一个处理器：
忽略通过所述第二用户界面接收到的用户输入。
8.根据权利要求2所述的电子设备，还包括：
显示驱动集成电路“DDI”，被配置为向所述显示器提供图像信号，所述DDI包括图形随机存取存储器“GRAM”，
其中，所述指令使所述至少一个处理器：
控制所述GRAM分开存储用于所述第二部分的第二图像数据和用于所述第一部分的第一图像数据。
9.根据权利要求8所述的电子设备，其中，所述指令使所述至少一个处理器：
控制所述DDI以不同的帧速率在所述显示器上显示所述第一图像数据和所述第二图像数据。
10.根据权利要求1所述的电子设备，其中，所述指令使所述至少一个处理器：
当所述显示器的所述至少一部分作为所述指点设备操作并且识别到所述外部指点设备时，终止所述显示器作为所述指点设备的操作。
11.根据权利要求1所述的电子设备，其中，所述指令使所述至少一个处理器：
当所述显示器的所述至少一部分作为所述指点设备操作并且在预先指定时间上未检测到针对所述显示器的用户输入时，终止所述显示器作为所述指点设备的操作。
12.根据权利要求1所述的电子设备，其中，所述指令使所述至少一个处理器：
在所述显示器上显示能作为所述指点设备操作的区域。
13.根据权利要求1所述的电子设备，其中，所述指令使所述至少一个处理器：
将所述显示器设置为在横向模式下作为所述指点设备操作；以及
响应于从用户接收到请求改变为纵向模式的输入，将所述显示器设置为在所述纵向模式下作为所述指点设备操作。
14.一种在能够与外部显示设备连接的电子设备中的画面输出方法，所述方法包括：
检测所述电子设备是否经由所述电子设备的通信电路与所述外部显示没备通信连接；
经由所述通信电路向所述外部显示设备发送用于在所述外部显示设备上呈现扩展用户界面的数据；
检测所述电子设备是否经由所述通信电路与外部指点设备连接；以及
当所述外部指点设备未连接到所述电子设备时，提供所述显示器的至少一部分以用作指点设备。
15.根据权利要求14所述的方法，其中，提供所述显示器的至少一部分以用作指点设备包括：
在所述显示器的第一部分上显示第一用户界面以用作所述指点设备；以及
在所述显示器的第二部分上显示第二用户界面以用于用户认证。
CN201810276097.7A 2017-03-29 2018-03-29 使用外部设备的画面输出方法和用于支持其的电子设备 Active CN108694032B (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN202311234792.4A CN117289885A (zh) 2017-03-29 2018-03-29 使用外部设备的画面输出方法和用于支持其的电子设备
CN202311240629.9A CN117289886A (zh) 2017-03-29 2018-03-29 使用外部设备的画面输出方法和用于支持其的电子设备

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020170040004A KR102365678B1 (ko) 2017-03-29 2017-03-29 외부 장치를 이용한 화면 출력 방법 및 이를 지원하는 전자 장치
KR10-2017-0040004 2017-03-29

Related Child Applications (2)

Application Number Title Priority Date Filing Date
CN202311240629.9A Division CN117289886A (zh) 2017-03-29 2018-03-29 使用外部设备的画面输出方法和用于支持其的电子设备
CN202311234792.4A Division CN117289885A (zh) 2017-03-29 2018-03-29 使用外部设备的画面输出方法和用于支持其的电子设备

Publications (2)

Publication Number Publication Date
CN108694032A true CN108694032A (zh) 2018-10-23
CN108694032B CN108694032B (zh) 2023-10-17

Family

ID=62492378

Family Applications (3)

Application Number Title Priority Date Filing Date
CN202311234792.4A Pending CN117289885A (zh) 2017-03-29 2018-03-29 使用外部设备的画面输出方法和用于支持其的电子设备
CN201810276097.7A Active CN108694032B (zh) 2017-03-29 2018-03-29 使用外部设备的画面输出方法和用于支持其的电子设备
CN202311240629.9A Pending CN117289886A (zh) 2017-03-29 2018-03-29 使用外部设备的画面输出方法和用于支持其的电子设备

Family Applications Before (1)

Application Number Title Priority Date Filing Date
CN202311234792.4A Pending CN117289885A (zh) 2017-03-29 2018-03-29 使用外部设备的画面输出方法和用于支持其的电子设备

Family Applications After (1)

Application Number Title Priority Date Filing Date
CN202311240629.9A Pending CN117289886A (zh) 2017-03-29 2018-03-29 使用外部设备的画面输出方法和用于支持其的电子设备

Country Status (5)

Country Link
US (3) US11119601B2 (zh)
EP (3) EP4231130A3 (zh)
KR (1) KR102365678B1 (zh)
CN (3) CN117289885A (zh)
ES (1) ES2958582T3 (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109753184A (zh) * 2019-01-07 2019-05-14 北京硬壳科技有限公司 触控显示设备及其控制方法和装置
CN110399080A (zh) * 2019-07-31 2019-11-01 联想(北京)有限公司 一种输出控制方法、终端及多设备系统
CN114356071A (zh) * 2020-09-29 2022-04-15 精工爱普生株式会社 显示系统、显示方法以及记录介质

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11625155B2 (en) * 2020-03-23 2023-04-11 Ricoh Company, Ltd. Information processing system, user terminal, method of processing information
US11907495B2 (en) * 2021-10-19 2024-02-20 Motorola Mobility Llc Electronic devices and corresponding methods utilizing ultra-wideband communication signals for user interface enhancement
US11606456B1 (en) 2021-10-19 2023-03-14 Motorola Mobility Llc Electronic devices and corresponding methods utilizing ultra-wideband communication signals for user interface enhancement
US11503358B1 (en) 2021-10-19 2022-11-15 Motorola Mobility Llc Electronic devices and corresponding methods utilizing ultra-wideband communication signals for user interface enhancement

Citations (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20090322693A1 (en) * 2008-06-30 2009-12-31 Fujitsu Limited Device including display and input functions and method
CN101661372A (zh) * 2008-08-27 2010-03-03 Lg电子株式会社 显示设备及控制该显示设备的方法
CN103282870A (zh) * 2010-12-31 2013-09-04 摩托罗拉移动有限责任公司 用于使外部显示器的使用与移动设备适配的方法和系统
US20140075377A1 (en) * 2012-09-10 2014-03-13 Samsung Electronics Co. Ltd. Method for connecting mobile terminal and external display and apparatus implementing the same
CN103677711A (zh) * 2012-09-10 2014-03-26 三星电子株式会社 连接移动终端和外部显示器的方法和实现该方法的装置
US20140139431A1 (en) * 2012-11-21 2014-05-22 Htc Corporation Method for displaying images of touch control device on external display device
CN103914253A (zh) * 2013-01-07 2014-07-09 三星电子株式会社 使用触摸设备提供鼠标功能的方法和装置
CN104765446A (zh) * 2014-01-07 2015-07-08 三星电子株式会社 电子设备和控制电子设备的方法
CN105913246A (zh) * 2015-02-24 2016-08-31 三星电子株式会社 能够进行磁场通信的手持电子设备及使用其支付方法
EP3062207A1 (en) * 2015-02-27 2016-08-31 Samsung Electronics Co., Ltd. Method and apparatus for supporting communication in electronic device
US20160301791A1 (en) * 2015-04-08 2016-10-13 Samsung Electronics Co., Ltd. Method and apparatus for interworking between electronic devices
US20170047053A1 (en) * 2015-08-12 2017-02-16 Samsung Electronics Co., Ltd. Sound providing method and electronic device for performing the same
US20170052865A1 (en) * 2015-08-20 2017-02-23 Casio Computer Co., Ltd. Utilizing function apparatus and recording medium
CN106537849A (zh) * 2014-05-28 2017-03-22 三星电子株式会社 用于控制物联网设备的装置和方法

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8487943B2 (en) * 2007-12-13 2013-07-16 Advanced Micro Devices, Inc. Driver architecture for computing device having multiple graphics subsystems, reduced power consumption modes, software and methods
JP5629242B2 (ja) 2011-06-10 2014-11-19 京セラ株式会社 通信端末
KR101348669B1 (ko) * 2012-01-20 2014-01-09 (주)유믹스 연결된 디스플레이를 이용한 사용자 입력 제어 방법 및 그 장치
KR20130105044A (ko) 2012-03-16 2013-09-25 삼성전자주식회사 터치 스크린 단말기의 사용자 인터페이스 방법 및 장치
EP2850510A2 (en) * 2012-05-18 2015-03-25 Apple Inc. Device, method, and graphical user interface for manipulating user interfaces based on fingerprint sensor inputs
KR20140034025A (ko) * 2012-09-10 2014-03-19 삼성전자주식회사 휴대단말에서 표시장치별 윈도우 레이아웃 제공 방법 및 장치
KR102044826B1 (ko) 2013-01-02 2019-11-14 삼성전자 주식회사 마우스 기능 제공 방법 및 이를 구현하는 단말
US20150193613A1 (en) 2013-03-27 2015-07-09 Samsung Electronics Co., Ltd. Portable apparatus and method of connecting to external apparatus
EP2866165B1 (en) * 2013-10-28 2018-12-05 LG Electronics Inc. -1- Mobile terminal and controlling method thereof
JP2016038619A (ja) 2014-08-05 2016-03-22 シャープ株式会社 携帯端末装置及びその操作方法
KR102364620B1 (ko) * 2015-01-26 2022-02-17 엘지전자 주식회사 영상표시장치, 및 그 동작방법
US9734779B2 (en) * 2015-02-12 2017-08-15 Qualcomm Incorporated Efficient operation of wearable displays
KR102261962B1 (ko) * 2015-07-21 2021-06-07 삼성전자주식회사 디스플레이 구동 장치, 이를 포함하는 디스플레이 장치 및 시스템
EP3334133A4 (en) 2015-08-06 2019-03-13 LG Electronics Inc. MOBILE TERMINAL AND ITS CONTROL METHOD
KR20170040004A (ko) 2015-10-02 2017-04-12 주식회사 케이티 Uml 모델 기반의 동시성 코드의 리팩토링 장치 및 리팩토링 방법
KR102450840B1 (ko) * 2015-11-19 2022-10-05 엘지전자 주식회사 전자 기기 및 전자 기기의 제어 방법

Patent Citations (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20090322693A1 (en) * 2008-06-30 2009-12-31 Fujitsu Limited Device including display and input functions and method
CN101661372A (zh) * 2008-08-27 2010-03-03 Lg电子株式会社 显示设备及控制该显示设备的方法
CN103282870A (zh) * 2010-12-31 2013-09-04 摩托罗拉移动有限责任公司 用于使外部显示器的使用与移动设备适配的方法和系统
US20140075377A1 (en) * 2012-09-10 2014-03-13 Samsung Electronics Co. Ltd. Method for connecting mobile terminal and external display and apparatus implementing the same
CN103677711A (zh) * 2012-09-10 2014-03-26 三星电子株式会社 连接移动终端和外部显示器的方法和实现该方法的装置
US20140139431A1 (en) * 2012-11-21 2014-05-22 Htc Corporation Method for displaying images of touch control device on external display device
CN103914253A (zh) * 2013-01-07 2014-07-09 三星电子株式会社 使用触摸设备提供鼠标功能的方法和装置
US20140191960A1 (en) * 2013-01-07 2014-07-10 Samsung Electronics Co., Ltd. Method and apparatus for providing mouse function using touch device
CN104765446A (zh) * 2014-01-07 2015-07-08 三星电子株式会社 电子设备和控制电子设备的方法
CN106537849A (zh) * 2014-05-28 2017-03-22 三星电子株式会社 用于控制物联网设备的装置和方法
CN105913246A (zh) * 2015-02-24 2016-08-31 三星电子株式会社 能够进行磁场通信的手持电子设备及使用其支付方法
EP3062207A1 (en) * 2015-02-27 2016-08-31 Samsung Electronics Co., Ltd. Method and apparatus for supporting communication in electronic device
CN105930073A (zh) * 2015-02-27 2016-09-07 三星电子株式会社 用于支持电子设备中的通信的方法和装置
US20160301791A1 (en) * 2015-04-08 2016-10-13 Samsung Electronics Co., Ltd. Method and apparatus for interworking between electronic devices
US20170047053A1 (en) * 2015-08-12 2017-02-16 Samsung Electronics Co., Ltd. Sound providing method and electronic device for performing the same
US20170052865A1 (en) * 2015-08-20 2017-02-23 Casio Computer Co., Ltd. Utilizing function apparatus and recording medium

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
辛义忠等: "移动手持环境下触摸式目标选择技术对比", 中国图像图形学报, pages 264 - 270 *

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109753184A (zh) * 2019-01-07 2019-05-14 北京硬壳科技有限公司 触控显示设备及其控制方法和装置
CN110399080A (zh) * 2019-07-31 2019-11-01 联想(北京)有限公司 一种输出控制方法、终端及多设备系统
CN114356071A (zh) * 2020-09-29 2022-04-15 精工爱普生株式会社 显示系统、显示方法以及记录介质
CN114356071B (zh) * 2020-09-29 2024-01-30 精工爱普生株式会社 显示系统、显示方法以及记录介质

Also Published As

Publication number Publication date
KR102365678B1 (ko) 2022-02-21
ES2958582T3 (es) 2024-02-12
CN108694032B (zh) 2023-10-17
EP4231130A3 (en) 2023-10-18
CN117289886A (zh) 2023-12-26
EP3382524A1 (en) 2018-10-03
EP3382524B1 (en) 2023-07-05
US20180284967A1 (en) 2018-10-04
EP4231130A2 (en) 2023-08-23
CN117289885A (zh) 2023-12-26
KR20180110452A (ko) 2018-10-10
EP4235414A3 (en) 2023-10-18
US11747933B2 (en) 2023-09-05
US11669190B2 (en) 2023-06-06
EP4235414A2 (en) 2023-08-30
US11119601B2 (en) 2021-09-14
US20210357068A1 (en) 2021-11-18
US20210357114A1 (en) 2021-11-18

Similar Documents

Publication Publication Date Title
US10386943B2 (en) Electronic device comprising rotating body and control method therefor
US10218058B2 (en) Electronic device including antenna
CN108694032A (zh) 使用外部设备的画面输出方法和用于支持其的电子设备
CN108388394A (zh) 电子设备以及由电子设备显示对象的方法
US20160011738A1 (en) Electronic device, method of providing interface of the same, and accessory for the same
CN109313519A (zh) 包括力传感器的电子设备
US10430077B2 (en) Cover device and electronic device including cover device
CN108885495A (zh) 电子设备和在电子设备中提供信息的方法
CN109564498A (zh) 电子设备和识别电子设备中的触摸的方法
US10949019B2 (en) Electronic device and method for determining touch coordinate thereof
CN108632448A (zh) 用于控制音频输出的电子设备及其操作方法
CN108388782A (zh) 用于认证生物计量数据的电子设备和系统
CN107016950A (zh) 用于操作电子设备的方法和支持该方法的电子设备
CN108376017A (zh) 用于控制显示器的方法和电子设备
CN108475174A (zh) 电子设备及其操作方法
CN108431752B (zh) 用于在电子设备中显示数据的装置和方法
CN107037966A (zh) 感测输入的压力的电子设备和用于操作电子设备的方法
CN107835969A (zh) 对电子设备的触摸感测模块进行控制的方法、电子设备、对设置在电子设备中的触摸感测模块进行操作的方法以及触摸感测模块
CN106250076A (zh) 用于独立控制显示器的多个区域的装置及其方法
CN106940635A (zh) 用于输出声音的方法以及支持该方法的电子设备
CN107239245A (zh) 用于输出屏幕的方法和支持该方法的电子设备
CN105929894A (zh) 包括触摸屏的电子装置及其控制方法
EP3396508A1 (en) Method of applying graphic effect and electronic device performing same
CN108141492A (zh) 电子设备和控制附件的方法
CN108124054A (zh) 基于握持传感器的感测信号显示用户界面的设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant