CN116324669A - 提供用户界面的电子装置及其方法 - Google Patents

提供用户界面的电子装置及其方法 Download PDF

Info

Publication number
CN116324669A
CN116324669A CN202180061589.4A CN202180061589A CN116324669A CN 116324669 A CN116324669 A CN 116324669A CN 202180061589 A CN202180061589 A CN 202180061589A CN 116324669 A CN116324669 A CN 116324669A
Authority
CN
China
Prior art keywords
electronic device
input
display
area
screen
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202180061589.4A
Other languages
English (en)
Inventor
梁昌模
金希烈
吴泳学
李媛
李允伊
郑珍教
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics Co Ltd
Original Assignee
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Samsung Electronics Co Ltd filed Critical Samsung Electronics Co Ltd
Publication of CN116324669A publication Critical patent/CN116324669A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16—Constructional details or arrangements
    • G06F1/1613—Constructional details or arrangements for portable computers
    • G06F1/1633—Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
    • G06F1/1637—Details related to the display arrangement, including those related to the mounting of the display in the housing
    • G06F1/1652—Details related to the display arrangement, including those related to the mounting of the display in the housing the display being flexible, e.g. mimicking a sheet of paper, or rollable
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16—Constructional details or arrangements
    • G06F1/1613—Constructional details or arrangements for portable computers
    • G06F1/1615—Constructional details or arrangements for portable computers with several enclosures having relative motions, each enclosure supporting at least one I/O or computing function
    • G06F1/1616—Constructional details or arrangements for portable computers with several enclosures having relative motions, each enclosure supporting at least one I/O or computing function with folding flat displays, e.g. laptop computers or notebooks having a clamshell configuration, with body parts pivoting to an open position around an axis parallel to the plane they define in closed position
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16—Constructional details or arrangements
    • G06F1/1613—Constructional details or arrangements for portable computers
    • G06F1/1615—Constructional details or arrangements for portable computers with several enclosures having relative motions, each enclosure supporting at least one I/O or computing function
    • G06F1/1624—Constructional details or arrangements for portable computers with several enclosures having relative motions, each enclosure supporting at least one I/O or computing function with sliding enclosures, e.g. sliding keyboard or display
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16—Constructional details or arrangements
    • G06F1/1613—Constructional details or arrangements for portable computers
    • G06F1/1633—Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
    • G06F1/1637—Details related to the display arrangement, including those related to the mounting of the display in the housing
    • G06F1/1643—Details related to the display arrangement, including those related to the mounting of the display in the housing the display being associated to a digitizer, e.g. laptops that can be used as penpads
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/002—Specific input/output arrangements not covered by G06F3/01 - G06F3/16
    • G06F3/005—Input arrangements through a video camera
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/016—Input arrangements with force or tactile feedback as computer generated output to the user
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04886—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures by partitioning the display area of the touch-screen or the surface of the digitising tablet into independently controllable areas, e.g. virtual keyboards or menus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2200/00—Indexing scheme relating to G06F1/04 - G06F1/32
    • G06F2200/16—Indexing scheme relating to G06F1/16 - G06F1/18
    • G06F2200/161—Indexing scheme relating to constructional details of the monitor
    • G06F2200/1614—Image rotation following screen orientation, e.g. switching from landscape to portrait mode
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/038—Indexing scheme relating to G06F3/038
    • G06F2203/0381—Multimodal input, i.e. interface arrangements enabling the user to issue commands by simultaneous use of input devices of different nature, e.g. voice plus gesture on digitizer
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048—Indexing scheme relating to G06F3/048
    • G06F2203/04803—Split screen, i.e. subdividing the display area or the window area into separate subareas
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048—Indexing scheme relating to G06F3/048
    • G06F2203/04806—Zoom, i.e. interaction techniques or interactors for controlling the zooming operation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/038—Control and interface arrangements therefor, e.g. drivers or device-embedded control circuitry

Abstract

根据各种实施例的电子装置可以包括：显示器，用于在显示区域的至少一部分上显示屏幕；传感器，用于感测显示区域的扩展或缩小；以及可操作地连接到显示器的处理器。该处理器可以被配置为：接收与显示在显示区域的至少部分上的屏幕相关的用户输入；通过传感器识别显示区域的扩展；以及响应于用户输入的接收和显示区域的扩展的识别，在扩展的显示区域的至少部分上显示包括基于用户输入确定的用户界面(UI)组件的输入UI。

Description

提供用户界面的电子装置及其方法
技术领域
各种实施例涉及一种电子装置和控制电子装置的方法。
背景技术
便携式电子装置正在发展成各种形式，以在不干涉便携性的情况下确保扩展的显示区域。例如，电子装置可以被配置为滑动式电子装置(其中当在第一结构和第二结构彼此重叠的位置使用时，第一结构和第二结构以相对于彼此滑动的方式展开)，或者可折叠式电子装置(其中第一结构和第二结构彼此匹配以重叠或展开)。替选地，电子装置可以被配置为能够通过使用柔性显示器来扩展显示区域的各种形式(例如，可滚动显示器)。
发明内容
技术问题
由于电子装置的显示区域的扩展可能改变电子装置的可用性，所以要求电子装置提供适合于改变后的可用性的用户界面。
本公开所追求的技术主题可以不限于上述技术主题，并且通过以下描述，本公开所属领域的技术人员可以清楚地理解未提及的其他技术主题。
问题的解决方案
根据各种实施例的一种电子装置可以包括：显示器，被配置为在显示区域的至少部分上显示屏幕；传感器，被配置为检测显示区域的扩展和缩小；以及处理器，被配置为可操作地连接到显示器。处理器可以被配置为接收与显示在显示区域的至少部分上的屏幕相关的用户输入，通过传感器识别显示区域的扩展，以及响应于用户输入的接收和显示区域的扩展的识别，在扩展的显示区域的至少部分上显示包括基于用户输入确定的用户界面(UI)组件的输入UI。
根据各种实施例的一种操作包括显示器的电子装置的方法可以包括：在显示器的显示区域的至少部分上显示屏幕，接收与显示在显示区域的至少部分上的屏幕相关的用户输入，识别显示区域的扩展，以及响应于用户输入的接收和显示区域的扩展的识别，在扩展的显示区域的至少部分上显示包括基于用户输入确定的UI组件的输入UI。
发明的有益效果
根据各种实施例的电子装置及其操作方法可以提供用于容易地操纵具有扩展的显示区域的电子装置的用户界面。
可从本公开获得的有益效果可以不限于上述效果，并且通过以下描述，本公开所属领域的技术人员可以清楚地理解未提及的其他效果。
附图说明
图1是示出根据各种实施例的处于第一状态的电子装置的前透视图。
图2是示出根据各种实施例的处于第二状态的电子装置的前透视图。
图3是示出根据各种其他实施例的电子装置的扁平(flat)状态的图。
图4是示出根据各种其他实施例的电子装置的折叠状态的图。
图5是示出根据各种实施例的网络环境中的电子装置的框图。
图6是示出根据各种实施例的电子装置的配置的框图。
图7是示出根据各种实施例的由电子装置提供用户界面的过程的流程图。
图8是示出根据各种实施例的电子装置响应于与用户的交互和显示区域的扩展而输出的屏幕的示例的图。
图9是示出根据各种实施例的电子装置基于通过用户输入选择的对象提供用户界面的过程的流程图。
图10是示出根据各种实施例的电子装置在显示区域被扩展而没有与用户交互时输出的屏幕的示例的图。
图11是示出根据各种实施例的电子装置提供用于接收多模态(multi-modal)输入的输入UI的过程的流程图。
图12是示出根据各种实施例的由电子装置显示以接收复模态(complex modal)输入的屏幕的示例的图。
图13是示出根据各种实施例的电子装置切换显示输入UI的位置的示例的图。
图14是示出根据各种实施例的电子装置基于正在执行应用的状态来提供输入UI的过程的流程图。
图15是示出由根据各种实施例的电子装置显示的用于基于正在执行应用的状态来提供输入UI的屏幕的示例的图。
图16是示出根据各种实施例的电子装置在其上显示改变的输入UI的屏幕的示例的图。
图17是示出被显示以提供基于由根据各种实施例的电子装置正在执行的应用的布局而配置的输入UI的屏幕的示例的图。
图18是示出由根据各种实施例的电子装置显示的用于提供浮动UI形式的输入UEI的屏幕的示例的图。
图19是示出由根据各种实施例的电子装置配置并显示输入UI的过程的流程图。
图20是示出由根据各种实施例的电子装置显示的用于提供基于用户输入而配置的输入UI的屏幕的示例的图。
图21是示出由根据各种实施例的电子装置显示的用于在显示区域被扩展时提供输入UI的屏幕的示例的图。
图22是示出由根据各种实施例的电子装置显示的用于提供包括语音输入UI组件和手写输入UI组件的输入UI的屏幕的示例的图。
图23是示出由根据各种实施例的电子装置显示的用于提供能够输入图像的输入UI的屏幕的示例的图。
图24是示出由根据各种实施例的电子装置基于显示区域的扩展方向将输入UI输出的过程的流程图。
图25是示出由根据各种实施例的电子装置显示的用于基于显示区域的扩展方向提供输入UI的屏幕的示例的图。
具体实施方式
在下文中，将参照附图描述本公开的各种实施例。然而，这并不旨在将本公开限于特定实施例。
图1是示出根据各种实施例的处于第一状态的电子装置100的前透视图。图2是示出根据各种实施例的处于第二状态的电子装置100的前透视图。
根据本文档中公开的各种实施例，面向与位于电子装置100外部的柔性显示器120的至少一部分(例如，第一部分121)所面向的方向基本相同的方向的表面可被定义为电子装置100的前表面，并且面向前表面的表面可被定义为电子装置100的后表面。围绕前表面和后表面之间的空间的表面可以被定义为电子装置100的侧表面。
根据实施例，柔性显示器120可以设置在电子装置100的至少一部分上。在实施例中，柔性显示器120可以被设置成包括至少部分扁平的形状和至少部分弯曲的形状。在实施例中，柔性显示器120和围绕柔性显示器120的外围的至少一部分的可滑动壳体110可以设置在电子装置100的前表面上。
在实施例中，可滑动壳体110可以形成电子装置100的前表面(例如，电子装置100的面向图1和图2中的+z方向的表面)、后表面(例如，电子装置100的面向图1和图2中的-z方向的表面)和侧表面(例如，连接电子装置100的前表面和后表面的表面)的部分区域。在另一实施例中，可滑动壳体110可以形成电子装置100的侧表面和后表面的部分区域。
在实施例中，可滑动壳体110可包括第一壳体111和在预定范围内可移动地耦合到第一壳体111的第二壳体112。
在实施例中，柔性显示器120可包括可耦合到第二壳体112的第一部分121、以及从第一部分121延伸并插入电子装置100中的第二部分122。
在实施例中，电子装置100可以包括第一状态100a和第二状态100b。例如，电子装置100的第一状态100a和第二状态100b可以根据第二壳体112相对于可滑动壳体110的相对位置来确定，并且电子装置100可以被配置为通过用户的操纵或机械操作在第一状态和第二状态之间可改变。
在各种实施例中，电子装置100的第一状态100a可以指可滑动壳体110扩展之前的状态。电子装置100的第二状态100b可以指其中可滑动壳体110扩展的状态。
在实施例中，当电子装置100根据第二壳体112的移动从第一状态100a切换到第二状态100b时，柔性显示器120的第二部分122可以从电子装置100的内部缩回(或暴露)到外部。在各种实施例中，柔性显示器120缩回(或暴露)的事实可以意味着柔性显示器120从电子装置100的外部可见。在另一实施例中，当电子装置100根据第二壳体112的移动从第二状态100b切换到第一状态100a时，柔性显示器120的第二部分122可以插入到电子装置100中。在各种实施例中，柔性显示器120插入的事实可以意味着柔性显示器120从电子装置的外部不可见。
参考图3和图4，在实施例中，电子装置30可以包括可折叠壳体400、覆盖可折叠壳体的可折叠部分的铰链盖(hinge cover)430、以及布置在由可折叠壳体400形成的空间内的柔性或可折叠显示器300(以下简称为“显示器”100)。在本文档中，其上设置有显示器100的表面被定义为电子装置30的第一表面或前表面。与前表面相对的表面被定义为电子装置30的第二表面或后表面。另外，围绕前表面和后表面之间的空间的表面被定义为电子装置30的第三表面或侧表面。
在实施例中，可折叠壳体400可包括第一壳体结构410、包括传感器区域424的第二壳体结构420、第一后盖480和第二后盖590。电子装置30的可折叠壳体400不限于图3和图4所示的形状和组合，并且可以通过其他形状或组件的组合和/或耦合来实现。例如，在另一实施例中，第一壳体结构410和第一后盖480可以一体形成，第二壳体结构420和第二后盖490可以一体形成。
在示出的实施例中，第一壳体结构410和第二壳体结构420可以布置在折叠轴线(轴线A)的两侧，并且可以具有相对于折叠轴线A彼此大致对称的形状。如稍后将描述的，取决于电子装置是处于扩展状态、折叠状态还是中间状态，第一壳体结构410和第二壳体结构420之间的角度或距离可以变化。在示出的实施例中，不同于第一壳体结构410，第二壳体结构420可以另外包括传感器区域424，在该区域中布置了各种传感器，但是第二壳体结构420和第一壳体结构410可以在其他区域中具有相互对称的形状。
在实施例中，如图3所示，第一壳体结构410和第二壳体结构420可以一起形成容纳显示器300的凹部。在示出的实施例中，由于传感器区域424，凹部在垂直于折叠轴线A的方向上可以具有两个或更多个不同的宽度。
例如，凹部可具有(1)在第一壳体结构410的平行于折叠轴线A的第一部分410a和形成在第二壳体结构420的传感器区域424外围的第一部分420a之间的第一宽度w1；以及(2)由第一壳体结构410的第二部分410b和第二壳体结构420的第二部分420b形成的第二宽度w2，其不对应于传感器区域424并且平行于折叠轴线A。在这种情况下，第二宽度w2可以形成得比第一宽度w1长。换句话说，具有相互不对称形状的第一壳体结构410的第一部分410a和第二壳体结构420的第一部分420a可以形成凹部的第一宽度w1，并且具有相互对称形状的第一壳体结构410的第二部分410b和第二壳体结构的第二部分420b可以形成凹部的第二宽度w2。在实施例中，第二壳体结构420的第一部分420a和第二部分420b可以具有不同的距折叠轴线A的距离。凹部的宽度不限于所示的示例。在各种实施例中，由于传感器区域424的形状或者第一壳体结构410和第二壳体结构420的不对称形状，凹部可以具有多个宽度。
在实施例中，第一壳体结构410和第二壳体结构420的至少一部分可由其刚性大小被选择以支撑显示器100的金属材料或非金属材料制成。
在实施例中，传感器区域424可形成为具有邻近第二壳体结构420的一个拐角的预定区域。然而，传感器区域424的布置、形状和大小不限于所示的示例。例如，在另一个实施例中，传感器区域424可以被提供在第二壳体结构420的另一拐角或者第二壳体结构420的顶拐角和底拐角之间的任意区域中。在实施例中，内置于电子装置30中的用于执行各种功能的组件可以通过传感器区域424或提供在传感器区域424中的一个或多个开口暴露在电子装置30的前表面或后表面上。在各种实施例中，组件可以包括各种类型的传感器。传感器可以包括例如前置相机、接收器和接近传感器中的至少一个。
第一后盖480可以设置在电子装置30的后表面上的折叠轴线的一侧，并且可以具有例如基本上矩形的外围，并且该外围可以被第一壳体结构410包裹。类似地，第二后盖490可以设置在电子装置30的后表面上的折叠轴线的另一侧，并且第二后盖490的外围可以被第二壳体结构420包裹。
在示出的实施例中，第一后盖480和第二后盖490可以具有相对于折叠轴线(轴线A)基本对称的形状。然而，第一后盖480和第二后盖490不一定具有对称的形状，并且在另一实施例中，电子装置30可以包括具有各种形状的第一后盖480和第二后盖490。在另一个实施例中，第一后盖490可以与第一壳体结构410一体形成，并且第二后盖490可以与第二壳体结构420一体形成。
在实施例中，第一后盖480、第二后盖490、第一壳体结构410和第二壳体结构420可以形成其中布置电子装置30的各种组件(例如，印刷电路板或电池)的空间。在实施例中，一个或多个组件可以被布置或在视觉上暴露在电子装置30的后表面上。例如，子显示器390的至少一部分可以通过第一后盖480的第一后部区域482在视觉上暴露。在另一个实施例中，一个或多个组件或传感器可以通过第二后盖490的第二后部区域492在视觉上暴露。在各种实施例中，传感器可以包括接近传感器和/或后置相机。
参考图4，铰链盖430可以设置在第一壳体结构410和第二壳体结构420之间，以覆盖内部组件(例如，铰链结构)。在实施例中，取决于电子装置30的状态(扁平状态或折叠状态)，铰链盖430可以被第一壳体结构410和第二壳体结构420的一部分覆盖，或者可以暴露于外部。
例如，如图3所示，当电子装置30处于扁平状态时，因为铰链盖430被第一壳体结构410和第二壳体结构420覆盖，所以铰链盖430可能不暴露。例如，如图4所示，当电子装置30处于折叠状态(例如，完全折叠状态)时，铰链盖430可以暴露于第一壳体结构410和第二壳体结构420之间的外部。例如，当第一壳体结构410和第二壳体结构420处于其中它们以一定角度折叠的中间状态时，铰链盖430可以部分地暴露于第一壳体结构410和第二壳体结构420之间的外部。在这种情况下，暴露的区域可以比完全折叠状态下暴露的区域窄。在实施例中，铰链盖430可以被形成为包括弯曲的表面。
显示器300可以设置在由可折叠壳体400形成的空间上。例如，显示器300可以位于由可折叠壳体400形成的凹部中，并且可以构成电子装置30的大部分前表面。
电子装置30的前表面可包括显示器300、第一壳体结构410的邻近显示器300的部分区域和第二壳体结构420的部分区域。电子装置30的后表面可以包括第一后盖480、第一壳体结构410的邻近第一后盖480的部分区域、第二后盖490和第二壳体结构420的邻近第二后盖490的部分区域。
显示器300可配置为其至少部分区域可转换为扁平或弯曲的表面的显示器。在实施例中，显示器300可以包括折叠区域303、设置在相对于折叠区域303的一侧(图3的折叠区域303的左侧)的第一区域301、以及设置在其另一侧(图3的折叠区域303的右侧)的第二区域302。
图3所示的显示器300的区域划分是示例性的，并且根据显示器的结构或功能，显示器300可被划分为多个(例如，四个或更多或两个)区域。例如，在图3中所示的实施例中，显示器300的区域可由平行于y轴线或折叠轴线(A轴线)延伸的折叠区域303划分，但在另一实施例中，显示器300的区域可相对于另一折叠区域(例如，平行于x轴线的折叠区域)或另一折叠轴线(例如，平行于x轴线的折叠轴线)划分。
第一区域301和第二区域302可以具有相对于折叠区域303大致对称的形状。然而，与第一区域301不同，第二区域302可以包括被切割为固定(secure)传感器区域424的切口。第一区域301和第二区域302可以包括形状彼此对称的部分和形状彼此不对称的部分。
将描述根据电子装置30的状态(例如，扁平状态和折叠状态)和显示器300的每个区域的第一壳体结构410和第二壳体结构420的操作。
在实施例中，当电子装置30处于扁平状态时(例如，图3)，第一壳体结构410和第二壳体结构410可以被布置成面向相同的方向，同时在它们之间形成180度的角度。显示器300的第一区域301的表面和第二区域302的表面可以在它们之间形成180度的角度，并且可以面向相同的方向(例如，电子装置的前表面的方向)。折叠区域303可以形成与第一区域301和第二区域302相同的平面。
在实施例中，当电子装置30处于折叠状态时(例如，图4)，第一壳体结构410和第二壳体结构420可以彼此面对。显示器300的第一区域301的表面和第二区域302的表面可以形成窄角(例如，在0度和10度之间)，并且可以彼此面对。折叠区域103的至少一部分可以形成具有预定曲率的弯曲的表面。
在实施例中，当电子装置30处于中间状态时(例如，在图3的扁平状态和图4的折叠状态之间)，第一壳体结构410和第二壳体结构420可以被布置成在它们之间形成一定的角度。显示器300的第一区域301的表面和第二区域302的表面可以形成大于折叠状态的角度并且小于扁平状态的角度。折叠区域103的至少一部分可以由具有预定曲率的弯曲的表面形成，并且曲率可以小于折叠状态下的曲率。
电子装置30可包括用于检测电子装置30的状态(例如，折叠状态、中间状态或扁平状态)的传感器。例如，电子装置30可以包括用于检测第一壳体结构410和第二壳体结构420在铰链部分的角度的传感器。作为另一个示例，电子装置30可以包括用于通过使用设置在第一壳体结构410上的磁性材料和设置在第二壳体结构420上的霍尔传感器来确定电子装置30是否处于折叠状态的传感器。
电子装置30可以确定显示区域，即其中显示屏幕的区域。根据实施例，电子装置30可以根据电子装置的状态(例如，折叠状态、中间状态或扁平状态)来确定显示区域。例如，当电子装置30处于折叠状态时，其中子显示器190可以输出屏幕的区域可以被确定为显示区域，并且当电子装置30处于扁平状态时，显示区域可以被扩展，使得其中显示器300输出屏幕的区域是显示区域。又例如，当电子装置30处于中间状态时，显示区域可被确定为具有基于第一壳体结构410和第二壳体结构420之间的角度确定的区域，并且当电子装置30处于扁平状态时，显示区域可被扩展到整个显示器300。
图1至图4所示的电子装置的形状用于解释能够扩展显示区域的电子装置的示例，并且电子装置的形状不限于图1至图4所示的形状。例如，电子装置可以包括具有可滚动显示器的电子装置。具有可滚动显示器的电子装置可以将显示器的除了其滚动部分之外的其余部分确定为显示区域。
图5是示出根据各种实施例的网络环境500中的电子装置501的框图。参考图5，网络环境500中的电子装置501可经由第一网络598(例如，短距离无线通信网络)与电子装置502进行通信，或者经由第二网络599(例如，长距离无线通信网络)与电子装置504或服务器508中的至少一个进行通信。根据实施例，电子装置501可经由服务器508与电子装置504进行通信。根据实施例，电子装置501可包括处理器520、存储器530、输入模块550、声音输出模块555、显示模块560、音频模块570、传感器模块576、接口577、连接端578、触觉模块579、相机模块580、电力管理模块588、电池589、通信模块590、用户识别模块(SIM)596或天线模块597。在一些实施例中，可从电子装置501中省略上述部件中的至少一个(例如，连接端578)，或者可将一个或更多个其它部件添加到电子装置501中。在一些实施例中，可将上述部件中的一些部件(例如，传感器模块576、相机模块580或天线模块597)实现为单个集成部件(例如，显示模块560)。
处理器520可运行例如软件(例如，程序540)来控制电子装置501的与处理器520连接的至少一个其它部件(例如，硬件部件或软件部件)，并可执行各种数据处理或计算。根据一个实施例，作为所述数据处理或计算的至少部分，处理器520可将从另一部件(例如，传感器模块576或通信模块590)接收到的命令或数据存储到易失性存储器532中，对存储在易失性存储器532中的命令或数据进行处理，并将结果数据存储在非易失性存储器534中。根据实施例，处理器520可包括主处理器521(例如，中央处理器(CPU)或应用处理器(AP))或者与主处理器521在操作上独立的或者相结合的辅助处理器523(例如，图形处理单元(GPU)、神经处理单元(NPU)、图像信号处理器(ISP)、传感器中枢处理器或通信处理器(CP))。例如，当电子装置501包括主处理器521和辅助处理器523时，辅助处理器523可被适配为比主处理器521耗电更少，或者被适配为专用于特定的功能。可将辅助处理器523实现为与主处理器521分离，或者实现为主处理器521的部分。
在主处理器521处于未激活(例如，睡眠)状态时，辅助处理器523(而非主处理器521)可控制与电子装置501的部件之中的至少一个部件(例如，显示模块560、传感器模块576或通信模块590)相关的功能或状态中的至少一些，或者在主处理器521处于激活状态(例如，运行应用)时，辅助处理器523可与主处理器521一起来控制与电子装置501的部件之中的至少一个部件(例如，显示模块560、传感器模块576或通信模块590)相关的功能或状态中的至少一些。根据实施例，可将辅助处理器523(例如，图像信号处理器或通信处理器)实现为在功能上与辅助处理器523相关的另一部件(例如，相机模块580或通信模块590)的部分。根据实施例，辅助处理器523(例如，神经处理单元)可包括专用于人工智能模型处理的硬件结构。可通过机器学习来生成人工智能模型。例如，可通过人工智能被执行之处的电子装置501或经由单独的服务器(例如，服务器508)来执行这样的学习。学习算法可包括但不限于例如监督学习、无监督学习、半监督学习或强化学习。人工智能模型可包括多个人工神经网络层。人工神经网络可以是深度神经网络(DNN)、卷积神经网络(CNN)、循环神经网络(RNN)、受限玻尔兹曼机(RBM)、深度置信网络(DBN)、双向循环深度神经网络(BRDNN)或深度Q网络或其两个或更多个的组合，但不限于此。另外地或可选地，人工智能模型可包括除了硬件结构以外的软件结构。
存储器530可存储由电子装置501的至少一个部件(例如，处理器520或传感器模块576)使用的各种数据。所述各种数据可包括例如软件(例如，程序540)以及针对与其相关的命令的输入数据或输出数据。存储器530可包括易失性存储器532或非易失性存储器534。
可将程序540作为软件存储在存储器530中，并且程序540可包括例如操作系统(OS)542、中间件544或应用546。
输入模块550可从电子装置501的外部(例如，用户)接收将由电子装置501的其它部件(例如，处理器520)使用的命令或数据。输入模块550可包括例如麦克风、鼠标、键盘、键(例如，按钮)或数字笔(例如，手写笔)。
声音输出模块555可将声音信号输出到电子装置501的外部。声音输出模块555可包括例如扬声器或接收器。扬声器可用于诸如播放多媒体或播放唱片的通用目的。接收器可用于接收呼入呼叫。根据实施例，可将接收器实现为与扬声器分离，或实现为扬声器的部分。
显示模块560可向电子装置501的外部(例如，用户)视觉地提供信息。显示装置560可包括例如显示器、全息装置或投影仪以及用于控制显示器、全息装置和投影仪中的相应一个的控制电路。根据实施例，显示模块560可包括被适配为检测触摸的触摸传感器或被适配为测量由触摸引起的力的强度的压力传感器。
音频模块570可将声音转换为电信号，反之亦可。根据实施例，音频模块570可经由输入模块550获得声音，或者经由声音输出模块555或与电子装置501直接(例如，有线地)连接或无线连接的外部电子装置(例如，电子装置502)的耳机输出声音。
传感器模块576可检测电子装置501的操作状态(例如，功率或温度)或电子装置501外部的环境状态(例如，用户的状态)，然后产生与检测到的状态相应的电信号或数据值。根据实施例，传感器模块576可包括例如手势传感器、陀螺仪传感器、大气压力传感器、磁性传感器、加速度传感器、握持传感器、接近传感器、颜色传感器、红外(IR)传感器、生物特征传感器、温度传感器、湿度传感器或照度传感器。
接口577可支持将用来使电子装置501与外部电子装置(例如，电子装置502)直接(例如，有线地)或无线连接的一个或更多个特定协议。根据实施例，接口577可包括例如高清晰度多媒体接口(HDMI)、通用串行总线(USB)接口、安全数字(SD)卡接口或音频接口。
连接端578可包括连接器，其中，电子装置501可经由所述连接器与外部电子装置(例如，电子装置502)物理连接。根据实施例，连接端578可包括例如HDMI连接器、USB连接器、SD卡连接器或音频连接器(例如，耳机连接器)。
触觉模块579可将电信号转换为可被用户经由他的触觉或动觉识别的机械刺激(例如，振动或运动)或电刺激。根据实施例，触觉模块579可包括例如电机、压电元件或电刺激器。
相机模块580可捕获静止图像或运动图像。根据实施例，相机模块580可包括一个或更多个透镜、图像传感器、图像信号处理器或闪光灯。
电力管理模块588可管理对电子装置501的供电。根据实施例，可将电力管理模块588实现为例如电力管理集成电路(PMIC)的至少部分。
电池589可对电子装置501的至少一个部件供电。根据实施例，电池589可包括例如不可再充电的原电池、可再充电的蓄电池、或燃料电池。
通信模块590可支持在电子装置501与外部电子装置(例如，电子装置502、电子装置504或服务器508)之间建立直接(例如，有线)通信信道或无线通信信道，并经由建立的通信信道执行通信。通信模块590可包括能够与处理器520(例如，应用处理器(AP))独立操作的一个或更多个通信处理器，并支持直接(例如，有线)通信或无线通信。根据实施例，通信模块590可包括无线通信模块592(例如，蜂窝通信模块、短距离无线通信模块或全球导航卫星系统(GNSS)通信模块)或有线通信模块594(例如，局域网(LAN)通信模块或电力线通信(PLC)模块)。这些通信模块中的相应一个可经由第一网络598(例如，短距离通信网络，诸如蓝牙、无线保真(Wi-Fi)直连或红外数据协会(IrDA))或第二网络599(例如，长距离通信网络，诸如传统蜂窝网络、5G网络、下一代通信网络、互联网或计算机网络(例如，LAN或广域网(WAN)))与外部电子装置进行通信。可将这些各种类型的通信模块实现为单个部件(例如，单个芯片)，或可将这些各种类型的通信模块实现为彼此分离的多个部件(例如，多个芯片)。无线通信模块592可使用存储在用户识别模块596中的用户信息(例如，国际移动用户识别码(IMSI))识别并验证通信网络(诸如第一网络598或第二网络599)中的电子装置501。
无线通信模块592可支持在4G网络之后的5G网络以及下一代通信技术(例如新无线电(NR)接入技术)。NR接入技术可支持增强型移动宽带(eMBB)、大规模机器类型通信(mMTC)或超可靠低延时通信(URLLC)。无线通信模块592可支持高频带(例如，毫米波带)以实现例如高数据传输速率。无线通信模块592可支持用于确保高频带上的性能的各种技术，诸如例如波束成形、大规模多输入多输出(大规模MIMO)、全维MIMO(FD-MIMO)、阵列天线、模拟波束成形或大规模天线。无线通信模块592可支持在电子装置501、外部电子装置(例如，电子装置504)或网络系统(例如，第二网络599)中指定的各种要求。根据实施例，无线通信模块592可支持用于实现eMBB的峰值数据速率(例如，20Gbps或更大)、用于实现mMTC的丢失覆盖(例如，164dB或更小)或者用于实现URLLC的U平面延迟(例如，对于下行链路(DL)和上行链路(UL)中的每一个为0.5ms或更小，或者1ms或更小的往返)。
天线模块597可将信号或电力发送到电子装置501的外部(例如，外部电子装置)或者从电子装置501的外部(例如，外部电子装置)接收信号或电力。根据实施例，天线模块597可包括天线，所述天线包括辐射元件，所述辐射元件由形成在基底(例如，印刷电路板(PCB))中或形成在基底上的导电材料或导电图案构成。根据实施例，天线模块597可包括多个天线(例如，阵列天线)。在这种情况下，可由例如通信模块590(例如，无线通信模块592)从所述多个天线中选择适合于在通信网络(诸如第一网络598或第二网络599)中使用的通信方案的至少一个天线。随后可经由所选择的至少一个天线在通信模块590和外部电子装置之间发送或接收信号或电力。根据实施例，除了辐射元件之外的另外的组件(例如，射频集成电路(RFIC))可附加地形成为天线模块597的一部分。
根据各种实施例，天线模块597可形成毫米波天线模块。根据实施例，毫米波天线模块可包括印刷电路板、射频集成电路(RFIC)和多个天线(例如，阵列天线)，其中，RFIC设置在印刷电路板的第一表面(例如，底表面)上，或与第一表面相邻并且能够支持指定的高频带(例如，毫米波带)，所述多个天线设置在印刷电路板的第二表面(例如，顶部表面或侧表面)上，或与第二表面相邻并且能够发送或接收指定高频带的信号。
上述部件中的至少一些可经由外设间通信方案(例如，总线、通用输入输出(GPIO)、串行外设接口(SPI)或移动工业处理器接口(MIPI))相互连接并在它们之间通信地传送信号(例如，命令或数据)。
根据实施例，可经由与第二网络599连接的服务器508在电子装置501和外部电子装置504之间发送或接收命令或数据。电子装置502或电子装置504中的每一个可以是与电子装置501相同类型的装置，或者是与电子装置501不同类型的装置。根据实施例，将在电子装置501运行的全部操作或一些操作可在外部电子装置502、外部电子装置504或服务器508中的一个或更多个运行。例如，如果电子装置501应该自动执行功能或服务或者应该响应于来自用户或另一装置的请求执行功能或服务，则电子装置501可请求所述一个或更多个外部电子装置执行所述功能或服务中的至少部分，而不是运行所述功能或服务，或者电子装置501除了运行所述功能或服务以外，还可请求所述一个或更多个外部电子装置执行所述功能或服务中的至少部分。接收到所述请求的所述一个或更多个外部电子装置可执行所述功能或服务中的所请求的所述至少部分，或者执行与所述请求相关的另外功能或另外服务，并将执行的结果传送到电子装置501。电子装置501可在对所述结果进行进一步处理的情况下或者在不对所述结果进行进一步处理的情况下将所述结果提供作为对所述请求的至少部分答复。为此，可使用例如云计算技术、分布式计算技术、移动边缘计算(MEC)技术或客户机-服务器计算技术。电子装置501可使用例如分布式计算或移动边缘计算来提供超低延迟服务。在另一实施例中，外部电子装置504可包括物联网(IoT)装置。服务器508可以是使用机器学习和/或神经网络的智能服务器。根据实施例，外部电子装置504或服务器508可被包括在第二网络599中。电子装置501可应用于基于5G通信技术或IoT相关技术的智能服务(例如，智能家居、智能城市、智能汽车或医疗保健)。
根据各种实施例的电子装置可以是各种类型的电子装置之一。电子装置可包括例如便携式通信装置(例如，智能电话)、计算机装置、便携式多媒体装置、便携式医疗装置、相机、可穿戴装置或家用电器。根据本公开的实施例，电子装置不限于以上所述的那些电子装置。
应该理解的是，本公开的各种实施例以及其中使用的术语并不意图将在此阐述的技术特征限制于具体实施例，而是包括针对相应实施例的各种改变、等同形式或替换形式。对于附图的描述，相似的参考标号可用来指代相似或相关的元件。将理解的是，与术语相应的单数形式的名词可包括一个或更多个事物，除非相关上下文另有明确指示。如这里所使用的，诸如“A或B”、“A和B中的至少一个”、“A或B中的至少一个”、“A、B或C”、“A、B和C中的至少一个”以及“A、B或C中的至少一个”的短语中的每一个短语可包括在与所述多个短语中的相应一个短语中一起列举出的项的任意一项或所有可能组合。如这里所使用的，诸如“第1”和“第2”或者“第一”和“第二”的术语可用于将相应部件与另一部件进行简单区分，并且不在其它方面(例如，重要性或顺序)限制所述部件。将理解的是，在使用了术语“可操作地”或“通信地”的情况下或者在不使用术语“可操作地”或“通信地”的情况下，如果一元件(例如，第一元件)被称为“与另一元件(例如，第二元件)结合”、“结合到另一元件(例如，第二元件)”、“与另一元件(例如，第二元件)连接”或“连接到另一元件(例如，第二元件)”，则意味着所述一元件可与所述另一元件直接(例如，有线地)连接、与所述另一元件无线连接、或经由第三元件与所述另一元件连接。
如与本公开的各种实施例关联使用的，术语“模块”可包括以硬件、软件或固件实现的单元，并可与其他术语(例如，“逻辑”、“逻辑块”、“部分”或“电路”)可互换地使用。模块可以是被适配为执行一个或更多个功能的单个集成部件或者是该单个集成部件的最小单元或部分。例如，根据实施例，可以以专用集成电路(ASIC)的形式来实现模块。
可将在此阐述的各种实施例实现为包括存储在存储介质(例如，内部存储器536或外部存储器538)中的可由机器(例如，电子装置501)读取的一个或更多个指令的软件(例如，程序540)。例如，在处理器的控制下，所述机器(例如，电子装置501)的处理器(例如，处理器520)可在使用或无需使用一个或更多个其它部件的情况下调用存储在存储介质中的所述一个或更多个指令中的至少一个指令并运行所述至少一个指令。这使得所述机器能够操作用于根据所调用的至少一个指令执行至少一个功能。所述一个或更多个指令可包括由编译器产生的代码或能够由解释器运行的代码。可以以非暂时性存储介质的形式来提供机器可读存储介质。其中，术语“非暂时性”仅意味着所述存储介质是有形装置，并且不包括信号(例如，电磁波)，但是该术语并不在数据被半永久性地存储在存储介质中与数据被临时存储在存储介质中之间进行区分。
根据实施例，可在计算机程序产品中包括和提供根据本公开的各种实施例的方法。计算机程序产品可作为产品在销售者和购买者之间进行交易。可以以机器可读存储介质(例如，紧凑盘只读存储器(CD-ROM))的形式来发布计算机程序产品，或者可经由应用商店(例如，Play StoreTM)在线发布(例如，下载或上传)计算机程序产品，或者可直接在两个用户装置(例如，智能电话)之间分发(例如，下载或上传)计算机程序产品。如果是在线发布的，则计算机程序产品中的至少部分可以是临时产生的，或者可将计算机程序产品中的至少部分至少临时存储在机器可读存储介质(诸如制造商的服务器、应用商店的服务器或转发服务器的存储器)中。
根据各种实施例，上述部件中的每个部件(例如，模块或程序)可包括单个实体或多个实体，并且多个实体中的一些实体可分离地设置在不同的部件中。根据各种实施例，可省略上述部件中的一个或更多个部件，或者可添加一个或更多个其它部件。可选择地或者另外地，可将多个部件(例如，模块或程序)集成为单个部件。在这种情况下，根据各种实施例，该集成部件可仍旧按照与所述多个部件中的相应一个部件在集成之前执行一个或更多个功能相同或相似的方式，执行所述多个部件中的每一个部件的所述一个或更多个功能。根据各种实施例，由模块、程序或另一部件所执行的操作可顺序地、并行地、重复地或以启发式方式来执行，或者所述操作中的一个或更多个操作可按照不同的顺序来运行或被省略，或者可添加一个或更多个其它操作。
图6是示出根据各种实施例的电子装置101(例如，图1和图2的电子装置100、图3和图4的电子装置30或图5的电子装置101)的配置的框图。
电子装置101可包括显示器610(例如，图1和2的柔性显示器120、图3和4的显示器300或图5的显示模块560)、处理器620(例如，图5的处理器520)和传感器630(例如，传感器模块576)。图6用于解释电子装置101的组件的实施例，并且包括在电子装置101中的组件不限于图6所示的组件。例如，图6中所示的电子装置101的组件可以用其他组件替换，或者附加组件可以包括在电子装置101中。例如，根据各种实施例的电子装置101可以进一步包括相机640(例如，图5的相机模块580)。又例如，根据各种实施例的电子装置101的处理器220可以被替换，使得数据可以由电子装置101外部的外部装置通过使用云计算技术来处理，并且电子装置101的组件可以被控制。
根据各种实施例，处理器620可执行加载到存储器(例如，图5的存储器530)中的指令，以控制电子装置101的组件(例如，显示器610)的操作。处理器620可以执行包含在软件中的指令，以控制可操作地连接到处理器620的至少一个其他组件。处理器620可以获取指令并解释所获取的指令以处理数据或执行计算。可以理解，本文档中提到的电子装置101的操作由执行指令的处理器220来执行。
显示器610可在视觉上显示(也可称为提供或输出)图像。例如，电子装置101的处理器620可以通过显示器610显示应用执行屏幕或键区(keypad)屏幕。当显示器610是具有能够检测对象的接触的触摸传感器的设备时，处理器620可以从显示器610的触摸传感器接收对显示器上显示的屏幕的触摸输入。触摸输入可以包括例如指示触摸事件的类型和其中接收触摸输入的位置的坐标值。然而，触摸输入的类型不限于此。
根据各种实施例的电子装置101可以扩大或缩小显示器610的显示区域。显示区域可以指其中屏幕显示在显示器610上的区域。例如，在第一状态下，仅显示器120的第一部分121可以暴露于外部，并且图1所示的电子装置100的处理器可以将第一区域121确定为其中显示屏幕的显示区域。在图2所示的第二状态下，电子装置100的处理器可以将通过组合第一区域121和插入到壳体中的第二部分122而获得的区域确定为显示区域。又例如，在图3和图4所示的电子装置30利用子显示器390作为图4所示的状态下的显示区域来显示屏幕的状态下，当电子装置30的状态被切换到图3所示的扁平状态时，显示器300可以被用作显示屏幕的显示区域。
传感器630可包括用于检测显示区域的扩展的传感器。在本文档中，检测显示区域的扩展可以意味着检测扩展显示区域的操作。例如，传感器630可以被配置为检测图1和图2所示的电子装置100的机械操作，并且检测第一状态和第二状态之间的变形。又例如，传感器630可以包括霍尔传感器，用于检测从图4的折叠状态到图3的扁平状态的转变。作为另一示例，电子装置101可以包括允许执行机械操作的硬件按钮(未示出)。当用户按下硬件按钮时，可以从图1的第一状态到图2的第二状态或者从图4的折叠状态到图3的扁平状态发生机械操作。传感器630可以是用于检测硬件按钮被按压的组件。作为另一示例，电子装置101可以通过显示器610显示软件按钮，以允许显示器的扩展。当接收到用于选择软件按钮的用户输入(例如，触摸输入或鼠标点击)时，处理器620可以确定显示区域被扩展。也就是说，根据各种实施例的电子装置630可以被配置为检测显示区域的扩展，而不包括传感器630作为单独的硬件配置。
处理器620可在显示器610的显示区域的至少一部分上显示屏幕。例如，处理器620可以执行安装在电子装置101中的消息程序(messenger)应用，并且在显示区域的至少一部分上显示消息程序应用的执行屏幕。处理器620可以接收对显示屏幕的用户输入。例如，当显示器610包括具有触摸传感器的触摸屏时，电子装置可以接收对包括在消息程序应用的执行屏幕中的文本输入域(field)的触摸输入。文本输入域可以指其中显示用户输入的文本的区域。根据实施例，用户输入可以以各种形式使用。例如，用户输入可以包括轻击输入(即具有短保持时段的触摸输入)、具有比指定时段更长的保持时段的长按输入、其中触摸输入经过在触摸输入被保持时显示在屏幕上的对象的位置的滑动输入、其中触摸位置从对象的位置移动到终点的拖放输入、或者用于识别通过麦克风(例如，图5的输入模块550)接收的用户语音的语音输入。
响应于通过传感器630识别显示区域的扩展，根据各种实施例的处理器620可基于在显示区域扩展之前接收的用户输入来确定用户界面(UI)组件。例如，当用户输入是用于选择文本输入域的输入时，处理器620可以选择包括键区的UI组件。UI组件可以被称为构成输入UI的组件。例如，UI组件可以包括用于接收文本输入的虚拟键区区域、与接收语音输入的操作相关的语音输入状态显示区域、用于接收用户的手写输入的手写区域、用于选择存储在电子装置中的图像的图像列表区域、或者用于输入通过相机640捕获的图像的预览区域中的至少一个。处理器620可以在显示器610的扩展的显示区域的至少一部分上显示包括确定的UI组件的输入UI。
图7是示出根据各种实施例的电子装置(例如，图1和图2的电子装置100、图3和图4的电子装置30、图5的电子装置101或图6的电子装置101)提供UI的过程的流程图700。
电子装置可执行在显示器的显示区域的至少一部分上显示屏幕的操作710。根据各种实施例，在操作710中显示的屏幕可以包括与电子装置提供的功能相关的对象。例如，电子装置可以显示包括用于显示通过用户输入而输入的信息的输入域、用于输入文本的键区、用于输入表情符号的表情符号列表、或者用于输入照片的照片输入图标中的至少一个的屏幕。
电子装置可以执行接收用户输入的操作720。例如，操作720的用户输入可以是用于选择在操作710中显示的屏幕中所包括的对象的输入。操作720的用户输入可以基于电子装置和用户之间的另一交互来生成。电子装置可以执行识别显示区域的扩展的操作730。例如，当电子装置的状态从图1的第一状态转变到图2的第二状态时，电子装置可以识别其中屏幕在显示器上显示的区域是否扩展。
响应于显示区域的扩展被识别，电子装置可执行显示输入UI的操作740。操作740可包括基于用户输入确定UI组件并配置包括确定的UI组件的输入UI的操作。根据实施例，输入UI中包括的UI组件可以是通过用户输入选择的对象的扩展。例如，当在接收到用于选择文本输入区域的用户输入之后显示区域被扩展时，电子装置可以在显示器上显示包括用于输入文本的键区和扩展的文本输入区域的输入UI。
图8是示出根据各种实施例的电子装置(例如，图1和图2的电子装置100、图3和图4的电子装置30、图5的电子装置101或图6的电子装置101)响应于与用户的交互或显示区域的扩展而输出的屏幕的示例的图。
电子装置可通过显示器显示包括文本输入区811的屏幕810。电子装置可以在接收到用于选择文本输入区域811的触摸输入812之后或者在接收触摸输入的同时识别显示区域的扩展。
响应于所识别的显示区域的扩展，电子装置可以显示包括输入UI的屏幕820。电子装置可以在扩展的显示区域上显示包括基于用户输入确定的UI组件的输入UI。根据实施例，所确定的UI组件可以包括扩展的文本输入域821和用于输入文本的键盘822。根据各种实施例，UI组件还可以包括工具栏823、位置改变按钮824、模式改变按钮825和编辑按钮826中的至少一个。包括基于用户输入确定的UI组件的输入UI可以指基于用户输入扩展的UI。UI被扩展的事实可以包括例如增加所选UI组件的大小、显示扩展的图像、进一步显示附加信息或进一步显示附加UI组件中的至少一个。例如，当在840中扩展显示区域，同时选择扩展之前显示的文本输入域812时，电子装置可以显示包括扩展的文本输入域821的输入UI。又例如，电子装置可以显示进一步包括工具栏823的屏幕，该工具栏823用于响应于显示区域的扩展将附加UI组件添加到输入UI。
工具栏823可提供将通过输入UI提供的功能列表。当用户从功能列表中选择至少一个功能时，电子装置可以添加至少一个UI组件，以向输入UI提供所选择的至少一个功能。
位置改变按钮824可用于改变其中显示输入UI的位置。例如，当在输入UI显示在电子装置的显示器的右侧区域上的同时接收到用于选择位置改变按钮824的用户输入时，电子装置可以将其中显示输入UI的位置移动到左侧区域。
模式改变按钮825可用于切换输入UI的显示模式(例如，横向模式或竖向模式)。例如，图8的屏幕820可以是其上以横向模式显示输入UI的屏幕，并且当选择模式改变按钮825时，电子装置可以在屏幕底部的区域中水平地显示输入UI。
编辑按钮826可用于编辑输入UI的配置。例如，当接收到用于选择编辑按钮826的用户输入时，电子装置可以执行用于输入UI的编辑模式。电子装置可以在编辑模式下显示划分处理器(handler)和缩小/扩展处理器(缩放处理器)中的至少一个。电子装置可以基于对划分处理器和缩放处理器中的至少一个的拖放输入来改变其中显示输入UI的区域的大小或其中在输入UI内显示UI组件的区域的大小。电子装置可以在编辑模式下基于用户输入来改变在输入UI内布置UI组件的位置。在编辑模式下，电子装置可基于用户输入移除包括在输入UI中的UI组件或将UI组件添加到输入UI。
根据各种实施例，输入UI可以显示在扩展的区域830内。根据另一实施例，输入UI可以显示在另一区域中。例如，如屏幕820中所示，当输入UI被显示在用于选择模式改变按钮825的用户输入中，同时以竖向模式显示时，输入UI可以以水平地显示在屏幕820底部的横向模式显示。
在850中，当显示区域被扩展时，甚至在水平地显示的屏幕840上，电子装置可显示包括文本输入域841、键区842和工具栏843中的至少一个的输入UI。
图9是示出其中根据各种实施例的电子装置(例如，图1和图2的电子装置100、图3和图4的电子装置30、图5的电子装置101或图6的电子装置101)基于通过用户输入选择的对象提供UI的过程的流程图900。
电子装置可以基于与用户的交互的存在或不存在来提供输入UI。电子装置可以执行在显示器的显示区域的至少一部分上显示屏幕的操作910。根据各种实施例，在操作910中显示的屏幕可以包括与电子装置提供的功能相关的对象。例如，电子装置可以显示下述屏幕：该屏幕包括用于显示通过用户输入而输入的信息的输入域、用于输入文本的键区、用于输入表情符号的表情符号列表和用于输入照片的照片输入图标中的至少一个。
电子装置可执行确定显示区域是否扩展的操作920。当显示区域被扩展时，电子装置可执行确定通过用户输入选择的对象是否存在的操作930。例如，当在接收到对显示在屏幕上的文本输入区域的用户输入之后或者在保持用户输入的同时识别显示区域的扩展时，电子装置可以确定通过用户输入选择的对象存在。所选择的对象可以包括与电子装置提供的功能相关的UI对象。UI对象可以包括例如用于显示输入信息(例如，文本、图像或表情符号)的输入字段、用于输入文本的虚拟键区、指示是否正在执行用于接收语音输入的操作的语音接收状态显示对象、用于接收手写输入的手写输入区域、用于选择表情符号的表情符号列表、用于选择图像的缩略图列表和用于相机拍摄的预览图像中的至少一个，但是UI对象不限于此。
当通过用户输入确定在操作910中显示的屏幕中存在通过用户输入选择的对象时，电子装置可基于选择的对象确定UI组件。电子装置可执行显示包括确定的UI组件的输入UI的操作940。根据各种实施例，包括在输入UI中并在操作940中显示的UI组件可被扩展并显示在比在操作945中显示的屏幕上显示时更宽的区域中。当通过用户输入确定在操作910中显示的屏幕中没有通过用户输入选择的对象时，电子装置可在显示区域扩展之前扩展并显示屏幕。
图10是示出根据各种实施例的电子装置(例如，图1和图2的电子装置100、图3和图4的电子装置30、图5的电子装置101或图6的电子装置101)在显示区域被扩展而没有与用户进行用于选择对象的交互时的屏幕输出的示例的图。
根据各种实施例的电子装置可在显示器上显示UI。例如，电子装置可以显示包括用于接收文本的虚拟键区1011的屏幕1010。当在显示屏幕1010的同时识别出显示区域的扩展时，电子装置可以显示在显示区域扩展的方向上缩放的屏幕1020，同时保持包括虚拟键区1011的UI的布局。例如，如图10所示，当显示区域在水平方向上扩展时，电子装置可以在水平方向上扩展并显示屏幕。
图11是示出根据各种实施例的电子装置(例如，图1和图2的电子装置100、图3和图4的电子装置30、图5的电子装置101或图6的电子装置101)提供用于接收多模态输入的输入UI的过程的流程图1100。
电子装置可执行在显示区域上显示屏幕并选择屏幕中包括的至少一个对象的操作1110。例如，电子装置可以在其中显示对象的位置接收触摸输入。所选择的对象可以包括与电子装置提供的功能相关的UI对象。根据实施例的电子装置可以基于用户输入选择多个UI对象。例如，电子装置可以选择用于执行语音输入功能的语音输入按钮和用于输入文本的键区。
电子装置可以执行识别显示区域是否被扩展的操作1120。当显示区域的扩展被识别时，电子装置可执行显示输入UI的操作1130，该输入UI用于使用与一个或多个选择的UI对象对应的输入法接收用户输入。当存在对应于一个或多个选择的UI对象的多种类型的输入法时，输入UI可包括用于通过多种输入法接收用户输入的多个输入UI。通过多种输入法进行的用户输入可以被称为多模态输入。例如，电子装置可以在显示器上显示输入UI，该输入UI包括用于接收语音输入的UI组件和用于接收文本的UI组件。
在图11中，尽管操作1110在操作1120之前执行，但是操作1110可以在操作1120之后执行。例如，在显示器被扩展以显示包括输入域和键区的输入UI的状态下，可以接收用于选择包括在工具栏中的语音输入按钮的用户输入。响应于语音输入按钮的选择，电子装置可以将与接收语音输入的操作相关的UI组件添加到输入UI，并且可以显示结果。
图12是示出由根据各种实施例的电子装置(例如，图1和图2的电子装置100、图3和图4的电子装置30、图5的电子装置101或图6的电子装置101)显示的用于接收多模态输入的屏幕的示例的图。
电子装置可显示屏幕1211，该屏幕包括显示输入信息的输入域1211和语音输入按钮1212。电子装置可以接收用于选择输入域1211的用户输入和用于选择语音输入按钮1212的用户输入。当显示区域1230被扩展，同时输入域1211和语音输入按钮1212被选择时，电子装置可以在扩展的显示区域上显示包括输入UI的屏幕1220。显示在屏幕1220上的输入UI可以包括扩展的输入域1221、语音输入相关UI 1223和虚拟键区1222。
如图12的屏幕1220所示，电子装置可提供包括用于根据多种输入方法接收用户输入的多个UI组件的输入UI，从而提供允许用户容易地使用多模态输入方法的UI。
图13是示出切换由根据各种实施例的电子装置(例如，图1和图2的电子装置100、图3和图4的电子装置30、图5的电子装置101或图6的电子装置101)显示输入UI的位置的示例的图。
电子装置可显示屏幕1310，在屏幕1310上，输入UI通过显示器显示在显示区域的右侧区域1311上。输入UI可以包括位置改变按钮1330，用于移动显示在右侧区域1311上的输入UI的位置。
响应于用于选择显示在屏幕1310上的位置改变按钮1330的用户输入，电子装置可以显示屏幕1320，在屏幕1320上，输入UI被设置在左侧区域1321上。响应于用于选择设置在左侧区域1321上的输入UI的位置改变按钮1330的用户输入，电子装置可以再次显示屏幕1310，在屏幕1310上，输入UI被设置在右侧区域1311上。
图14是示出根据各种实施例的电子装置(例如，图1和图2的电子装置100、图3和图4的电子装置30、图5的电子装置101或图6的电子装置101)基于正在执行应用的状态提供输入UI的过程的流程图1400。
电子装置可基于使用状态提供输入UI。例如，当由电子装置执行的应用是提供横向模式屏幕的应用时，电子装置可以在显示区域上显示的屏幕的下部区域上显示输入UI。在本文中，横向模式可以指这样的操作模式，在该操作模式中，在屏幕上显示的图像的向下方向被布置并显示在电子装置的具有较长长度的侧表面上。竖向模式可以指这样的操作模式，在该操作模式中，在屏幕上显示的图像的向下方向被布置和显示在电子装置的具有短长度的侧表面上。
电子装置可执行在显示区域的至少一部分上显示屏幕的操作1410。在操作1410中显示的屏幕可包括作为至少一个应用的执行结果显示的执行屏幕。当显示多个应用的执行屏幕时，电子装置可以将显示区域划分为多个区域，并显示相应的执行屏幕。
电子装置可执行识别显示区域扩展的操作1420。当显示区域的扩展被识别时，电子装置可以基于电子装置的状态来提供输入UI。响应于显示区域的扩展，根据实施例的电子装置可执行确定关于显示执行屏幕的应用的信息是否满足条件的操作1430。例如，电子装置可以确定显示执行屏幕的应用是否是指定的应用(例如，视频回放应用)。又例如，电子装置可以确定指定的应用是否在指定的操作模式下操作(例如，全屏播放视频的操作状态)。又例如，电子装置可以确定多个应用的执行屏幕是否正在多个窗口中显示。
当确定关于显示执行屏幕的应用的信息不满足条件时，电子装置可执行在第一区域显示输入UI的操作1440。例如，电子装置可以在被配置为默认的区域(例如，图8的扩展的区域830)中显示输入UI。当确定关于显示执行屏幕的应用的信息满足条件时，电子装置可执行在第二区域显示输入UI的操作1450。第二区域可以是基于电子装置的操作状态确定的区域。
图15是示出由根据各种实施例的电子装置(例如，图1和图2的电子装置100、图3和图4的电子装置30、图5的电子装置101或图6的电子装置101)显示的用于基于正在执行应用的状态来提供输入UI的屏幕的示例的图。
参考图15，当电子装置在整个屏幕上再现具有长水平方向的视频内容时，电子装置可以以横向模式显示屏幕。当电子装置执行视频应用1511并且在视频内容被再现的同时显示区域被扩展时，电子装置可以显示屏幕1510，屏幕1510显示水平地布置在底部区域1512上的输入UI。
又例如，当电子装置处于显示多个应用的执行屏幕的状态时，电子装置可以在显示区域上显示的屏幕的下部区域上显示输入UI。参考图15，当电子装置如图8的屏幕820所示在显示区域的右侧竖直地显示输入UI，同时在第一区域1511、第二区域1512和第三区域1513上显示每个应用执行屏幕时，在第二区域1512和第三区域1513上显示的所有或大部分执行屏幕可以不显示在显示区域内。可替换地，当随着输入UI被显示，应用的执行屏幕被缩小了缩小的执行屏幕的面积时，屏幕可能失真或者显示得太小。因此，当在多个窗口中显示多个应用的执行屏幕的同时检测到显示区域的扩展时，电子装置可以显示包括水平地设置在底部区域1513中的输入UI的屏幕1520。
图16是示出根据各种实施例的电子装置(例如，图1和图2的电子装置100、图3和图4的电子装置30、图5的电子装置101或图6的电子装置101)提供改变后的输入UI的屏幕的示例的图。
当提供输入UI的操作系统或应用更新时，电子装置可改变输入域的配置(例如，由输入区域提供的设计、布局或功能)。在根据各种实施例的电子装置中，由于即使输入域的配置改变，显示区域也被扩展，所以可以以相同的方式执行提供输入UI的操作。
参考图16，电子装置可以显示包括输入UI的屏幕1610，该输入UI使用包括功能按钮1611的UI组件来配置。根据各种实施例，当输入域的布局或设计由于电子装置的操作系统或提供输入UI的应用的更新而改变时，电子装置可以包括其中布局或设计改变的输入区域1621，但是可以同样地显示包括剩余UI组件的屏幕1620。当由于根据各种实施例的电子装置的操作系统或提供输入UI的应用的更新，功能按钮1611改变为另一功能按钮1631时，电子装置可以显示包括输入UI的屏幕1630，该输入UI包括另一功能按钮1631而不是功能按钮1611。
图17是示出由根据各种实施例的电子装置(例如，图1和图2的电子装置100、图3和图4的电子装置30、图5的电子装置101或图6的电子装置101)显示的用于提供基于由电子装置执行的应用的布局而配置的输入UI的屏幕的示例的图。
当由第三方提供的第三方应用包括输入域时，响应于在第三应用正被执行时显示区域的扩展的识别，电子装置可基于由第三方应用的输入域提供的布局来配置输入UI。
参考图17，电子装置可以显示即时消息程序的执行屏幕1710，包括输入域中的功能按钮1711。当在显示即时消息程序的执行屏幕1710的同时识别显示区域的扩展时，电子装置可以在扩展的显示区域内显示包括即时消息程序的输入域中所包括的功能按钮1711的输入UI。
图18是示出由根据各种实施例的电子装置(例如，图1和图2的电子装置100、图3和图4的电子装置30、图5的电子装置101或图6的电子装置101)显示的用于提供浮动UI形式的输入UI的屏幕的示例的图。
浮动UI是指其中输入UI重叠并显示在屏幕上的UI，并且输入UI的位置可以在屏幕内自由移动。电子装置可以显示包括浮动UI的屏幕1800。作为浮动UI的示例，参考图18，输入UI 1820可以包括输入域1821、UI组件(例如，键区区域)1822、图钉按钮1823、处理器1824、输入功能按钮1825或工具栏1826中的至少一个。电子装置可以基于用于选择图钉按钮1823的用户输入，将输入UI 1820的位置配置为不移动或者配置为移动输入UI 1820的位置。电子装置可以基于用于选择和移动处理器1824的用户输入(例如，拖放)来移动输入UI1820的位置。
根据实施例，当显示多个应用的执行屏幕时，电子装置可显示应用以接收通过输入UI 1820接收的用户输入，以区别于其他应用。例如，显示其中接收用户输入的应用的区域的外围可以以不同的颜色显示。
输入UI 1820的组件不限于图18所示的配置。例如，输入域1821可以不包括在输入UI 1820中。电子装置可以突出并显示包括在应用的执行屏幕1810中的输入域1811，借助于其信息通过输入UI 1820被输入。例如，可以在显示输入域1811的区域中或者在该区域附近显示指示符。
图19是示出根据各种实施例的电子装置(例如，图1和图2的电子装置100、图3和图4的电子装置30、图5的电子装置101或图6的电子装置101)配置和显示输入UI的过程的流程图1900。
电子装置可基于用户输入确定其中要显示UI组件的区域。电子装置可以执行在显示区域的至少部分上显示屏幕的操作1910。在操作1910，电子装置可以接收针对所显示的屏幕的用户输入。
电子装置可执行识别显示区域的扩展的操作1930。电子装置可执行基于在操作1920接收的用户输入确定显示UI组件的区域的操作1940。
例如，在操作1910中显示输入区域和键区的状态下，电子装置可以允许在宽区域上要显示的输入区域和键盘之中显示与通过用户输入选择的对象对应的UI组件的区域。又例如，在操作1920，电子装置可接收对显示在屏幕上的对象的长按输入，并基于期间长按输入被保持的时间段的长度来确定其中UI组件将被显示的区域。(例如，随着时间段变长，显示在更宽的区域中)。电子装置可执行在输入UI内的确定的区域中显示与用户输入相对应的UI组件的操作1950。
图20是示出由根据各种实施例的电子装置(例如，图1和图2的电子装置100、图3和图4的电子装置30、图5的电子装置101或图6的电子装置101)显示的用于提供基于用户输入配置的输入UI的屏幕的示例的图。
参考图20，电子装置可显示包括输入域2001和键区2002的屏幕2000。当在选择输入域2001的同时扩展显示区域时，电子装置可以显示包括输入UI的屏幕2010，输入UI显示在输入域2011比键区区域2012宽的区域上。相反，当在选择键区2002的同时扩展显示区域时，电子装置可以显示屏幕2020，其中键区2022比输入域2021宽。
图21是示出由根据各种实施例的电子装置(例如，图1和图2的电子装置100、图3和图4的电子装置30、图5的电子装置101或图6的电子装置101)显示的用于在显示区域被扩展时提供输入UI的屏幕的示例的图。
当在显示输入域(例如，图8的输入域811)的屏幕(例如，图8的屏幕810)被显示的同时显示区域被扩展时，根据各种实施例的电子装置可显示屏幕2100，用于在输入域2101的显示被保持的同时进一步显示附加UI组件2102。
图22是示出由根据各种实施例的电子装置(例如，图1和图2的电子装置100、图3和图4的电子装置30、图5的电子装置101或图6的电子装置101)显示的用于提供包括语音输入UI组件和手写输入UI组件的输入UI的屏幕的示例的图。
电子装置可以显示输入UI，该输入UI包括用于使用多种输入法接收用户输入的UI组件。例如，在显示包括输入UI(该输入UI包括输入区域(例如，图8的输入区域821)、工具栏(例如，图8的工具栏823)和键区(例如，图8的键区822))的屏幕(例如，图8的屏幕820)的状态下，电子装置可以接收用于在工具栏中包括的功能按钮中选择语音输入按钮和手写输入按钮2241的用户输入。响应于语音输入按钮和手写输入按钮2241的选择，电子装置可以将语音输入UI区域2220和手写输入区域2230添加到输入UI。因此，电子装置可以显示包括输入UI的屏幕2200，该输入UI包括输入域2210、语音输入区域2220、手写输入区域2230和键区2215。
图23是示出由根据各种实施例的电子装置(例如，图1和图2的电子装置100、图3和图4的电子装置30、图5的电子装置101或图6的电子装置101)显示的用于提供能够输入图像的输入UI的屏幕的示例的图。
电子装置可以在显示区域被扩展的状态下显示包括输入UI的屏幕2310。根据实施例，输入UI可以包括用于提供图像插入功能的图像输入功能按钮2311。电子装置可以接收用于选择图像输入功能按钮2311的用户输入。
响应于图像输入功能按钮2311的选择，电子装置可配置包括图像列表区域2321的输入UI，图像列表区域2321显示存储在电子装置中的图像的缩略图列表，以选择要输入的图像。电子装置可以显示包括配置的输入UI的屏幕2320。当显示屏幕2320时，电子装置可以接收用于选择相机输入按钮2322以插入通过相机捕获的图像的用户输入。
响应于相机输入按钮2322的选择，电子装置可将用于显示使用相机捕获的预览图像的预览区域2322添加到输入UI。可以添加预览区域2322，使得可以显示包括输入UI的屏幕2330，该输入UI包括图像列表区域2321和预览区域2322。
图24是示出根据各种实施例的电子装置(例如，图1和图2的电子装置100、图3和图4的电子装置30、图5的电子装置101或图6的电子装置101)基于显示区域的扩展方向输出输入UI的过程的流程图2400。
根据各种实施例的电子装置可被配置为在多个方向上(例如，图1中的+x方向和-x方向)扩展显示区域。能够在多个方向中的至少一个方向上扩展显示区域的电子装置可以执行在显示区域的至少部分上显示屏幕的操作2410。电子装置可以执行在显示屏幕的同时识别显示区域的扩展的操作2420。
当显示区域的扩展被识别时，电子装置可执行确定扩展方向是否是第一方向(例如，图1中的+x方向)的操作2430。当扩展方向是第一方向时，电子装置可执行在第一区域中显示输入UI的操作2440。例如，第一区域可以是设置在显示区域在屏幕内扩展的方向(例如，图1中的+x方向)上的区域。又例如，第一区域可以是下述区域：其中当显示区域在第一方向上(例如，图1中的+x方向)扩展时，插入到壳体中的显示区域缩回到外部。当扩展方向是第二方向时，电子装置可执行在第二区域中显示输入UI的操作2445。例如，第二区域可以是设置在显示区域在屏幕内扩展的方向(例如，图1中的-x方向)上的区域。又例如，第二区域可以是下述区域：其中当显示区域在第二方向(例如，图1中的-x方向)上扩展时，插入到壳体中的显示区域缩回到外部。
图25是示出由根据各种实施例的电子装置(例如，图1和图2的电子装置100、图3和图4的电子装置30、图5的电子装置101或图6的电子装置101)显示的用于基于显示区域的扩展方向提供输入UI的屏幕的示例的图。
根据实施例，显示包括输入域2513的屏幕2510的电子装置可在第一方向2511或第二方向2512上扩展显示区域。当显示区域在第一方向2511上扩展时，电子装置可以显示屏幕2520，在显示屏幕2520上输入UI显示在第一区域2521上。相反，当显示区域在第二方向2512上扩展时，电子装置可以显示屏幕2530，在屏幕2530上输入UI显示在第二区域2531上。
根据各种实施例的电子装置可包括配置为在显示区域的至少部分上显示屏幕的显示器、配置为检测显示区域的扩展或缩小的传感器、以及配置为可操作地连接到显示器的处理器。处理器可以被配置为接收与显示在显示区域的至少部分上的屏幕相关的用户输入，通过传感器识别显示区域的扩展，并且响应于用户输入的接收和显示区域的扩展的识别，在扩展的显示区域的至少部分上显示包括基于用户输入确定的UI组件的输入UI。
根据各种实施例，显示在显示区域的至少部分上的屏幕可包括与电子装置提供的功能相关的UI对象。处理器可被配置为基于用户输入选择UI对象，确定与UI对象相关的功能，并基于确定的功能确定输入UI中包括的UI组件，并且UI组件可被配置为控制显示器，使得UI组件可被显示在下述区域上：该区域具有比其中显示UI对象的区域的面积更大的面积。
根据各种实施例，用户输入可包括触摸输入。该处理器可以被配置为：当通过触摸输入选择屏幕内的对象的同时识别到显示区域的扩展时，基于该对象配置输入UI；控制显示器在显示区域的该部分上显示输入UI；以及当没有选择对象的同时识别到显示区域的扩展时，控制显示器在显示区域扩展的方向上扩展和显示屏幕。
根据各种实施例，屏幕可包括用于显示输入内容的输入域或用于执行电子装置的功能的功能项中的至少一个。用户输入可以针对输入域和功能项中的至少一个。
根据各种实施例，显示在显示区域的至少部分上的屏幕可包括至少一个应用的执行屏幕。处理器可以被配置为基于关于至少一个应用的信息通过显示器显示输入UI。
根据各种实施例，关于至少一个应用的信息可包括关于至少一个应用的类型或至少一个应用的执行屏幕是否对应于多个应用的信息。处理器可以被配置为基于关于至少一个应用的信息来确定其中输入UI将被显示的区域。
根据各种实施例的电子装置的处理器可被配置为基于用户输入来确定其中在输入UI内显示UI组件的区域的大小。
根据各种实施例，用户输入可包括用于选择与UI组件相关的对象的触摸输入。处理器可以被配置为基于期间触摸输入被保持的时间段的长度来确定其中显示UI组件的区域的大小。
根据各种实施例，输入UI可包括用于通过不同的输入法接收用户输入的多个UI组件。多个UI组件可包括用于接收文本输入的键区组件、用于接收语音输入的语音输入组件或用于接收手写输入的手写板组件中的至少一个。
根据各种实施例，包括在输入UI中的UI组件可包括用于选择存储在电子装置中的图像的图像列表。
根据各种实施例的电子装置可进一步包括相机。包括在输入UI中的UI组件可以包括通过相机获得的预览图像。
根据各种实施例的电子装置可被配置为在第一方向或第二方向上扩展或缩小显示区域。处理器可被配置为通过传感器确定显示器的扩展方向，并基于确定的方向来确定其中显示输入UI的区域。
根据各种实施例的一种操作包括显示器的电子装置的方法可包括：在显示器的显示区域的至少部分上显示屏幕，接收与显示在显示区域的至少部分上的屏幕相关的用户输入，识别显示区域的扩展，以及响应于用户输入的接收和显示区域的扩展的识别，在扩展的显示区域的至少部分上显示包括基于用户输入确定的UI组件的输入UI。
根据各种实施例，在显示区域的至少部分中显示的屏幕可包括与电子装置提供的功能相关的UI对象。根据各种实施例的操作电子装置的方法还可以包括基于用户输入选择UI对象，确定与UI对象相关的功能，以及基于确定的功能来确定输入UI中包括的UI组件。显示输入UI可包括在面积比显示UI对象的区域的面积更大的区域上显示UI组件。
根据各种实施例，用户输入可包括触摸输入。显示输入UI可以包括：当在通过触摸输入选择屏幕内的对象的同时识别到显示区域的扩展时，基于对象配置输入UI；在显示区域的一部分上显示输入UI；以及当在没有选择对象的同时识别到显示区域的扩展时，在显示区域扩展的方向上扩展和显示屏幕。
根据各种实施例，显示在显示区域的至少部分上的屏幕可包括至少一个应用的执行屏幕。根据各种实施例的操作电子装置的方法可以进一步包括确定至少一个应用的类型或者至少一个应用的执行屏幕是否对应于多个应用，并且基于确定结果来确定其中输入UI将被显示的区域。
根据各种实施例，用户输入可包括用于选择与输入UI中包括的UI组件相关的对象的触摸输入，显示输入UI可包括基于在其期间触摸输入被保持的时间段的长度确定其中显示UI组件的区域的面积。
根据各种实施例，输入UI可包括用于通过不同的输入法接收用户输入的多个UI组件。
根据各种实施例的操作电子装置的方法可进一步包括确定显示器扩展的方向，并基于确定的方向确定其中显示输入UI的区域。
根据本公开的权利要求或说明书中描述的各种实施例的方法可通过硬件、软件或硬件和软件的组合来实施。
当方法由软件实现时，可提供用于存储一个或多个程序(软件模块)的计算机可读存储介质。存储在计算机可读存储介质中的一个或多个程序可以被配置为由电子装置内的一个或多个处理器执行。该至少一个程序可以包括使得电子装置执行根据由所附权利要求定义和/或在此公开的本公开的各种实施例的方法的指令。
程序(软件模块或软件)可存储在非易失性存储器中，包括随机存取存储器和闪存、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、磁盘存储装置、光盘只读存储器(CD-ROM)、数字多功能光盘(DVD)或其他类型的光学存储装置或盒式磁带。可替选地，它们中的一些或全部的任意组合可以形成存储程序的存储器。此外，电子装置中可以包括多个这样的存储器。
此外，程序可存储在可附接的存储装置中，该存储装置可通过通信网络访问电子装置，通信网络诸如为互联网、内联网、局域网(LAN)、广域网(WLAN)和存储区域网(SAN)或其组合。这种存储设备可以经由外部端口访问电子装置。此外，通信网络上的独立存储设备可以访问便携式电子装置。
在本公开的上述详细实施例中，根据呈现的详细实施例，本公开中包含的元素以单数或复数表示。然而，为了描述的方便，单数形式或复数形式被适当地选择为所呈现的情形，并且本公开不限于以单数或复数表达的元素。因此，以复数表示的元素也可以包括单个元素，或者以单数表示的元素也可以包括多个元素。
尽管在本公开的详细描述中描述了具体实施例，但将清楚的是，在不脱离本公开范围的情况下，可对其进行各种修改和改变。因此，本公开的范围不应被定义为限于实施例，而是应由所附权利要求及其等同物来定义。

Claims (15)

1.一种电子装置，包括：
显示器，被配置为在显示区域的至少部分上显示屏幕；
传感器，被配置为检测所述显示区域的扩展或缩小；以及
处理器，被配置为可操作地连接到所述显示器，
其中，所述处理器被配置为：
接收与显示在所述显示区域的至少部分上的屏幕相关的用户输入；
通过所述传感器识别所述显示区域的扩展；以及
响应于所述用户输入的接收和所述显示区域的扩展的识别，在扩展的显示区域的至少部分上显示包括基于所述用户输入确定的UI组件的输入UI。
2.如权利要求1所述的电子装置，其中，在所述显示区域的至少部分上显示的屏幕包括与所述电子装置提供的功能相关的UI对象，
其中，所述处理器被配置为：
基于所述用户输入选择所述UI对象；
确定与所述UI对象相关的功能；以及
基于确定的功能来确定包括在所述输入UI中的所述UI组件，以及
其中，所述UI组件控制所述显示器，使得所述UI组件显示在具有比其中显示所述UI对象的区域的面积更大的面积的区域上。
3.如权利要求1所述的电子装置，其中，所述用户输入包括触摸输入，并且
所述处理器被配置为：
当在通过所述触摸输入选择屏幕内的对象的同时识别到所述显示区域的扩展时，基于所述对象配置所述输入UI；
控制所述显示器在所述显示区域的部分上显示所述输入UI；以及
控制所述显示器当在没有选择所述对象的同时识别到所述显示区域的扩展时，在所述显示区域扩展的方向上扩展和显示所述屏幕。
4.如权利要求1所述的电子装置，其中，所述屏幕包括用于显示输入内容的输入域或用于执行所述电子装置的功能的功能项中的至少一个，并且
所述用户输入与所述输入域和所述功能项中的至少一个有关。
5.如权利要求1所述的电子装置，其中，显示在所述显示区域的至少部分上的屏幕包括至少一个应用的执行屏幕，并且
所述处理器被配置为基于关于所述至少一个应用的信息通过所述显示器显示所述输入UI。
6.如权利要求5所述的电子装置，其中，关于所述至少一个应用的信息包括关于所述至少一个应用的类型或者所述至少一个应用的执行屏幕是否对应于多个应用的信息，并且
所述处理器被配置为基于关于所述至少一个应用的信息来确定其中将显示所述输入UI的区域。
7.如权利要求1所述的电子装置，其中，所述处理器被配置为基于所述用户输入来确定其中在所述输入UI内显示所述UI组件的区域的大小。
8.如权利要求7所述的电子装置，其中，所述用户输入包括用于选择与所述UI组件相关的对象的触摸输入，并且
所述处理器被配置为基于在其期间所述触摸输入被保持的时间段的长度来确定其中显示所述UI组件的区域的大小。
9.如权利要求1所述的电子装置，其中，所述输入UI包括用于通过不同的输入法接收用户输入的多个UI组件。
10.如权利要求9所述的电子装置，其中，所述多个UI组件包括用于接收文本输入的键区组件、用于接收语音输入的语音输入组件或用于接收手写输入的手写板组件中的至少一个。
11.如权利要求1所述的电子装置，其中，包括在所述输入UI中的所述UI组件包括用于选择存储在所述电子装置中的图像的图像列表。
12.如权利要求1所述的电子装置，还包括相机，
其中，包括在所述输入UI中的所述UI组件包括通过所述相机获得的预览图像。
13.如权利要求1所述的电子装置，其中，所述显示器被配置为在第一方向或第二方向上扩展或缩小，并且
所述处理器被配置为：
通过所述传感器确定所述显示器的扩展方向；和
基于所确定的方向来确定其中显示所述输入UI的区域。
14.一种操作包括显示器的电子装置的方法，所述方法包括：
在所述显示器的显示区域的至少部分上显示屏幕；
接收与显示在所述显示区域的至少部分上的屏幕相关的用户输入；
识别所述显示区域的扩展；以及
响应于所述用户输入的接收和所述显示区域的扩展的识别，在扩展的显示区域的至少部分上显示包括基于所述用户输入确定的UI组件的输入UI。
15.如权利要求14所述的方法，其中，在所述显示区域的至少部分上显示的屏幕包括与所述电子装置提供的功能相关的UI对象，并且
其中，所述方法还包括：
基于所述用户输入来选择所述UI对象，并确定与所述UI对象相关的功能；以及
基于确定的功能来确定包括在所述输入UI中的所述UI组件，以及
其中，所述输入UI的显示包括在具有比其中显示所述UI对象的区域的面积更大的面积的区域上显示所述UI组件。
CN202180061589.4A 2020-09-08 2021-09-08 提供用户界面的电子装置及其方法 Pending CN116324669A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
KR1020200114736A KR20220032875A (ko) 2020-09-08 2020-09-08 사용자 인터페이스를 제공하는 전자 장치 및 그 방법
KR10-2020-0114736 2020-09-08
PCT/KR2021/012229 WO2022055255A1 (ko) 2020-09-08 2021-09-08 사용자 인터페이스를 제공하는 전자 장치 및 그 방법

Publications (1)

Publication Number Publication Date
CN116324669A true CN116324669A (zh) 2023-06-23

Family

ID=80630370

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202180061589.4A Pending CN116324669A (zh) 2020-09-08 2021-09-08 提供用户界面的电子装置及其方法

Country Status (5)

Country Link
US (1) US20230221841A1 (zh)
EP (1) EP4198700A4 (zh)
KR (1) KR20220032875A (zh)
CN (1) CN116324669A (zh)
WO (1) WO2022055255A1 (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20220067325A (ko) * 2020-11-17 2022-05-24 삼성전자주식회사 확장 가능한 디스플레이 제어 방법 및 이를 지원하는 전자 장치
WO2023204438A1 (ko) * 2022-04-19 2023-10-26 삼성전자 주식회사 전자 장치 및 컨트롤 어포던스 객체 표시 방법
WO2023204418A1 (ko) * 2022-04-19 2023-10-26 삼성전자 주식회사 롤러블 디스플레이의 표시 영역 변경에 기반하여 터치 입력 또는 호버링 입력을 표시하기 위한 전자 장치 및 방법

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101522882B1 (ko) * 2008-07-17 2015-05-26 엘지전자 주식회사 플랙시블 디스플레이부를 구비한 휴대 단말기 및 그제어방법
KR102331956B1 (ko) * 2014-02-10 2021-11-29 삼성전자주식회사 사용자 단말 장치 및 이의 디스플레이 방법
KR101649656B1 (ko) * 2014-09-25 2016-08-19 엘지전자 주식회사 표시장치 및 그 제어방법
KR20160139320A (ko) * 2015-05-27 2016-12-07 엘지전자 주식회사 변형 가능한 디스플레이 장치 및 그의 동작 방법
KR102319684B1 (ko) * 2015-06-22 2021-11-02 엘지전자 주식회사 변형 가능한 디스플레이 장치 및 그의 동작 방법
KR102462856B1 (ko) * 2015-06-24 2022-11-03 삼성전자주식회사 디스플레이의 확장 영역에 대한 사용 알림 제공 방법 및 이를 지원하는 전자 장치
KR20170048007A (ko) * 2015-10-26 2017-05-08 엘지전자 주식회사 플렉서블 디스플레이 장치 및 그의 동작 방법
KR102266152B1 (ko) * 2018-02-22 2021-06-17 삼성전자주식회사 디스플레이 영역의 크기 변경이 가능한 플렉시블 디스플레이를 포함하는 전자 장치 및 그 제어 방법

Also Published As

Publication number Publication date
KR20220032875A (ko) 2022-03-15
US20230221841A1 (en) 2023-07-13
EP4198700A1 (en) 2023-06-21
WO2022055255A1 (ko) 2022-03-17
EP4198700A4 (en) 2024-01-31

Similar Documents

Publication Publication Date Title
CN215642665U (zh) 用于感应输入的电子装置
KR102289369B1 (ko) 플렉서블 디스플레이에 이미지를 표시하는 전자 장치 및 방법
US20230221841A1 (en) Electronic device providing user interface, and method therefor
EP4203458A1 (en) Electronic device for image capturing, method, and non-transitory storage medium
US20230035709A1 (en) Electronic device with expandable display and method of displaying screen of electronic device
KR102256292B1 (ko) 확장이 가능한 디스플레이를 이용하여 멀티 윈도우를 제공하는 전자 장치
CN116097239A (zh) 可折叠电子设备和在可折叠电子设备中显示信息的方法
CN115885246A (zh) 包括柔性显示器的电子装置
US20230164262A1 (en) Electronic device for providing both shared screen and private screen, and control method therefor
US20230176721A1 (en) Electronic device comprising flexible display module and method for operating same
US20230315156A1 (en) Electronic device for moving and displaying at least one object according to expansion of flexible display, and method for controlling same
US20230051195A1 (en) Electronic device and method for editing content thereof
CN116762051A (zh) 电子装置和用于在电子装置中处理来自手写笔的输入的方法
US20230247130A1 (en) Method for providing screen by using flexible display, and electronic device supporting same
US20230214103A1 (en) Electronic device capable of providing multi-window layout and operation method therefor
US11983355B2 (en) Electronic device comprising flexible display and operation method thereof
US20230236696A1 (en) Electronic device, and method for displaying content in electronic device
US20230110166A1 (en) Electronic device including flexible display and method for controlling input area for expansion and reduction of display in the electronic device
US20230254402A1 (en) Electronic device and method for displaying screen thereof
US11934602B2 (en) Electronic device and operation method of electronic device for supporting one handed operation mode
US20220164093A1 (en) Electronic device with expandable display
US20230205351A1 (en) Electronic device comprising flexible display and operation method thereof
EP4358502A1 (en) Foldable electronic device and utilization method of foldable electronic device
US20230090716A1 (en) Image capture method and electronic device therefor
EP4357896A1 (en) Electronic device for controlling attribute information of application and method for controlling same

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination