CN108024009B - 一种电子设备及其方法 - Google Patents

一种电子设备及其方法 Download PDF

Info

Publication number
CN108024009B
CN108024009B CN201711039001.7A CN201711039001A CN108024009B CN 108024009 B CN108024009 B CN 108024009B CN 201711039001 A CN201711039001 A CN 201711039001A CN 108024009 B CN108024009 B CN 108024009B
Authority
CN
China
Prior art keywords
region
area
display
electronic device
processor
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201711039001.7A
Other languages
English (en)
Other versions
CN108024009A (zh
Inventor
李钟武
崔胜珉
金大铉
金素英
金旻植
金键洙
安振完
李智雨
崔显硕
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics Co Ltd
Original Assignee
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Samsung Electronics Co Ltd filed Critical Samsung Electronics Co Ltd
Priority to CN202111068354.6A priority Critical patent/CN113778177A/zh
Publication of CN108024009A publication Critical patent/CN108024009A/zh
Application granted granted Critical
Publication of CN108024009B publication Critical patent/CN108024009B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04845—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16—Constructional details or arrangements
    • G06F1/1613—Constructional details or arrangements for portable computers
    • G06F1/1633—Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
    • G06F1/1637—Details related to the display arrangement, including those related to the mounting of the display in the housing
    • G06F1/1643—Details related to the display arrangement, including those related to the mounting of the display in the housing the display being associated to a digitizer, e.g. laptops that can be used as penpads
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04842—Selection of displayed objects or displayed text elements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/10—Segmentation; Edge detection
    • G06T7/13—Edge detection
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048—Indexing scheme relating to G06F3/048
    • G06F2203/04803—Split screen, i.e. subdividing the display area or the window area into separate subareas
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048—Indexing scheme relating to G06F3/048
    • G06F2203/04806—Zoom, i.e. interaction techniques or interactors for controlling the zooming operation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/20—Special algorithmic details
    • G06T2207/20021—Dividing image into blocks, subimages or windows
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/20—Special algorithmic details
    • G06T2207/20172—Image enhancement details
    • G06T2207/20192—Edge enhancement; Edge preservation

Abstract

本文公开了电子设备和方法。电子设备包括壳体、触摸屏以及电耦接到显示器的至少一个处理器。处理器实现包括以下步骤的方法：限定电子设备的显示器的主区域和延伸区域，检测对显示的内容的选择，由处理器检测沿着内容的边缘设置的内容的一部分的特征是否等于或小于阈值，以及基于所述部分的特征是否等于或小于阈值，放大所选的显示内容以在主区域上显示并延伸到延伸区域。

Description

一种电子设备及其方法
技术领域
以下示例实施例涉及具有孔区域的电子设备及控制其孔区域的方法。
背景技术
随着技术发展，电子设备已发展成可以通过多任务或者各种应用 (例如通信和数据传输之类基础功能以外的应用)的执行，来提供各种服务和功能。
具有前置显示屏幕的电子设备可以具有逐渐增大的屏幕尺寸，为了通过大观看区域向用户提供更好的服务。屏幕尺寸受到放置其他组件的限制，例如，设置在设备的前表面的上端部分的相机、听筒和传感器或设置在设备的前表面的更下端部分的主按钮。
发明内容
本公开是鉴于上述问题而做出的，并提供一种可以通过具有主区域和延伸区域的显示器来放大内容的具有孔区域的电子设备及控制其孔区域的方法。
根据本公开的方面，一种电子设备的方法，包括：限定所述电子设备的显示器的主区域和延伸区域；检测对显示的内容的选择；由处理器检测沿着所述内容的边缘设置的内容的一部分的特征是否等于或小于阈值；以及基于所述部分的特征是否等于或小于阈值，放大所选择的显示内容以在所述主区域上显示并延伸到所述延伸区域。
根据本公开的另一方面，一种电子设备，包括：壳体，包括面向第一方向的第一表面，以及面向与所述第一方向相反的第二方向的第二表面；触摸屏显示器，设置在所述第一表面和所述第二表面之间，使得通过所述第一表面暴露所述触摸屏的一部分，所述触摸屏显示器包括主区域和延伸区域，所述延伸区域包括至少一个开口；以及至少一个处理器，电耦合到所述显示器，被配置为检测对所述触摸屏上显示的内容的选择，并检测沿着所述内容的边缘设置的所述内容的一部分的特征是否等于或小于阈值，当所述特征等于或小于阈值时，在主区域上显示所选内容并延伸到所述延伸区域，并且当所述特征大于阈值时，将所选内容从所述延伸区域的显示中排除。
附图说明
通过结合附图的以下详细描述，本公开的目的和特征将更加清楚，在附图中：
图1是示出了根据本公开各实施例的包括电子设备的网络环境的图；
图2是示出了根据示例实施例的电子设备的配置的框图；
图3是示出了根据各种示例实施例的程序模块的配置的框图；
图4是示出了根据各种示例实施例的电子设备的前视图；
图5是示出了根据各种示例实施例的电子设备的后视图；
图6是示出了根据示例实施例的电子设备的透视图和6视图；
图7是示出了根据示例实施例的电子设备的前视图；
图8是示出了根据示例实施例的控制电子设备的方法的流程图；
图9A、9B、9C、9D、9E、9F、9G、9H和图9K是示出了根据示例实施例的控制电子设备的方法的图；
图10是示出了根据另一示例实施例的控制电子设备的方法的流程图；
图11A、11B、11C、11D、11E和图11B是示出了根据另一示例实施例的控制电子设备的方法的图。
具体实施方式
提供以下参照附图的描述以帮助全面理解由权利要求及其等同物限定的本公开的各实施例。以下描述包括各种具体细节以帮助理解，但这些具体细节应被视为仅仅是示例性的。因此，本领域普通技术人员将认识到：在不脱离本公开的前提下，可以对本文所述的各种实施例进行各种改变和修改。另外，为了清楚和简洁起见，可以省略对已知功能和结构的描述。
以下描述和权利要求中使用的术语和词语不限于其书面含义，而是仅仅被公开人用来实现对本公开清楚一致的理解。因此，对于本领域技术人员来说应当显而易见的是，提供本公开的各种实施例的以下描述以仅用于说明的目的，而不是限制由所附权利要求及其等同物限定的本公开。
应当理解的是，除非上下文中另有清楚指示，否则单数形式“一”、“一个”和“所述”包括复数对象。因此，例如，对“组件表面”的引用包括对这样的表面中的一个或多个的引用。
在本公开中，表述“A或B”或“A和/或B中的至少一个”可以包括A，可以包括B，或者可以包括A和B两者。包括序数的表述，例如“第一”和“第二”等，可以修饰各种元件。然而，上述表述不限制元件的顺序和/或重要性，并且仅用于将元件和其它元件区分的目的。在某个(例如，第一)元件被称为与其他(例如，第二)元件“连接”或“访问”(功能上或通信地)的情况下，应当理解为该元件与该其他元件直接连接或访问，或者通过另一(例如，第三)元件连接或访问。在本公开中，表述“(被)配置为”可以根据情况而与“适应”、“具有”、“修改为”、“制造为”、“能够”或“设计为”互换使用。在一些情况中，表述“(被)配置为...的设备”可能意味着该设备可以与其他设备或其他组件一起操作。例如，表述“被配置为执行A、B和 C的处理器”可能意味着用于执行上述操作的专用处理器(例如，嵌入式处理器)、或能够通过执行存储在存储设备中的一个或多个软件程序来执行上述操作的通用处理器(例如，中央处理单元(CPU)或应用处理器(AP))。根据本公开各种实施例的电子设备可以包括以下至少一种：智能电话、平板个人计算机(PC)、移动电话、视频电话、 e-book阅读器、台式PC、膝上型PC、上网本计算机、工作站、服务器、个人数字助手(PDA)、便携式多媒体播放器(PMP)、运动图像专家组阶段1或阶段2(MPEG-1或MPEG-2)音频层-III(MP3)播放器、医疗设备、相机和可穿戴设备。例如，可穿戴设备可以包括以下中的至少一种：饰品型(例如，手表、戒指、手链、脚链、项链、电子配件、眼镜、隐形眼镜或头戴式设备(HMD))、衣料或服饰集成型(例如，电子服饰)、身体附着型(例如，皮肤贴或纹身)、和身体移植电路。在一些实施例中，电子设备可以包括以下至少一个：电视 (TV)、数字多功能盘(DVD)播放器、音频设备、冰箱、空调、吸尘器、烤箱、微波炉、洗衣机、空气净化器、机顶盒、家用自动控制面板、安全控制面板、媒体盒(例如，Samsung HomeSyncTM、Apple TVTM或Google TVTM)、游戏机(例如，XboxTM、PlayStationTM)、电子词典、电子钥匙、录像机和电子相框。
在本公开的各种实施例中，电子设备可以包括以下中的至少一个：各种医疗设备(例如，磁共振造影(MRA)机、磁共振成像(MRI) 机、计算机断层(CT)扫描仪、扫描仪、超声波设备等)、导航设备、全球导航卫星系统(GNSS)、事件数据记录器(EDR)、飞行数据记录器(FDR)、车载娱乐设备、船用导航装备陀螺仪等、航空装备、安全装备、主机单元或车用设备、工业或家用机器人、无人机、自动取款机(ATM)、零售点(POS)和各种物联网(IoT)设备(例如，灯泡、各种传感器、电表或燃气表、洒水设备、火警报警器、自动调温器、街灯、烤面包机、锻炼装备、热水壶、加热器、锅炉等)。根据某一实施例，电子设备可以包括以下至少一项：家具、建筑物或车的一部分、电子公告板、电子签名接收设备、投影仪以及各种测量仪表(例如，水表、电表、气表、电波计量表等)。在各种实施例中，电子设备可以是柔性的或两个或更多个上述设备的组合。此外，根据本公开各种实施例的电子设备不限于上述设备。在本公开中，术语“用户”可以表示使用电子设备的人或者使用电子设备的机器(例如，人工智能设备)。
图1是示出了根据本公开各种实施例的包括电子设备101在内的网络环境100的框图。
参考图1，电子设备101可以包括但不限于总线110、处理器120、存储器130、输入/输出接口150、显示器160和通信接口170。总线 110可以是设计用于将上述元件相连并在这些元件之间传送数据(例如，控制消息)的电路。处理器120可以通过总线110从其它元件(例如，存储器130、输入/输出接口150、显示器160或通信接口170等) 接收命令，解释所接收的命令，以及基于解释后的命令来执行算术或数据处理。存储器130可以在其中存储从处理器120或其它元件(例如，输入/输出接口150、显示器160或通信接口170等)接收的或在处理器120或其它元件处生成的命令或数据。存储器130可以包括诸如内核141、中间件143、应用编程接口(API)145、和应用147之类的编程模块140。每个编程模块可以由软件、固件、硬件及其任意组合而实现。
如图1所示，内核141可以控制或管理用于执行由其它编程模块 (例如中间件143、API 145和应用147)实现的操作或功能的系统资源(例如总线110、处理器120、存储器130等等)。另外，内核141 可以提供能够通过使用中间件143、API 145或应用147来访问并控制或者管理电子设备101的各个元件的接口。
中间件143可以用于在API 145或应用147与内核141之间以API 145或应用147与内核141通信并与其交换数据的方式运行。另外，例如，关于从一个或多个应用147和/或中间件143接收的工作请求，可以通过使用向一个或多个应用147中的至少一个应用指派优先级 (其中可以使用电子设备101的系统资源(例如总线110、处理器120、存储器130等等))的方法来执行工作请求的负载平衡。API 145是应用147能够通过其控制由内核141或中间件143提供的功能的接口，并可以包括例如用于文件控制、窗口控制、图像处理、字符控制等的至少一个接口或功能。输入/输出接口150可以经由总线110向处理器 120、存储器130或通信接口170传送用户通过输入/输出单元或设备 (例如，传感器、键盘或触摸屏)键入的命令或数据。
显示器模块160可以包括例如液晶显示器(LCD)、发光二极管 (LED)显示器、有机LED(OLED)显示器、微机电系统(MEMS) 显示器或电子纸显示器。显示器160可以向用户显示各种类型的内容 (例如，文本、图像、视频、图标或符号)。显示器模块160可以包括触摸屏，并可接收例如通过使用电子设备或用户身体的一部分进行的触摸、手势、接近或悬停输入。
通信接口170可以在电子设备101与任何外部设备(例如，第一外部电子设备102、第二外部电子设备104或服务器106)之间建立通信。例如，通信接口170可以通过经由有线或无线通信164与网络162 相连，并且从而与任何外部设备(例如，第二外部电子设备104或服务器106)进行通信。
无线通信可以使用以下至少一项作为蜂窝通信协议：例如长期演进(LTE)、LTE-高级(LTE-A)、码分多址(CDMA)、宽带CDMA (WCDMA)、通用移动电信系统(UMTS)、无线宽带(WiBro)和全球移动通信系统(GSM)等。短距离通信可以包括例如Wi-Fi、蓝牙 (BT)、近场通信(NFC)、磁安全传输或近场磁数据条带传输(MST)、 GNSS等中的至少一个。GNSS可以包括例如以下至少一项：全球定位系统(GPS)、全球导航卫星系统(GLONASS)、北斗导航卫星系统(下文中称为“北斗”)以及伽利略(欧洲全球基于卫星的导航系统)。下文中，在本公开中，“GPS”可以与“GNSS”互换使用。
有线通信例如可以包括但不限于以下至少一项：通用串行总线 (USB)、高清多媒体接口(HDMI)、推荐标准232(RS-232)和普通老式电话业务(POTS)。网络162可以包括作为电信网络的计算机网络 (例如，局域网(LAN)或广域网(WAN))、因特网和电话网中的至少一个。第一外部电子设备102和第二外部电子设备104的类型可以与电子设备101的类型相同或不同。服务器106可以包括具有一个或多个服务器的组。在电子设备101中执行的操作的部分或全部可以在一个或多个其他电子设备102、104或服务器106中执行。当电子设备1001自动地或响应于请求而执行特定功能或服务时，代替其自身执行所述功能或服务或者除了其自身执行所述功能或服务之外，电子设备 101可以向其他一电子设备102、104或服务器106请求与所述功能或服务相关的至少一部分功能。其他电子设备102、104或服务器106 可以执行所请求的功能或者附加功能，并且可以向电子设备101传送执行的结果。附加地，电子设备101可以处理接收到的结果，以提供所请求的功能或服务。为此目的，可以使用例如云计算技术、分布式计算技术或客户端-服务器计算技术。
图2是示出了根据本公开的各种实施例的电子设备201的框图。电子设备201可以例如形成图1所示的电子设备101的整体或一部分。
参考图2，电子设备201可以包括至少一个处理器或AP 210、通信模块220、订户识别模块(SIM)卡224、存储器230、传感器模块 240、输入单元或输入设备250、显示器或显示器模块260、接口270、音频模块280、相机模块291、电源管理模块295、电池296、指示器 297和电机298。处理器210能够驱动例如操作系统或应用程序以便控制与处理器210相连的多个硬件或软件组件，处理各种数据并执行操作。例如，处理器210可以实现为片上系统(SoC)。根据实施例，处理器210还可以包括图形处理单元(GPU)和/或图像信号处理器。
处理器210还可以包括图2所示的组件中的至少一部分(例如，蜂窝模块221)。处理器210能够将其他组件中的至少一个(例如，非易失性存储器)接收到的命令或数据加载到易失性存储器上，处理所加载的命令或数据。处理器210能够将各种数据存储在非易失性存储器中。通信模块220(例如，通信接口170)可以与通过网络与电子设备201(例如，电子设备101)连接的任何其它电子设备(例如，电子设备104或服务器106)执行数据通信。根据实施例，通信模块220 其中可以包括蜂窝模块221、WiFi模块223、BT模块225、GNSS或 GPS模块227、NFC模块228和射频(RF)模块229。例如，蜂窝模块221能够通过通信网络提供语音呼叫、视频呼叫、短信息服务(SMS)、互联网服务等。根据一个实施例，蜂窝模块221能够通过使用SIM 224 (例如，SIM卡)来执行在通信网络中对电子设备201的识别和认证。根据一个实施例，蜂窝模块221能够执行处理器210提供的功能中的至少一部分。根据一个实施例，蜂窝模块221还能够包括通信处理器 (CP)。
如图2所示，Wi-Fi模块223、BT模块225、GNSS模块226和 NFC模块228每一个都能够包括用于处理通过对应模块发送或接收的数据的处理器。
NFC模块228能够包括用于处理通过对应模块发送或接收的数据的处理器。根据各种实施例，蜂窝模块221、WiFi模块223、BT模块 225、GNSS模块227、NFC模块228和其他模块，例如MST模块(例如，两个或更多个模块)可以包括在一个集成芯片(IC)或一个IC 封装中。RF模块229能够发送/接收例如通信信号(例如，RF信号) 的数据。RF模块229能够包括收发器，功率放大器模块(PAM)、频率滤波器、低噪声放大器(LNA)、天线等。根据实施例，蜂窝模块 221、Wi-Fi模块223、BT模块225、GNSS模块227和NFC模块228 中的至少一个能够通过单独的RF模块发送/接收RF信号。SIM模块 224能够包括卡，卡包括SIM和/或嵌入式SIM。SIM卡224可以包括独有标识信息(例如，集成电路卡标识符(ICCID))或者订户信息(例如，国际移动用户身份(IMSI))。
如图2所示，存储器230(例如，图1所示的存储器103)能够包括内置或内部存储器232和/或外部存储器234。内置或内部存储器 232能够包括以下至少一项：易失性存储器(例如，动态随机存取存储器(DRAM)、静态RAM(SRAM)、同步动态RAM(SDRAM)等) 以及非易失性存储器(例如，一次性可编程只读存储器(OTPROM)、可编程ROM(PROM)、可擦除可编程ROM(EPROM)、电可擦除可编程ROM(EEPROM)、掩膜ROM、闪存ROM、闪存(例如，NAND 闪存、NOR闪存等)、硬盘驱动器、固态驱动器(SSD)等)。
传感器模块240能够测量/检测物理量或电子设备201的操作状态，并将测量或检测到的信息转换为电信号。传感器模块240能够包括以下至少一项：手势传感器240A、陀螺仪传感器240B、气压或气压计传感器240C、磁传感器240D、加速度传感器240E、握持传感器240F、接近传感器240G、颜色或RGB传感器240H(例如，红、绿、蓝(RGB) 传感器)、生物传感器240I、温度/湿度传感器240J、照度传感器240K 以及紫外线(UV)传感器240M。
附加地或备选地，传感器模块240还能够包括以下传感器或操作中的一个或多个(未示出)：电子鼻(E-nose)传感器、肌电图(EMG) 传感器、脑电图(EEG)传感器、心电图(ECG)传感器、红外线(IR) 传感器、虹膜传感器和/或指纹传感器。传感器模块240还能够包括用于控制包括在其中的一个或多个传感器的控制电路。
在本公开的各种实施例中，电子设备201能够包括处理器，被配置为处理器210的一部分或分离的组件，用于控制传感器模块240。在这种情况下，当处理器210在休眠模式下操作时，处理器能够控制传感器模块240。输入设备250能够包括触摸面板252、(数字)笔传感器(数字笔或触控笔)254、按键256或超声波输入单元或设备258。触摸面板252可以使用以下至少一项来实现：电容式触摸系统、电阻式触摸系统、红外触摸系统和超声触摸系统。触摸面板252还可以包括控制电路。触摸面板252还可以包括触觉层，以向用户提供触觉响应。(数字)笔传感器254可以使用触摸面板的一部分，或者单独的识别片来实现。按键256可以包括物理按钮、光学按键或键区。超声输入单元258能够通过麦克风288检测在输入工具中创建的超声波，并且识别与检测到的超声波相对应的数据。
显示器260(例如，图1中示出的显示器160)能够包括面板262、全息图单元或设备264、或者投影仪266。面板262可以包括与图1 中示出的显示器160相同或相似的配置。面板262可以被实现为柔性的、透明的或可穿戴的。
面板262还可以与触摸面板252一同被合并为一个模块。全息图单元264能够通过使用光干扰在空气中示出立体图像。投影仪266能够通过在屏幕上投射光来显示图像。屏幕可以放置在电子设备201的内部或外部。根据实施例，显示器260还可以包括用于控制面板262、全息图单元264或投影仪266的控制电路。
接口270能够包括HDMI 272、USB 274、光学接口276或D-超小型(D-sub)278。接口270可以包含在图1所示的通信接口107中。附加地或者替代地，接口270能够包括移动高清链路(MHL)接口、 SD卡/MMC接口或者红外数据协会(IrDA)标准接口。
如图2所示，音频模块280能够提供音频信号和电信号之间的双向转换。音频模块280的至少部分组件可以包括在图1中示出的输入/ 输出接口150中。音频模块280还能够处理通过扬声器282、听筒284、耳机286、麦克风288等输入或输出的声音信息。
相机模块291是指能够拍摄得静止图像和运动图像二者的设备。根据一个实施例，相机模块291能够包括一个或更多个图像传感器(例如，前置图像传感器或后置图像传感器)、镜头、图像信号处理器(ISP)、闪光灯(例如，LED或氙气灯)等。
电源管理模块295能够管理电子设备201的电力。根据一个实施例，电源管理模块295能够包括电源管理IC(PMIC)、充电器IC、或电池燃料表。PMIC可以启用有线充电和/或无线充电方法。无线充电方法的示例是磁共振充电、磁感应充电以及电磁充电。为此，PIMC 还可以包括用于无线充电的附加电路，例如线圈回路、谐振电路、整流器等。电池计能够测量电池296的剩余容量、充电电压、电流或温度。电池296可以采取可再充电电池或太阳能电池的形式。
指示器297能够显示电子设备201或其一部分(例如，处理器210) 的特定状态，例如启动状态、消息状态、充电状态等。电机298能够将电信号转换成机械振动，例如振动、触觉效果等。尽管未示出，然而电子设备201能够进一步包括用于支持移动TV的处理单元(例如， GPU)。用于支持移动TV的处理单元可以例如根据诸如数字多媒体广播(DMB)、数字视频广播(DVB)或mediaFloTM等的一些标准来处理媒体数据。
本公开中描述的元件中的每一个可以形成为一个或更多个组件，且对应元件的名称可以根据电子设备的类型而改变。在各种实施例中，电子设备可以包括本公开中描述的上述元件中的至少一个，且可以排除一些元件，或还包括其它附加元件。此外，根据各种实施例的电子设备的一些元件可以耦合以在执行与这些对应元件在耦合之前的功能相同的功能的同时形成单个实体。
图3是示出了根据本公开各个实施例的程序模块310的配置的框图。
编程模块310可以包括(或存储)在图1所示的电子设备101(例如，存储器130)中，或者可以包括(或存储)在图2所示的电子设备201中(例如，存储器230))。编程模块310的至少一部分可以被实现为软件、固件、硬件或它们中的两个或更多个的组合。编程模块 310可以实现为硬件(例如，图2的硬件200)，并可以包括控制与电子设备(例如电子设备101)相关的资源的操作系统(OS)和/或在 OS中执行的各种应用(例如应用370)。例如，OS可以是Android、 iOS、Windows、Symbian、Tizen、Bada等。
参照图3，编程模块310可以包括内核320、中间件330、API 360 和/或应用370。
内核320(例如，图1中的内核141)可以包括系统资源管理器 321和/或设备驱动器323。系统资源管理器321可以包括例如进程管理器(未示出)、存储器管理器(未示出)和文件系统管理器(未示出)。系统资源管理器321可以执行对系统资源的控制、分配、恢复等。设备驱动器323可以包括例如显示器驱动器(未示出)、相机驱动器(未示出)、BT驱动器(未示出)、共享存储器驱动器(未示出)、USB驱动器(未示出)、键盘驱动器(未示出)、WiFi驱动器(未示出)和/ 或音频驱动器(未示出)。此外，根据本公开的实施例，设备驱动器 312可以包括进程间通信(IPC)驱动器(未示出)。
中间件330可以包括预先实施的多个模块，以提供由应用370共同使用的功能。此外，中间件330可以通过API 360向应用370提供功能，以使应用370能够高效地使用电子设备内的有限系统资源。例如，如图3中所示，中间件330(例如，中间件132)可以包括以下至少一项：运行时库335、应用管理器341、窗口管理器342、多媒体管理器343、资源管理器344、电源管理器345、数据库管理器346、包管理器347、连接或连接性管理器348、通知管理器349、位置管理器 350、图形管理器351、安全管理器352和任何其它合适和/或类似的管理器。
运行时库335可以包括例如由编译器使用的库模块，以在应用370 的执行期间通过使用编程语言添加新功能。根据本公开的实施例，运行时库335可以执行与输入和输出相关的功能、存储器的管理和/或算术功能等。
应用管理器341可以管理例如至少一个应用370的生命周期。窗口管理器342可以管理在屏幕上使用的图形用户界面(GUI)资源。多媒体管理器343可以检测用于再现各种媒体文件的格式，并可以通过使用适合于相关格式的编解码器来对媒体文件进行编码或解码。资源管理器344可以管理至少一个应用370的资源，诸如源代码、内存和/或存储空间等。
如图3所示，电源管理器345可以与基本输入/输出系统(BIOS) 一起操作，可以管理电池或电力，并可以提供用于操作的电力信息等。数据库管理器346可以管理数据库，使得能够产生、搜索和/或改变将由至少一个应用370使用的数据库。包管理器347可以管理以包文件的形式分发的应用的安装和/或更新。
连接或连接性管理器348可以管理诸如Wi-Fi和BT之类的无线连接。通知管理器349可以以不打扰用户的方式向用户显示或报告诸如到来消息、约会、接近警报等事件。位置管理器350可以管理电子设备的位置信息。图形管理器351可以管理要提供给用户的图形效果和/或与图形效果相关的用户界面。安全管理器352可以提供用于系统安全、用户认证等的各种安全功能。根据本公开的实施例，当电子设备(例如，电子设备101)具有电话功能时，中间件330还可以包括电话管理器(未示出)，用于管理电子设备的语音电话呼叫功能和/或视频电话呼叫功能。
中间件330可以通过上述内部元件模块的各种功能组合来产生和使用新的中间件模块。中间件330可以提供根据OS的类型而专门化的模块以提供不同功能。此外，中间件330可以动态删除现有元件中的一些，或可以添加新元件。因此，中间件330可以省略在本公开的各种实施例中描述的元件中的一些，还可以包括其他元件，或可以用执行相似功能并具有不同名称的元件来替代这些元件中的一些。
API 360(例如，API 133)是API编程功能的集合，并且可以根据OS而具有不同配置。例如，在Android或iOS的情况下，可以向每个平台提供一个API集。例如，在Tizen的情况下，可以向每个平台提供两个或更多个API集。
应用370(例如，应用134)可以包括例如预加载的应用和/或第三方应用。应用370(例如，应用134)可以包括例如主页应用371、拨号应用372、短消息服务(SMS)/多媒体消息服务(MMS)应用 373、即时消息(IM)应用374、浏览器应用375、相机应用376、闹钟应用377、联系人应用378、语音拨号应用379、电子邮件(e-mail) 应用380、日历应用381、媒体播放器应用382、相册应用383、时钟应用384以及任意其它合适和/或类似的应用。
编程模块310的至少一部分可以由存储在非暂时性计算机可读存储介质中的指令来实现。当通过一个或多个处理器(例如，一个或多个处理器210)执行指令时，所述一个或多个处理器可以执行与指令相对应的功能。非暂时性计算机可读存储介质可以是例如存储器230。编程模块310的至少一部分可以通过例如一个或多个处理器210实现 (例如，执行)。编程模块310的至少一部分可以包括例如用于执行一个或多个功能的模块、程序、例程、指令集和/或处理。
图4是示出了根据各种示例实施例的电子设备的前视图。
图5示出了根据各示例实施例的电子设备401的前表面。电子设备401可以包括显示设备410、壳体420、光学传感器430、听筒440、相机450和指纹传感器460。根据示例实施例，显示器410可以形成在显示设备401的整个前表面上。因此，壳体420可以不形成在电子设备401的前表面。
显示器410可以延伸到例如电子设备401的侧表面。此外，根据示例实施例，处理器410可以形成在显示设备401的前表面的一部分中。因此，壳体420可以形成在电子设备401的前表面剩余部分中。
显示器410可以被玻璃盖板620(见图6)保护。根据示例实施例，玻璃盖板620可以具有多个孔(或开口)。例如，玻璃盖板620 可以包括光学传感器孔430a、听筒孔440a、相机孔450a和指纹传感器孔(或主按钮孔)460a。玻璃盖板620还可以包括发光二极管(LED) 孔735(参见图7)。此外，玻璃盖板620还可以包括开口、孔或切除部分(例如，切口部分631(参见图6)。
根据本公开的各种示例实施例，光学传感器430、听筒440、相机450和指纹传感器460可以位于例如壳体420或显示器410的下端。根据本公开的各种示例实施例，光学传感器430、听筒440、相机450 和指纹传感器460可以被包括在例如显示器410中。光学传感器430可以包括例如接近传感器、照度传感器、虹膜传感器或UV传感器。
根据示例实施例，光学传感器430、听筒440、相机450和指纹传感器460的位置不限于图4的位置。例如，光学传感器430可以位于电子设备401的下端。
图5是示出了根据各种示例实施例的电子设备的后视图。
图5示出了根据各种示例实施例的电子设备501的后表面和侧表面。电子设备501可以包括壳体510、生物传感器520、相机530、接口540和扬声器550。
根据示例实施例，壳体510可以形成在电子设备501的后表面和侧表面。根据示例实施例，生物传感器520和相机530可以位于电子设备501的后表面。根据示例实施例，接口540和扬声器550可以位于电子设备501的侧表面。根据示例实施例，生物传感器520、相机530、接口540和扬声器550的位置不限于图5的位置。
图6是示出了根据示例实施例的电子设备的透视图和6视图。
参考图6，根据示例实施例的电子设备600可以包括壳体610、玻璃盖板620、显示面板630、相机模块640、听筒孔650和主按钮660。
壳体610可以包括面向第一方向(前表面)的第一表面611、面向与第一方向相反的第二方向(后表面)的第二表面612、以及包围第一方向表面611(或“前”表面)和第二表面612之间的空隙的侧表面613(或“后”表面)。
玻璃盖板620可以保护诸如电子设备600的显示面板630的配置。玻璃盖板620可以与电子设备600的至少前表面相对应。例如，玻璃盖板620可以占据整个前表面。玻璃盖板620可以占据前表面和侧表面的一部分。玻璃盖板620可以形成在平面中，或者形成在上端、下端、左侧端和/或右侧端弯曲的曲面中。玻璃盖板620可以由透明材料制成。玻璃盖板620可以由诸如增强玻璃、塑料(例如聚对苯二甲酸乙二酯(PET))或氧化铝的材料制成。
显示面板630可以设置在玻璃盖板620下方。显示面板630可以弯曲，使得左侧端、右侧端、上端和/或下端形成弯曲表面，并且可以设置在壳体610内。
显示面板630可以是占据电子设备的大部分前表面的全前显示器。显示面板630的放大可以改变其他配置的设置。例如，诸如相机模块 640和听筒(未示出)的配置可以设置在电子设备600的最外边缘处。
显示面板630可以包括活动区域632和非活动区域633。活动区域632可以通过玻璃盖板620的透明区域露出。活动区域632可以根据通过扫描线和数据线提供的电信号输出光。活动区域632的宽高比可以是例如18.5∶9。此外，活动区域632的宽高比可以包括4∶3、3∶2、 8∶5、16∶10、5∶3或21∶9。
根据示例实施例，活动区域632可以占据前表面和侧表面的至少一部分。例如，活动区域632可以设置成包围前表面和侧表面的形式。根据示例实施例的电子设备600的活动区域632还可以比通常的活动区域更靠近侧表面。
活动区域632的侧面部分可以执行可以调节音量的软按键的功能。可以基于用户握持状态或使用历史来改变软按键的位置。活动区域 632可以占据前表面的绝大部分(例如，前面区域的约90％或更多)。
非活动区域633可以是包围活动区域632的区域。根据示例实施例的电子设备600的非活动区域633可以比通常的电子设备600的非活动区域633更小。非活动区域633的至少一部分可以通过玻璃盖板 620露出。
非活动区域633可以是例如显示面板630的周边部分，并且可以是被不透明遮盖层覆盖的区域。不透明遮盖层可以通过在玻璃盖板 620中印刷一层而形成。水平方向的非活动区域633与垂直方向的非活动区域633之间的厚度比可以是例如1∶1、2∶1或3∶1。在另一示例中，上端的非活动区域633、侧面端的非活动区域633、下端的非活动区域633之间的厚度比可以是例如2∶1∶4。
显示面板630可以包括至少一个开口部分(或开口)或至少一个切口部分。例如，显示面板630可以包括形成在活动区域632的上端部分的至少一个开口部分631。显示面板630可以被弯曲，使得开口部分631位于角上并且可以设置在壳体610内。
如图6所示，当从电子设备600的前表面观察时，开口部分631 可以形成U形空间。电子设备600的各个模块可以通过由开口部分631 形成的空间暴露。
在本说明书中，触摸屏显示器可以意味着包括诸如触摸屏、玻璃盖板和/或偏振板的配置在内的模块以及显示面板630。
相机模块640可以设置在与至少一个开口部分或至少一个切口部分对应的位置。例如，相机模块640可以设置在由至少一个开口部分或至少一个切口部分形成的空间处。例如，相机模块640可以设置在由形成在活动区域632的上端部分处的开口部分631形成的空间处。相机模块640可以通过玻璃盖板620暴露在外。例如，在设置于玻璃盖板620下方的状态下，可以透过玻璃盖板620从外部观看相机模块 640。相机模块640可以检测透过玻璃盖板620从外部施加的光以获取图像。
根据示例实施例，相机模块640可以被设置成通过玻璃盖板620 的上端中心而露出。
根据示例实施例，相机模块640可以设置成与前表面的最外边缘相邻。
听筒孔650可以向壳体外部传送由设置在壳体610内的听筒产生的声音。听筒孔650可以形成在壳体610的前表面611处。例如，听筒孔650可以形成在侧表面613的金属框架中。
壳体610的前表面611可以形成为包括或合并具有预定曲率的侧表面613的一个金属框架中。如图6所示，电子设备600可以包括多个听筒孔650。通过在侧表面613形成听筒孔650，可以向外部传送由听筒产生的声音，而不影响占据电子设备101的前表面611的显示面板630的配置。在图6中，听筒孔650形成在壳体610的前表面611 处，但是本公开不限于此，并且听筒孔650可以形成在壳体610的侧表面613。
主按钮660可以设置在电子设备600的前表面的下端。主按钮660 可以是物理键或软按键。当主按钮660是物理键时，为了设置主按钮，显示面板630可以包括形成在活动区域632的下端的开口部分(例如，与上端的开口部分相同)或切口部分。主按钮660可以设置在由开口部分631(例如，或切口部分)形成的空间内。
主按钮660可以被实现为位于电子设备600的前表面611的下端的软按键(例如，由软件实现)。当主按钮660是软按键时，可以将指纹传感器设置在显示面板630的主按钮660的区域下方。玻璃盖板620 可以包括形成在设置有指纹传感器的位置处的凹部。
如上所述，根据示例实施例的电子设备600可以包括通过电子设备600的前表面611暴露的显示面板630和位于显示面板630内的相机模块640。
图7是示出了根据示例实施例的电子设备的前视图。
图7示出了根据示例实施例的电子设备701的前表面。在电子设备701的显示器(例如，全前显示器)750中显示内容(例如，图像) 750a。显示器750可以包括放大到一个侧表面(或两个侧表面)的边缘显示。例如，在电子设备701的前表面、在显示器750的上端和/ 或下端，壳体610可能被露出。在电子设备701的前表面、在显示器 750的左侧和/或右侧，壳体610可能被露出。根据本公开的各种示例实施例，在电子设备701的前表面、显示器750的左侧和/或右侧，壳体610可以不暴露。
显示器750包括主区域751和延伸区域752。延伸区域752可以包括在主区域751的上端部分延伸的第一延伸区域752a和在主区域 751的下端延伸的第二延伸区域752b。
一个或多个孔或“孔区域”(720、725、730和735中的至少一个) 可以位于第一延伸区域752a中。根据本公开的各种示例实施例，一个或多个孔区域740可以位于第二延伸区域752b中。
主区域751的大小可以大于延伸区域752的大小。第一延伸区域 752a的大小可以与第二延伸区域752b的大小相同或不同。例如，第二延伸区域752b的大小可以大于第一延伸区域752a的大小。
显示器750可以包括主区域751和第一延伸区域752a。显示器 750可以包括主区域751和第二延伸区域752b。此外，显示器750可以包括主区域751、第一延伸区域752a和第二延伸区域752b的整体。
主区域751可以包括位于主区域751的上端部分并连接到第一延伸区域752a的第一区域751a1。此外，主区域751可以包括位于主区域751的下端并连接到下端的第二延伸区域752b的第二区域751a2。第一区域751a1的大小可以与第二区域751a2的大小相同或不同。
根据本公开的各种示例实施例，第一区域751a1和/或第二区域 751a2可以是主区域751的边缘区域。第一区域751a1和/或第二区域 751a2可以与图像(或内容)的一侧的边缘区域对应。
根据本公开的各种示例实施例，在显示器750中，主区域751的大小可以是例如1440×2560像素。第一延伸区域752a的大小可以是 1440×216像素。第二延伸区域752b的大小可以是1440×216像素。第一区域751a1的大小可以是1440×10像素。此外，第二区域751a2 的大小可以是1440×10像素。
主区域751的大小、第一延伸区域752a的大小、第二延伸区域 752b的大小、第一区域751a1的大小和/或第二区域751a2的大小是示例，并且本领域普通技术人员容易理解，可以改变每一个的大小以与显示器750的宽高比相对应。
对第一区域751a1的分析或对第二区域751a2的分析可能意味着对位于图像(或内容)的一侧的边缘区域的分析。
处理器210可以分析第一区域751a1以将显示在主区域751中的内容750a放大并显示到第一延伸区域752a。处理器210可以分析第二区域751a2以将显示在主区域751中的内容750a放大并显示到第二延伸区域752b。
处理器210可以分析第一区域751a1和/或第二区域751a2以将显示在主区域751中的内容750a放大并显示到第一延伸区域752a和/ 或第二延伸区域752b。
第一延伸区域752a可以被划分为延伸区域752a1和延伸区域 752a2。延伸区域752a1的大小可以与延伸区域752a2的大小不同。延伸区域752a1的大小可以通过相机(或相机孔)730的位置来确定。当相机(或相机孔)730的中心(或光轴)位于比第一延伸区域752a的中心点(例如，像素中与第一延伸区域752a的长度对应的中间像素的位置)低的位置(例如，邻近主区域)时，延伸区域752a1的大小可以与延伸区域752a2的大小不同。
第二延伸区域752b可以被划分为延伸区域752b1和延伸区域 752b2。第二十一延伸区域752b1的大小可以与第二十二延伸区域 752b2的大小不同。延伸区域752b1的大小可以由指纹传感器(或主按钮)740的位置来确定。当指纹传感器740位于比第二延伸区域752b的中心点(例如，像素中与第二延伸区域的长度对应的中间像素的位置)高的位置(例如，与主区域相邻)时，延伸区域752b1的大小可以与延伸区域752b2的大小不同。
处理器210可以分析第一区域751a1以将显示在主区域751中的内容750a放大并显示到延伸区域752a2。此外，处理器210可以分析第二区域751a2以将显示在主区域751中的内容750a放大并显示到延伸区域752b2。
内容750a可以由处理器210显示在显示器750的主区域751中。显示在主区域751中的内容750a可以由处理器210放大到显示器750 的主区域751和第一延伸区域752a。显示在主区域751中的内容750a 可以由处理器210放大到显示器750的主区域751和第二延伸区域752b。显示在主区域751中的内容750a可以由处理器210放大到显示器750的主区域751、第一延伸区域752a和第二延伸区域752b。
显示在主区域751中的内容750a可以由处理器210放大到显示器750的主区域751、第一延伸区域752a和延伸区域752b2。此外，主区域751中显示的内容750a可以由处理器210放大到显示器750 的主区域751、延伸区域752a2延伸区域752b2。
在示例实施例中，前表面的孔、开口或切口部分可以被称为孔区域。在示例实施例中，侧表面的孔、开口或切口部分(例如，音量按钮或电源按钮)可以被称为孔区域。在示例实施例中，后表面的孔、开口或切口部分(例如，相机、闪光灯)可以被称为孔区域。
根据本公开的示例实施例的电子设备包括：壳体，包括面向第一方向的第一表面和面向与第一方向相反的第二方向的第二表面；触摸屏显示器，设置在第一表面和第二表面之间，通过第一表面暴露，并且具有主区域和延伸区域；孔区域，位于延伸区域；至少一个处理器，电连接到显示器；以及存储器，电连接到处理器，使得存储器存储处理器在执行功能时所执行的至少一个指令，并且处理器进行控制以分析选定内容的边缘区域，以由依据分析结果的干扰放大和/或无干扰中的一个来放大内容，并且在显示区域中显示内容。
在示例实施例中，当分析结果是干扰放大时，处理器可以进行控制以在主区域和延伸区域中显示内容，并且内容的放大可能受到孔区域的限制。
在示例实施例中，当分析结果是无干扰放大时，处理器可以进行控制以在主区域和延伸区域的部分区域中显示内容。
在示例实施例中，孔区域可以包括孔、开口和切口部分中的一个。
图8是示出了根据示例实施例的控制电子设备的方法的流程图，图9A至图9K是示出了根据示例实施例的控制电子设备的方法的图。
在图8的步骤810，电子设备可以由用户输入来选择所显示的图像。
参考图9A，在电子设备901的显示器950中，显示图像(或与图像对应的缩略图)951。
在电子设备901的显示器950中，显示图像(或与图像对应的快捷方式)(未在图9A示出)。根据本公开的各种示例实施例，在电子设备901的显示器950中，可以通过应用(例如，经由图集相片应用的执行)显示一个或多个图像(或与图像对应的缩略图)951-1至951-19。
应用(例如，相片应用)是示例，并且应该是可以显示图像的应用(例如，web浏览器)。应用例如可以包括显示图像或视频的视频播放器。
根据示例实施例的电子设备901的显示器950可以显示包括图像 (或视频)的应用屏幕、主屏幕或锁屏。
参考图9B，在一个图像951-10中，接收到第一用户输入(例如，触摸或悬停)990。
处理器210可以使用面板262来检测第一用户输入990。处理器 210可以使用从面板262接收的电信号来计算与第一用户输入990对应的第一用户输入位置(例如，X1坐标和Y1坐标)990a。
根据各种示例实施例，处理器210可以在存储器230中存储第一用户输入位置990a、检测到的触摸的触摸检测时间(例如，11:15AM) 以及与触摸对应的触摸信息。
根据示例实施例，在另一图像951-7中，可以接收第二用户输入 (例如，触摸或悬停)991。
处理器210可以使用面板262来检测第二用户输入991。处理器 210可以使用从面板262接收的电信号来计算与第二用户输入991对应的第二用户输入位置(例如，X1坐标和Y1坐标)991a。
处理器210可以在存储器中存储第二用户输入位置991a、检测到的触摸的触摸检测时间(例如，11:15AM)以及与触摸对应的触摸信息。
接触显示器950的第一用户输入990和/或第二用户输入991可以通过包括拇指在内的手指或可触摸输入笔(或触笔(未示出))中一个产生。
参考图8，步骤820，处理器210可以进行控制以分析与第二用户输入990对应的图像951-7并在显示器950中显示图像951-7。在示例实施例中，图像可以包括图像951-10和951-7。在示例实施例中，图像可以包括图像951-1至951-20。此外，在示例实施例中，图像可以具有包括图像的意义(已经存储在电子设备中或能够被下载到电子设备)。
参考图9B，处理器210分析与选定的缩略图对应的图像951-10 或951-7。处理器210可以分析与选定的缩略图的图像对应的第一区域751a1。处理器210可以分析包括在第一区域751a1中的像素数(例如，1440×10像素)。此外，处理器210可以分析由包括在第一区域 751a1中的像素数(例如，1440×10像素)指示的的一个或更多个像素(例如，10个像素中的1、3、5、7、9个像素，2、5、8个像素或随机像素)。
处理器210可以分析每个相邻的像素的颜色。处理器210可以分析相邻的每个像素的色度。根据本公开的各种示例实施例，处理器210 可以分析相邻的每个像素的纹理。即，处理器210可以分析每个像素的颜色、色度或纹理的值。与这样的像素分析对应的具体算法是众所周知的技术；因此，可以省略其详细描述。
当每个像素的颜色、色度或纹理之间的差异与特定阈值(例如，30％，可以改变)或更小匹配时，处理器210可以选择执行将图像放大到环绕第一延伸区域752a。此外，当每个像素的颜色、色度或纹理之间的差异超过预定阈值(例如，30％，可以改变)时，处理器210可以确定图像不能被放大到第一延伸区域752a。
处理器210可以通过分析第一区域751a1来确定将图像放大到第一延伸区域752a(例如，背景颜色的放大)。
处理器210可以分析与选定的缩略图对应的图像的第二区域 751a2。处理器210可以分析包括在第二区域751a2(例如，1440×10 像素)中的像素。
通过处理器210分析第二区域751a2与通过处理器210分析第一区域751a1基本相似；因此，可以省略其详细描述。
处理器210可以分析包括在第二区域751a2中的每个像素的颜色、色度或纹理的值。当每个像素的颜色、色度或纹理之间的差异是阈值 (例如，30)或更小时，处理器210可以确定将图像放大到第二延伸区域752b。此外，当每个像素的颜色、色度或纹理之间的差异超过阈值(例如，30％，可以改变)时，处理器210可以确定图像不能被放大到第二延伸区域752b。
处理器210可以通过对第二区域751a2的分析(例如，与预定阈值变量进行比较)来确定图像不能被放大到第二延伸区域752b。在这种情况下，处理器210还可以确定将图像放大到第二十二区域752b2。例如，当第二区域751a2中的每个像素的颜色、色度或纹理之间的差异为(在一个实施例中)50％或更小时，处理器210可以确定将图像放大到第二十二区域752b2。
处理器210可以顺序地执行对第一区域751a1的分析和对第二区域751a2的分析，或者可以以相反的顺序执行对第一区域751a1的分析和对第二区域751a2的分析。
在图8的步骤830，处理器可以确定是否使用干扰放大的处理来放大图像。
即，处理器210可以确定是否放大图像的干扰。处理器210可以根据分析结果(例如，阈值或更小)来确定是否将图像放大到第一延伸区域752a和第二延伸区域752b中的至少一个区域。
在示例实施例中，图像的放大可以包括图像干扰放大和图像无干扰放大。图像干扰放大可能意味着通过对第一区域751a1的分析(例如，阈值或更小)或对第二区域751a2的分析(例如，阈值或更小) 将图像放大到第一延伸区域752a和第二延伸区域752b中的至少一个区域。图像的放大可以包括图像的延伸。
图像的“干扰放大”可能意味着由前表面的孔、开口或切口部分造成的对图像放大的干扰(例如，部分区域(或孔区域))中的图像放大限制(或部分区域(或孔区域)中的图像显示限制)。此外，图像干扰放大可能意味着由与设备的前表面的孔、开口或切口部分对应的组成元件(例如，传感器、听筒、相机、主按钮或指纹传感器)造成的对图像放大的干扰(例如，部分区域中的图像放大限制(或图像显示限制))。
图像“无干扰放大”可能意味着前表面的孔、开口或切口部分对图像放大无干扰(例如，放大到前表面的孔、开口或切口部分的周边) 使得孔不干扰图像的显示。此外，图像干扰放大可能意味着与前表面的孔、开口或切口部分对应的组成元件(例如，传感器、听筒、相机、主按钮或指纹传感器)对图像放大无干扰。
图像无干扰放大可能意味着通过对第一区域751a1的分析(例如，多于阈值)或对第二区域751a2的分析(例如，多于阈值)将图像放大到区域752a2和延伸区域752b2中的至少一个区域。
根据分析结果，当第一区域751a1和第二区域751a2均为阈值以下时，处理器210可以确定图像干扰放大。根据分析结果，当第一区域751a1和第二区域751a2中的一个是阈值或更小时，处理器210可以确定图像干扰放大。
此外，根据分析结果，当第一区域751a1和第二区域751a2均超过阈值时，处理器210可以确定图像无干扰放大。
根据图像干扰放大的确定，处理器210可以将图像放大到主区域 751和第一延伸区域752a的放大、主区域751和第二延伸区域752b 的放大、以及主区域751与第一延伸区域752a和第二延伸区域752b 的放大中的一个。
返回图8的步骤830，如果处理器确定利用“图像干扰”放大，则处理在步骤840继续。在步骤830，如果图像干扰未被放大(例如，图像无干扰放大)，则处理在步骤870继续。
在步骤840，处理器210可以确定是否使用“图像整体放大”或“图像部分放大”来放大整个图像。
即，当选择“图像干扰”来放大图像时，则处理器210可以根据分析结果进行确定以利用图像整体放大和图像部分放大中的一个。
“图像整体放大”可能意味着将图像放大到显示器的整个区域 (包括主区域751、第一延伸区域752a和第二延伸区域752b)。此外，显示器的整个区域可以被称为显示器的干扰区域。
“图像部分放大”可以意味着将图像放大到显示器的部分区域 (主区域751和第一延伸区域752a、或者第一延伸区域752a和第二延伸区域752b)。此外，显示器的部分区域可以被称为显示器的无干扰区域。
在图8的步骤840，如果放大了整个图像，则处理在步骤850继续。在步骤840，如果没有放大整个图像(例如，图像部分放大)，则处理在步骤860继续。
在步骤850，在整个屏幕上显示放大的图像。
参考图9C，处理器210可以进行控制以在整个屏幕上放大和显示图像(例如，951-7)。根据分析结果，处理器210可以进行控制以在整个屏幕上放大和显示图像951-7。整个屏幕是包括主区域751、第一延伸区域752a和第二延伸区域752b的区域。整个屏幕的大小可能是 1440x2992像素。
可以根据电子设备901的屏幕大小和/或宽高比来改变整个屏幕的大小。
在示例实施例中，可以在整个屏幕上显示应用的屏幕以及图像。
参考图9F，可以在整个屏幕751、752a和752b上显示应用屏幕 (例如，通信应用屏幕953)。
在分析第一区域和第二区域之前，处理器210可以进行控制以在主区域751中显示通信应用屏幕953。当设置(例如，干扰放大和无干扰放大中的一个)不存在时，处理器210可以控制在主区域751中显示通信应用屏幕953。
处理器210可以分析通信应用屏幕953的第一区域和第二区域，以确定通信应用屏幕953中的干扰放大和无干扰放大中的一个。处理器210可以根据分析结果(例如，阈值或更小)来放大通信应用屏幕 953的干扰。
处理器210可以根据分析结果(例如，阈值或更小)进行控制以将通信应用屏幕953放大并显示到整个屏幕。
应用(例如，通信应用)是示例，并且本公开不限于此，并且可以是已经安装在电子设备901中的应用(例如，音乐应用、运动图像应用)或可以被下载安装在电子设备901中的应用。
图9J和9K示出了在整个屏幕上放大的图像的示例。
图9I示出了例如锁屏。在锁屏中，图像957a可以被放大并显示在整个屏幕951、952a和952b上。处理器210可以根据分析结果(例如，阈值或更小)进行控制以在整个屏幕951、952a和952b上放大和显示图像957a。
9K示出了例如主屏幕。在主屏幕中，图像957b可以被放大并显示在整个屏幕951、952a和952b上。处理器210可以根据分析结果(例如，阈值或更小)进行控制以在整个屏幕951、952a和952b上放大和显示图像957b。处理器210可以使快捷方式和显示在快捷方式后面的托盘957t位于在主屏幕上，而不受前表面的孔、开口或切口部分的干扰。
托盘957t可以具有透明度(例如，60-80％，可以通过设置来改变)。此外，托盘987t可以显示成与快捷方式和放大图像957b不同的颜色。
在图8的步骤850，当在整个屏幕上显示放大的图像时，终止控制电子设备的孔区域的方法的处理。
在步骤840，如果没有放大整个图像(例如，图像部分放大)，则处理在步骤860继续。
在步骤860，在整个屏幕上显示部分放大的图像。
参考图9D，处理器210可以进行控制以在整个屏幕的部分区域中放大和显示图像(例如，951-10)。根据分析结果，处理器210可以进行控制以在整个屏幕的部分区域中放大和显示图像951-10。整个屏幕的部分区域可以意味着主区域751和第一延伸区域752a、或者主区域751和第二延伸区域752b。整个屏幕的部分区域的大小可以是1440 ×2776像素。
在示例实施例中，整个屏幕的增加的部分区域还可以包括延伸区域752a2和延伸区域725b2中的一个。处理器210可以进行控制以在整个屏幕的增加的部分区域中放大和显示图像(例如，951-10)。
整个屏幕的增加的部分区域可以包括主区域751、第一延伸区域 752a和延伸区域752b2。此外，整个屏幕的增加的部分区域可以包括主区域751、第二延伸区域752b和延伸区域752a2。根据示例实施例的整个屏幕的部分区域的大小可以是1440×2856像素。
可以根据电子设备901的屏幕大小和/或宽高比来改变整个屏幕的部分区域的大小。此外，可以根据电子设备901的屏幕大小和/或宽高比来改变整个屏幕的增加的部分区域的大小。
在图8的步骤860，当在整个屏幕的部分区域(或整个屏幕的增加的部分区域)中显示放大的图像时，终止处理控制电子设备的孔区域的方法的处理。
在步骤830，如果不利用“图像干扰”放大(例如，图像无干扰放大)，则处理在步骤870继续。
在步骤870，确定图像使用“无干扰”放大来放大图像。
处理器210可以确定是否放大图像无干扰。图像使用“无干扰”的放大可能意味着通过对第一区域751a1的分析(例如，大于阈值) 或对第二区域751a2的分析(例如，大于阈值)将图像(例如，951-13) 放大到区域752a2和延伸区域752b2。
根据分析结果，当图像的第一区域751a1和第二区域751a2(例如，951-13)均大于阈值时，处理器210可以确定是否放大图像无干扰。
根据确定图像无干扰的放大，处理器210可以将图像(例如， 951-13)放大到主区域751、区域752a2和延伸区域752b2。
在图8的步骤870，如果确定利用图像“无干扰”放大，则处理在步骤880继续。在步骤870，如果不利用图像“无干扰”放大，则处理在步骤890继续。
在步骤880，在整个屏幕上显示应用“无干扰”放大的图像。
参考图9E，处理器210可以进行控制以在整个屏幕的部分区域 (例如，无干扰区域951、952a2、952b2)中放大和显示图像(例如， 951-13)。根据分析结果，处理器210可以在整个屏幕的无干扰区域 951、952a2和952b2中放大和显示图像951-13。整个屏幕的无干扰区域可以意味着主区域751和第一延伸区域752a、或者主区域751和第二延伸区域752b。整个屏幕的无干扰区域的大小可以是1440×2710 像素。无干扰区域的大小可以是整个屏幕的大小的90.6％。
可以根据电子设备901的屏幕大小和/或宽高比来改变整个屏幕的无干扰区域的大小。此外，可以根据电子设备901的屏幕的孔、开口或切口部分的位置和/或大小来改变整个屏幕的无干扰区域的大小。
在图8的步骤880，当在整个屏幕的无干扰区域中显示放大的图像时，终止控制电子设备的孔区域的方法的处理。
在步骤870，如果不利用图像无干扰放大，则处理在步骤890继续。
在步骤890，在主区域中显示图像。
当不对图像应用干扰放大和无干扰放大(或者当没有设置干扰放大和无干扰放大)时，处理器210可以进行控制以在主区域751中显示图像(例如，951-17)。整个屏幕的主区域的大小可以是1440×2560 像素。主区域的大小可以是整个屏幕的大小的85.6％。
在示例实施例中，在执行运动图像应用时，可以在延伸区域752a 和752b中显示字幕954。此外，可以在主区域751中显示的应用屏幕的一侧(例如，延伸区域752a和752b)上显示文本(或字幕)。
参考图9G，可以在整个屏幕951、952a和952b上显示运动图像应用屏幕954。此外，可以在主区域751中显示运动图像应用屏幕954。
在分析第一区域和第二区域之前，处理器210可以进行控制以在主区域751中显示运动图像应用屏幕954。当设置(例如，干扰放大和无干扰放大中的一个)不存在时，处理器210可以控制在主区域751 中显示运动图像应用屏幕954。
处理器210可以分析运动图像应用屏幕954的第一区域和第二区域，并确定使用运动图像应用屏幕954的干扰放大和无干扰放大。处理器210可以根据分析结果(例如，阈值或更小)来放大运动图像应用屏幕954的干扰。处理器210可以根据分析结果(例如，阈值或更小)在整个屏幕上放大并显示运动图像应用屏幕954。
处理器210可以根据分析结果(例如，大于阈值)进行控制以在主区域751中显示运动图像应用屏幕954。此外，处理器210可以根据分析结果(例如，大于阈值)进行控制以在主区域751和延伸区域 752b2中显示运动图像应用屏幕954。
运动图像应用屏幕954可以包括运动图像显示区域954a和文本提供区域(或字幕区域)954b。运动图像显示区域954a可以是主区域 751。运动图像显示区域954a可以包括主区域751的一部分和第一延伸区域752a。运动图像显示区域954a可以包括主区域751的一部分和第二延伸区域752b。此外，运动图像显示区域954a可以包括主区域751、第一延伸区域752a的一部分和第二延伸区域752b的一部分。
文本提供区域954b可以是一个或多个。文本提供区域954b可以包括第一延伸区域752a的一部分或全部。文本提供区域954b可以包括第二延伸区域752b的一部分或全部。此外，文本提供区域954b可以包括第一延伸区域752a的一部分和第二延伸区域752b的一部分或全部。
在示例实施例中，处理器210可以进行控制以在运动图像显示区域(或主区域)954a中显示运动图像，并在文本提供区域(或延伸区域的一部分)954b中显示字幕954。
在文本提供区域954b中，字幕954的背景可以是黑色、白色或灰色。此外，在文本提供区域954b中，字幕954的背景可以是单色背景或多种颜色的背景。在文本提供区域954b中，字幕954的颜色应与背景区分开。
字幕954的方向(或流动)可以被确定为与电子设备901的方向对应。例如，当电子设备901的方向为横向时，字幕954的方向可以是纵向的。此外，当电子设备901的方向是纵向时，字幕954的方向可以是横向的。
在文本提供区域954b中，字幕954可以被显示在不受孔、开口或切口部分干扰的部分区域(例如，延伸区域752b2)中。在文本提供区域954b中，字幕954可以显示在部分区域(例如，延伸区域752a2 或第二十二延伸区域752b2)中。
在示例实施例中，文本(例如，报警(或通知))955t可以显示于在主区域751中显示的应用屏幕的一侧(例如，延伸区域752a和 752b)。
参考图9H，主区域751可以被显示在执行的应用屏幕(例如， web浏览器)955上。
处理器210可以分析应用屏幕955的第一区域和第二区域以确定应用屏幕955的干扰放大和无干扰放大中的一个。
处理器210可以根据分析结果(例如，大于阈值)进行控制以在主区域751中显示应用屏幕955。
与应用程序屏幕分开，与报警(或通知)对应的文本955t可以显示在延伸区域752a或752b中。处理器210可以进行控制以在延伸区域752a或752b中显示与报警(或通知)的对应的文本955t。
当在延伸区域752a或752b中显示文本955t时，处理器210可以逐渐移动(例如，沿着箭头955a的方向)与报警(或通知)对应的文本955t。当在延伸区域752a或752b中显示文本955t时，处理器210 可以进行控制以显示与报警(或通知)对应的文本955t，避开孔、开口或切口部分的位置(例如，无干扰)。此外，当在延伸区域752a或 752b中显示文本955t时，处理器210可以逐渐移动(例如，箭头955a 的方向)与报警(或通知)对应的文本955t，以避开孔、开口或切口部分的位置(例如，无干扰)。
在示例实施例中，在主区域751中显示的应用屏幕的一侧(例如，延伸区域752a和752b)，可以显示图像(或符号、图标)956i。
参考图9I，执行的应用程序屏幕(例如，web浏览器)955可以显示在主区域751中。处理器210可以分析应用屏幕956的第一区域和第二区域，并确定应用屏幕956的干扰放大和无干扰放大中的一个。处理器210可以根据分析结果(例如，大于阈值)进行控制以在主区域751中显示应用屏幕956。
与应用屏幕分开地，在延伸区域752a或752b的孔、开口或切口部分的位置处，可以显示与遮挡对应的图像956i。处理器210可以进行控制以在开口或切口部分的位置处显示与第一延伸区域752a和第二延伸区域752b中的至少一个中的遮挡对应的图像956i。图像956i 是与相机(或相机孔)730对应的图像的示例。图像956i的大小可以大于相机(或相机孔)730的大小。此外，图像956i应当具有覆盖相机(或相机孔)730的大小。
本领域普通技术人员可以容易地理解，存在与图7的孔、开口或切口部分的位置720至740或631对应的各种图像以及上述图像。
在图8的步骤890，当在整个屏幕的主区域中显示图像时，终止控制电子设备的孔区域的方法的处理。
图10是示出了根据示例实施例的控制电子设备的方法的流程图，图11A至图11F是示出了根据示例实施例的控制电子设备的方法的图。
在图10的步骤1010，检测到屏幕上的触摸输入。
参考图11A和11E，在电子设备901的显示器950中，接收第十一用户输入(例如，触摸或悬停)992。用户输入992可以被检测为在电子设备901的显示器950的第一延伸区域952a中此外，在从显示有应用(例如，相片应用)的主区域751延续的第一延伸区域952a中可以检测到用户输入9922。
参考图11E，可以在第一孔(相机或相机孔)725的外边缘区域 726中接收用户输入992。第一孔725可以与开口部分或切口部分720 至740或631对应。例如，当第一孔是相机(或相机孔)时，第二孔可以与光学传感器对应。
在图11E中，外边缘区域726和第一孔(相机或相机孔)725之间的间隙d1可以是2.5mm。此外，外边缘区域726与第一孔(相机或相机孔)725之间的间隙d1可以是1mm≤d1≤18mm。间隙d1是示例，并且可以改变。
在图11E中，第一外边缘区域726和第一孔(相机或相机孔)725 之间的间隙d2可以是2.5mm。第一外边缘区域726和第二外边缘区域 727之间的间隙d3可以是2.0mm。第一外边缘区域726和第一孔(相机或相机孔)725之间的间隙d2可以是1mm≤d1≤10mm。此外，第一外边缘区域726和第二外边缘区域727之间的间隙d3可以是1mm≤d1 ≤8mm。可以由第一外边缘区域726和第二外边缘区域727来检测精确使用的输入。间隙d2和d3是示例，并且可以改变。
应用(例如，相片应用)是示例，并且应当是可以在电子设备901 中执行或安装的应用(例如，web浏览器)。
处理器210可以使用面板262来检测用户输入992。处理器210 可以使用从面板262接收的电信号计算与用户输入992对应的第十一用户输入位置(例如，X11坐标和Y11坐标)992a。
处理器210可以在存储器中存储第十一用户输入位置990a、检测到的触摸的触摸检测时间(例如，11:16AM)以及与触摸对应的触摸信息。
在图10的步骤1020，检测触摸输入的连续移动的方向。
参考图11B，在电子设备901的显示器950中接收到用户输入(例如，触摸或悬停)992的连续移动。
处理器210可以使用面板262检测用户输入992的连续移动(例如，与连续触摸对应的多个X坐标和多个Y坐标)。处理器210可以使用从面板262接收的电信号计算与用户输入992对应的第十一用户输入的连续移动位置(例如，多个X坐标和多个Y坐标)992a和992b。
在第一外边缘区域726，用户输入992的连续移动(例如，从初始位置992a到最终位置992b的移动)可能指示输入到显示器750的触摸手势。在第一外边缘区域726，用户输入992的连续移动(例如，从初始位置992a到相机(或相机孔)725的移动)可能意味着输入到显示器750的触摸手势。在第一外边缘区域726，用户输入992的连续移动(例如，经由相机(或相机孔)725从初始位置992a到外边缘区域726的移动)可能意味着输入到显示器750的触摸手势。此外，在第一外边缘区域726中，用户输入992的连续移动(例如，经由相机(或相机孔)725从初始位置992a到第一外边缘区域726的移动) 可能意味着输入到显示器750的触摸手势。
显示器750的触摸手势可以包括使用用户输入992的位置992a 作为初始位置的滑动、拖动或轻扫。
处理器210可以使用所存储的用户输入的连续移动位置来确定用户输入的连续移动的方向。在图11B中，处理器210可以确定用户输入到第一孔725的方向的连续移动方向。
在图10的步骤1030，处理器可以检测触摸输入移动到与第一孔 725相对应的位置。
参考图11b，用户输入的连续移动到达第一孔725。此外，用户输入的连续移动可以经过第一孔725。处理器210可以使用所存储的用户输入的连续移动位置来确定用户输入的连续移动到达第一孔725。
在图10的步骤1040，可以执行与到达第一孔相对应的功能(例如，响应于触摸输入到达相应的位置)。
参考图11C，当检测到用户输入的连续移动到达第一孔725时，处理器210可以执行快捷面板。然而，请注意，处理器210可以配置为执行响应于用户输入的连续移动到达第一孔725来执行任何功能 (例如，快捷面板960的调用)。处理器210可以执行响应于用户输入的连续移动到达第一孔725来执行功能(例如，执行预设面板，未示出)。快捷面板960的执行可以包括预设面板(未示出)的执行。
处理器210还可以响应于用户输入的连续移动到达任何孔(例如，第n个孔)来执行功能。处理器210可以响应于用户输入的连接移动到达第n个孔来执行第n个孔处的预设功能。
例如，当第二孔730是相机或相机孔时，处理器210可以响应于用户输入的连续移动到达第二孔730而执行截屏功能或相机功能。当第三孔725是听筒或听筒孔时，处理器210可以响应于用户输入的连续移动到达第三孔725来执行语音记录或S语音可访问性(例如，基于语音识别的数据获取或执行)。此外，当第四孔740是指纹传感器(或主按钮)孔时，处理器210可以执行与用户输入的连续移动到达第四孔740对应的指纹识别和三星付费的功能中的一个。
在示例实施例中，可以通过接收第n个孔处的用户输入以及用户输入的连续移动到达第n个孔来实现与第n个孔对应的功能。
在外边缘区域726中，第n个孔的第一外边缘区域726和第二外边缘区域727如图11E(a)或11E(b)所示实现，当检测到用户输入时，处理器210可以执行与第n个孔相对应的功能。
在示例实施例中，在整个屏幕751、752a和752b上显示应用屏幕(例如，web浏览器)。
参考图11D，在屏幕的上端(例如，包括第一延伸区域752a的一部分)，可以显示平视(head-up)通知961。此外，在屏幕的主区域中，可以显示平视通知961。
处理器210可以执行响应于用户输入的连续移动到达孔相对应的功能。孔可以是例如听筒孔725、相机孔730和指纹传感器孔740。孔还可以包括光学传感器孔720。此外，第十一孔可以包括电子设备901 的前孔或后孔(例如，后置相机孔、LED孔)。
在平视通知961处产生的用户的用户输入993。用户可以输入从的初始位置993a到最终位置(例如，993b、993c或993d)的连续移动。
处理器210可以执行响应于所检测的用户输入993的连续移动 (例如，从初始位置993a到最终位置(例如，993b、993c或993d)) 的到达的功能。
当用户输入993到达孔处时，操作基本类似于(例如，用户输入之间的差异)用户输入的连续移动到达第一孔；因此，将省略其详细描述。
与用户的连续移动到达平视通知961中的孔对应的功能可以包括：保持平视通知(从初始位置993a到最终位置993b)、删除平视通知(从初始位置993a到最终位置993c)、或者存储平视通知(从初始位置993a 到最终位置993d)。该功能被理解为仅是示例，并且描述是从电子设备901提供的示例功能。
在示例实施例中，提供与用户输入的连续移动(或用户输入)相对应的视觉反馈995a至995f。
参考图11F(a)至11F(c)所示，处理器210可以提供与接收的用户输入的连续移动相对应的视觉反馈995a至995c。
视觉反馈995a至995c可以与用户输入的连续移动的方向或轨迹相对应地显示。可以使用与接收的用户输入的初始位置相对应的孔的形状(例如，圆形、椭圆形)来显示视觉反馈995a至995c。此外，通过使用例如，添加到与接收的用户输入的初始位置相对应的孔的形状(例如，圆形、椭圆形)的颜色和亮度，视觉反馈995a至995c可以显示成与用户输入的连续移动的方向或轨迹相对应。
参考图11F(d)至11F(f)，处理器210可以提供与接收的用户输入相对应的视觉反馈995e至995f。
视觉反馈995e至995f可以显示成与接收的用户输入的位置相对应。通过使用与接收的用户输入的位置相对应的孔的形状(例如，圆形、椭圆形)，可以显示视觉反馈995e至995f。此外，使用添加到与接收的用户输入的初始位置相对应的孔的形状(例如，圆形、椭圆形) 的颜色和亮度，视觉反馈995e至995f可以显示成逐渐放大。
在图10的步骤1040，当响应于检测到用户输入到达第一孔处而执行功能时，终止控制电子设备的孔区域的方法的处理。
根据本公开的示例实施例的控制在显示器中具有至少一个孔区域的电子设备的孔区域的方法包括以下操作：选择显示的内容；通过对内容的边缘分析来确定干扰放大和无干扰放大中的一个；并且依据干扰放大和无干扰放大中的一个来放大内容，使得所述孔区域由相机、听筒、光学传感器和主按钮中的一个形成。
在示例实施例中，显示器可以包括主区域和延伸区域，并且孔区域可以位于延伸区域。
在示例实施例中，延伸区域可以被区分为位于主区域的上端部分的第一延伸区域和位于主区域的下端部分的第二延伸区域。
在示例实施例中，第一延伸区域可以被区分为孔区域的一个孔区域位于其中的延伸区域和位于所述延伸区域的下端部分的第十二延伸区域。
在示例实施例中，第二延伸区域可以被区分为孔区域的另一孔区域位于其中的延伸区域和位于所述延伸区域的上端部分的延伸区域。
在示例实施例中，主区域可以被区分为连接到第一延伸区域的第一区域和连接到第二延伸区域的第二区域，并且对内容的边缘分析可以包括对与第一区域对应的内容的边缘分析和对与第二区域对应的内容的边缘分析。
在示例实施例中，干扰放大可以是由孔区域限制内容的放大的放大，并且无干扰放大可以是不由孔区域限制内容的放大的放大。
在示例实施例中，干扰放大可以是在显示器的干扰区域中放大和显示内容，并且显示器的干扰区域可以包括主区域和延伸区域。
在示例实施例中，干扰放大可以限制由孔区域放大的内容的部分区域的显示。
在示例实施例中，无干扰放大可以是在显示器的无干扰区域中放大和显示内容，并且显示器的无干扰区域可以包括主区域和延伸区域的部分区域。
在示例实施例中，第一延伸区域的面积和第二延伸区域的面积可以不同。
在示例实施例中，延伸区域的面积和延伸区域的面积可以不同。
在示例实施例中，第延伸区域的面积和延伸区域的面积可以不同。
在示例实施例中，延伸区域的面积可以大于第一区域和第二区域中的一个区域的面积。
在示例实施例中，一个孔区域可以位于第一延伸区域中以与相机对应。
在示例实施例中，孔区域可以包括孔、开口和切口部分中的一个。
本公开中使用的术语“模块”可能意味着例如包括硬件、软件和固件的一个或多个组合的单元。“模块”可以与诸如“单元”、“逻辑”、“逻辑块”、“组件”、“电路”等术语互换。“模块”可以是形成为一个主体的组件的最小单元或其一部分。“模块”可以是用于执行一个或多个功能的最小单元或其一部分。可以用机械方式或电子方式来实现“模块”。例如，根据本公开的实施例的“模块”可以包括用于执行特定操作的专用IC(ASIC)芯片、现场可编程门阵列(FPGA)、和可编程逻辑器件中的至少一项，这些设备都是已知的或将来会开发的。
计算机可读介质的示例包括：磁介质，例如硬盘、软盘和磁带；光介质，例如致密盘只读存储器(CD-ROM)和数字多功能盘(DVD)；磁光介质，例如光磁软盘；以及专门被配置为存储和执行程序指令(例如，编程模块)的硬件设备，例如ROM、RAM、闪存等。程序指令的示例包括：由诸如编译器等汇编语言产生的机器代码指令，以及计算机中使用解释器可执行的高级编程语言产生的代码指令等。所描述的硬件设备可以被配置为用作一个或多个软件模块以执行上述操作和方法，反之亦然。
根据本公开实施例的模块或编程模块可以包括一个或多个组件，去除上述组件中的一部分，或者包括新的组件。由根据本公开的模块、编程模块或其它组件执行的操作可以按顺序、并行、重复或启发式方式来执行。部分操作可以按其他顺序来执行，跳过，或者与附加操作一起来执行。
根据本公开的各种实施例的用于调整电子设备中的相机暴露的方法可以根据预览图像的整个区域识别由用户选择的部分区域的暴露状态，并且基于暴露状态的识别结果来提供用于正确地调整暴露的屏幕。
虽然已经参考本公开的各种实施例显示和描述了本公开，但是本领域技术人员将会理解，在不脱离定义的本公开的情况下，可以在形式和细节上进行各种改变由所附权利要求及其等同物。
根据本公开的各种示例实施例，通过提供可以通过具有主区域和延伸区域的显示器来放大内容的具有孔区域的电子设备及控制其孔区域的方法，可以向用户提供自然屏幕可用性。

Claims (9)

1.一种电子设备，包括：
壳体，包括面向第一方向的第一表面，以及面向与所述第一方向相反的第二方向的第二表面；
触摸屏显示器，设置在所述第一表面和所述第二表面之间，所述触摸屏显示器包括主区域和延伸区域，其中，所述延伸区域包括沿着所述主区域的顶端设置的第一延伸区域和沿着所述主区域的底端设置的第二延伸区域中的至少一个，所述第一延伸区域或所述第二延伸区域包括第一子区域和第二子区域，所述第二子区域包括至少一个开口；以及
处理器，电耦接到所述触摸屏显示器，被配置为
检测对要在所述触摸屏显示器上显示的内容的选择；
确定沿着所述主区域与所述延伸区域之间的边界设置的与所述主区域的边缘区域相对应的所选内容的一部分的特征是否等于或小于第一阈值；
当所述特征大于所述第一阈值时，仅在所述主区域上显示所选内容；
确定所述特征是否等于或小于第二阈值；
当所述特征大于所述第二阈值且等于或小于所述第一阈值时，在所述主区域和所述第一子区域上显示所选内容，使得所选内容被放大以显示在所述第一子区域上；以及
当所述特征等于或小于所述第二阈值时，在所述主区域和所述延伸区域上显示所选内容，使得所选内容被放大以显示在所述延伸区域上，
其中，所述第一阈值大于所述第二阈值，
其中，所述第一子区域设置在所述边缘区域与所述第二子区域之间。
2.根据权利要求1所述的电子设备，其中，从所述边缘区域到所述第一子区域显示所选内容的放大图，或者
其中，从所述边缘区域到所述第二子区域显示所选内容的放大图。
3.一种电子设备的方法，包括：
限定所述电子设备的触摸屏显示器的主区域和延伸区域；
检测对要显示在所述触摸屏显示器上的内容的选择；
确定沿着所述主区域与所述延伸区域之间的边界设置的与所述主区域的边缘区域相对应的所选内容的一部分的特征是否等于或小于第一阈值；
当所述特征大于所述第一阈值时，仅在所述主区域上显示所选内容；
确定所述特征是否等于或小于第二阈值；
当所述特征大于所述第二阈值且等于或小于所述第一阈值时，在所述主区域和所述延伸区域的第一子区域上显示所选内容，使得所选内容被放大以显示在所述第一子区域上；以及
当所述特征等于或小于所述第二阈值时，在所述主区域和所述延伸区域上显示所选内容，使得所选内容被放大以显示在所述延伸区域上，
其中，所述第一阈值大于所述第二阈值，
其中，所述延伸区域包括沿着所述主区域的顶端设置的第一延伸区域和沿着所述主区域的底端设置的第二延伸区域中的至少一个，
其中，所述第一延伸区域或所述第二延伸区域包括所述第一子区域和第二子区域，
其中，所述第一子区域设置在所述边缘区域与所述第二子区域之间。
4.根据权利要求3所述的方法，其中，所述触摸屏显示器包括形成在所述延伸区域中的至少一个孔。
5.根据权利要求3所述的方法，其中，所述第二子区域包括所述至少一个孔。
6.根据权利要求3所述的方法，其中，所述边缘区域包括与所述第一延伸区域相邻的第一边缘区域和与所述第二延伸区域相邻的第二边缘区域中的至少一个。
7.根据权利要求5所述的方法，其中，从所述边缘区域到所述第一子区域显示所选内容的放大图。
8.根据权利要求5所述的方法，其中，从所述边缘区域到所述第二子区域显示所选内容的放大图。
9.根据权利要求3所述的方法，其中，所述第一延伸区域和所述第二延伸区域分别包括所述触摸屏显示器的不同区域。
CN201711039001.7A 2016-10-28 2017-10-30 一种电子设备及其方法 Active CN108024009B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202111068354.6A CN113778177A (zh) 2016-10-28 2017-10-30 具有孔区域的电子设备及控制其孔区域的方法

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR10-2016-0141964 2016-10-28
KR1020160141964A KR20180046609A (ko) 2016-10-28 2016-10-28 홀 영역을 가지는 전자 장치 및 전자 장치의 홀 영역 제어방법

Related Child Applications (1)

Application Number Title Priority Date Filing Date
CN202111068354.6A Division CN113778177A (zh) 2016-10-28 2017-10-30 具有孔区域的电子设备及控制其孔区域的方法

Publications (2)

Publication Number Publication Date
CN108024009A CN108024009A (zh) 2018-05-11
CN108024009B true CN108024009B (zh) 2022-04-01

Family

ID=60320625

Family Applications (2)

Application Number Title Priority Date Filing Date
CN202111068354.6A Pending CN113778177A (zh) 2016-10-28 2017-10-30 具有孔区域的电子设备及控制其孔区域的方法
CN201711039001.7A Active CN108024009B (zh) 2016-10-28 2017-10-30 一种电子设备及其方法

Family Applications Before (1)

Application Number Title Priority Date Filing Date
CN202111068354.6A Pending CN113778177A (zh) 2016-10-28 2017-10-30 具有孔区域的电子设备及控制其孔区域的方法

Country Status (4)

Country Link
US (1) US10671258B2 (zh)
EP (3) EP3734435A1 (zh)
KR (1) KR20180046609A (zh)
CN (2) CN113778177A (zh)

Families Citing this family (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI614695B (zh) * 2017-07-03 2018-02-11 敦泰電子有限公司 具指紋辨識之高屏佔比顯示裝置
EP3664424A4 (en) * 2017-08-18 2020-07-15 Huawei Technologies Co., Ltd. DISPLAY METHOD AND TERMINAL
CN108519848A (zh) * 2018-03-30 2018-09-11 联想(北京)有限公司 一种显示控制方法及电子设备
CN109032481A (zh) * 2018-06-29 2018-12-18 维沃移动通信有限公司 一种显示控制方法及移动终端
KR102581242B1 (ko) * 2018-08-01 2023-09-22 삼성디스플레이 주식회사 표시장치
CN109327604B (zh) * 2018-08-29 2020-11-10 努比亚技术有限公司 一种状态栏信息显示方法、设备及计算机可读存储介质
KR102594652B1 (ko) 2018-12-07 2023-10-27 삼성전자 주식회사 전자 장치의 시각 효과 제공 방법 및 이를 사용하는 전자 장치
CN109919845A (zh) * 2019-03-08 2019-06-21 武汉华星光电技术有限公司 具有屏幕内孔显示器影像处理方法
DE102019002407B4 (de) 2019-04-02 2023-03-09 Mercedes-Benz Group AG Anzeigevorrichtung eines Kraftfahrzeugs
US11250617B1 (en) * 2019-09-25 2022-02-15 Amazon Technologies, Inc. Virtual camera controlled by a camera control device
CN111124224B (zh) * 2019-12-12 2021-08-10 维沃移动通信有限公司 一种应用程序的控制方法及电子设备

Family Cites Families (45)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6118427A (en) * 1996-04-18 2000-09-12 Silicon Graphics, Inc. Graphical user interface with optimal transparency thresholds for maximizing user performance and system efficiency
US6564263B1 (en) * 1998-12-04 2003-05-13 International Business Machines Corporation Multimedia content description framework
US20050044500A1 (en) * 2003-07-18 2005-02-24 Katsunori Orimoto Agent display device and agent display method
JP2006166146A (ja) 2004-12-08 2006-06-22 Fuji Photo Film Co Ltd 画像選択画面出力装置及び画像選択画面出力プログラム
US20090278806A1 (en) * 2008-05-06 2009-11-12 Matias Gonzalo Duarte Extended touch-sensitive control area for electronic device
US9607408B2 (en) * 2007-06-08 2017-03-28 Apple Inc. Rendering semi-transparent user interface elements
KR101422280B1 (ko) 2007-10-02 2014-07-22 주식회사 케이티 이동통신단말기의 배경 이미지 여백부 색상 결정 방법
KR101544475B1 (ko) 2008-11-28 2015-08-13 엘지전자 주식회사 터치를 통한 입출력 제어
US8776550B2 (en) * 2011-11-23 2014-07-15 Corning Incorporated Method and system for making glass articles
KR101908501B1 (ko) * 2011-12-07 2018-10-17 엘지디스플레이 주식회사 터치 스크린 일체형 유기 발광 표시 장치 및 이의 제조 방법
US20130215071A1 (en) * 2012-02-17 2013-08-22 Research In Motion Limited Electronic device and method of controlling same
US20130271447A1 (en) * 2012-04-11 2013-10-17 Nokia Corporation Apparatus and method for providing a digital bezel
US9720586B2 (en) * 2012-08-21 2017-08-01 Nokia Technologies Oy Apparatus and method for providing for interaction with content within a digital bezel
US20140059478A1 (en) * 2012-08-21 2014-02-27 Nokia Corporation Apparatus and method for providing a digital bezel without occluding interactive content
US9397844B2 (en) * 2012-09-11 2016-07-19 Apple Inc. Automated graphical user-interface layout
US9390473B2 (en) * 2012-09-21 2016-07-12 Google Inc. Displaying applications on a fixed orientation display
US9756282B2 (en) * 2012-11-20 2017-09-05 Sony Corporation Method and apparatus for processing a video signal for display
US9035905B2 (en) * 2012-12-19 2015-05-19 Nokia Technologies Oy Apparatus and associated methods
US9395917B2 (en) * 2013-03-24 2016-07-19 Sergey Mavrody Electronic display with a virtual bezel
US20140355179A1 (en) * 2013-06-04 2014-12-04 Spire Corporation Method of preventing cracking in glass display screens
EP2814234A1 (en) * 2013-06-11 2014-12-17 Nokia Corporation Apparatus for controlling camera modes and associated methods
WO2015042907A1 (en) * 2013-09-29 2015-04-02 Nokia Corporation Apparatus for enabling control input modes and associated methods
TWI502474B (zh) * 2013-11-28 2015-10-01 Acer Inc 使用者介面的操作方法與電子裝置
US9558713B2 (en) * 2013-12-18 2017-01-31 Google Inc. Dynamic transparency adjustment of user interface element
KR102220447B1 (ko) * 2014-01-15 2021-02-25 삼성전자주식회사 입력 처리 방법 및 그 전자 장치
EP3309679B1 (en) * 2014-03-28 2019-09-04 Huawei Device Co., Ltd. Method, apparatus, and terminal device for determining color of interface control
US9389703B1 (en) * 2014-06-23 2016-07-12 Amazon Technologies, Inc. Virtual screen bezel
KR20160020738A (ko) 2014-08-14 2016-02-24 삼성전자주식회사 전자 장치 및 전자 장치의 사용자 인터페이스 제공 방법
US20160077793A1 (en) 2014-09-15 2016-03-17 Microsoft Corporation Gesture shortcuts for invocation of voice input
KR20160046633A (ko) * 2014-10-21 2016-04-29 삼성전자주식회사 입력 지원 방법 및 이를 지원하는 전자 장치
US9933868B2 (en) * 2014-12-16 2018-04-03 Microsoft Technology Licensing, Llc Flexible touch sensor
US20160202865A1 (en) * 2015-01-08 2016-07-14 Apple Inc. Coordination of static backgrounds and rubberbanding
CN104598111B (zh) 2015-01-15 2018-10-02 小米科技有限责任公司 切换显示模式的方法及装置
KR102285188B1 (ko) * 2015-02-13 2021-08-05 삼성전자주식회사 시인성 개선을 위한 이미지 처리 방법 및 이를 지원하는 전자 장치
KR20160105121A (ko) * 2015-02-27 2016-09-06 삼성전자주식회사 전자 장치의 동작 방법, 전자 장치 및 저장 매체
KR102377277B1 (ko) * 2015-02-27 2022-03-23 삼성전자주식회사 전자 장치에서 커뮤니케이션 지원 방법 및 장치
US20160259544A1 (en) * 2015-03-04 2016-09-08 Artem Polikarpov Systems And Methods For Virtual Periphery Interaction
CN104765518B (zh) * 2015-04-20 2017-11-07 合肥鑫晟光电科技有限公司 一种触摸基板及其制造方法、显示装置
CN106293444B (zh) * 2015-06-25 2020-07-03 小米科技有限责任公司 移动终端、显示控制方法及装置
CN105224126B (zh) * 2015-09-17 2017-02-01 京东方科技集团股份有限公司 触摸屏及其压力触控检测方法
KR102000992B1 (ko) * 2015-10-05 2019-07-17 주식회사 아모그린텍 터치 압력 감지 장치
CN105791561A (zh) * 2016-02-26 2016-07-20 努比亚技术有限公司 一种实现移动终端的控制方法和装置
CN106201535B (zh) * 2016-07-14 2019-08-23 广州神马移动信息科技有限公司 工具栏背景颜色随着图片的主颜色而变换的方法和装置
US10228783B2 (en) * 2016-08-04 2019-03-12 Dell Products L.P. System and method for ESD protection in a touch screen display
US10140675B2 (en) * 2016-11-28 2018-11-27 Google Llc Image grid with selectively prominent images

Also Published As

Publication number Publication date
CN113778177A (zh) 2021-12-10
EP3316113A1 (en) 2018-05-02
CN108024009A (zh) 2018-05-11
US20180121067A1 (en) 2018-05-03
US10671258B2 (en) 2020-06-02
EP3923129A1 (en) 2021-12-15
KR20180046609A (ko) 2018-05-09
EP3734435A1 (en) 2020-11-04

Similar Documents

Publication Publication Date Title
US10948949B2 (en) Electronic apparatus having a hole area within screen and control method thereof
CN108024009B (zh) 一种电子设备及其方法
CN108289161B (zh) 电子设备及其图像捕捉方法
CN110476189B (zh) 用于在电子装置中提供增强现实功能的方法和设备
KR102311221B1 (ko) 오브젝트 운용 방법 및 이를 지원하는 전자 장치
US10599336B2 (en) Method of displaying content and electronic device adapted to the same
KR20180089133A (ko) 디스플레이 제어 방법 및 전자 장치
EP3107087B1 (en) Device for controlling multiple areas of display independently and method thereof
CN108427533B (zh) 电子设备及用于确定电子设备的环境的方法
CN105446611B (zh) 用于对触摸输入进行处理的装置及其方法
KR20180004427A (ko) 유저 인터페이스 제공 방법 및 이를 지원하는 전자 장치
CN106257398B (zh) 电子装置和在电子装置中处理通知的方法
US10055119B2 (en) User input method and apparatus in electronic device
KR20170137404A (ko) 어플리케이션을 전환하기 위한 방법 및 그 전자 장치
CN109416615B (zh) 处理触摸事件的方法和适用于该方法的电子装置
KR20180081380A (ko) 지문을 감지하는 전자 장치 및 방법
KR20170106822A (ko) 다면 디스플레이 장치와 그의 운영 방법
KR102536148B1 (ko) 전자 장치의 동작 방법 및 장치
KR20180009147A (ko) 압력 입력을 이용한 사용자 인터페이스 제공 방법 및 이를 구현한 전자 장치
KR20180043098A (ko) 영상을 표시하기 위한 전자 장치 및 컴퓨터 판독 가능한 기록 매체
KR102526860B1 (ko) 전자 장치 및 전자 장치 제어 방법
US20150356058A1 (en) Method for displaying images and electronic device for implementing the same
US11327538B2 (en) Electronic apparatus having a hole area within screen and control method thereof
KR20160106001A (ko) 액세서리 장치를 이용한 제어방법 및 장치
KR20150099255A (ko) 정보 표시 방법 및 이를 이용하는 전자 장치

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant