CN114787863A - 电子装置和电子装置操作屏幕捕获的方法 - Google Patents
电子装置和电子装置操作屏幕捕获的方法 Download PDFInfo
- Publication number
- CN114787863A CN114787863A CN202080086079.8A CN202080086079A CN114787863A CN 114787863 A CN114787863 A CN 114787863A CN 202080086079 A CN202080086079 A CN 202080086079A CN 114787863 A CN114787863 A CN 114787863A
- Authority
- CN
- China
- Prior art keywords
- electronic device
- region
- processor
- screen
- display
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 90
- 238000004891 communication Methods 0.000 description 69
- 238000010586 diagram Methods 0.000 description 57
- 230000006870 function Effects 0.000 description 45
- 230000008569 process Effects 0.000 description 45
- 238000012545 processing Methods 0.000 description 43
- 239000000872 buffer Substances 0.000 description 24
- 238000009877 rendering Methods 0.000 description 19
- 239000000284 extract Substances 0.000 description 12
- 238000004590 computer program Methods 0.000 description 8
- 230000008859 change Effects 0.000 description 7
- 230000000694 effects Effects 0.000 description 7
- 230000002093 peripheral effect Effects 0.000 description 7
- 238000013528 artificial neural network Methods 0.000 description 6
- 238000005516 engineering process Methods 0.000 description 6
- 238000013473 artificial intelligence Methods 0.000 description 5
- 230000008878 coupling Effects 0.000 description 5
- 238000010168 coupling process Methods 0.000 description 5
- 238000005859 coupling reaction Methods 0.000 description 5
- 230000002441 reversible effect Effects 0.000 description 5
- 239000000463 material Substances 0.000 description 4
- 230000001133 acceleration Effects 0.000 description 3
- 238000004364 calculation method Methods 0.000 description 3
- 238000012937 correction Methods 0.000 description 3
- 229920000642 polymer Polymers 0.000 description 3
- 230000004044 response Effects 0.000 description 3
- 241001422033 Thestylus Species 0.000 description 2
- 229910052782 aluminium Inorganic materials 0.000 description 2
- XAGFODPZIPBFFR-UHFFFAOYSA-N aluminium Chemical compound [Al] XAGFODPZIPBFFR-UHFFFAOYSA-N 0.000 description 2
- 230000010267 cellular communication Effects 0.000 description 2
- 230000001413 cellular effect Effects 0.000 description 2
- 238000013527 convolutional neural network Methods 0.000 description 2
- 230000007613 environmental effect Effects 0.000 description 2
- 239000011521 glass Substances 0.000 description 2
- 230000010354 integration Effects 0.000 description 2
- 238000010801 machine learning Methods 0.000 description 2
- 229910052751 metal Inorganic materials 0.000 description 2
- 239000002184 metal Substances 0.000 description 2
- 239000007769 metal material Substances 0.000 description 2
- 230000001537 neural effect Effects 0.000 description 2
- 230000000306 recurrent effect Effects 0.000 description 2
- 230000005236 sound signal Effects 0.000 description 2
- 229910001220 stainless steel Inorganic materials 0.000 description 2
- 239000010935 stainless steel Substances 0.000 description 2
- 229910052724 xenon Inorganic materials 0.000 description 2
- FHNFHKCVQCLJFQ-UHFFFAOYSA-N xenon atom Chemical compound [Xe] FHNFHKCVQCLJFQ-UHFFFAOYSA-N 0.000 description 2
- FYYHWMGAXLPEAU-UHFFFAOYSA-N Magnesium Chemical compound [Mg] FYYHWMGAXLPEAU-UHFFFAOYSA-N 0.000 description 1
- 230000001154 acute effect Effects 0.000 description 1
- 230000002457 bidirectional effect Effects 0.000 description 1
- 239000000919 ceramic Substances 0.000 description 1
- 238000000576 coating method Methods 0.000 description 1
- 239000004020 conductor Substances 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000005674 electromagnetic induction Effects 0.000 description 1
- 239000000446 fuel Substances 0.000 description 1
- 238000009499 grossing Methods 0.000 description 1
- 229910052749 magnesium Inorganic materials 0.000 description 1
- 239000011777 magnesium Substances 0.000 description 1
- 238000013507 mapping Methods 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000024159 perception of rate of movement Effects 0.000 description 1
- 230000002787 reinforcement Effects 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 239000000758 substrate Substances 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
- G06F3/04842—Selection of displayed objects or displayed text elements
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T1/00—General purpose image data processing
- G06T1/0007—Image acquisition
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
- G06F3/04845—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T11/00—2D [Two Dimensional] image generation
- G06T11/60—Editing figures and text; Combining figures or text
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/10—Segmentation; Edge detection
- G06T7/11—Region-based segmentation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/10—Image acquisition
- G06V10/17—Image acquisition using hand-held instruments
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/20—Image preprocessing
- G06V10/22—Image preprocessing by selection of a specific region containing or referencing a pattern; Locating or processing of specific regions to guide the detection or recognition
- G06V10/235—Image preprocessing by selection of a specific region containing or referencing a pattern; Locating or processing of specific regions to guide the detection or recognition based on user input or interaction
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/20—Image preprocessing
- G06V10/25—Determination of region of interest [ROI] or a volume of interest [VOI]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/20—Movements or behaviour, e.g. gesture recognition
- G06V40/28—Recognition of hand or arm movements, e.g. recognition of deaf sign language
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M1/00—Substation equipment, e.g. for use by subscribers
- H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
- H04M1/724—User interfaces specially adapted for cordless or mobile telephones
- H04M1/72403—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
- G06F1/16—Constructional details or arrangements
- G06F1/1613—Constructional details or arrangements for portable computers
- G06F1/1615—Constructional details or arrangements for portable computers with several enclosures having relative motions, each enclosure supporting at least one I/O or computing function
- G06F1/1616—Constructional details or arrangements for portable computers with several enclosures having relative motions, each enclosure supporting at least one I/O or computing function with folding flat displays, e.g. laptop computers or notebooks having a clamshell configuration, with body parts pivoting to an open position around an axis parallel to the plane they define in closed position
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
- G06F1/16—Constructional details or arrangements
- G06F1/1613—Constructional details or arrangements for portable computers
- G06F1/1626—Constructional details or arrangements for portable computers with a single-body enclosure integrating a flat display, e.g. Personal Digital Assistants [PDAs]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
- G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
- G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2200/00—Indexing scheme for image data processing or generation, in general
- G06T2200/24—Indexing scheme for image data processing or generation, in general involving graphical user interfaces [GUIs]
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Physics & Mathematics (AREA)
- Multimedia (AREA)
- General Engineering & Computer Science (AREA)
- Human Computer Interaction (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Psychiatry (AREA)
- Social Psychology (AREA)
- Health & Medical Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- User Interface Of Digital Computer (AREA)
- Telephone Function (AREA)
Abstract
一种电子装置操作捕获的方法可以包括：捕获显示器上显示的屏幕；从捕获的屏幕中提取至少一个区域和/或块区域；确定是否已经接收到修改捕获的屏幕的命令；如果确定已经接收到修改捕获的屏幕的命令，则基于提取的至少一个区域和/或块区域，确定在捕获的屏幕中是否存在感兴趣区域(ROI)；以及如果感兴趣区域(ROI)存在，则显示用于建议感兴趣区域的用户界面。
Description
技术领域
本公开涉及电子装置和电子装置操作屏幕捕获的方法。
背景技术
随着移动通信和硬件/软件技术的发展，以智能手机为代表的便携式电子装置(以下称为电子装置)不断演进而具有各种功能。电子装置可以包括基于触摸屏的显示器，用于允许用户容易地访问各种功能，并且可以通过显示器来提供各种应用的屏幕。
近来，电子装置可以提供允许用户捕获显示器上显示的屏幕的功能。
以上信息仅作为背景信息呈现，以帮助理解本公开。关于上述内容中的任何一个是否可以作为现有技术应用于本公开，没有做出确定，也没有做出断言。
发明内容
技术问题
当用户捕获电子装置的屏幕时，存在捕获到不想要屏幕的问题。此外，如果捕获到不想要的屏幕，则多次控制电子装置对于用户是不方便的。
在根据各种实施例的电子装置和由电子装置操作屏幕捕获的方法中，可以捕获用户想要或期望的屏幕。
问题的解决方案
当用户捕获电子装置的屏幕时，存在捕获到不想要屏幕的问题。此外，如果捕获到不想要的屏幕，则多次控制电子装置对于用户是不方便的。
本公开的各方面将解决至少上述问题和/或缺点，并提供至少下述优点。因此，本公开的一方面是提供一种电子装置和该电子装置操作屏幕捕获的方法。根据本公开的各种实施例，可以捕获用户想要或期望的屏幕。
附加的方面将在下面的描述中被部分地阐述，并且部分地将从描述中变得清楚、或者可以通过对所呈现的实施例的实践来获知。
根据本公开的一个方面，提供了一种电子装置操作捕获的方法。该方法包括：捕获显示器上显示的屏幕；从捕获的屏幕中提取至少一个区域和/或块区域；确定是否已经接收到修改捕获的屏幕的命令；当确定已经接收到修改捕获的屏幕的命令时，基于提取的至少一个区域和/或块区域，确定在捕获的屏幕中是否存在感兴趣区域(region of interest，ROI)；以及当感兴趣区域(ROI)存在时，显示用于建议感兴趣区域的用户界面。
根据本公开的另一个方面，提供了一种电子装置。该电子装置包括显示器、可操作地连接到该显示器的处理器、以及可操作地连接到该处理器的存储器，其中该存储器存储指令，这些指令在被执行时使处理器捕获显示器上显示的屏幕；从捕获的屏幕中提取至少一个区域和/或块区域；确定是否已经接收到修改捕获的屏幕的命令；当确定已经接收到修改捕获的屏幕的命令时，基于提取的至少一个区域和/或块区域，确定在捕获的屏幕中是否存在感兴趣区域(ROI)，并且当感兴趣区域(ROI)存在时，显示用于建议感兴趣区域的用户界面。
在根据本公开的各种实施例的电子装置和电子装置操作屏幕捕获的方法中，可以提供用于捕获用户想要或期望的屏幕的用户界面，以改善用户体验。
在根据本公开的各种实施例的电子装置和电子装置操作屏幕捕获的方法中，可以提供用于捕获用户想要或期望的屏幕的用户界面，以减少用户不得不多次控制电子装置来捕获屏幕的不便。
从以下结合附图公开了本公开的各种实施例的详细描述中，本公开的其他方面、优点和显著特征对于本领域技术人员将变得清楚。
发明的有益效果
在根据各种实施例的电子装置和电子装置操作屏幕捕获的方法中，可以提供用于捕获用户想要或期望的屏幕的用户界面，以改善用户体验。
在根据各种实施例的电子装置和电子装置操作屏幕捕获的方法中，可以提供用于捕获用户想要或期望的屏幕的用户界面，以减少用户不得不多次控制电子装置来捕获屏幕的不便。
附图说明
从以下结合附图的描述中，本公开的特定实施例的上述和其他方面、特征和优点将变得清楚，其中：
图1是根据本公开的实施例的网络环境中的电子装置的框图；
图2A示出了根据本公开的实施例的电子装置的打开状态；
图2B示出了根据本公开的实施例的图2A所示的电子装置的折叠状态；
图3A是根据本公开的实施例的移动电子装置的前表面的透视图；
图3B是根据本公开实施例的图3A中所示的电子装置的后表面的透视图；
图4示出了根据本公开的实施例的电子装置的软件结构；
图5是示出根据本公开的实施例的电子装置的绘图引擎的框图；
图6是示出根据本公开的实施例的电子装置操作捕获的方法的流程图；
图7是示出根据本公开的实施例的电子装置捕获显示的处理屏幕(processscreen)的操作的流程图；
图8是示出根据本公开的实施例的根据电子装置中显示的处理来提取附加信息的操作的流程图；
图9是示出根据本公开的实施例的电子装置操作捕获的方法的流程图；
图10是示出根据本公开的实施例的电子装置修改捕获的屏幕的操作的流程图；
图11是示出根据本公开的实施例的电子装置捕获显示的处理屏幕的操作的流程图；
图12是示出根据本公开的实施例的电子装置根据用户输入的编辑操作的流程图；
图13是示出根据本公开的实施例的电子装置根据用户输入的编辑操作的流程图；
图14是示出根据本公开的实施例的电子装置操作捕获的方法的流程图；
图15是示出根据本公开的实施例的电子装置操作捕获的方法的流程图；
图16是示出根据本公开的实施例的电子装置操作捕获的方法的流程图；
图17A是示出根据本公开的实施例的电子装置根据显示的处理来提取附加信息的操作的图；
图17B是示出根据本公开的实施例的电子装置建议感兴趣区域(ROI)的操作的图；
图18是示出根据本公开的实施例的电子装置修改捕获的屏幕的操作的图；
图19是示出根据本公开的实施例的电子装置修改捕获的屏幕的操作的图；
图20是示出根据本公开实施例的电子装置根据用户输入的编辑操作的图；
图21是示出根据本公开实施例的电子装置根据用户输入的编辑操作的图；
图22是示出根据本公开实施例的电子装置根据用户输入的编辑操作的图；
图23是示出根据本公开实施例的电子装置根据用户输入的编辑操作的图；
图24是示出根据本公开的实施例的电子装置捕获显示的处理屏幕的操作的图；
图25是示出根据本公开的实施例的电子装置捕获显示的处理屏幕的操作的图；
图26是示出根据本公开的实施例的电子装置捕获显示的处理屏幕的操作的图；
图27是示出根据本公开的实施例的电子装置捕获显示的处理屏幕的操作的图；
图28是示出根据本公开的实施例的电子装置操作捕获的方法的图；
图29是示出根据本公开的实施例的电子装置操作捕获的方法的图；
图30示出了根据本公开的实施例的电子装置根据用户输入的编辑操作的顺序；
图31示出了根据本公开的实施例的电子装置根据用户输入的编辑操作的顺序；
图32A是示出根据本公开的实施例的电子装置操作捕获的方法的图；
图32B是示出根据本公开的实施例的电子装置操作捕获的方法的图；
图33是示出根据本公开的实施例的电子装置操作捕获的方法的图；
图34是示出根据本公开的实施例的电子装置操作捕获的方法的图；
图35是示出根据本公开的实施例的电子装置操作的捕获的图；
图36是示出根据本公开的实施例的电子装置操作的捕获的图；
图37是示出根据本公开的实施例的电子装置操作的捕获的图；
图38是示出根据本公开的实施例的电子装置操作的捕获的图；
图39是示出根据本公开的实施例的电子装置选择对象区域来捕获屏幕的操作的图；
图40是示出根据本公开的实施例的电子装置选择对象区域来捕获屏幕的操作的图；
图41是示出根据本公开实施例的电子装置捕获整个屏幕的操作的图；
图42是示出根据本公开实施例的电子装置捕获整个屏幕的操作的图；和
图43是示出根据本公开的实施例的电子装置操作捕获的方法的流程图。
贯穿附图，相似的附图标记将被理解为指代相似的部件、组件和结构。
具体实施方式
提供参考附图的以下描述以帮助全面理解由权利要求及其等同物所限定的本公开的各种实施例。以下描述包括用于帮助理解的各种具体细节，但这些仅被视为示例性的。因此，本领域普通技术人员将认识到，在不脱离本公开的范围和精神的情况下，可以对本文描述的各种实施例进行各种改变和修改。此外，为了清楚和简明起见，可以省略对公知功能和结构的描述。
在以下描述和权利要求中使用的术语和词语不限于文献意义，而是仅由发明人使用，以使得能够清楚和一致地理解本公开。因此，对于本领域的技术人员来说清楚是，本公开的各种实施例的以下描述仅仅是为了说明的目的而提供的，而不是为了限制由所附权利要求及其等同物所限定的本公开而提供的。
应当理解，单数形式“一”、“一个”和“该”包括复数指代，除非上下文中另有明确规定。因此，例如，对“组件表面”的提及包括对一个或多个这样的表面的提及。
图1是示出根据各种实施例的网络环境100中的电子装置101的框图。参考图1，网络环境100中的电子装置101可经由第一网络198(例如，短距离无线通信网络)与电子装置102进行通信，或者经由第二网络199(例如，长距离无线通信网络)与电子装置104或服务器108中的至少一个进行通信。根据实施例，电子装置101可经由服务器108与电子装置104进行通信。根据实施例，电子装置101可包括处理器120、存储器130、输入模块150、声音输出模块155、显示模块160、音频模块170、传感器模块176、接口177、连接端178、触觉模块179、相机模块180、电力管理模块188、电池189、通信模块190、用户识别模块(SIM)196或天线模块197。在一些实施例中，可以从电子装置101中省略上述部件中的至少一个(例如，11连接端178)，或者可将一个或更多个其它部件添加到电子装置101中。在一些实施例中，可将上述部件中的一些部件(例如，传感器模块176、相机模块180或天线模块197)实现为单个集成部件(例如，显示模块160)11。
处理器120可运行例如软件(例如，程序140)来控制电子装置101的与处理器120连接的至少一个其它部件(例如，硬件部件或软件部件)，并可执行各种数据处理或计算。根据一个实施例，作为所述数据处理或计算的至少部分，处理器120可将从另一部件(例如，传感器模块176或通信模块190)接收到的命令或数据存储到易失性存储器132中，对存储在易失性存储器132中的命令或数据进行处理，并将结果数据存储在非易失性存储器134中。根据实施例，处理器120可包括主处理器121(例如，中央处理器(CPU)或应用处理器(AP))或者与主处理器121在操作上独立的或者相结合的辅助处理器123(例如，图形处理单元(GPU)、神经处理单元(NPU)、图像信号处理器(ISP)、传感器中枢处理器或通信处理器(CP))。例如，当电子装置101包括主处理器121和辅助处理器123时，辅助处理器123可以被适配为比主处理器121耗电更少，或者被适配为专用于特定的功能。可将辅助处理器123实现为与主处理器121分离，或者实现为主处理器121的部分。
在主处理器121处于未激活(例如，睡眠)状态时，辅助处理器123(而非主处理器121)可控制与电子装置1011的部件之中的至少一个部件(例如，显示模块160、传感器模块176或通信模块190)相关的功能或状态中的至少一些，或者在主处理器121处于激活状态(例如，运行应用)时，辅助处理器123可与主处理器121一起来控制与电子装置101的部件之中的至少一个部件(例如，显示模块160、传感器模块176或通信模块190)相关的功能或状态中的至少一些。根据实施例，可将辅助处理器123(例如，图像信号处理器或通信处理器)实现为在功能上与辅助处理器123相关的另一部件(例如，相机模块180或通信模块190)的部分。根据实施例，辅助处理器123(例如，神经处理单元)可包括专用于人工智能模型处理的硬件结构。可以通过机器学习来生成人工智能模型。例如，可以通过人工智能被执行之处的电子装置101或经由单独的服务器(例如，服务器108)来执行这样的学习。学习算法可包括但不限于例如监督学习、无监督学习、半监督学习或强化学习。人工智能模型可包括多个人工神经网络层。人工神经网络可以是深度神经网络(DNN)、卷积神经网络(CNN)、循环神经网络(RNN)、受限玻尔兹曼机(RBM)、深度置信网络(DBN)、双向循环深度神经网络(BRDNN)或深度Q网络或其两个或更多个的组合，但不限于此。另外地或可选地，人工智能模型可包括除了硬件结构以外的软件结构。
存储器130可存储由电子装置101的至少一个部件(例如，处理器120或传感器模块176)使用的各种数据。所述各种数据可包括例如软件(例如，程序140)以及针对与其相关的命令的输入数据或输出数据。存储器130可包括易失性存储器132或非易失性存储器134。
可将程序140作为软件存储在存储器130中，并且程序140可包括例如操作系统(OS)142、中间件144或应用146。
输入模块150可以从电子装置101的外部(例如，用户)接收将通过电子装置101的其它部件(例如，处理器120)使用的命令或数据。输入模块150可包括例如麦克风、鼠标、键盘、键(例如，按钮)或数字笔(例如，触控笔)。
声音输出模块155可将声音信号输出到电子装置101的外部。声音输出模块155可包括例如扬声器或接收器。扬声器可用于诸如播放多媒体或播放唱片的通用目的。接收器可用于接收呼入呼叫。根据实施例，可将接收器实现为与扬声器分离，或实现为扬声器的部分。
显示模块160可向电子装置101的外部(例如，用户)视觉地提供信息。显示装置160可包括例如显示器、全息装置或投影仪以及用于控制显示器、全息装置和投影仪中的相应一个的控制电路。根据实施例，显示模块160可包括被适配为检测触摸的触摸传感器或被适配为测量由触摸引起的力的强度的压力传感器。
音频模块170可将声音转换为电信号，反之亦可。根据实施例，音频模块170可经由输入模块150获得声音，或者经由声音输出模块155或与电子装置101直接(例如，有线地)连接或无线连接的外部电子装置(例如，电子装置102)的耳机输出声音。
传感器模块176可检测电子装置101的操作状态(例如，功率或温度)或电子装置101外部的环境状态(例如，用户的状态)，然后产生与检测到的状态相应的电信号或数据值。根据实施例，传感器模块176可包括例如姿势传感器、陀螺仪传感器、大气压力传感器、磁性传感器、加速度传感器、握持传感器、接近传感器、颜色传感器、红外(IR)传感器、生物特征传感器、温度传感器、湿度传感器或照度传感器。
接口177可支持将用来使电子装置101与外部电子装置(例如，电子装置102)直接(例如，有线地)或无线连接的一个或更多个特定协议。根据实施例，接口177可包括例如高清晰度多媒体接口(HDMI)、通用串行总线(USB)接口、安全数字(SD)卡接口或音频接口。
连接端178可包括连接器，其中，电子装置101可经由所述连接器与外部电子装置(例如，电子装置102)物理连接。根据实施例，连接端178可包括例如HDMI连接器、USB连接器、SD卡连接器或音频连接器(例如，耳机连接器)。
触觉模块179可将电信号转换为可以被用户经由他的触觉或动觉识别的机械刺激(例如，振动或运动)或电刺激。根据实施例，触觉模块179可包括例如电机、压电元件或电刺激器。
相机模块180可捕获静止图像或运动图像。根据实施例，相机模块180可包括一个或更多个透镜、图像传感器、图像信号处理器或闪光灯。
电力管理模块188可管理对电子装置101的供电。根据实施例，可将电力管理模块188实现为例如电力管理集成电路(PMIC)的至少部分。
电池189可对电子装置101的至少一个部件供电。根据实施例，电池189可包括例如不可再充电的原电池、可再充电的蓄电池、或燃料电池。
通信模块190可支持在电子装置101与外部电子装置(例如，电子装置102、电子装置104或服务器108)之间建立直接(例如，有线)通信信道或无线通信信道，并经由建立的通信信道执行通信。通信模块190可包括能够与处理器120(例如，应用处理器(AP))独立操作的一个或更多个通信处理器，并支持直接(例如，有线)通信或无线通信。根据实施例，通信模块190可包括无线通信模块192(例如，蜂窝通信模块、短距离无线通信模块或全球导航卫星系统(GNSS)通信模块)或有线通信模块194(例如，局域网(LAN)通信模块或电力线通信(PLC)模块)。这些通信模块中的相应一个可经由第一网络198(例如，短距离通信网络，诸如蓝牙、无线保真(Wi-Fi)直连或红外数据协会(IrDA))或第二网络199(例如，长距离通信网络，诸如传统蜂窝网络、5G网络、下一代通信网络、互联网或计算机网络(例如，LAN或广域网(WAN)))与外部电子装置进行通信。可将这些各种类型的通信模块实现为单个部件(例如，单个芯片)，或可将这些各种类型的通信模块实现为彼此分离的多个部件(例如，多个芯片)。无线通信模块192可使用存储在用户识别模块196中的用户信息(例如，国际移动用户识别码(IMSI))识别并验证通信网络(诸如第一网络198或第二网络199)中的电子装置101。通信模块190可支持在电子装置101与外部电子装置(例如，电子装置102、电子装置104或服务器108)之间建立直接(例如，有线)通信信道或无线通信信道，并经由建立的通信信道执行通信。通信模块190可包括能够与处理器120(例如，应用处理器(AP))独立操作的一个或更多个通信处理器，并支持直接(例如，有线)通信或无线通信。根据实施例，通信模块190可包括无线通信模块192(例如，蜂窝通信模块、短距离无线通信模块或全球导航卫星系统(GNSS)通信模块)或有线通信模块194(例如，局域网(LAN)通信模块或电力线通信(PLC)模块)。这些通信模块中的相应一个可经由第一网络198(例如，短距离通信网络，诸如蓝牙、无线保真(Wi-Fi)直连或红外数据协会(IrDA))或第二网络199(例如，长距离通信网络，诸如蜂窝网络、互联网、或计算机网络(例如，LAN或广域网(WAN)))与外部电子装置进行通信。可将这些各种类型的通信模块实现为单个部件(例如，单个芯片)，或可将这些各种类型的通信模块实现为彼此分离的多个部件(例如，多个芯片)。无线通信模块192可使用存储在用户识别模块196中的用户信息(例如，国际移动用户识别码(IMSI))识别并验证通信网络(诸如第一网络198或第二网络199)中的电子装置101。
天线模块197可将信号或电力发送到电子装置101的外部(例如，外部电子装置)或者从电子装置101的外部(例如，外部电子装置)接收信号或电力。根据实施例，天线模块197可包括一个或更多个天线，并且因此，可由例如通信模块190(例如，无线通信模块192)选择适合于在通信网络(诸如第一网络198或第二网络199)中使用的通信方案的至少一个天线。随后可经由所选择的至少一个天线在通信模块190和外部电子装置之间发送或接收信号或电力。天线模块197可将信号或电力发送到电子装置101的外部(例如，外部电子装置)或者从电子装置101的外部(例如，外部电子装置)接收信号或电力。根据实施例，天线模块197可包括天线，所述天线包括辐射元件，所述辐射元件由形成在基底(例如，印刷电路板(PCB))中或形成在基底上的导电材料或导电图案构成。根据实施例，天线模块197可包括多个天线(例如，阵列天线)。在这种情况下，可由例如通信模块190(例如，无线通信模块192)从所述多个天线中选择适合于在通信网络(诸如第一网络198或第二网络199)中使用的通信方案的至少一个天线。随后可经由所选择的至少一个天线在通信模块190和外部电子装置之间发送或接收信号或电力。根据实施例，除了辐射元件之外的另外的组件(例如，射频集成电路(RFIC))可附加地形成为天线模块197的一部分。根据各种实施例，天线模块197可形成毫米波天线模块。根据实施例，毫米波天线模块可包括印刷电路板、射频集成电路(RFIC)和多个天线(例如，阵列天线)，其中，RFIC设置在印刷电路板的第一表面(例如，底表面)上，或与第一表面相邻并且能够支持指定的高频带(例如，毫米波带)，所述多个天线设置在印刷电路板的第二表面(例如，顶部表面或侧表面)上，或与第二表面相邻并且能够发送或接收指定高频带的信号。
上述部件中的至少一些可经由外设间通信方案(例如，总线、通用输入输出(GPIO)、串行外设接口(SPI)或移动工业处理器接口(MIPI))相互连接并在它们之间通信地传送信号(例如，命令或数据)。
根据实施例，可经由与第二网络199连接的服务器108在电子装置101和外部电子装置104之间发送或接收命令或数据。电子装置102或电子装置104中的每一个可以是与电子装置101相同类型的装置，或者是与电子装置101不同类型的装置。根据实施例，将在电子装置101运行的全部操作或一些操作可在外部电子装置102、外部电子装置104或服务器108中的一个或更多个运行。例如，如果电子装置101应该自动执行功能或服务或者应该响应于来自用户或另一装置的请求执行功能或服务，则电子装置101可以请求所述一个或更多个外部电子装置执行所述功能或服务中的至少部分，而不是运行所述功能或服务，或者电子装置101除了运行所述功能或服务以外，还可以请求所述一个或更多个外部电子装置执行所述功能或服务中的至少部分。接收到所述请求的所述一个或更多个外部电子装置可执行所述功能或服务中的所请求的所述至少部分，或者执行与所述请求相关的另外功能或另外服务，并将执行的结果传送到电子装置101。电子装置101可在对所述结果进行进一步处理的情况下或者在不对所述结果进行进一步处理的情况下将所述结果提供作为对所述请求的至少部分答复。为此，可使用例如云计算技术、分布式计算技术、移动边缘计算(MEC)技术或客户机-服务器计算技术。电子装置101可使用例如分布式计算或移动边缘计算来提供超低延迟服务。在另一个实施例中，外部电子装置104可包括物联网(IoT)装置。服务器108可以是使用机器学习和/或神经网络的智能服务器。根据实施例，外部电子装置104或服务器108可以被包括在第二网络199中。电子装置101可应用于基于5G通信技术或IoT相关技术的智能服务(例如，智能家居、智能城市、智能汽车或医疗保健。
根据各种实施例的电子装置可以是各种类型的电子装置之一。电子装置可包括例如便携式通信装置(例如，智能电话)、计算机装置、便携式多媒体装置、便携式医疗装置、相机、可穿戴装置或家用电器。根据本公开的实施例，电子装置不限于以上所述的那些电子装置。
应当理解，本公开的各种实施例和其中使用的术语并不旨在将本文阐述的技术特征限制于特定实施例，而是包括对应的实施例的各种变化、等同或替换。关于附图的描述，相似的附图标记可以用于指代相似或相关的元素。应当理解，与一个项目相对应的单数形式的名词可以包括该事物中的一个或多个，除非相关的上下文清楚地表明不是这样。如本文所使用的，诸如“A或B”、“A和B中的至少一个”、“A或B中的至少一个”、“A、B或C”、“A、B和C中的至少一个”以及“A、B或C中的至少一个”等短语中的每一个可以包括在对应的一个短语中一起列举的项目中的任何一个或所有可能的组合。如本文所使用的，诸如“第一”和“第二”的术语可以用于简单地区分对应的组件与另外的组件，而不在其他方面(例如，重要性或次序上)限制组件。应当理解，如果一个元件(例如，第一元件)被称为与另一个元件(例如，第二元件)“耦合”、“耦合到”另一个元件、与另一个元件“连接”或“连接到”另一个元件，则无论是否使用术语“可操作地”或“通信地”，都意味着该元件可以直接(例如，有线地)、无线地或经由第三元件与另一个元件耦合。
如本文所使用的，术语“模块”可以包括以硬件、软件或固件实现的单元，并且可以与其他术语(例如，“逻辑”、“逻辑块”、“部分”或“电路”)互换使用。模块可以是适于执行一个或多个功能的单个集成组件或者是其最小单元或部分。例如，根据本公开的实施例，模块可以以专用集成电路(ASIC)的形式来实现。
本文阐述的各种实施例可以被实现为软件(例如，程序140)，该软件包括存储在机器(例如，电子装置101)可读的存储介质(例如，内部存储器136或外部存储器138)中的一个或多个指令。例如，机器(例如，电子装置101)的处理器(例如，处理器120)可以在使用或不使用受处理器控制的一个或多个其它组件的情况下，调用存储在存储介质中的一个或多个指令中的至少一个，并且执行该至少一个指令。这允许操作机器来根据所调用的至少一个指令执行至少一个功能。一个或多个指令可以包括由编译器生成的代码或可由解释器执行的代码。可以以非暂时性存储介质的形式来提供机器可读存储介质。其中，术语“非暂时性”仅仅意味着存储介质是有形装置，并且不包括信号(例如，电磁波)，但是该术语不区分数据半永久性地存储在存储介质中的情况和数据临时存储在存储介质中的情况。
根据本公开的实施例，可以在计算机程序产品中包括并提供根据本公开的各种实施例的方法。计算机程序产品可以作为产品在卖方和买方之间交易。计算机程序产品可以以机器可读存储介质(例如，紧凑盘只读存储器(CD-ROM))的形式分发、或经由应用商店(例如，PlayStoreTM)在线分发(例如，下载或上传)、或者直接在两个用户装置(例如，智能手机)之间分发。如果在线分发，则计算机程序产品的至少部分可以临时生成或至少临时存储在机器可读存储介质(诸如制造商的服务器、应用商店的服务器或中继服务器的存储器)中。
根据本公开的各种实施例，上述组件的每个组件(例如，模块或程序)可以包括单个实体或多个实体。根据本公开的各种实施例，可以省略上述组件中的一个或多个、或者可以添加一个或多个其他组件。可替代地或附加地，多个组件(例如，模块或程序)可以集成到单个组件中。在这种情况下，根据本公开的各种实施例，集成的组件仍然可以以与在集成之前由多个组件中对应的一个组件执行的相同或相似的方式来执行多个组件中的每一个的一个或多个功能。根据本公开的各种实施例，由模块、程序或另外的组件执行的操作可以顺序地、并行地、重复地或启发式地执行，或一个或多个操作可以以不同的次序来执行或省略，或者可以添加一个或多个其他操作。
上述元件的至少部分可以通过周围装置(例如，总线、通用输入和输出(GPIO)、串行外围接口(SPI)或移动工业处理器接口(MIPI))之间的通信方案彼此连接，并且可以彼此交换信号(例如，命令或数据)。
根据本公开的实施例，可以通过连接到第二网络199的服务器108在电子装置101和外部电子装置104之间发送或接收命令或数据。电子装置102和104中的每一个可以是与电子装置101的类型相同或不同的装置。根据本公开的实施例，在电子装置101中执行的所有或部分的操作可以在外部电子装置102、104或108中的一个或多个外部电子装置中执行。例如，在要求电子装置101自动地或响应于来自用户或另一个装置的请求来执行功能或服务的情况下，除了或代替自己执行功能或服务，电子装置101可以请求一个或多个外部电子装置来执行至少部分功能或服务。已经接收到请求的一个或多个外部电子装置可以执行所请求的至少部分功能或服务、或者与请求相关的附加功能或服务，并且可以将执行的结果传送到电子装置101。电子装置101可以附加地或不加改变地处理结果，并且可以提供处理后的结果作为对请求的响应的至少部分。为此，例如，可以使用云计算、分布式计算或客户端-服务器计算技术。
图2A示出了根据本公开的实施例的电子装置的打开状态。
图2B示出了根据本公开的实施例的图2A所示的电子装置的折叠状态。
参考图2A，电子装置200(例如，图1中的电子装置101)可以包括第一外壳结构210和第二外壳结构220(第一外壳结构210和第二外壳结构220包括其中可以设置至少一个显示器的至少一个空间)、设置在该至少一个空间中的至少一个显示器230(例如，柔性显示器、可折叠显示器或第一显示器)、设置在第二外壳结构220的一个表面上的第二显示器(例如，子显示器)、允许第一外壳结构210和第二外壳结构220彼此折叠的铰合结构(例如，图2A中的铰合结构265)以及被配置为覆盖允许第一外壳结构210和第二外壳结构220可折叠的部分的铰合覆盖(例如，图2A中的铰合覆盖265)。在说明书中，其上设置有第一显示器230的表面可以被定义为电子装置200的前表面，与前表面相对的表面可以被定义为电子装置200的后表面。此外，围绕前表面和后表面之间的空间的表面可以被定义为电子装置200的侧表面。
在本公开的实施例中，一对外壳结构210和220可以包括包含传感器区域231d的第一外壳结构210、第二外壳结构220、第一后表面覆盖240和第二后表面覆盖250。电子装置200的这对外壳结构210和220不限于图2A和2B所示的形状和耦合，并且可以通过不同形状或组件的组合和/或耦合来实现。例如，在本公开的另一个实施例中，第一外壳结构210和第一后表面覆盖240可以一体形成，并且第二外壳结构220和第二后表面覆盖250可以一体形成。
根据本公开的实施例，第一外壳结构210和第二外壳结构220可以被配置为单个外壳(未示出)，该单个外壳的折叠部分可以由柔性材料制成(未示出)，并且铰合结构265可以不被单独配置，而是用柔性材料代替。根据本公开的实施例，第一外壳结构210和第二外壳结构220可以相对于折叠轴(A轴)被布置在两侧，并且可以相对于折叠轴(A轴)折叠或展开。根据本公开的实施例，根据电子装置200是处于打开状态(平坦状态)、折叠状态还是中间状态，第一外壳结构210和第二外壳结构220之间的角度或距离可以不同。第一外壳结构210或第二外壳结构220的至少部分区域可以包括传感器区域231d，在该传感器区域231d中布置有各种传感器。作为另一个示例，传感器布置区域231d可以附加地被布置或替换为在第二外壳结构220的至少部分区域中。
根据本公开的实施例，第一外壳结构210和第二外壳结构220之间的角度可以通过铰合结构(例如，图2A中的铰合结构265)来调整。根据本公开的实施例，当第一外壳结构210和第二外壳结构220朝向同一表面(例如，前表面)或者平行于同一轴(X轴)时，电子装置200可以被认为处于打开状态。根据本公开的实施例，在电子装置200中，第一显示器230可以设置在由第一外壳结构210和第二外壳结构220形成的空间中。第一显示器230可以包括第一表面211和第三表面221。允许第一显示器以预定角度弯曲的柔性区域可以形成在第一表面211和第三表面221之间。根据本公开的实施例，除了第一表面211和第三表面221之外，至少部分区域能够弯曲的第一显示器230还可以具有能够以各种形状弯曲的区域，并且可弯曲区域的数量不限于一个。根据本公开的各种实施例，铰合结构(例如，图2A中的铰合结构265)可以设置在第一显示器230可以弯曲的区域中。当第一显示器230弯曲时，铰合结构可以支撑第一显示器230，以在第一显示器弯曲的状态下保持角度。
根据本公开的实施例，第一外壳结构210可以包括朝向前表面的第一表面211、朝向与第一表面211相对的方向的第二表面212、以及围绕第一表面211和第二表面212之间的空间的至少部分的第一侧表面构件213。在本公开的实施例中，第一侧表面构件213可以包括平行于折叠轴(A轴)设置的第一侧表面213a、从第一侧表面213a的一端沿垂直于折叠轴的方向延伸的第二侧表面213b、以及从第一侧表面213a的另一端沿垂直于折叠轴(A轴)的方向延伸的第三侧表面213c。
在本公开的实施例中，第二外壳结构220的至少部分可以连接到铰合结构(例如，图2A中的铰合结构265)，并且第二外壳结构220可以包括朝向电子装置200的前表面的第三表面221、朝向与第三表面221相对的方向的第四表面222、以及围绕第三表面221和第四表面222之间的空间的至少部分的第二侧表面构件223。在本公开的实施例中，第二侧表面构件223可以包括平行于折叠轴(A轴)设置的第四侧表面223a、从第四侧表面223a的一端沿垂直于折叠轴的方向延伸的第五侧表面223b、以及从第四侧表面223a的另一端沿垂直于折叠轴(A轴)的方向延伸的第六侧表面223c。在本公开的实施例中，在折叠状态下，第三表面221可以面对第一表面211而与其相对。
在本公开的实施例中，电子装置200可以包括凹部201，该凹部201被配置为容纳(receive)至少部分可以弯曲的第一显示器230，并且通过第一外壳结构210和第二外壳结构220之间的结构形状耦合来形成。根据本公开的实施例，凹部201可以具有与第一显示器230基本相同的尺寸。在本公开的实施例中，由于传感器区域231d，凹部201可以在垂直于折叠轴(A轴)的方向上具有两个或更多个不同的宽度。例如，凹部201可以在第二外壳结构220的第一部分220a和设置在第一外壳结构210中的传感器区域231d的外围的第一部分210a之间具有第一宽度W1。凹部可以在第二外壳结构220的第二部分220b和第一外壳结构210中不对应于传感器区域231d且平行于折叠轴(A轴)的第二部分210b之间具有第二宽度W2。根据本公开的各种实施例，凹部201的宽度可以不限于所示的示例。根据本公开的各种实施例，凹部201可以具有两个或更多个不同的宽度、或者相同的宽度。
在本公开的实施例中，第一外壳结构210和第二外壳结构220的至少部分可以由具有所选刚度的金属或非金属材料来制成以支撑第一显示器230。
在本公开的实施例中，传感器区域231d可以邻近第一外壳结构210的一个角，并且具有预定区域。传感器区域231d的布置、形状或尺寸可以不限于所示的示例。根据本公开的各种实施例，前置相机装置、接收器、接近传感器、超声波传感器、姿势传感器、陀螺仪传感器、大气压力传感器、磁传感器、加速度传感器、抓握传感器、颜色传感器、红外(IR)传感器、生物度量传感器、温度传感器、湿度传感器或指示器中的至少一个可以设置在传感器区域231d的至少部分区域中。在本公开的各种实施例中，这些组件可以设置在电子装置中，而没有单独的传感器区域。例如，至少部分的组件可以布置在第一显示器230下方、或者可以通过第一显示器230的部分区域被看到。
在本公开的实施例中，第一后表面覆盖240可以设置在第一外壳结构210的第二表面212上，并且可以具有基本上矩形的外围。在本公开的实施例中，该外围的至少部分可以被第一外壳结构210包围。类似地，第二后表面覆盖250可以设置在第二外壳结构220的第四表面222上，并且第二后表面覆盖的外围的至少部分可以被第二外壳结构220包围。
在本公开的示出的实施例中，第一后表面覆盖240和第二后表面覆盖250可以具有相对于折叠轴(A轴)基本对称的形状。作为另一个示例，第一后表面覆盖240和第二后表面覆盖250可以包括各种不同的形状。作为另一个示例，第一后表面覆盖240可以与第一外壳结构210一体形成，并且第二后表面覆盖250可以与第二外壳结构220一体形成。
在本公开的实施例中，第一后表面覆盖240、第二后表面覆盖250、第一外壳结构210和第二外壳结构220可以彼此耦合，并且可以通过耦合结构来提供其中可以布置电子装置200的各种组件(例如，印刷电路板、天线模块、传感器模块或电池)的空间。在本公开的实施例中，一个或多个组件可以布置在电子装置200的后表面上、或者可以通过后表面被可视地看到。例如，可以通过第一后表面覆盖240的第一后表面区域241可视地看到一个或多个组件或传感器。在本公开的各种实施例中，传感器可以包括接近传感器、后置相机装置和/或闪光灯。在本公开的另一个实施例中，可以通过第二后表面覆盖250的第二后表面区域251可视地看到子显示器252(例如，第二显示器)的至少部分。在本公开的另一个实施例中，电子装置200可以包括通过第二后表面覆盖250的至少部分区域设置的扬声器模块253。
第一显示器230可以设置在由第一外壳结构210和第二外壳结构220形成的空间中。例如，第一显示器230可以被稳定地放置在由第一外壳结构210和第二外壳结构220形成的凹部201中，并且可以被设置为基本上覆盖电子装置200的前表面的大部分。因此，电子装置200的前表面可以包括第一显示器230、与第一显示器230相邻的第一外壳结构210的部分区域(例如，外围区域)和第二外壳结构220的部分区域(例如，外围区域)。在本公开的实施例中，电子装置200的后表面可以包括第一后表面覆盖240、第一外壳结构210中与第一后表面覆盖240相邻的部分区域(例如，外围区域)、第二后表面覆盖250以及第二外壳结构220中与第二后表面覆盖250相邻的部分区域(例如，外围区域)。
在本公开的实施例中，第一显示器230可以是显示器，其至少部分区域可变换为平坦表面或弯曲表面。在本公开的实施例中，第一显示器230可以包括折叠区域231c、相对于折叠区域231c设置在一侧(例如，折叠区域231c的右侧区域)的第一区域231a、以及设置在另一侧(例如，折叠区域231c的左侧区域)的第二区域231b。例如，第一区域231a设置在第一外壳结构210的第一表面211上，第二区域231b可以设置在第二外壳结构220的第三表面221上。在本公开的实施例中，第一显示器230的区域划分对应于示例，并且第一显示器230可以根据结构或功能被划分为多个(例如，四个或更多个、或者两个)区域。例如，在图2A所示的实施例中，第一显示器230的区域可以由折叠区域231c或者平行于y轴延伸的折叠轴(A轴)来划分。然而，在本公开的另一个实施例中，第一显示器230的区域可以参考另外的折叠区域(例如，平行于x轴的折叠区域)或另外的折叠轴(例如，折叠区域(例如，平行于x轴的折叠轴))来划分。上述显示区域划分仅对应于一对外壳结构210和220以及铰合结构(例如，图2A中的铰合结构265)的物理划分。实际上，第一显示器230可以通过这对外壳结构210和220以及铰合结构(例如，图2A中的铰合结构265)来显示单个完整屏幕。在本公开的实施例中，与第二区域231b不同，根据传感器区域231d的存在，第一区域231a可以包括通过切割获得的凹口(notch)区域。在本公开的实施例中，第一区域231a和第二区域231b可以具有对称部分和不对称部分。
参考图2B，铰合覆盖265可以设置在第一外壳结构210和第二外壳结构220之间，以覆盖内部组件(例如，图2A中的铰合结构265)。在本公开的实施例中，根据电子装置200的操作状态(例如，打开状态(平坦状态)或折叠状态)，铰合覆盖265可以被第一外壳结构210的部分和第二外壳结构220隐藏、或者可以从外部被看到。
在下文中，将根据电子装置200的操作状态(例如，打开状态(平坦状态)或折叠状态)来描述第一外壳结构210和第二外壳结构220以及第一显示器230的每个区域的操作。
在本公开的实施例中，如果电子装置200处于打开状态(平坦状态)，则第一外壳结构210和第二外壳结构220可以形成平角(例如，180度)。在打开状态(例如，第一指定状态)，显示器的第一区域(例如，图2A中的区域231a)和第二区域(例如，图2A中的区域231b)可以布置在相同的方向上。此外，如果电子装置处于打开状态，则折叠区域(例如，图2A中的区域231c)可以设置在与第一区域231a和第二区域231b相同的平面上。作为另一个示例，如果电子装置200处于打开状态(平坦状态)，则第一外壳结构210和第二外壳结构220可以例如沿相反方向折叠，使得第二外壳结构220相对于第一外壳结构210形成的角度通过旋转改变为360度，以允许第二表面212面向第四表面222。
在本公开的实施例中，如果电子装置200处于中间状态(例如，第二指定状态)，则第一外壳结构210和第二外壳结构220可以被布置为在它们之间形成预定角度(例如，10到90度之间的角度)。第一显示器230的第一区域(例如，图2A中的区域231a)和第二区域(例如，图2A中的区域231b)可以形成比折叠状态下的角度大且比打开状态下的角度小的角度。折叠区域的至少部分(例如，图2A中的区域231c)可以具有预定曲率的曲面，并且该曲率可以小于折叠状态下的曲率。
在本公开的实施例中，当电子装置200处于折叠状态(例如，第三指定状态)时，第一外壳结构210和第二外壳结构220可以被布置为彼此面对。第一显示器230的第一区域(例如，图2A中的区域231a)和第二区域(例如，图2A中的区域231b)可以形成锐角(例如，0到10度之间的角度)，并且可以被布置为彼此面对。折叠区域的至少部分(例如，图2A中的区域231c)可以具有预定曲率的曲面。
图3A是根据本公开的实施例的移动电子装置的前表面的透视图。
图3B是根据本公开的实施例的图3A中所示的电子装置的后表面的透视图。
参考图3A和图3B，根据实施例的电子装置300(例如，图1中的电子装置101)可以包括外壳310，该外壳310包括第一表面(或前表面)310A、第二表面(或后表面)310B以及围绕第一表面310A和第二表面310B之间的空间的侧表面310C。在另一个实施例(未示出)中，外壳可以指示配置图1所示的第一表面310A的部分、第二表面310B和侧表面310C的结构。根据本公开的实施例，第一表面310A可以由前表面板302(例如，包括各种涂层的玻璃板、或聚合物板)配置，前表面板302的至少部分是基本透明的。第二表面310B可以由基本不透明的后表面板311配置。后表面板311可以由例如涂覆玻璃或有色玻璃、陶瓷、聚合物、金属(例如铝、不锈钢(STS)或镁)或这些材料中的至少两种的组合来形成。侧表面310C可以由耦合到前表面板302和后表面板311并且包括金属和/或聚合物的侧表面边框结构(或“侧表面构件”)318来配置。在本公开的实施例中，后表面板311和侧表面边框结构318可以一体构成，并且可以包括相同的材料(例如，金属材料，诸如铝)。
在本公开的示出实施例中，前表面板302可以包括前表面板302的两个长边上从第一表面310A无缝延伸朝向后表面板311弯曲的两个第一区域310D。在示出的实施例中(参见图3B)，后表面板311可以包括后表面板的两个长边上从第二表面310B无缝延伸朝向前表面板302弯曲的两个第二区域310E。在本公开的实施例中，前表面板302(或后表面板311)可以仅包括第一区域310D(或第二区域310E)之一。在本公开的另一个实施例中，可以不包括第一区域310D的部分或第二区域310E。在本公开的实施例中，当在电子装置300的侧表面中观察时，侧表面边框结构318可以在不包括第一区域310D或第二区域310E的侧表面中具有第一厚度(或宽度)，并且可以在包括第一区域310D或第二区域310E的侧表面中具有小于第一厚度的第二厚度。
根据本公开的实施例，电子装置300(例如，图1中的电子装置101)可以包括显示器301、音频模块303、307和314、传感器模块304、316和119、相机模块305、312和313、键输入装置317、发光元件306、笔输入装置320以及连接器孔308和309中的至少一个。在本公开的实施例中，电子装置300(例如，图1中的电子装置101)可以省略这些元件中的至少一个(例如，键输入装置317或发光元件306)或者另外包括其他的元件。
显示器301可以例如通过前表面板302的相当大的部分来暴露。在本公开的实施例中，显示器301的至少部分可以通过配置第一表面310A的前表面板302和位于侧表面310C的第一区域310D来暴露。在本公开的实施例中，显示器301的边缘可以被配置为与前表面板302中邻近该边缘的外部部分的形状基本相同。在另一个实施例(未示出)中，为了扩展显示器301被暴露的区域，显示器301的外部部分和前表面板302的外部部分之间的间隔可以被配置为彼此基本相同。
在另一个实施例(未示出)中，凹部或开口可以设置在显示器301的屏幕显示区域的部分处，并且音频模块314、传感器模块304、相机模块305和发光元件306中的至少一个可以被包括以与凹部或开口对齐。在另一个实施例中(未示出)，音频模块314、传感器模块304、相机模块305、指纹传感器316和发光元件306中的至少一个可以被包括在显示器301的屏幕显示区域的后表面上。在另一个实施例(未示出)中，显示器301可以耦合到触摸检测电路、能够测量触摸强度(压力)的压力传感器和/或使用磁场检测触控笔的数字化仪，或者被设置为邻近触摸检测电路、压力传感器和/或数字化仪。在本公开的实施例中，传感器模块304和319的至少部分和/或键输入装置317的至少部分可以设置在第一区域310D和/或第二区域310E中。
音频模块303、307和314可以包括麦克风孔303和扬声器孔307和314。被配置为获得外部声音的麦克风可以设置在麦克风孔303中，并且在本公开的实施例中，多个麦克风可以被布置在其中以检测声音的方向。扬声器孔307和314可以包括外部扬声器孔307和呼叫接收器孔314。在本公开的实施例中，扬声器孔307和314以及麦克风孔303可以被实现为单个孔、或者可以包括扬声器(例如，压电扬声器)而没有扬声器孔307和314。
传感器模块304、316和319可以生成与电子装置300(例如，图1中的电子装置101)的内部操作状态或外部环境状态相对应的电信号或数据值。传感器模块304、316和319可以包括例如设置在外壳310的第一表面310A上的第一传感器模块304(例如，接近传感器)和/或第二传感器模块(未示出)(例如，指纹传感器)，和/或设置在外壳310的第二表面310B上的第三传感器模块319(例如，心率监视器(HRM)传感器)和/或第四传感器模块316(例如，指纹传感器)。指纹传感器可以设置在外壳310的第二表面310B以及第一表面310A(例如，显示器301)上。电子装置300(例如，图1中的电子装置101)还可以包括未示出的传感器模块，例如，姿势传感器、陀螺仪传感器、大气压传感器、磁传感器、加速度传感器、抓握传感器、颜色传感器、红外(IR)传感器、生物度量传感器、温度传感器、湿度传感器或照度传感器304中的至少一个。
相机模块305、312和313可以包括设置在电子装置300(例如，图1中的电子装置101)的第一表面310A上的第一相机装置305，以及设置在第二表面310B上的第二相机装置312和/或闪光灯313。相机装置305和312可以包括一个或多个镜头、图像传感器和/或图像信号处理器。闪光灯313可以包括例如发光二极管或氙灯。在本公开的实施例中，可以在电子装置300(例如，图1中的电子装置101)的一个表面上布置两个或更多个透镜(红外相机以及广角和远摄透镜)以及图像传感器。
键输入装置317可以设置在外壳310的侧表面310C上。在本公开的另一个实施例中，电子装置300可以不包括键输入装置317的部分或全部，并且未被包括的键输入装置317可以以不同的类型(诸如显示器301上的软键)来实现。在本公开的实施例中，键输入装置可以包括布置在外壳310的第二表面310B上的传感器模块316。
发光元件306可以例如设置在外壳310的第一表面310A上。发光元件306可以通过使用光来提供例如电子装置300(例如，图1中的电子装置101)的状态信息。在本公开的另一个实施例中，发光元件306可以提供例如与相机模块305的操作互工作的光源。发光元件306可以包括例如发光二极管(LED)、IR LED和氙灯。
连接器孔308和309可以包括第一连接器孔308和/或第二连接器孔309，第一连接器孔308能够接收被配置为向外部电子装置发送或从外部电子装置接收电力和/或数据的连接器(例如USB连接器)，第二连接器孔309(例如，耳机插孔)能够接收被配置为向外部电子装置发送或从外部电子装置接收音频信号的连接器。
笔输入装置320(例如，触控笔)可以通过形成在外壳310的侧表面上的孔321被引导并插入外壳310内部、或者可以可拆卸地附接到外壳，并且可以包括使得附接和拆卸容易的按钮。可以在笔输入装置320中嵌入单独的谐振电路，使得笔输入装置可以链接到包括在电子装置300中的电磁感应板(例如，数字化仪)。笔输入装置320可以采用电磁共振(EMR)方案、有源电子触控笔(AES)方案和电耦合共振(ECR)方案。
图4示出了根据本公开的实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)的软件结构400。
根据本公开的各种实施例，所示配置的至少部分可以根据包括在电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)中的平台而改变。
参考图4，应用层410可以包括存储在存储器(例如，图1中的存储器130)中并且可以由处理器执行的至少一个应用411(例如，图1中的应用146)和系统用户界面(UI)415。应用411可以包括互联网浏览器、视频应用和游戏，并且应用的类型可以不限于此。系统UI415可以指示配置在电子装置的系统上实现的各种图形用户界面(GUI)屏幕(诸如通知栏或快速视图)的应用。
框架层420可以向应用411提供各种功能，使得从电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)的至少一个资源提供的功能或信息可以被应用411使用。
框架层420可以包括活动管理器412、窗口管理器422、视图系统423、电力管理器424、输入管理器425、显示管理器426和传感器管理器427。
活动管理器412可以控制应用的生命周期和活动栈。
窗口管理器422可以管理在电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)的屏幕中使用的一个或多个GUI资源。
视图系统423可以是用于创建应用用户界面的可扩展视图的集合。
电力管理器424可以管理电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)的电池的容量、温度或电力，并且可以使用所管理的容量、温度或电力中对应的信息来确定或提供电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)的操作所需的相关信息。
输入管理器425可以是被配置为提供在电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)中设置的输入装置(图1中的输入装置150)的信息的模块(键布局等)。
显示管理器426可以管理显示装置(例如，图1中的显示装置160)的生命周期(连接、属性改变/移除)，并且可以管理硬件(H/W)显示映射以输出屏幕GUI元素(窗口)。显示管理器可以用于通过系统事件(诸如折叠状态改变)来改变输出显示装置(例如，图1中的显示装置160)。
传感器管理器427可以基于可用性(诸如传感器的应用)来控制传感器模块(图1中的传感器模块176)的操作。
硬件抽象层(HAL)430可以指示电子装置的软件和包括在硬件层中的多个硬件模块之间的抽象层。硬件抽象层430可以包括输入调度器431、提供标准化传感器中发生的事件的接口的事件中枢432或表面抛动器(surface flinger)433。输入调度器431可以执行确定要向其提供已发生事件的应用411的功能。表面抛动器433可以执行提供在若干个应用411中生成的执行屏幕当中将在显示装置(例如，图1中的显示装置160)中显示的执行屏幕的功能。当显示器(例如，图1中的显示装置160)的配置改变时，表面抛动器可以请求应用411根据显示器(例如，图1中的显示装置160)的改变的配置来处理分辨率和密度的改变。事件中枢432可以是其中在触摸模块和传感器模块(图1中的传感器模块176)中发生的事件被标准化的接口模块。输入调度器431可以是将输入事件传送到输入目标窗口进程(process)的模块。
内核驱动器层440可以包括控制包括在电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)中的各种硬件模块的各种驱动器。内核驱动器层440可以包括触摸驱动器441和传感器驱动器442，触摸驱动器441包括控制触摸控制器451的接口模块，传感器驱动器442包括控制连接到传感器的传感器控制器452的接口模块。触摸驱动器441可以是控制触摸控制器451的接口模块。传感器驱动器442可以是控制传感器控制器452的接口模块。
硬件层450可以包括触摸控制器451和传感器控制器452。
触摸控制器451可以是控制被配置在显示器(例如，图1中的显示装置160)上的触摸电路以接收触摸输入的模块。
传感器控制器452可以包括检测可折叠电子装置(例如，图2A和图2B中的电子装置200)的折叠状态的霍尔传感器。
图5是示出根据本公开的实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)的绘图引擎500的框图。
参考图5，电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以将存储器(图1中的存储器130)的部分区域指定为用于记录应用511和512(例如，图4中的应用411)的执行状态的表面521、522和523。
表面抛动器530(例如，图4中的表面抛动器433)可以确定是否在屏幕上显示记录在表面521、522和523中的应用的执行屏幕，并且当显示器的配置改变时，可以请求应用511和512处理分辨率和密度的改变。
与由应用511和512中的每一个创建的显示分辨率和密度相对应的执行屏幕可以存储在帧缓冲器540中。
表面抛动器530可以在帧缓冲器540中存储与应用511和512中的每一个创建的显示分辨率和密度相对应且被记录在表面521、522和523中的执行屏幕。
图6是示出根据本公开的实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)操作捕获的方法的流程图。
参考图6，在操作601中，根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下，捕获在显示器(例如，图1中的显示装置160、图2A中的显示器230或图3A中的显示器301)上显示的处理屏幕。
根据本公开的各种实施例，显示的处理屏幕可以是其中在显示器(例如，图1中的显示装置160、图2A中的显示器230或图3A中的显示器301)上激活的窗口和/或布局中显示图像或视频信息的屏幕。
根据本公开的各种实施例，显示的处理屏幕可以包括运行的应用的用户界面。应用可以对应于存储在单个窗口帧缓冲器屏幕或多个窗口帧缓冲器中的运行的应用。根据本公开的各种实施例，捕获操作可以包括获得和/或生成在显示器(例如，图1中的显示装置160、图2A中的显示器230或图3A中的显示器301)上显示的屏幕的静止画面图像的操作。
在操作601中，根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下向显示器(例如，图1中的显示装置160、图2A中的显示器230或图3A中的显示器301)或应用请求渲染信息，以获得静止画面图像。显示器(例如，图1中的显示装置160、图2A中的显示器230或图3A中的显示器301)可能需要渲染信息来显示图形对象。例如，电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下向显示器(例如，图1中的显示装置160、图2A中的显示器230或图3A中的显示器301)的驱动器电路请求并获得渲染信息，以创建静止画面图像。电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下向应用请求并获得渲染信息以创建静止画面图像。
根据本公开的各种实施例，根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，处理器1220)的控制下，基于获得的渲染信息，来获得包括在显示器(例如，图1中的显示装置160、图2A中的显示器230或图3A中的显示器301)上显示的图像的静止画面的图像。
根据本公开的各种实施例，捕获电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)的屏幕的命令可以包括选择对象区域来捕获屏幕的命令和/或捕获整个屏幕的命令。
根据本公开的各种实施例，捕获电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)的屏幕的命令可以例如通过键输入、触摸输入、语音输入和触控笔输入来执行。
根据本公开的各种实施例，当接收到通过多个按钮键(例如，图1中的输入装置150以及图3A和图3B中的键输入装置317)的组合的输入时，电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以捕获显示的屏幕。
根据本公开的各种实施例，当接收到通过触摸输入的特定姿势时，电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以捕获显示的屏幕。例如，通过触摸输入的特定姿势可以是用户用他/她的手边缘或手掌在特定方向上划过(swipe)显示器(或触摸屏)的姿势。
根据本公开的各种实施例，当接收到语音输入时，电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以捕获显示的屏幕。例如，语音输入可以是包括特定词语和/或指令的用户语音。电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以通过语音辨识平台(例如，Bixby)来接收和辨识语音输入。
根据本公开的各种实施例，当接收到触控笔输入时，电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以捕获显示的屏幕。
根据本公开的各种实施例，当电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)接收到根据触控笔的触摸输入而选择对象区域的输入时，电子装置可以在处理器(例如，图1中的处理器120)的控制下，将该输入确定为选择对象区域以捕获屏幕的命令。
根据本公开的各种实施例，当电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)接收到执行对象区域选择功能并根据触摸输入(例如，通过触控笔或手的触摸)选择对象区域的输入时，电子装置可以在处理器(例如，图1中的处理器120)的控制下，将该输入确定为选择对象区域以捕获屏幕的命令。
在操作603中，根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下根据显示的处理来提取附加信息。
根据各种实施例的根据显示的处理来提取附加信息的操作可以是在处理器(例如，图1中的处理器120)的控制下提供允许编辑捕获的屏幕的屏幕和/或功能的操作。例如，用于编辑捕获的屏幕的功能可以包括裁剪图像、缩小/放大图像、旋转图像、图像效果、图像色温、图像颜色校正等。与用于编辑捕获的屏幕的功能相对应的图标、图像或文本可以作为工具栏类型的用户界面来提供。允许编辑捕获的屏幕的屏幕和/或功能可以对应于屏幕截图工具栏。
在操作603中，根据各种实施例的、根据显示的处理来提取附加信息的操作可以是，电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)在处理器(例如，图1中的处理器120)的控制下从帧缓冲器提取附加信息的操作。
在操作603中，根据各种实施例的根据显示的处理来提取附加信息的操作可以是其中电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)在处理器(例如，图1中的处理器120)的控制下从应用提取附加信息的操作。例如，如果应用是互联网浏览器，则从应用提取附加信息的操作可以是解析超文本标记语言(HTML)信息的操作。
在操作603中，根据各种实施例的根据显示的处理来提取附加信息的操作可以是电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)在处理器(例如，图1中的处理器120)的控制下从从应用或显示器(例如，图1中的显示装置160、图2A中的显示器230或图3A中的显示器301)获得的渲染信息中提取附加信息的操作。
在操作603中，根据各种实施例的根据显示的处理来提取附加信息的操作可以是在处理器(例如，图1中的处理器120)的控制下提取显示的处理的静止画面的区域和/或块区域的操作。
在操作603中，根据各种实施例的根据显示的处理来提取附加信息的操作可以是在处理器(例如，图1中的处理器120)的控制下将显示的处理的静止画面分割为区域和/或块区域的操作。
在操作603中，在根据本公开的各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)中，在处理器(例如，图1中的处理器120)的控制下提取显示的处理的静止画面的区域和/或块区域的操作可以是以块为单位提取静止画面中的图像区域和/或文本区域的操作。
在操作603中，在根据本公开的各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)中，在处理器(例如，图1中的处理器120)的控制下将显示的处理的静止画面分割为区域和/或块区域的操作可以是以块为单位分割静止画面中的图像区域和/或文本区域的操作。
在操作605中，根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下修改捕获的屏幕。
在操作605中，根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下修改在帧缓冲器和/或应用中捕获的对象屏幕。
根据各种实施例的修改捕获的屏幕的操作可以是通过用户输入和/或预定的图像编辑处理来修正捕获的屏幕的操作。
例如，在修改捕获的屏幕的操作中，可以通过用户输入来执行“裁剪图像”操作。例如，在修改捕获的屏幕的操作中，可以通过预定的图像编辑处理来执行“裁剪图像”操作。
在操作607中，根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下，将提取的对象信息和捕获的屏幕存储为捕获图像。根据本公开的各种实施例，将捕获的屏幕存储为捕获图像的操作还可以包括存储其中图像未被用户修改的屏幕的操作。
图7是示出根据本公开的实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)捕获显示的处理屏幕的操作的流程图。
参考图7，在操作701中，根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下接收捕获显示的屏幕的命令。
在操作703中，根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下确定接收到的命令是否是选择对象区域以捕获屏幕的命令。
在操作703中，如果确定接收到的命令是选择对象区域来捕获屏幕的命令，则根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下进入操作705。
在操作703中，如果确定接收到的命令不是选择对象区域来捕获屏幕的命令，则根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下确定接收到的命令是捕获整个屏幕的命令，并且可以进入操作707。
在操作705中，根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下选择根据用户输入选择的对象区域。
在如果接收到的命令是选择对象区域来捕获屏幕的命令，则操作707中，根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下捕获根据用户输入选择的对象区域屏幕。
如果接收到的命令是捕获整个屏幕的命令，则在操作707中，根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下捕获整个屏幕。
图8是示出根据本公开的实施例的根据电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)中显示的处理来提取附加信息的操作的流程图。
参考图8，在操作801中，根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下从帧缓冲器和/或运行的应用提取对象区域信息。
根据本公开的各种实施例，对象区域信息可以是帧缓冲器和/或运行的应用中与图像区域或文本区域相关的信息、窗口信息和/或布局信息。
在操作803中，根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下基于对象区域信息获得屏幕配置信息。
根据本公开的各种实施例，屏幕配置信息可以是帧缓冲器和/或运行的应用中与对象区域的位置和/或尺寸相关的信息。
在操作805中，根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下，在显示器(例如，图1中的显示装置160、图2A中的显示器230或图3A中的显示器301)上显示屏幕配置信息和/或显示与对象区域信息相对应的图像数据。
根据本公开的各种实施例，显示与对象区域信息相对应的显示图像数据的操作可以是显示用于屏幕编辑的信息、屏幕配置信息和/或用户界面的操作。
图9是示出根据本公开的实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)操作捕获的方法的流程图。
参考图9，在操作901中，根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下，捕获在显示器(例如，图1中的显示装置160、图2A中的显示器230或图3A中的显示器301)上显示的处理屏幕。
根据本公开的各种实施例，显示的处理屏幕可以是其中图像或视频信息在显示器(例如，图1中的显示装置160、图2A中的显示器230或图3A中的显示器301)上激活的窗口和/或布局中显示的屏幕。
根据本公开的各种实施例，显示的处理屏幕可以包括运行的应用的用户界面。该应用可以对应于存储在单个窗口帧缓冲器屏幕或多个窗口帧缓冲器中的运行的应用。根据本公开的各种实施例，捕获操作可以包括获得和/或生成在显示器(例如，图1中的显示装置160、图2A中的显示器230或图3A中的显示器301)上显示的屏幕的静止画面图像的操作。
根据本公开的各种实施例，电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下，基于获得的渲染信息，来获得包括在显示器(例如，图1中的显示装置160、图2A中的显示器230或图3A中的显示器301)上显示的图像的静止画面的图像。
根据本公开的各种实施例，捕获电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)的屏幕的命令可以包括选择对象区域来捕获屏幕的命令和/或捕获整个屏幕的命令。
在操作903中，根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下根据显示的处理来提取附加信息。
根据各种实施例的根据显示的处理来提取附加信息的操作可以是在处理器(例如，图1中的处理器120)的控制下提供允许编辑捕获的屏幕的屏幕和/或功能的操作。
在操作903中，根据各种实施例的根据显示的处理来提取附加信息的操作可以是电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)在处理器(例如，图1中的处理器120)的控制下从帧缓冲器或应用提取附加信息的操作。
在操作903中，根据各种实施例的根据显示的处理来提取附加信息的操作可以是电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)在处理器(例如，图1中的处理器120)的控制下，从自应用或显示器(例如，图1中的显示装置160、图2A中的显示器230或图3A中的显示器301)获得的渲染信息中提取附加信息的操作。
在操作903中，在根据本公开的各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)中，在处理器(例如，图1中的处理器120)的控制下提取显示的处理的静止画面的区域和/或块区域的操作可以是以块为单位提取静止画面中的图像区域和/或文本区域的操作。
在操作903中，在根据本公开的各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)中，在处理器(例如，图1中的处理器120)的控制下将显示的处理的静止画面分割为区域和/或块区域的操作可以是以块为单位分割静止画面中的图像区域和/或文本区域的操作。
在操作905中，根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下，确定是否已经接收到修改捕获的屏幕的命令。
根据本公开的各种实施例，在操作905中，如果在包括允许编辑捕获的屏幕的屏幕和/或功能的屏幕截图工具栏上选择了图像编辑和/或修改命令，则电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下，确定已经接收到修改捕获的屏幕的命令。
在操作905中，如果接收修改捕获的屏幕的命令失败，则根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下进入操作921。
在操作921中，根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下，将在捕获命令时间点创建的捕获的屏幕存储为图像。
在操作905中，如果接收到修改捕获的屏幕的命令，则根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下进入操作907。
在操作907中，根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下确定感兴趣区域(ROI)是否存在于捕获的屏幕中。
根据本公开的各种实施例，在操作907中，在处理器(例如，图1中的处理器120)的控制下，电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以通过使用从捕获的屏幕提取的区域信息、块区域信息等作为附加信息来分离图像区域和/或文本区域，并且如果特定区域包括在捕获的屏幕中，则电子装置可以将该特定区域确定为感兴趣区域(ROI)。例如，特定区域可以是图像区域。在操作907中，在处理器(例如，图1中的处理器120)的控制下，电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以通过使用从捕获的屏幕提取的区域信息、块区域信息等作为附加信息来分离图像区域和/或文本区域，并且如果特定区域不包括在捕获的屏幕中，则电子装置可以确定不存在感兴趣区域(ROI)。
根据本公开的各种实施例，在操作907中，在处理器(例如，图1中的处理器120)的控制下，电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以通过使用从捕获的屏幕提取的区域信息、块区域信息等作为附加信息来分离图像区域和/或文本区域，并且如果特定区域在捕获的屏幕中的比率等于或大于预先配置的比率，则电子装置可以将该特定区域确定为感兴趣区域(ROI)。例如，预先配置的比率可以是大约12％。如果特定区域在捕获的屏幕中的比率小于预先配置的比率，则电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下确定不存在感兴趣区域(ROI)。
在操作907中，在处理器(例如，图1中的处理器120)的控制下，根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以通过使用从捕获的屏幕提取的区域信息、块区域信息等作为附加信息来分离图像区域和/或文本区域，并且如果多个特定区域在捕获的屏幕中的比率等于或大于预先配置的比率，则电子装置可以将最大的区域确定为感兴趣区域(ROI)。如果多个特定区域在捕获的屏幕中的比率小于预先配置的比率，则电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下确定不存在感兴趣区域(ROI)。例如，如果多个图像区域在捕获的屏幕中的比率等于或大于预先配置的比率，那么电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下将多个图像区域当中最大的图像区域确定为感兴趣区域(ROI)。
在操作907中，如果确定感兴趣区域(ROI)存在于捕获的屏幕中，则根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下进入操作909。
在操作907中，如果确定在捕获的屏幕中不存在感兴趣区域(ROI)，则根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下进入操作915。
在操作909中，根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下执行建议感兴趣区域(ROI)的操作。
根据本公开的各种实施例，建议感兴趣区域(ROI)的操作可以是在预先配置的时间间隔期间显示指示感兴趣区域(ROI)的图像(例如，与高亮、反转、框和/或图标相关的GUI元素)的操作。如果预先配置的时间间隔已经过去，则指示感兴趣区域(ROI)的图像(例如，与高亮、反转、框和/或图标相关的GUI元素)可以消失。在操作909中，根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下，在预先配置的时间间隔期间，在显示指示感兴趣区域(ROI)的图像(例如，与高亮、反转、框和/或图标相关的GUI元素)时保持捕获的屏幕的视图布局。
在操作911中，根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下确定是否选择了感兴趣区域(ROI)。
根据本公开的各种实施例，如果接收到通过用户输入选择感兴趣区域(ROI)的命令或输入，则电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下确定选择了感兴趣区域(ROI)。
根据本公开的各种实施例，如果确定没有接收到通过用户输入选择感兴趣区域(ROI)的命令或输入，并且选择了感兴趣区域(ROI)之外的区域，则电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下确定没有选择感兴趣区域(ROI)。
在操作911中，如果确定选择了感兴趣区域(ROI)，则根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下进入操作913。
在操作911中，如果确定没有选择感兴趣区域(ROI)，则根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下进入操作915。
如果选择了感兴趣区域(ROI)，则在操作913中，根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下显示第一编辑屏幕。
根据本公开的各种实施例，第一编辑屏幕可以是其中在编辑工具用户界面(例如，“裁剪图像”用户界面)被放置为以感兴趣区域(ROI)为中心时保持捕获的屏幕的视图布局的编辑屏幕。捕获的屏幕中感兴趣区域(ROI)之外的区域可以被处理为比感兴趣区域(ROI)更暗、或者被处理为可与感兴趣区域(ROI)相区分，从而被显示。
如果没有选择感兴趣区域(ROI)，则在操作915中，根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下显示第二编辑屏幕。
根据本公开的各种实施例，第二编辑屏幕可以是其中在编辑工具用户界面(例如，“裁剪图像”用户界面)被放置为以整个屏幕为中心时保持捕获的屏幕的视图布局的编辑屏幕。
在操作917中，根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下，确定是否存在根据用户输入的编辑操作。
根据本公开的各种实施例，根据用户输入的编辑操作可以是其中用户输入移动编辑工具用户界面(例如，“裁剪图像”用户界面)以选择捕获的屏幕中用户期望的屏幕的操作。在根据用户输入的编辑操作中，用户输入移动编辑工具用户界面(例如，“裁剪图像”用户界面)并且释放用户输入的时间点可以被确定为图像编辑操作完成的时间点。如果释放用户输入，则电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下，将捕获的屏幕的视图布局改变为以根据用户输入编辑的图像和/或屏幕为中心。
在操作917中，如果存在根据用户输入的编辑操作，则根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下进入操作919。
在操作917中，如果没有根据用户输入的编辑操作，则根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下进入操作921。
在操作919中，根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下，将根据用户输入编辑的屏幕存储为图像。
图10是示出根据本公开的实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)修改捕获的屏幕的操作的流程图。
参考图10，在操作1001中，根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下，确定感兴趣区域(ROI)是否存在于捕获的屏幕中。
根据本公开的各种实施例，在操作1001中，在处理器(例如，图1中的处理器120)的控制下，电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以通过使用从捕获的屏幕提取的区域信息、块区域信息等作为附加信息来分离图像区域和/或文本区域，并且如果特定区域包括在捕获的屏幕中，则电子装置可以将该特定区域确定为感兴趣区域(ROI)。例如，特定区域可以是图像区域。在操作1001中，在处理器(例如，图1中的处理器120)的控制下，电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以通过使用从捕获的屏幕提取的区域信息、块区域信息等作为附加信息来分离图像区域和/或文本区域，并且如果特定区域不包括在捕获的屏幕中，则电子装置可以确定不存在感兴趣区域(ROI)。
根据本公开的各种实施例，在操作1001中，在处理器(例如，图1中的处理器120)的控制下，电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以通过使用从捕获的屏幕提取的区域信息、块区域信息等作为附加信息来分离图像区域和/或文本区域，并且如果特定区域在捕获的屏幕中的比率等于或大于预先配置的比率，则电子装置可以将该特定区域确定为感兴趣区域(ROI)。例如，预先配置的比率可以是12％。在操作1001中，如果特定区域在捕获的屏幕中的比率小于预先配置的比率，则电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下，确定不存在感兴趣区域(ROI)。
在操作1001中，在处理器(例如，图1中的处理器120)的控制下，根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以通过使用从捕获的屏幕提取的区域信息、块区域信息等作为附加信息来分离图像区域和/或文本区域，并且如果多个特定区域在捕获的屏幕中的比率等于或大于预先配置的比率，则电子装置可以将最大的区域确定为感兴趣区域(ROI)。在操作1001中，如果多个特定区域在捕获的屏幕中的比率小于预先配置的比率，则电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下，确定不存在感兴趣区域(ROI)。例如，如果多个图像区域在捕获的屏幕中的比率等于或大于预先配置的比率，那么电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下将多个图像区域中最大的图像区域确定为感兴趣区域(ROI)。
在操作1001中，如果确定感兴趣区域(ROI)存在于捕获的屏幕中，则根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下进入操作1003。
在操作1001中，如果确定在捕获的屏幕中不存在感兴趣区域(ROI)，则根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下进入操作1009。
在操作1003中，根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下执行建议感兴趣区域(ROI)的操作。
根据本公开的各种实施例，建议感兴趣区域(ROI)的操作可以是在预先配置的时间间隔期间显示指示感兴趣区域(ROI)的图像(例如，与高亮、反转、框和/或图标相关的GUI元素)的操作。如果预先配置的时间间隔已经过去，则指示感兴趣区域(ROI)的图像(例如，与高亮、反转、框和/或图标相关的GUI元素)可以消失。在操作1003中，根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下，在预先配置的时间间隔期间，在显示指示感兴趣区域(ROI)的图像(例如，与高亮、反转、框和/或图标相关的GUI元素)时保持捕获的屏幕的视图布局。
在操作1005中，根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下确定是否选择了感兴趣区域(ROI)。
根据本公开的各种实施例，如果接收到通过用户输入选择感兴趣区域(ROI)的命令或输入，则电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下，确定选择了感兴趣区域(ROI)。
根据本公开的各种实施例，如果确定没有接收到通过用户输入选择感兴趣区域(ROI)的命令或输入，并且选择了感兴趣区域(ROI)之外的区域，则电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下，确定没有选择感兴趣区域(ROI)。
在操作1005中，如果确定选择了感兴趣区域(ROI)，则根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下进入操作1007。
在操作1005中，如果确定没有选择感兴趣区域(ROI)，则根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下进入操作1009。
如果选择了感兴趣区域(ROI)，则在操作1007中，根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下显示第一编辑屏幕。
根据本公开的各种实施例，第一编辑屏幕可以是其中在编辑工具用户界面(例如，“裁剪图像”用户界面)被放置为以感兴趣区域(ROI)为中心时保持捕获的屏幕的视图布局的编辑屏幕。捕获的屏幕中感兴趣区域(ROI)之外的区域可以被处理为比感兴趣区域(ROI)更暗，从而被显示。
如果选择了感兴趣区域(ROI)，则在操作1009中，根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下显示第二编辑屏幕。
根据本公开的各种实施例，第二编辑屏幕可以是其中在编辑工具用户界面(例如，“裁剪图像”用户界面)被放置为以整个屏幕为中心时保持捕获的屏幕的视图布局的编辑屏幕。
在操作1011中，根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下，确定是否存在根据用户输入的编辑操作。
根据本公开的各种实施例，根据用户输入的编辑操作可以是其中用户输入移动编辑工具用户界面(例如，“裁剪图像”用户界面)以选择捕获的屏幕中用户期望的屏幕的操作。在根据用户输入的编辑操作中，用户输入移动编辑工具用户界面(例如，“裁剪图像”用户界面)并且释放用户输入的时间点可以被确定为图像编辑操作完成的时间点。如果释放用户输入，则电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下将捕获的屏幕的视图布局改变为以根据用户输入编辑的图像和/或屏幕为中心。
在操作1011中，如果存在根据用户输入的编辑操作，则根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下进入操作1013。
在操作1011中，如果没有根据用户输入的编辑操作，则根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下进入操作1015。
在操作1013中，根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下，将根据用户输入编辑的屏幕存储为图像。
在操作1015中，根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下，将在捕获命令时间点创建的捕获的屏幕存储为图像。
图11是示出根据本公开的实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)捕获显示的处理屏幕的操作的流程图。
参考图11，在操作1101中，根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下接收捕获显示的屏幕的命令。
在操作1103中，根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下，确定接收到的命令是否是选择对象区域来捕获屏幕的命令。
在操作1103中，如果确定接收到的命令是选择对象区域来捕获屏幕的命令，则根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下进入操作1105。
在操作1103中，如果确定接收到的命令不是选择对象区域来捕获屏幕的命令，则根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下确定接收到的命令是捕获整个屏幕的命令，并且可以进入操作1113。
在操作1105中，根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下根据显示的处理来提取附加信息。
在操作1107中，根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下，确定感兴趣区域(ROI)是否存在于捕获的屏幕中。
在操作1107中，如果确定感兴趣区域(ROI)存在于捕获的屏幕中，则根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下进入操作1109。
在操作1107中，如果确定在捕获的屏幕中不存在感兴趣区域(ROI)，则根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下进入操作1111。
在操作1109中，根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下聚焦感兴趣区域(ROI)。
根据本公开的各种实施例，聚焦感兴趣区域(ROI)的操作可以对应于其中感兴趣区域(ROI)周围的区域被处理为亮化而感兴趣区域(ROI)之外的区域被处理为暗化的视图布局。
根据本公开的各种实施例，聚焦感兴趣区域(ROI)的操作可以是显示指示感兴趣区域(ROI)的图像(例如，与高亮、反转、框、椭圆、动画、屏幕上的定位针(pin to screen)和/或图标相关的GUI元素)的操作。
在操作1109中，根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下，在显示指示感兴趣区域(ROI)的图像(例如，与高亮、反转、框、椭圆、动画、屏幕上的定位针和/或图标相关的GUI元素)时保持捕获的屏幕的视图布局。根据本公开的各种实施例，聚焦(focus)感兴趣区域(ROI)的操作可以是在显示指示感兴趣区域(ROI)的图像(例如，与高亮、反转、框、椭圆和/或图标相关的GUI元素)时将编辑工具用户界面(例如，“裁剪图像”用户界面)放置为以感兴趣区域(ROI)为中心的操作。
在操作1111中，根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下选择根据用户输入选择的对象区域。
在操作1111中，根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下，在聚焦感兴趣区域(ROI)的状态下选择根据用户输入选择的对象区域。例如，聚焦在感兴趣区域(ROI)上的用户界面可以根据用户输入来移动。
在操作1113中，根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下，根据捕获屏幕的命令来捕获所选对象区域的屏幕。
如果接收到的命令是选择对象区域来捕获屏幕的命令，则在操作1113中，根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下捕获根据用户输入选择的对象区域屏幕。
如果接收到的命令是捕获整个屏幕的命令，则在操作1113中，根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下捕获整个屏幕。
图12是示出根据本公开的实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)根据用户输入执行编辑的操作的流程图。
参考图12，在操作1201中，如果接收到修改捕获的屏幕的命令，则根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下，在捕获的屏幕的至少部分区域中显示编辑工具用户界面。
根据本公开的各种实施例，编辑工具用户界面可以是“裁剪图像”用户界面。“裁剪图像”用户界面可以基本是矩形和/或方形的，并且可以包括矩形和/或方形边缘和/或与顶点相邻的方形或L形括号图像中的至少一个。根据本公开的各种实施例，用户输入可以是移动“裁剪图像”用户界面的基本矩形和/或方形端线或者方形或L形括号图像的输入。
在操作1203中，根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下，确定与用户输入相对应的编辑工具用户界面是否已经移动。
在操作1203中，如果确定与用户输入相对应的编辑工具用户界面移动，则根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下进入操作1205。
在操作1203中，如果确定与用户输入相对应的编辑工具用户界面没有移动，则根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下进入操作1209。
在操作1205中，根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下，确定编辑工具用户界面是否已经移动到对象的阈值区域中。
根据本公开的各种实施例，对象的阈值区域可以是被配置为作为对象区域的外围，相对于对象区域向对象区域的内部和外部延伸预定部分(或长度)的区域。根据本公开的各种实施例，可以不将对象的阈值区域显示为在显示器上可见。
根据本公开的各种实施例，在操作1205中，电子装置(例如，图1中的电子装置101、图2A中的电子装置200、或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下，确定“裁剪图像”用户界面的基本矩形和/或方形端线或者方形或L形括号图像是否已经移动到对象的阈值区域中。在操作1205中，根据本公开的各种实施例，如果确定“裁剪图像”用户界面的基本矩形和/或方形端线或者方形或L形括号图像已经移动到对象的阈值区域中，则电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下停止移动，并执行对齐到(snapto)对象区域的操作。
在操作1205中，如果确定编辑工具用户界面已经移动到对象的阈值区域中，则根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下进入操作1207。
在操作1205中，如果确定编辑工具用户界面没有移动到对象的阈值区域中，则根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下进入操作1203。
在操作1207中，根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下，选择与已经根据用户输入移动了的编辑工具用户界面相对应的对象区域。
在操作1209中，根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下，选择与当前编辑工具用户界面相对应的对象区域。
图13是示出根据本公开的实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)根据用户输入执行编辑的操作的流程图。
参考图13，在操作1301中，根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下根据用户输入获得图像。
根据本公开的各种实施例，根据用户输入获得图像的操作可以是通过将“裁剪图像”用户界面的基本矩形和/或方形端线或者方形或L形括号图像移动到对象的阈值区域中并且选择与已经根据用户输入移动了的编辑工具用户界面相对应的对象区域来获得图像的操作。
在操作1303中，根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下，确定在获得的图像的布局中是否存在相似的图案或分组的屏幕。
在操作1303中，如果在获得的图像的布局中存在相似的图案或分组的屏幕，则根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下进入操作1305。
在操作1303中，如果在获得的图像的布局中不存在相似的图案或分组的屏幕，则根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下进入操作1307。
在操作1305中，根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下，将获得的图像与存在于获得的图像的布局中的相似的图案或分组的屏幕一起存储。
在操作1307中，根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下存储根据用户输入而获得的图像。
图14是示出根据本公开的实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)操作捕获的方法的流程图。
参考图14，在操作1401中，根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下，捕获在显示器(例如，图1中的显示装置160、图2A中的显示器230或图3A中的显示器301)上显示的处理屏幕。
根据本公开的各种实施例，显示的处理屏幕可以是其中图像或视频信息在显示器(例如，图1中的显示装置160、图2A中的显示器230或图3A中的显示器301)上激活的窗口和/或布局中显示的屏幕。
根据本公开的各种实施例，显示的处理屏幕可以包括运行的应用的用户界面。该应用可以对应于在单个窗口帧缓冲器屏幕或多个窗口帧缓冲器中执行的应用。根据本公开的各种实施例，捕获操作可以包括获得和/或生成在显示器(例如，图1中的显示装置160、图2A中的显示器230或图3A中的显示器301)上显示的屏幕的静止画面图像的操作。
根据本公开的各种实施例，在操作1401中，电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下，基于获得的渲染信息，获得包括在显示器(例如，图1中的显示装置160、图2A中的显示器230或图3A中的显示器301)上显示的图像的静止画面的图像。
在操作1403中，根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下根据显示的处理来提取附加信息。
根据各种实施例的、根据显示的处理来提取附加信息的操作可以是在处理器(例如，图1中的处理器120)的控制下提供允许编辑捕获的屏幕的屏幕和/或功能的操作。
在操作1403中，根据各种实施例的、根据显示的处理来提取附加信息的操作可以是电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)在处理器(例如，图1中的处理器120)的控制下从帧缓冲器或应用提取附加信息的操作。
在操作1403中，根据各种实施例的、根据显示的处理来提取附加信息的操作可以是电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)在处理器(例如，图1中的处理器120)的控制下，从自应用或显示器(例如，图1中的显示装置160、图2A中的显示器230或图3A中的显示器301)获得的渲染信息中提取附加信息的操作。
在操作1403中，在根据本公开的各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)中，在处理器(例如，图1中的处理器120)的控制下提取显示的处理的静止画面的区域和/或块区域的操作可以是以块为单位提取静止画面中的图像区域和/或文本区域的操作。
在操作1403中，在根据本公开的各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)中，在处理器(例如，图1中的处理器120)的控制下将显示的处理的静止画面分割为区域和/或块区域的操作可以是以块为单位分割静止画面中的图像区域和/或文本区域的操作。
在操作1405中，根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下，确定弹出对象是否存在于捕获的屏幕中。
在操作1405中，如果确定在捕获的屏幕中存在弹出对象，则根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下进入操作1407。
在操作1405中，如果确定在捕获的屏幕中不存在弹出对象，则根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下进入操作1409。
根据本公开的各种实施例，弹出对象可以是弹出窗口和/或互联网广告视图。
在操作1407中，根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下，从捕获的屏幕中分离弹出对象的区域，并修正捕获的屏幕。可以通过使用渲染信息或附加信息补偿与移除了弹出对象区域的区域相对应的图像区域的数据丢失，来执行修正捕获的屏幕的操作。
在操作1407中，根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下，从捕获的屏幕中分离并移除弹出对象区域，并且可以修正位于弹出对象区域下方的捕获的屏幕。可以通过使用渲染信息或附加信息补偿与移除了弹出对象区域的区域相对应的图像区域的数据丢失，来执行修正位于弹出对象区域下方的捕获的屏幕的操作。
在操作1407中，在根据本公开的各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)中，在处理器(例如，图1中的处理器120)的控制下从捕获的屏幕分离弹出对象的区域并修正捕获的屏幕的操作可以通过移除弹出对象并将图像修正为感兴趣区域(ROI)来执行。
在操作1409中，根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下修改捕获的屏幕。
在操作1409中，根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下修改在帧缓冲器和/或应用中捕获的对象屏幕。
根据各种实施例的修改捕获的屏幕的操作可以是通过用户输入和/或预定的图像编辑处理来修改捕获的屏幕的操作。
例如，在修改捕获的屏幕的操作中，可以通过用户输入来执行“裁剪图像”操作。在修改捕获的屏幕的操作中，可以通过预定的图像编辑处理来执行“裁剪图像”操作。
在操作1411中，根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下，将提取的对象信息和捕获的屏幕存储为捕获图像。根据本公开的各种实施例，将捕获的屏幕存储为捕获图像的操作还可以包括存储其中图像未被用户修改的屏幕的操作。
图15是示出根据本公开的实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)操作捕获的方法的流程图。
参考图15，在操作1501中，根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下，捕获在显示器(例如，图1中的显示装置160、图2A中的显示器230或图3A中的显示器301)上显示的处理屏幕。
根据本公开的各种实施例，显示的处理屏幕可以是其中图像或视频信息在显示器(例如，图1中的显示装置160、图2A中的显示器230或图3A中的显示器301)上激活的窗口和/或布局中显示的屏幕。
根据本公开的各种实施例，显示的处理屏幕可以包括运行的应用的用户界面。该应用可以对应于在单个窗口帧缓冲器屏幕或多个窗口帧缓冲器中执行的应用。根据本公开的各种实施例，捕获操作可以包括获得和/或生成在显示器(例如，图1中的显示装置160、图2A中的显示器230或图3A中的显示器301)上显示的屏幕的静止画面图像的操作。
在操作1501中，根据本公开的各种实施例，电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下，基于获得的渲染信息，获得包括在显示器(例如，图1中的显示装置160、图2A中的显示器230或图3A中的显示器301)上显示的图像的静止画面的图像。
根据本公开的各种实施例，捕获电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)的屏幕的命令可以包括选择对象区域来捕获屏幕的命令和/或捕获整个屏幕的命令。
在操作1503中，根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下根据显示的处理来提取附加信息。
根据各种实施例的、根据显示的处理来提取附加信息的操作可以是在处理器(例如，图1中的处理器120)的控制下提供允许编辑捕获的屏幕的屏幕和/或功能的操作。
在操作1503中，根据各种实施例的、根据显示的处理来提取附加信息的操作可以是电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)在处理器(例如，图1中的处理器120)的控制下从帧缓冲器或应用提取附加信息的操作。
在操作1503中，根据各种实施例的、根据显示的处理来提取附加信息的操作可以是电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)在处理器(例如，图1中的处理器120)的控制下，从自应用或显示器(例如，图1中的显示装置160、图2A中的显示器230或图3A中的显示器301)获得的渲染信息中提取附加信息的操作。
在操作1503中，在根据本公开的各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)中，在处理器(例如，图1中的处理器120)的控制下提取显示的处理的静止画面的区域和/或块区域的操作可以是以块为单位提取静止画面中的图像区域和/或文本区域的操作。
在操作1503中，在根据本公开的各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)中，在处理器(例如，图1中的处理器120)的控制下将显示的处理的静止画面分割为区域和/或块区域的操作可以是在静止画面中以块为单位分割图像区域和/或文本区域的操作。
在操作1505中，根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下确定是否存在显示的水平滑动(slide)图像。
在操作1505中，如果确定存在显示的水平滑动图像，则根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下进入操作1507。
在操作1505中，如果确定不存在显示的水平滑动图像，则根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下进入操作1509。
根据本公开的各种实施例，水平滑动图像可以是在当前显示的屏幕中沿水平滚动方向、而不是沿垂直滚动方向配置的图像。
在操作1507中，根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下分离水平滑动图像并修正捕获的屏幕。
在操作1507中，根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下，在捕获的图像中合并包括在水平滑动中的图像，以修正捕获的屏幕。
在操作1509中，根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下修改捕获的屏幕。
在操作1509中，根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下修改在帧缓冲器和/或应用中捕获的对象屏幕。
根据各种实施例的修改捕获的屏幕的操作可以是通过用户输入和/或预定的图像编辑处理来修改捕获的屏幕的操作。
例如，在修改捕获的屏幕的操作中，可以通过用户输入来执行“裁剪图像”操作。在修改捕获的屏幕的操作中，可以通过预定的图像编辑处理来执行“裁剪图像”操作。
在操作1511中，根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下，将提取的对象信息和捕获的屏幕存储为捕获图像。根据本公开的各种实施例，将捕获的屏幕存储为捕获图像的操作还可以包括存储其中图像未被用户修改的屏幕的操作。
图16是示出根据本公开的实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)操作捕获的方法的流程图。
参考图16，在操作1601中，根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下，捕获在显示器(例如，图1中的显示装置160、图2A中的显示器230或图3A中的显示器301)上显示的处理屏幕。
根据本公开的各种实施例，显示的处理屏幕可以是其中图像或视频信息在显示器(例如，图1中的显示装置160、图2A中的显示器230或图3A中的显示器301)上激活的窗口和/或布局中显示的屏幕。
根据本公开的各种实施例，显示的处理屏幕可以包括运行的应用的用户界面。该应用可以对应于在单个窗口帧缓冲器屏幕或多个窗口帧缓冲器中执行的应用。根据本公开的各种实施例，捕获操作可以包括获得和/或生成在显示器(例如，图1中的显示装置160、图2A中的显示器230或图3A中的显示器301)上显示的屏幕的静止画面图像的操作。
在操作1601中，根据本公开的各种实施例，电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下，基于获得的渲染信息，获得包括在显示器(例如，图1中的显示装置160、图2A中的显示器230或图3A中的显示器301)上显示的图像的静止画面的图像。
在操作1603中，根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下根据显示的处理来提取附加信息。
根据各种实施例的、根据显示的处理来提取附加信息的操作可以是在处理器(例如，图1中的处理器120)的控制下提供允许编辑捕获的屏幕的屏幕和/或功能的操作。
在操作1603中，根据各种实施例的、根据显示的处理来提取附加信息的操作可以是电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)在处理器(例如，图1中的处理器120)的控制下从帧缓冲器或应用提取附加信息的操作。
在操作1603中，根据各种实施例的、根据显示的处理来提取附加信息的操作可以是电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)在处理器(例如，图1中的处理器120)的控制下，从自应用或显示器(例如，图1中的显示装置160、图2A中的显示器230或图3A中的显示器301)获得的渲染信息中提取附加信息的操作。
在操作1603中，在根据本公开的各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)中，在处理器(例如，图1中的处理器120)的控制下，提取显示的处理的静止画面的区域和/或块区域的操作可以是以块为单位提取静止画面中的图像区域和/或文本区域的操作。
在操作1603中，在根据本公开的各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)中，在处理器(例如，图1中的处理器120)的控制下将显示的处理的静止画面分割为区域和/或块区域的操作可以是在静止画面中以块为单位分割图像区域和/或文本区域的操作。
在操作1605中，根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下，确定在显示器的边界处是否存在图像。
在操作1605中，如果确定在显示器的边界处存在图像，则根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下进入操作1607。
在操作1605中，如果确定在显示器的边界处不存在图像，则根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下进入操作1609。
在操作1605中，根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下，确定未被捕获的图像是否存在于捕获的图像的边界处。
在操作1605中，如果确定在捕获的图像的边界处存在未被捕获的图像，则根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下进入操作1607。
在操作1605中，如果确定在捕获的图像的边界处不存在未被捕获的图像，则根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下进入操作1609。
如果确定在捕获的图像的边界处存在未被捕获的图像，则在操作1607中，根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下分离图像并将捕获的屏幕修正为连续的图像。
如果确定在捕获的图像的边界处存在未被捕获的图像，则在操作1607中，根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下，分离图像并将捕获的图像和未被捕获的图像合并为连续的图像，以便修正捕获的屏幕。可以通过使用渲染信息或附加信息补偿与未被捕获的区域相对应的图像的数据丢失以产生连续的图像，来执行修正捕获的屏幕的操作。
在操作1609中，根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下修改捕获的屏幕。
在操作1609中，根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下修改在帧缓冲器和/或应用中捕获的对象屏幕。
根据各种实施例的修改捕获的屏幕的操作可以是通过用户输入和/或预定的图像编辑处理来修改捕获的屏幕的操作。
例如，在修改捕获的屏幕的操作中，可以通过用户输入来执行“裁剪图像”操作。在修改捕获的屏幕的操作中，可以通过预定的图像编辑处理来执行“裁剪图像”操作。
在操作1611中，根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下，将提取的对象信息和捕获的屏幕存储为捕获图像。根据本公开的各种实施例，将捕获的屏幕存储为捕获图像的操作还可以包括存储其中图像未被用户修改的屏幕的操作。
图17A是示出根据本公开的实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)根据显示的处理来提取附加信息的操作的图。
图17B是示出根据本公开的实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)建议感兴趣区域(ROI)的操作的图。
参考图9、图10、图17A和图17B，根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下根据显示的处理来提取附加信息。
根据各种实施例的、根据显示的处理来提取附加信息的操作可以是在处理器(例如，图1中的处理器120)的控制下提取显示的处理的静止画面1701的区域和/或块区域1702、1703、1704或1705的操作。
参考图17A，电子装置101可以从在显示器(例如，图1中的显示装置160)上显示的处理的静止画面1701中提取至少一个块区域1702、1703、1704或1705。电子装置101可以将可根据用户输入移动的编辑工具用户界面(例如，“裁剪图像”用户界面1720)放置在显示器(例如，图1中的显示装置160)上显示的处理的静止画面1701上。
参考图17B，电子装置101可以建议在显示器(例如，图1中的显示装置160)上显示的处理的静止画面1701中的感兴趣区域(ROI)1710。
根据本公开的各种实施例，在处理器(例如，图1中的处理器120)的控制下，电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以通过使用从捕获的屏幕1701提取的区域信息、块区域信息等作为附加信息来分离图像区域和/或文本区域，并且如果特定区域包括在捕获的屏幕1701中，则电子装置可以将该特定区域确定为感兴趣区域(ROI)。例如，特定区域可以是图像区域。
根据本公开的各种实施例，在处理器(例如，图1中的处理器120)的控制下，电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以通过使用从捕获的屏幕1701提取的区域信息、块区域信息等作为附加信息来分离图像区域和/或文本区域，并且如果特定区域在捕获的屏幕中的比率等于或大于预先配置的比率，则电子装置可以将该特定区域确定为感兴趣区域(ROI)1710。例如，预先配置的比率可以是12％。
在处理器(例如，图1中的处理器120)的控制下，根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以通过使用从捕获的屏幕1701提取的区域信息、块区域信息等作为附加信息来分离图像区域和/或文本区域，并且如果多个特定区域在捕获的屏幕1701中的比率等于或大于预先配置的比率，则电子装置可以将最大的区域确定为感兴趣区域(ROI)1710。
根据本公开的各种实施例，建议感兴趣区域(ROI)1710的操作可以是在预先配置的时间间隔期间显示指示感兴趣区域(ROI)的图像(例如，与高亮、反转、框和/或图标相关的GUI元素)的操作。如果预先配置的时间间隔已经过去，则指示感兴趣区域(ROI)1710的图像(例如，与高亮、反转、框和/或图标相关的GUI元素)可以消失。
根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下，在预先配置的时间间隔期间，在显示指示感兴趣区域(ROI)的图像1710(例如，与高亮、反转、框和/或图标相关的GUI元素)时保持捕获的屏幕的视图布局。
图18是示出根据本公开的实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)修改捕获的屏幕的操作的图。
参考图18，在由附图标记1801指示的阶段，电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下提供允许编辑捕获的屏幕的屏幕和/或功能。用于编辑捕获的屏幕的功能可以包括裁剪图像、缩小/放大图像、旋转图像、图像效果、图像色温、图像颜色校正等。电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在显示器(例如，图1中的显示装置160)上以工具栏类型提供与用于编辑捕获的屏幕的功能相对应的图标、图像或文本作为用户界面。允许编辑捕获的屏幕的屏幕和/或功能可以对应于屏幕截图工具栏1810。
在阶段1803中，电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下，确定感兴趣区域(ROI)是否存在于捕获的屏幕中。
在阶段1805中，如果感兴趣区域(ROI)存在于捕获的屏幕1820中，则电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下执行建议感兴趣区域(ROI)的操作1830。
根据本公开的各种实施例，建议感兴趣区域(ROI)的操作可以是在预先配置的时间间隔期间显示指示感兴趣区域(ROI)的图像1830(例如，与高亮、反转、框和/或图标相关的GUI元素)的操作。如果预先配置的时间间隔已经过去，则指示感兴趣区域(ROI)的图像1830(例如，与高亮、反转、框和/或图标相关的GUI元素)可以消失。
根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下，在预先配置的时间间隔期间，在显示指示感兴趣区域(ROI)的图像1830(例如，与高亮、反转、框和/或图标相关的GUI元素)时保持捕获的屏幕的视图布局1820。
根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200、或图3A中的电子装置300)可以在处理器(例如，处理器)的控制下，在显示指示感兴趣区域(ROI)的图像1830(例如，与高亮、反转、框和/或图标相关的GUI元素)时，放置可根据用户输入移动的编辑工具用户界面1840(例如，“裁剪图像”用户界面)。
在阶段1807中，如果选择了感兴趣区域(ROI)1850，则根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下，允许编辑工具用户界面1840(例如，“裁剪图像”用户界面)对齐到所选感兴趣区域(ROI)1850。
在阶段1809中，如果感兴趣区域(ROI)不存在，则根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下针对整个屏幕显示编辑工具用户界面1840(例如，“裁剪图像”用户界面)。
图19是示出根据本公开的实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)修改捕获的屏幕的操作的图。
参考图19，在阶段1901中，电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下，向显示器(例如，图1中的显示装置160)提供允许编辑捕获的屏幕1920的屏幕和/或功能1910。用于编辑捕获的屏幕的功能1910可以包括裁剪图像、缩小/放大图像、旋转图像、图像效果、图像色温、图像颜色校正等。电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在显示器(例如，图1中的显示装置160)上提供与用于编辑捕获的屏幕的功能相对应的图标、图像或文本作为工具栏类型的用户界面。允许编辑捕获的屏幕1920的屏幕和/或功能可以对应于屏幕截图工具栏1910。
在阶段1903中，电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下，确定感兴趣区域(ROI)是否存在于捕获的屏幕1920中。
如果在捕获的屏幕1920中存在感兴趣区域(ROI)，则电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下执行建议感兴趣区域(ROI)的操作1930。
根据本公开的各种实施例，建议感兴趣区域(ROI)的操作可以是在预先配置的时间间隔期间显示指示感兴趣区域(ROI)的图像1930(例如，与高亮、反转、框和/或图标相关的GUI元素)的操作。如果预先配置的时间间隔已经过去，则指示感兴趣区域(ROI)的图像1930(例如，与高亮、反转、框和/或图标相关的GUI元素)可以消失。
根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下，在预先配置的时间间隔期间，在显示指示感兴趣区域(ROI)的图像1930(例如，与高亮、反转、框和/或图标相关的GUI元素)时保持捕获的屏幕的视图布局1920。
根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下，在显示指示感兴趣区域(ROI)的图像1930(例如，与高亮、反转、框和/或图标相关的GUI元素)时，放置可根据用户输入移动的编辑工具用户界面1940(例如，“裁剪图像”用户界面)。
在阶段1905中，如果选择了感兴趣区域(ROI)1950，则根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下，在保持捕获的屏幕的视图布局1920时，允许编辑工具用户界面1940(例如，“裁剪图像”用户界面)对齐到所选感兴趣区域(ROI)1950。
图20是示出根据本公开的实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)根据用户输入执行编辑的操作的图。
参考图20，对象的阈值区域可以是被配置为作为对象区域2010的外围，相对于对象区域向对象区域2010的内部和外部延伸预定部分(或长度)的区域。根据本公开的各种实施例，可以不将对象的阈值区域显示为在显示器上可见。
如附图标记2001所示，对象的阈值区域可以是被配置为从对象区域2010的水平外围向对象区域2010的内部和外部延伸预定部分(或长度)的区域。
如附图标记2003所示，对象的阈值区域可以是被配置为从对象区域2010的垂直外围向对象区域2010的内部和外部延伸预定部分(或长度)的区域。
图21是示出根据本公开的实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)根据用户输入执行编辑的操作的图。
参考图21，在阶段2101中，对象的阈值区域2110可以是被配置为从对象区域2010的水平外围向对象区域2010的内部和外部延伸预定部分(或长度)的区域。可以显示“裁剪图像”用户界面2120。“裁剪图像”用户界面2120可以基本是矩形和/或方形的，并且可以包括矩形和/或方形边缘和/或与顶点相邻的方形或L形括号图像中的至少一个。
在阶段2103中，如果“裁剪图像”用户界面2120的基本矩形和/或方形端线或者方形或L形括号图像移动到对象的阈值区域2110中，则可以执行选择对象区域2010的操作。选择对象区域2010的操作可以是对齐对象区域2010的操作。
在阶段2105中，如果“裁剪图像”用户界面2120的基本矩形和/或方形端线或者方形或L形括号图像被移出对象的阈值区域2110，则可以执行释放选择对象区域2010的操作。释放选择对象区域2010的操作可以是释放对齐到对象区域2010的操作。
图22是示出根据本公开的实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)根据用户输入执行编辑的操作的图。
参考图22，在阶段2201中，在修改捕获的屏幕的操作中，如果选择了感兴趣区域(ROI)2220，则可以显示第一编辑屏幕。第一编辑屏幕可以是其中在编辑工具用户界面(例如，“裁剪图像”用户界面)2230被放置为以感兴趣区域(ROI)2220为中心时保持捕获的屏幕的视图布局2210的编辑屏幕。捕获的屏幕中感兴趣区域(ROI)2220之外的区域可以被处理为比感兴趣区域(ROI)2220更暗，从而被显示。在修改捕获的屏幕的操作中，可以将“裁剪图像”用户界面2230的基本矩形和/或方形端线或者方形或L形括号图像移动到另一个区域2250中。
在阶段2203中，在修改捕获的屏幕的操作中，可以移动“裁剪图像”用户界面2230的基本矩形和/或方形端线或者方形或L形括号图像，以修改用户界面来除感兴趣区域(ROI)2220之外还包括其他区域2250。
在阶段2203中，根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以允许“裁剪图像”用户界面2230对齐到新的对象区域2240，以包括额外选择的区域2250。
图23是示出根据本公开的实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)根据用户输入执行编辑的操作的图。
参考图23，在阶段2301中，在修改捕获的屏幕的操作中，如果选择了感兴趣区域(ROI)2320，则可以显示第一编辑屏幕。第一编辑屏幕可以是其中在编辑工具用户界面(例如，“裁剪图像”用户界面)2330被放置为以感兴趣区域(ROI)2320为中心时保持捕获的屏幕的视图布局2310的编辑屏幕。捕获的屏幕中感兴趣区域(ROI)2320之外的区域可以被处理为比感兴趣区域(ROI)更暗，从而被显示。在修改捕获的屏幕的操作中，可以将“裁剪图像”用户界面2330的基本矩形和/或方形端线或者方形或L形括号图像移动到另一个区域2350中。
在阶段2303中，在修改捕获的屏幕的操作中，可以移动“裁剪图像”用户界面2330的基本矩形和/或方形端线或者方形或L形括号图像，以修改用户界面来包括感兴趣区域(ROI)2220之外的其他区域2350。
在阶段2303中，根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以允许“裁剪图像”用户界面2330对齐新的对象区域2340以包括所选其他区域2350。
图24是示出根据本公开的实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)捕获显示的处理屏幕的操作的图。
参考图24，在阶段2401中，如果确定接收到的命令是选择对象区域来捕获屏幕的命令，则电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下，显示通过其可以选择对象区域并且可以捕获其屏幕的用户界面2420。
在阶段2403中，如果确定接收到的命令是选择对象区域来捕获屏幕的命令，并且在捕获的屏幕2410中存在感兴趣区域(ROI)2430，则电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下，显示通过其可以选择以感兴趣区域(ROI)2430为中心的对象区域并且可以捕获其屏幕的用户界面2420。可以执行聚焦感兴趣区域(ROI)2430的操作。该操作可以对应于其中感兴趣区域(ROI)2430周围的区域被处理为亮化而感兴趣区域(ROI)之外的区域被处理为暗化的视图布局2410。聚焦感兴趣区域(ROI)2430的操作可以是在显示指示感兴趣区域(ROI)2430的图像(例如，框GUI元素)时将编辑工具用户界面(例如，“裁剪图像”用户界面)放置为以感兴趣区域(ROI)2430为中心的操作。
图25是示出根据本公开的实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)捕获显示的处理屏幕的操作的图。
参考图25，在阶段2501中，如果确定接收到的命令是选择对象区域来捕获屏幕的命令，则电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下，显示通过其可以选择对象区域并且可以捕获其屏幕的用户界面2520。
在阶段2503中，如果确定接收到的命令是选择对象区域来捕获屏幕的命令，并且在捕获的屏幕2510中存在感兴趣区域(ROI)2530，则电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下，显示通过其可以选择以感兴趣区域(ROI)2530为中心的对象区域并且可以捕获其屏幕的用户界面2520。可以执行聚焦感兴趣区域(ROI)2530的操作。该操作可以对应于其中感兴趣区域(ROI)2530周围的区域被处理为亮化而感兴趣区域(ROI)之外的区域被处理为暗化的视图布局2510。聚焦感兴趣区域(ROI)2530的操作可以是在显示指示感兴趣区域(ROI)2530的图像(例如椭圆GUI元素)时将编辑工具用户界面(例如，“裁剪图像”用户界面)放置为以感兴趣区域(ROI)2530为中心的操作。
图26是示出根据本公开的实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)捕获显示的处理屏幕的操作的图。
参考图26，在阶段2601中，如果确定接收到的命令是选择对象区域来捕获屏幕的命令，则电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下，显示通过其可以选择对象区域并且可以捕获其屏幕的用户界面2640。捕获的屏幕2610可以包括图像区域2620和文本区域2630。
在阶段2603中，如果确定接收到的命令是选择对象区域来捕获屏幕的命令，并且在捕获的屏幕2610中存在感兴趣区域(ROI)2620，则电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下，显示通过其可以选择以感兴趣区域(ROI)2620为中心的对象区域并且可以捕获其屏幕的用户界面2640。可以执行聚焦感兴趣区域(ROI)2620的操作。该操作可以对应于其中感兴趣区域(ROI)2620周围的区域被处理为亮化，而感兴趣区域(ROI)之外的区域被处理为暗化的视图布局2610。聚焦感兴趣区域(ROI)2620的操作可以是显示将指示感兴趣区域(ROI)2620的图像移动到感兴趣区域(ROI)的动画的操作。此外，可以将编辑工具用户界面(例如，“裁剪图像”用户界面)放置为以感兴趣区域(ROI)2620为中心。
图27是示出根据本公开的实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)捕获显示的处理屏幕的操作的图。
参考图27，在阶段2701中，如果确定接收到的命令是选择对象区域来捕获屏幕的命令，则电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下，显示通过其可以选择对象区域并且可以捕获其屏幕的用户界面2730。捕获的屏幕2710可以包括图像区域2720和文本区域2740。
在阶段2703中，如果确定接收到的命令是选择对象区域来捕获屏幕的命令，并且在捕获的屏幕2710中存在感兴趣区域(ROI)2720，则电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下，显示通过其可以选择以感兴趣区域(ROI)2720为中心的对象区域并且可以捕获其屏幕的用户界面2730。可以执行聚焦感兴趣区域(ROI)2720的操作。该操作可以对应于其中感兴趣区域(ROI)2720周围的区域被处理为亮化而感兴趣区域(ROI)之外的区域被处理为暗化的视图布局2710。聚焦感兴趣区域(ROI)2720的操作可以是显示将指示感兴趣区域(ROI)2720的图像放大到感兴趣区域(ROI)的锁定到屏幕(pin-to-screen)动画的操作。此外，可以将编辑工具用户界面(例如，“裁剪图像”用户界面)放置为以感兴趣区域(ROI)2620为中心。
图28是示出根据本公开的实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)操作捕获的方法的图。
参考图28，在阶段2801中，电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下，捕获在显示器(例如，图1中的显示装置160、图2A中的显示器230或图3A中的显示器301)上显示的处理屏幕2850。
在阶段2801和2803中，捕获的屏幕2850可以包括至少一个对象区域2811、2812、2813、2814、2815、2816和2817。电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下，确定在捕获的屏幕2850中是否存在弹出对象区域2817。弹出对象区域2817可以是弹出窗口。
在阶段2805中，可以从捕获的屏幕2850中分离和移除弹出对象区域2817，并且可以修正位于弹出对象区域2817下方的捕获的屏幕2811。在从捕获的屏幕2850分离弹出对象区域2817并修正捕获的屏幕2850的操作中，可以移除弹出对象区域2817，并且可以修正并存储图像以显示感兴趣区域(ROI)2811。
图29是示出根据本公开的实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)操作捕获的方法的图。
参考图29，在阶段2901中，电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下，捕获在显示器(例如，图1中的显示装置160、图2A中的显示器230或图3A中的显示器301)上显示的处理屏幕2950。
在阶段2901和2903中，捕获的屏幕2950可以包括至少一个对象区域2910和2920。电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下，确定在捕获的屏幕2950中是否存在弹出对象区域2910。弹出对象区域2910可以是弹出窗口。
在阶段2905中，可以从捕获的屏幕2950中分离和移除弹出对象区域2910，并且可以修正位于弹出对象区域2910下方的捕获的屏幕2920。在从捕获的屏幕2950分离弹出对象区域2910并修正捕获的屏幕2950的操作中，可以移除弹出对象区域2910，并且可以修正并存储图像以显示感兴趣区域(ROI)2920。
图30示出了根据本公开的实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)根据用户输入执行编辑的操作的顺序。
参考图30，在阶段3001中，电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下，根据用户输入从捕获的屏幕3010获得图像3020。
在阶段3001中，根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下，确定在获得的图像3020的布局中是否存在相似的图案或分组的屏幕3020、3021和3022。
在阶段3002中，电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下，将获得的图像3020与存在于获得的图像的布局中的相似的图案或分组的屏幕3021和3022一起存储。用户输入未选择的屏幕3021或3022也可以与用户输入选择的图像3020一起存储。
图31示出了根据本公开的实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)根据用户输入执行编辑的操作的顺序。
参考图31，在阶段3101中，电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下获得捕获的屏幕3110。
在阶段3103中，电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下，根据用户输入从捕获的屏幕3110获得图像3120。
根据本公开的各种实施例，根据用户输入获得图像3120的操作可以是通过将“裁剪图像”用户界面3130的基本矩形和/或方形端线或者方形或L形括号图像移动到对象的阈值区域中，并选择与已经根据用户输入移动了的编辑工具用户界面3130相对应的对象区域3120来获得图像的操作。
在阶段3103中，根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下，确定在获得的图像3120的布局中是否存在相似的图案或分组的屏幕3120和3121。
在阶段3105中，电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下，将获得的图像3120和存在于获得的图像的布局中的相似的图案或分组的屏幕3120和3121存储为新图像3140。用户输入未选择的屏幕3121也可以与用户输入选择的图像3120一起存储为新图像3140。
图32A和图32B是示出根据本公开的各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)操作捕获的方法的图。
参考图32A和图32B，在阶段3201、3203、3205和3207中，运行的应用可以包括水平滑动图像3210、3220和3230。
在阶段3209中，电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下，捕获在显示器(例如，图1中的显示装置160、图2A中的显示器230或图3A中的显示器301)上显示的处理屏幕。在阶段3201中，可以根据用户输入从捕获的屏幕获得图像3210。
在阶段3211中，电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下，在与获得的图像3210相对应的区域中合并水平滑动图像3210、3220和3230，以将捕获的屏幕修正为新图像3240并存储该新图像。
图33是示出根据本公开的实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)操作捕获的方法的图。
参考图33，在阶段3301中，电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下，捕获在显示器(例如，图1中的显示装置160、图2A中的显示器230或图3A中的显示器301)上显示的处理屏幕3310。
在阶段3301和3303中，捕获的屏幕3310可以包括至少一个对象区域3320和3330。电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下，确定在捕获的屏幕3310中是否存在弹出对象区域3330。弹出对象区域3330可以是互联网广告视图。
在阶段3305中，可以从捕获的屏幕3310中分离和移除弹出对象区域3330，并且可以修正位于弹出对象区域3330下方的捕获的屏幕3320。在从捕获的屏幕3310分离弹出对象区域3330并修正捕获的屏幕3310的操作中，移除弹出对象区域3330，并且图像可以被修正并存储以显示感兴趣区域(ROI)3320。
图34是示出根据本公开的实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)操作捕获的方法的图。
参考图34，在阶段3401中，捕获的屏幕可以包括至少一个对象区域3410和3420。根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下，确定在捕获的屏幕中是否存在弹出对象区域3420。
在阶段3403中，可以从捕获的屏幕中分离并移除弹出对象区域3420，并且可以修正位于弹出对象区域3420下方的捕获的屏幕3410。在分离并移除弹出对象区域3420之后，可能没有位于弹出对象区域3420下方的捕获的屏幕3410的至少部分区域3411的数据。可以通过使用渲染信息或提取的附加信息来补偿丢失的部分区域3411，从而可以修正位于弹出对象区域下方的捕获的屏幕3410。在从捕获的屏幕分离弹出对象区域3420并修正捕获的屏幕的操作中，可以移除弹出对象区域3420，并且图像可以被修正并存储以显示感兴趣区域(ROI)3410。
图35是示出根据本公开的实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)操作的捕获的图。
参考图35，在阶段3501和3503中，电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下，确定未被捕获的图像3521是否存在于捕获的图像3510的边界3520处。
在阶段3505和3507中，如果未被捕获的图像3521存在于捕获的图像3510的边界3520处，则电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下分离图像并修正捕获的屏幕以使图像成为连续的图像3530。
在阶段3505和3507中，如果未被捕获的图像3521存在于捕获的图像3510的边界3520处，则电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下分离图像，将捕获的图像3510和未被捕获的图像3521合并为连续的图像，并将感兴趣区域3530修正为捕获的屏幕。可以通过使用渲染信息或附加信息补偿与未被捕获的区域相对应的图像的数据丢失以产生连续的图像，来执行修正捕获的屏幕的操作，。
图36是示出根据本公开的实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)操作的捕获的图。
参考图36，在阶段3601中，电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)是具有多个显示区域3690和3691的可折叠电子装置，并且可以通过多个多窗口3620、3621和3622来显示多个运行的应用屏幕。
在阶段3601中，多个多窗口3620、3621和3622中的每一个可以包括至少一个对象区域3610、3611、3612、3613、3614和3615。
在阶段3603中，如果接收到捕获显示的处理屏幕的命令，则电子装置可将包括在多个多窗口3620、3621和3622中的至少一个对象区域3610、3611、3612、3613、3614和3615当中最大的对象区域3610确定为感兴趣区域(ROI)，并且可以通过强调感兴趣区域(ROI)3610周围的区域并暗化感兴趣区域(ROI)3610之外的区域的操作来向用户建议图像编辑。“裁剪图像”用户界面3630可以被布置在感兴趣区域(ROI)3610周围。
图37是示出根据本公开的实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)操作的捕获的图。
参考图37，在阶段3701中，电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)是具有多个显示区域3790和3791的可折叠电子装置，并且可以通过多个多窗口来显示多个运行的应用屏幕3710。
在阶段3703中，多个多窗口中的每一个可以包括至少一个对象区域3720和3750。
在阶段3703中，如果接收到捕获显示的处理屏幕的命令，则电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以将包括在多个多窗口中的至少一个对象区域3720和3750当中最大的对象区域3720确定为感兴趣区域(ROI)，并且可以通过强调感兴趣区域(ROI)3720周围的区域并暗化感兴趣区域(ROI)3720之外的区域的操作来向用户建议图像编辑。电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在感兴趣区域(ROI)3720周围放置“裁剪图像”用户界面3730。
在阶段3703中，根据用户输入，电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以根据用户输入将放置在感兴趣区域(ROI)3720周围的“裁剪图像”用户界面3730从点3741移动到在另一个对象区域3750的阈值区域中的点3742。
在阶段3705中，如果根据用户输入，被放置在感兴趣区域(ROI)3720周围的“裁剪图像”用户界面3730从点3741移动到位于另一个对象区域3750的阈值区域中的点3742，则电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以捕获并存储包括第一对象区域3720的部分区域和第二对象区域3750的新图像3730。
图38是示出根据本公开的实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)操作的捕获的图。
参考图38，在阶段3801中，电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)是具有多个显示区域3890和3891的可折叠电子装置，并且可以通过多个多窗口来显示多个运行的应用屏幕A、B和C。
在阶段3801中，多个多窗口中的每一个可以包括至少一个对象区域3810、3811、3812、3813、3814、3815、3816、3817和3818。
在阶段3801中，多个多窗口中的每一个可以在至少一个对象区域3810、3811、3812、3813、3814、3815、3816、3817和3818中放置“裁剪图像”用户界面3850。
在阶段3803中，如果接收到捕获显示的处理屏幕的命令，则电子装置可将包括在多个多窗口中的至少一个对象区域3810、3811、3812、3813、3814、3815、3816、3817和3818当中最大的对象区域3810确定为感兴趣区域(ROI)，并且可以通过强调感兴趣区域(ROI)3810周围的区域且暗化感兴趣区域(ROI)3810之外区域的操作来向用户建议图像编辑。“裁剪图像”用户界面3850可以被布置在感兴趣区域(ROI)3810周围。
在阶段3803中，根据用户输入，电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以将放置在感兴趣区域(ROI)3810周围的“裁剪图像”用户界面3850从点3861移动到在另一个对象区域3811的阈值区域中的点3862。
在阶段3805中，如果根据用户输入，被放置在感兴趣区域(ROI)3810周围的“裁剪图像”用户界面3850从点3861移动到在另一个对象区域3811的阈值区域中的点3862，则电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以捕获并存储包括直到第二对象区域3811的边界以及第一对象区域3810的部分区域的新图像3860。
图39是示出根据本公开的实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)选择对象区域来捕获屏幕的操作的图。
参考图39，根据本公开的各种实施例，如果接收到根据触控笔320做出的触摸输入来选择对象区域的输入(例如，拖动输入)，则电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下，根据与触控笔320相对应的触摸输入来选择对象区域3910，以捕获屏幕。
图40是示出根据本公开的实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)选择目标区域来捕获屏幕的操作的图。
参考图40，在阶段4001中，电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以执行选择对象区域的功能。电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在显示器(例如，图1中的显示装置160)上显示与对象区域选择功能相关的用户界面4010。
在阶段4003和4005中，如果选择了对象区域选择功能，则电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以接收根据运行屏幕4020上的触摸输入(例如，触控笔或手的触摸)选择对象区域的输入，并且可以显示与所选对象区域相对应的“裁剪图像”用户界面4030。
在阶段4007中，电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以捕获根据触摸输入(例如，触控笔或手的触摸)选择的对象区域4040。
图41是示出根据本公开的实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)捕获整个屏幕的操作的图。
参考图41，在阶段4101中，根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在显示器(例如，图1中的显示装置160)上显示运行的处理屏幕4110。
在阶段4103中，当接收到通过多个按钮键(例如，图1中的输入装置150以及图3A和图3B中的键输入装置317)的组合的输入时，电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以捕获显示的屏幕4420。
图42是示出根据本公开的实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)捕获整个屏幕的操作的图。
参考图42，在阶段4201中，电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以通过显示器(例如，图1中的显示装置160)上的触摸输入来接收特定姿势4210。例如，触摸输入的特定姿势可以是用户用他/她的手的边缘或手掌在特定方向上划过显示器(或触摸屏)的姿势。
在阶段4203中，电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以捕获显示的屏幕4220。
图43是根据本公开的实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)操作捕获的方法的流程图。
参考图43，在操作4301中，根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下，捕获显示器(例如，图1中的显示装置160、图2A中的显示器230或图3A中的显示器301)上显示的屏幕。
在操作4303中，根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下，从捕获的屏幕提取至少一个区域和/或块区域。
在操作4305中，根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下，确定是否已经接收到修改捕获的屏幕的命令。
如果接收到修改捕获的屏幕的命令，则在操作4307中，根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下，基于提取的至少一个区域和/或块区域，确定捕获的屏幕中是否存在感兴趣区域(ROI)。
如果捕获的屏幕中存在感兴趣区域(ROI)，则在操作4309中，根据各种实施例的电子装置(例如，图1中的电子装置101、图2A中的电子装置200或图3A中的电子装置300)可以在处理器(例如，图1中的处理器120)的控制下，在显示器(例如，图1中的显示装置160)上显示用于建议感兴趣区域(ROI)的用户界面。
根据本公开的各种实施例，用于建议感兴趣区域(ROI)的用户界面可以是例如与高亮、反转、框和/或图标相关的GUI元素。
根据各种实施例的电子装置可以是各种类型的电子装置之一。电子装置可以包括例如便携式通信装置(例如，智能电话)、计算机装置、便携式多媒体装置、便携式医疗装置、相机、可穿戴装置或家用电器。根据本公开的实施例的电子装置不限于以上所述的那些电子装置。
应当理解，本公开的各种实施例和其中使用的术语并不旨在将本文阐述的技术特征限制于特定实施例，而是包括对应的实施例的各种变化、等同和/或替代。关于附图的描述，相似的附图标记可以用于指代相似或相关的元素。应当理解，与一个项目相对应的单数形式的名词可以包括该事物中的一个或多个，除非相关的上下文清楚地表明不是这样。如本文所使用的，诸如“A或B”、“A和B中的至少一个”、“A或B中的至少一个”、“A、B或C”、“A、B和C中的至少一个”以及“A、B或C中的至少一个”等短语中的每一个可以包括在对应的一个短语中一起列举的项目中所有可能的组合。如本文所使用的，诸如“第一”和“第二”的术语可以用于简单地区分对应的元件与另外的元件，而不在其他方面(例如，重要性或次序上)限制元件。应当理解，如果一个元件(例如，第一元件)被称为与另一个元件(例如，第二元件)“耦合”、“耦合到”另一个元件、与另一个元件“连接”或“连接到”另一个元件，则无论是否使用术语“可操作地”或“通信地”，都意味着该元件可以直接(例如，有线地)、无线地或经由第三元件来与另一个元件耦合。
如本文所使用的，术语“模块”可以包括以硬件、软件或固件实现的单元，并且可以与其他术语(例如，“逻辑”、“逻辑块”、“组件”或“电路”)互换使用。“模块”可以是单个集成组件的适于执行一个或多个功能的最小单元或其部分。例如，根据本公开的实施例，模块可以以专用集成电路(ASIC)的形式来实现。
本文阐述的各种实施例可以被实现为软件(例如，程序140)，该软件包括存储在机器(例如，电子装置101)可读的存储介质(例如，内部存储器136或外部存储器138)中的一个或多个指令。例如，机器(例如，电子装置101)的处理器(例如，处理器120)可以在使用或不使用受处理器控制的一个或多个其它组件的情况下，调用存储在存储介质中的一个或多个指令中的至少一个，并且执行该至少一个指令。这允许操作机器来根据所调用的至少一个指令执行至少一个功能。一个或多个指令可以包括由编译器生成的代码或可由解释器执行的代码。可以以非暂时性存储介质的形式来提供机器可读存储介质。其中，术语“非暂时性”仅仅意味着存储介质是有形装置，并且不包括信号(例如，电磁波)，但是该术语不区分数据半永久性地存储在存储介质中的情况和数据临时存储在存储介质中的情况。
根据本公开的实施例，可以在计算机程序产品中包括并提供根据本公开的各种实施例的方法。计算机程序产品可以作为产品在卖方和买方之间交易。计算机程序产品可以以机器可读存储介质(例如，紧凑盘只读存储器(CD-ROM))的形式分发、或经由应用商店(例如，PlayStoreTM)在线分发(例如，下载或上传)、或者直接在两个用户装置(例如，智能手机)之间分发。如果在线分发，则计算机程序产品的至少部分可以临时生成或至少临时存储在机器可读存储介质(诸如制造商的服务器、应用商店的服务器或中继服务器的存储器)中。
根据本公开的各种实施例，上述元件的每个元件(例如，模块或程序)可以包括单个实体或多个实体。根据本公开的各种实施例，可以省略上述元件中的一个或多个、或者可以添加一个或多个其他元件。可替代地或附加地，多个元件(例如，模块或程序)可以集成到单个元件中。在这种情况下，根据本公开的各种实施例，集成的元件仍然可以以与在集成之前由多个元件中对应的一个元件执行的相同或相似的方式来执行多个元件中的每一个的一个或多个功能。根据本公开的各种实施例，由模块、程序或另外的元件执行的操作可以顺序地、并行地、重复地或启发式地执行，或一个或多个操作可以以不同的次序来执行或省略，或者可以添加一个或多个其他操作。
尽管已经参考本公开的各种实施例示出和描述了本公开，但是本领域技术人员将理解，在不脱离由所附权利要求及其等同物限定的本公开的精神和范围的情况下，可以在形式和细节上进行各种改变。
Claims (15)
1.一种电子装置操作捕获的方法，所述方法包括：
捕获显示器上显示的屏幕；
从捕获的屏幕中提取至少一个区域和/或块区域；
确定是否已经接收到修改捕获的屏幕的命令；
当确定已经接收到修改捕获的屏幕的命令时，基于提取的至少一个区域和/或块区域，确定在捕获的屏幕中是否存在感兴趣区域ROI；以及
当ROI存在时，显示用于建议感兴趣区域的用户界面。
2.根据权利要求1所述的方法，其中，显示用于建议感兴趣区域的用户界面包括：在预先配置的时间间隔内显示指示ROI的图像的同时，保持捕获的屏幕的视图布局。
3.根据权利要求2所述的方法，其中，指示ROI的图像包括与高亮、反转、框和/或图标相关的图形用户界面GUI元素。
4.根据权利要求1所述的方法，还包括：
确定是否选择了ROI；以及
当选择了ROI时，显示第一编辑屏幕。
5.根据权利要求4所述的方法，还包括：
当未选择ROI时，显示第二编辑屏幕。
6.根据权利要求4所述的方法，其中，所述第一编辑屏幕包括其中在编辑工具用户界面被放置为以ROI为中心时保持捕获的屏幕的视图布局的编辑屏幕。
7.根据权利要求4所述的方法，还包括：
确定是否存在根据用户输入的编辑；以及
将根据用户输入编辑的屏幕存储为图像，
其中，根据用户输入的编辑包括：根据用户输入移动编辑工具用户界面，以在捕获的屏幕中选择用户期望的屏幕，
当编辑工具用户界面在编辑工具用户界面被用户输入移动时到达对象区域的阈值区域时，对齐到对象区域，
其中，所述第二编辑屏幕包括其中在编辑工具用户界面被放置为以整个屏幕为中心时保持捕获的屏幕的视图布局的编辑屏幕。
8.一种电子装置，包括：
显示器；
可操作地连接到显示器的处理器；以及
可操作地连接到处理器的存储器，
其中，所述存储器存储指令，当所述指令被执行时，使得所述处理器：
捕获显示器上显示的屏幕，
从捕获的屏幕中提取至少一个区域和/或块区域，
确定是否已经接收到修改捕获的屏幕的命令，
当确定已经接收到修改捕获的屏幕的命令时，基于提取的至少一个区域和/或块区域，确定在捕获的屏幕中是否存在感兴趣区域ROI，以及
当ROI存在时，显示用于建议感兴趣区域的用户界面。
9.根据权利要求8所述的电子装置，其中，所述指令还被配置为使得所述处理器在预先配置的时间间隔内显示指示ROI的图像的同时，保持捕获的屏幕的视图布局。
10.根据权利要求9所述的电子装置，其中，指示ROI的图像包括与高亮、反转、框和/或图标相关的图形用户界面GUI元素。
11.根据权利要求8所述的电子装置，其中，所述指令还被配置为使得所述处理器：
确定是否选择了ROI，以及
当选择了ROI时，在显示器上显示第一编辑屏幕。
12.根据权利要求11所述的电子装置，其中，所述指令还被配置为使得所述处理器在未选择ROI时，在显示器上显示第二编辑屏幕。
13.根据权利要求11所述的电子装置，其中，所述第一编辑屏幕是其中在编辑工具用户界面被放置为以ROI为中心时保持捕获的屏幕的视图布局的编辑屏幕。
14.根据权利要求12所述的电子装置，其中，所述第二编辑屏幕是其中在编辑工具用户界面被放置为以整个屏幕为中心时保持捕获的屏幕的视图布局的编辑屏幕。
15.根据权利要求12所述的电子装置，其中，所述指令还被配置为使得所述处理器：
确定是否存在根据用户输入的编辑；
将根据用户输入编辑的屏幕存储为图像；
根据用户输入移动编辑工具用户界面，以在捕获的屏幕中选择用户期望的屏幕；以及
当编辑工具用户界面在编辑工具用户界面被用户输入移动时到达对象区域的阈值区域时，对齐到对象区域。
Applications Claiming Priority (3)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020190129475A KR20210045891A (ko) | 2019-10-17 | 2019-10-17 | 전자 장치 및 전자 장치의 화면 캡쳐 운용 방법 |
| KR10-2019-0129475 | 2019-10-17 | ||
| PCT/KR2020/014171 WO2021075910A1 (en) | 2019-10-17 | 2020-10-16 | Electronic device and method for operating screen capturing by electronic device |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN114787863A true CN114787863A (zh) | 2022-07-22 |
Family
ID=75491179
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202080086079.8A Pending CN114787863A (zh) | 2019-10-17 | 2020-10-16 | 电子装置和电子装置操作屏幕捕获的方法 |
Country Status (5)
| Country | Link |
|---|---|
| US (1) | US11842039B2 (zh) |
| EP (1) | EP4014196A4 (zh) |
| KR (1) | KR20210045891A (zh) |
| CN (1) | CN114787863A (zh) |
| WO (1) | WO2021075910A1 (zh) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN115291777A (zh) * | 2022-08-04 | 2022-11-04 | 维沃移动通信有限公司 | 截屏方法、装置、终端及可读存储介质 |
Families Citing this family (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20210038151A (ko) * | 2019-09-30 | 2021-04-07 | 삼성전자주식회사 | 전자 장치 및 전자 장치의 제어 방법 |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20060280364A1 (en) * | 2003-08-07 | 2006-12-14 | Matsushita Electric Industrial Co., Ltd. | Automatic image cropping system and method for use with portable devices equipped with digital cameras |
| KR20150056346A (ko) * | 2013-11-15 | 2015-05-26 | 엘지전자 주식회사 | 다중 창 화면 캡쳐 처리를 위한 단말기 |
| CN107678648A (zh) * | 2017-09-27 | 2018-02-09 | 北京小米移动软件有限公司 | 截屏处理方法及装置 |
| US20190147026A1 (en) * | 2017-05-16 | 2019-05-16 | Apple Inc. | Device, Method, and Graphical User Interface for Editing Screenshot Images |
Family Cites Families (44)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR101500726B1 (ko) | 2008-01-02 | 2015-03-11 | 주식회사 엘지씨엔에스 | 화면 캡쳐 장치 및 방법 |
| US8957865B2 (en) | 2009-01-05 | 2015-02-17 | Apple Inc. | Device, method, and graphical user interface for manipulating a user interface object |
| WO2010105246A2 (en) * | 2009-03-12 | 2010-09-16 | Exbiblio B.V. | Accessing resources based on capturing information from a rendered document |
| DE112009004063T5 (de) * | 2009-04-01 | 2012-07-12 | Hewlett-Packard Development Company, L.P. | Bildschirmerfassung |
| KR101345726B1 (ko) | 2009-04-24 | 2013-12-30 | 주식회사 나고소프트 | 웹페이지 캡쳐 화면 인쇄 방법 |
| KR101749282B1 (ko) * | 2010-09-17 | 2017-06-21 | 에스프린팅솔루션 주식회사 | 호스트장치 및 호스트장치의 화면캡쳐 제어방법 |
| KR101834987B1 (ko) * | 2011-08-08 | 2018-03-06 | 삼성전자주식회사 | 휴대용 단말기에서 화면 캡쳐를 위한 장치 및 방법 |
| KR101899548B1 (ko) * | 2012-04-16 | 2018-09-17 | 삼성전자 주식회사 | 휴대단말에서 피드 정보 수집 방법 및 장치 |
| KR102063952B1 (ko) * | 2012-10-10 | 2020-01-08 | 삼성전자주식회사 | 멀티 디스플레이 장치 및 멀티 디스플레이 방법 |
| KR101527039B1 (ko) * | 2012-11-01 | 2015-06-08 | 엘지전자 주식회사 | 이동 단말기 및 이의 제어 방법 |
| US20160266769A1 (en) * | 2013-03-14 | 2016-09-15 | Motorola Mobility Llc | Text display and selection system |
| KR102088911B1 (ko) * | 2013-04-18 | 2020-03-13 | 엘지전자 주식회사 | 이동 단말기 및 그것의 제어 방법 |
| KR20140143610A (ko) | 2013-06-07 | 2014-12-17 | 엘지전자 주식회사 | 이동 단말기 및 그 동작 방법 |
| KR102046118B1 (ko) * | 2013-06-10 | 2019-11-18 | 삼성전자주식회사 | 이동 단말기 및 그 제어 방법 |
| US10523454B2 (en) * | 2013-06-13 | 2019-12-31 | Evernote Corporation | Initializing chat sessions by pointing to content |
| KR102105460B1 (ko) * | 2013-06-14 | 2020-06-01 | 엘지전자 주식회사 | 이동 단말기 및 그것의 제어방법 |
| KR102172354B1 (ko) | 2013-06-28 | 2020-10-30 | 삼성전자주식회사 | 이미지 파일 생성 방법 및 장치 |
| CN103473012A (zh) * | 2013-09-09 | 2013-12-25 | 华为技术有限公司 | 截屏方法、装置和终端设备 |
| US9329692B2 (en) * | 2013-09-27 | 2016-05-03 | Microsoft Technology Licensing, Llc | Actionable content displayed on a touch screen |
| US9471912B2 (en) * | 2014-02-06 | 2016-10-18 | Verto Analytics Oy | Behavioral event measurement system and related method |
| KR102255831B1 (ko) * | 2014-03-26 | 2021-05-25 | 삼성전자주식회사 | 초음파 장치 및 초음파 장치의 영상 인식 방법 |
| CN104090648B (zh) * | 2014-05-21 | 2017-08-25 | 中兴通讯股份有限公司 | 数据录入方法及终端 |
| WO2015178707A1 (en) * | 2014-05-22 | 2015-11-26 | Samsung Electronics Co., Ltd. | Display device and method for controlling the same |
| GB201417948D0 (en) * | 2014-10-10 | 2014-11-26 | Ibm | Enhanced documentation validation |
| JP6429588B2 (ja) * | 2014-10-22 | 2018-11-28 | キヤノン株式会社 | 画像処理装置及び画像処理方法 |
| CN104536729B (zh) * | 2014-11-28 | 2019-02-22 | 北京奇虎科技有限公司 | 一种实现在浏览器页面中进行截图的方法和装置 |
| RU2602386C1 (ru) * | 2015-05-26 | 2016-11-20 | Общество с ограниченной ответственностью "Лаборатория 24" | Способ визуализации объекта |
| KR102336447B1 (ko) * | 2015-07-07 | 2021-12-07 | 삼성전자주식회사 | 촬영 장치 및 그 동작 방법 |
| US10803391B2 (en) * | 2015-07-29 | 2020-10-13 | Google Llc | Modeling personal entities on a mobile device using embeddings |
| KR102359359B1 (ko) * | 2015-11-25 | 2022-02-08 | 삼성전자주식회사 | 사용자 단말 장치 및 그 제어 방법 |
| KR101811719B1 (ko) * | 2016-02-11 | 2017-12-22 | 삼성전자주식회사 | 컨텐트를 제공하는 디바이스를 제어하는 방법, 그 디바이스 및 서버 |
| US9870623B2 (en) * | 2016-05-14 | 2018-01-16 | Google Llc | Segmenting content displayed on a computing device into regions based on pixels of a screenshot image that captures the content |
| JP6712047B2 (ja) * | 2016-05-25 | 2020-06-17 | フリュー株式会社 | 写真作成ゲーム機および画像生成方法 |
| US10540055B2 (en) * | 2017-02-08 | 2020-01-21 | Google Llc | Generating interactive content items based on content displayed on a computing device |
| KR20180131908A (ko) * | 2017-06-01 | 2018-12-11 | 엘지전자 주식회사 | 이동 단말기 및 그것의 동작방법 |
| CN111212250B (zh) * | 2017-12-20 | 2023-04-14 | 海信视像科技股份有限公司 | 智能电视及电视画面截图的图形用户界面的显示方法 |
| US11234130B2 (en) * | 2018-01-02 | 2022-01-25 | Latch Mobile LLC | Systems and methods for monitoring user activity |
| CN112469340A (zh) * | 2018-07-26 | 2021-03-09 | 皇家飞利浦有限公司 | 具有用于引导式肝成像的人工神经网络的超声系统 |
| CN109407936B (zh) * | 2018-09-21 | 2021-07-16 | Oppo（重庆）智能科技有限公司 | 截图方法及相关装置 |
| CN109460177A (zh) * | 2018-09-27 | 2019-03-12 | 维沃移动通信有限公司 | 一种图片处理方法及终端设备 |
| CN109726712A (zh) * | 2018-11-13 | 2019-05-07 | 平安科技（深圳）有限公司 | 文字识别方法、装置及存储介质、服务器 |
| JP7275552B2 (ja) * | 2018-12-06 | 2023-05-18 | 凸版印刷株式会社 | 画像撮像支援装置及び画像撮像支援方法 |
| WO2020148658A2 (en) * | 2019-01-18 | 2020-07-23 | Rathod Yogesh | Methods and systems for displaying on map current or nearest and nearby or searched and selected location(s), geo-fence(s), place(s) and user(s) and identifying associated payments and account information for enabling to make and receive payments |
| US11188359B2 (en) * | 2019-09-20 | 2021-11-30 | Samsung Electronics Co., Ltd. | Electronic device and screen capturing method thereof |
-
2019
- 2019-10-17 KR KR1020190129475A patent/KR20210045891A/ko not_active Application Discontinuation
-
2020
- 2020-10-16 CN CN202080086079.8A patent/CN114787863A/zh active Pending
- 2020-10-16 US US17/072,748 patent/US11842039B2/en active Active
- 2020-10-16 EP EP20877494.3A patent/EP4014196A4/en active Pending
- 2020-10-16 WO PCT/KR2020/014171 patent/WO2021075910A1/en unknown
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20060280364A1 (en) * | 2003-08-07 | 2006-12-14 | Matsushita Electric Industrial Co., Ltd. | Automatic image cropping system and method for use with portable devices equipped with digital cameras |
| KR20150056346A (ko) * | 2013-11-15 | 2015-05-26 | 엘지전자 주식회사 | 다중 창 화면 캡쳐 처리를 위한 단말기 |
| US20190147026A1 (en) * | 2017-05-16 | 2019-05-16 | Apple Inc. | Device, Method, and Graphical User Interface for Editing Screenshot Images |
| CN107678648A (zh) * | 2017-09-27 | 2018-02-09 | 北京小米移动软件有限公司 | 截屏处理方法及装置 |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN115291777A (zh) * | 2022-08-04 | 2022-11-04 | 维沃移动通信有限公司 | 截屏方法、装置、终端及可读存储介质 |
Also Published As
| Publication number | Publication date |
|---|---|
| EP4014196A1 (en) | 2022-06-22 |
| WO2021075910A1 (en) | 2021-04-22 |
| EP4014196A4 (en) | 2022-09-28 |
| US20210117073A1 (en) | 2021-04-22 |
| US11842039B2 (en) | 2023-12-12 |
| KR20210045891A (ko) | 2021-04-27 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US11720141B2 (en) | Electronic device including flexible display | |
| CN111758097B (zh) | 电子设备及其指纹认证界面方法 | |
| US10579152B2 (en) | Apparatus, method and recording medium for controlling user interface using input image | |
| CN113811836B (zh) | 可折叠电子装置以及可折叠电子装置中显示信息的方法 | |
| CN110135336B (zh) | 行人生成模型的训练方法、装置及存储介质 | |
| US11556246B2 (en) | Electronic device and control method thereof | |
| CN114303113A (zh) | 电子装置和控制电子装置的方法 | |
| WO2021027890A1 (zh) | 车牌图像生成方法、装置及计算机存储介质 | |
| CN110543350A (zh) | 一种生成页面组件的方法及装置 | |
| EP4254938A1 (en) | Electronic device and operation method therefor | |
| KR20220032875A (ko) | 사용자 인터페이스를 제공하는 전자 장치 및 그 방법 | |
| CN113168208A (zh) | 可折叠电子设备和在可折叠电子设备中显示信息的方法 | |
| CN114787863A (zh) | 电子装置和电子装置操作屏幕捕获的方法 | |
| JP7440669B2 (ja) | 画面制御方法及び装置 | |
| US20230224573A1 (en) | Method and device for photography guidance of flexible display | |
| US20240312380A1 (en) | Electronic device including expandable display and content provision method | |
| CN114154520A (zh) | 机器翻译模型的训练方法、机器翻译方法、装置及设备 | |
| US20220383786A1 (en) | Electronic device having extendable display and method for providing content thereof | |
| KR102643243B1 (ko) | 사용자 인터페이스에 대한 시인성 개선을 지원하기 위한 전자 장치 | |
| CN116034335A (zh) | 电子装置以及其处理书写输入的方法 | |
| US11755171B2 (en) | Electronic device and screenshot operation method for electronic device | |
| US20220164093A1 (en) | Electronic device with expandable display | |
| US20230236638A1 (en) | Electronic device including flexible display, and screen control method | |
| EP4239624A1 (en) | Electronic device and electronic device operation method | |
| KR20220078431A (ko) | 플렉서블 디스플레이를 포함하는 전자 장치 및 화면 제어 방법 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination |