CN113630551A - 通过利用相机的应用提供各种功能的电子装置及操作方法 - Google Patents

通过利用相机的应用提供各种功能的电子装置及操作方法 Download PDF

Info

Publication number
CN113630551A
CN113630551A CN202110784305.6A CN202110784305A CN113630551A CN 113630551 A CN113630551 A CN 113630551A CN 202110784305 A CN202110784305 A CN 202110784305A CN 113630551 A CN113630551 A CN 113630551A
Authority
CN
China
Prior art keywords
document
image
user interface
function
region
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202110784305.6A
Other languages
English (en)
Other versions
CN113630551B (zh
Inventor
金敬和
姜旻希
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics Co Ltd
Original Assignee
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Samsung Electronics Co Ltd filed Critical Samsung Electronics Co Ltd
Priority to CN202110784305.6A priority Critical patent/CN113630551B/zh
Publication of CN113630551A publication Critical patent/CN113630551A/zh
Application granted granted Critical
Publication of CN113630551B publication Critical patent/CN113630551B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00127Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture
    • H04N1/00249Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a photographic apparatus, e.g. a photographic printer or a projector
    • H04N1/00251Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a photographic apparatus, e.g. a photographic printer or a projector with an apparatus for taking photographic images, e.g. a camera
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/62Control of parameters via user interfaces
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/0035User-machine interface; Control console
    • H04N1/00352Input means
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04815Interaction with a metaphor-based environment or interaction object displayed as three-dimensional, e.g. changing the user viewpoint with respect to the environment or object
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90Details of database functions independent of the retrieved data types
    • G06F16/93Document management systems
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44Arrangements for executing specific programs
    • G06F9/451Execution arrangements for user interfaces
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/20Scenes; Scene-specific elements in augmented reality scenes
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00002Diagnosis, testing or measuring; Detecting, analysing or monitoring not otherwise provided for
    • H04N1/00007Diagnosis, testing or measuring; Detecting, analysing or monitoring not otherwise provided for relating to particular apparatus or devices
    • H04N1/00013Reading apparatus
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00002Diagnosis, testing or measuring; Detecting, analysing or monitoring not otherwise provided for
    • H04N1/00007Diagnosis, testing or measuring; Detecting, analysing or monitoring not otherwise provided for relating to particular apparatus or devices
    • H04N1/00018Scanning arrangements
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00002Diagnosis, testing or measuring; Detecting, analysing or monitoring not otherwise provided for
    • H04N1/00026Methods therefor
    • H04N1/00037Detecting, i.e. determining the occurrence of a predetermined state
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00002Diagnosis, testing or measuring; Detecting, analysing or monitoring not otherwise provided for
    • H04N1/00071Diagnosis, testing or measuring; Detecting, analysing or monitoring not otherwise provided for characterised by the action taken
    • H04N1/00074Indicating or reporting
    • H04N1/00076Indicating or reporting locally
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00127Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture
    • H04N1/00204Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a digital computer or a digital computer system, e.g. an internet server
    • H04N1/00244Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a digital computer or a digital computer system, e.g. an internet server with a server, e.g. an internet server
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/0035User-machine interface; Control console
    • H04N1/00405Output means
    • H04N1/00408Display of information to the user, e.g. menus
    • H04N1/00411Display of information to the user, e.g. menus the display also being used for user input, e.g. touch screen
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/04Scanning arrangements, i.e. arrangements for the displacement of active reading or reproducing elements relative to the original or reproducing medium, or vice versa
    • H04N1/19Scanning arrangements, i.e. arrangements for the displacement of active reading or reproducing elements relative to the original or reproducing medium, or vice versa using multi-element arrays
    • H04N1/195Scanning arrangements, i.e. arrangements for the displacement of active reading or reproducing elements relative to the original or reproducing medium, or vice versa using multi-element arrays the array comprising a two-dimensional array or a combination of two-dimensional arrays
    • H04N1/19594Scanning arrangements, i.e. arrangements for the displacement of active reading or reproducing elements relative to the original or reproducing medium, or vice versa using multi-element arrays the array comprising a two-dimensional array or a combination of two-dimensional arrays using a television camera or a still video camera
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/63Control of cameras or camera modules by using electronic viewfinders
    • H04N23/631Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters
    • H04N23/632Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters for displaying or modifying preview images prior to image capturing, e.g. variety of image resolutions or capturing parameters
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04845Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/0008Connection or combination of a still picture apparatus with another apparatus
    • H04N2201/0065Converting image data to a format usable by the connected apparatus or vice versa
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/0077Types of the still picture apparatus
    • H04N2201/0084Digital still camera
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/32Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device
    • H04N2201/3201Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title
    • H04N2201/3261Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title of multimedia information, e.g. a sound signal
    • H04N2201/3263Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title of multimedia information, e.g. a sound signal of a graphical motif or symbol, e.g. Christmas symbol, logo

Abstract

本公开涉及通过利用相机的应用来提供各种功能的电子装置及操作方法。该电子装置包括:相机;显示器;以及处理器,并且该处理器被配置为:确定从相机提供的图像中是否包括文档;当图像中不包括文档时,向显示器提供包括该图像和用于拍摄图像的至少一个第一图形对象的第一用户界面;以及当图像中包括文档时,提供用于提供与文档相关的功能的第二用户界面,其中,该第二用户界面包括该图像、至少一个第一图形对象、指示图像中存在文档的第二图形对象、以及用于执行与文档相关的功能的至少一个第三图形对象。其他实施例也可以适用。

Description

通过利用相机的应用提供各种功能的电子装置及操作方法
本申请是申请日为2020年2月19日、申请号为202010102857.X、题为“通过利用相机的应用提供各种功能的电子装置及操作方法”的专利申请的分案申请。
技术领域
本公开涉及一种通过利用相机的应用来提供各种功能的电子装置及其操作方法。
背景技术
随着技术的发展,电子装置(例如,移动终端、智能手机、可穿戴装置等)能够提供各种功能。例如,电子装置可以提供诸如语音通信功能、数据通信功能、短距离无线通信功能(例如,蓝牙、近场通信(NFC)等)、移动通信功能(例如,第三代(3G)、4G、5G等)、音乐或视频再现功能、拍摄或视频记录功能、导航功能等的各种功能。
特别地,电子装置提供识别相机拍摄的文档的功能。
以上信息仅作为背景信息呈现,以帮助理解本公开。关于任何上述内容是否可以用作关于本公开的现有技术,没有做出确定,也没有做出断言。
发明内容
电子装置提供以下功能:通过提供拍摄功能的第一应用来拍摄文档,并且通过提供扫描功能的第二应用将通过拍摄获得的文档转换为扫描后的文档。然而,这种方法需要在执行第一应用之后运行第二应用,并且该方法可能不足以满足追求便利的用户的需求。
因此,各种实施例可以提供一种通过利用电子装置中的相机的应用来提供各种功能的方法和装置。
在本公开中进行的技术主题可以不限于上述技术主题,并且通过以下描述,本公开领域的技术人员可以清楚地理解未提及的其他技术主题。
根据本公开的一方面,一种电子装置包括:相机;显示器;以及处理器,其中,该处理器被配置为:从相机提供的图像中是否包括文档;当图像中不包括文档时,向显示器提供包括该图像和用于拍摄图像的至少一个第一图形对象第一用户界面;以及当图像中包括文档时,提供用于提供与文档相关的功能第二用户界面,其中,该第二用户界面包括该图像、至少一个第一图形对象、指示图像中存在文档的第二图形对象、以及用于执行与文档相关的功能的至少一个第三图形对象。
根据本公开的一方面,一种电子装置的操作方法包括:确定从电子装置相机提供的图像中是否包括文档;当图像中不包括文档时,向电子装置的显示器提供包括该图像和用于拍摄图像的至少一个第一图形对象的第一用户界面;以及当图像中包括文档时,向显示器提供用于提供与文档相关的功能的第二用户界面,其中,该第二用户界面包括该图像、至少一个第一图形对象、指示图像中存在文档的第二图形对象、以及用于执行与文档相关的功能的至少一个第三图形对象。
根据本公开的一方面,提供了一种存储程序以实现操作的计算机可读记录介质,该操作包括:确定从相机提供的图像中是否包括文档;当图像中不包括文档时,向显示器提供包括该图像和用于拍摄图像的至少一个第一图形对象的第一用户界面;以及当图像中包括文档时,向显示器提供用于提供与文档相关的功能的第二用户界面,其中,第二用户界面包括该图像、至少一个第一图形对象、指示所述图像中存在文档的第二图形对象、以及用于执行与所述文档相关的功能的至少一个第三图形对象。
各种实施例可以提供用户界面,该用户界面提供通过利用电子装置中的相机的应用来拍摄预览图像的功能以及与包括在预览图像中的文档有关的各种功能,并且可以在不改变运行应用和/或模式的情况下提供各种功能。因此,可以提高用户便利性。
附图说明
通过以下结合附图的描述,本公开的某些实施例的上述和其他方面、特征和优点将变得更加明显,其中:
图1是示出根据各种实施例的网络环境中的电子装置的框图;
图2是示出根据各种实施例的电子装置基于图像中是否包括文档来提供各种用户界面的过程的流程图;
图3A是示出根据各种实施例的电子装置基于图像中是否包括文档而提供的用户界面的示例的示图,并且图3B是示出根据各种实施例的电子装置基于图像中是否包括文档而提供的用户界面的示例的示图;
图4是示出根据各种实施例的电子装置中的包括与文档相关的至少一个图形对象的用户界面的示例的示图;
图5是示出根据各种实施例的电子装置在图像中存在文档时执行与用户输入相对应的功能的过程的流程图;
图6A是示出根据各种实施例的电子装置执行与用户输入相对应的功能的示例的示图,并且图6B是示出根据各种实施例的电子装置执行与用户输入相对应的功能的示例的示图;
图7是示出根据各种实施例的电子装置基于文档是否可识别来提供各种用户界面的过程的流程图;
图8A是示出根据各种实施例的电子装置基于文档的类型来提供与文档相关的功能的用户界面的示例的示图,图8B是示出根据各种实施例的电子装置基于文档的类型来提供与文档相关的功能的用户界面的示例的示图,图8C是示出根据各种实施例的电子装置基于文档的类型来提供与文档相关的功能的用户界面的示例的示图,图8D是示出根据各种实施例的电子装置基于文档的类型来提供与文档相关的功能的用户界面的示例的示图,以及图8E是示出根据各种实施例的电子装置基于文档的类型来提供与文档相关的功能的用户界面的示例的示图;
图9是示出根据各种实施例的电子装置基于预定条件提供各种用户界面的过程的流程图;
图10A是示出根据各种实施例的电子装置中的包括与文档的尺寸有关的错误报告消息的用户界面的示例的示图,图10B是示出根据各种实施例的电子装置中的包括与文档的尺寸有关的错误报告消息的用户界面的示例的示图,以及图10C是示出根据各种实施例的电子装置中的包括与文档的尺寸有关的错误报告消息的用户界面的示例的示图;以及
图11A是示出根据各种实施例的基于电子装置中的文档的失真程度而提供的用户界面的示例的示图,图11B是示出根据各种实施例的基于电子装置中的文档的失真程度而提供的用户界面的示例的示图,以及图11C是示出根据各种实施例的基于电子装置中的文档的失真程度而提供的用户界面的示例的示图。
具体实施方式
在下文中,将参考附图描述各种实施例。实施例和其中使用的术语不旨在将本文公开的技术限制为特定形式,并且应被理解为包括对相应实施例的各种修改、等同和/或替代。在描述附图时,相似的附图标记可以用于表示相似的组成元件。除非在上下文中明确是不同的,否则单数表述可以包括复数表述。
图1是示出根据各种实施例的网络环境100中的电子装置101的框图。
参照图1,网络环境100中的电子装置101可经由第一网络198(例如,短距离无线通信网络)与电子装置102进行通信,或者经由第二网络199(例如,长距离无线通信网络)与电子装置104或服务器108进行通信。根据实施例,电子装置101可经由服务器108与电子装置104进行通信。根据实施例,电子装置101可包括处理器120、存储器130、输入装置150、声音输出装置155、显示装置160、音频模块170、传感器模块176、接口177、触觉模块179、相机模块180、电力管理模块188、电池189、通信模块190、用户识别模块(SIM)196或天线模块197。在一些实施例中,可从电子装置101中省略所述部件中的至少一个(例如,显示装置160或相机模块180),或者可将一个或更多个其它部件添加到电子装置101中。在一些实施例中,可将所述部件中的一些部件实现为单一集成电路。例如,可将传感器模块176(例如,指纹传感器、虹膜传感器、或照度传感器)实现为嵌入在显示装置160(例如,显示器)中。
处理器120可运行例如软件(例如,程序140)来控制电子装置101的与处理器120连接的至少一个其它部件(例如,硬件部件或软件部件),并可执行各种数据处理或计算。根据一个实施例,作为所述数据处理或计算的至少部分,处理器10可将从另一部件(例如,传感器模块176或通信模块190)接收到的命令或数据加载到易失性存储器132中,对存储在易失性存储器132中的命令或数据进行处理,并将结果数据存储在非易失性存储器134中。根据实施例,处理器120可包括主处理器121(例如,中央处理器(CPU)或应用处理器(AP))以及与主处理器121在操作上独立的或者相结合的辅助处理器123(例如,图形处理单元(GPU)、图像信号处理器(ISP)、传感器中枢处理器或通信处理器(CP))。另外地或者可选择地,辅助处理器123可被适配为比主处理器121耗电更少,或者被适配为具体用于指定的功能。可将辅助处理器123实现为与主处理器121分离,或者实现为主处理器121的部分。
在主处理器121处于未激活(例如,睡眠)状态时,辅助处理器123可控制与电子装置101(而非主处理器121)的部件之中的至少一个部件(例如,显示装置160、传感器模块176或通信模块190)相关的功能或状态中的至少一些,或者在主处理器121处于激活状态(例如,运行应用)时,辅助处理器123可与主处理器121一起来控制与电子装置101的部件之中的至少一个部件(例如,显示装置160、传感器模块176或通信模块190)相关的功能或状态中的至少一些。根据实施例,可将辅助处理器123(例如,图像信号处理器或通信处理器)实现为在功能上与辅助处理器123相关的另一部件(例如,相机模块180或通信模块190)的部分。
存储器130可存储由电子装置101的至少一个部件(例如,处理器120或传感器模块176)使用的各种数据。所述各种数据可包括例如软件(例如,程序140)以及针对与其相关的命令的输入数据或输出数据。存储器130可包括易失性存储器132或非易失性存储器134。
可将程序140作为软件存储在存储器130中,并且程序140可包括例如操作系统(OS)142、中间件144或应用146。
输入装置150可从电子装置101的外部(例如,用户)接收将由电子装置101的其它部件(例如,处理器120)使用的命令或数据。输入装置150可包括例如麦克风、鼠标、键盘或数字笔(例如,手写笔)。
声音输出装置155可将声音信号输出到电子装置101的外部。声音输出装置155可包括例如扬声器或接收器。扬声器可用于诸如播放多媒体或播放唱片的通用目的,接收器可用于呼入呼叫。根据实施例,可将接收器实现为与扬声器分离,或实现为扬声器的部分。
显示装置160可向电子装置101的外部(例如,用户)视觉地提供信息。显示装置160可包括例如显示器、全息装置或投影仪以及用于控制显示器、全息装置和投影仪中的相应一个的控制电路。根据实施例,显示装置160可包括被适配为检测触摸的触摸电路或被适配为测量由触摸引起的力的强度的传感器电路(例如,压力传感器)。
音频模块170可将声音转换为电信号,反之亦可。根据实施例,音频模块170可经由输入装置150获得声音,或者经由声音输出装置155或与电子装置101直接(例如,有线地)连接或无线连接的外部电子装置(例如,电子装置102)的耳机输出声音。
传感器模块176可检测电子装置101的操作状态(例如,功率或温度)或电子装置101外部的环境状态(例如,用户的状态),然后产生与检测到的状态相应的电信号或数据值。根据实施例,传感器模块176可包括例如手势传感器、陀螺仪传感器、大气压力传感器、磁性传感器、加速度传感器、握持传感器、接近传感器、颜色传感器、红外(IR)传感器、生物特征传感器、温度传感器、湿度传感器或照度传感器。
接口177可支持将用来使电子装置101与外部电子装置(例如,电子装置102)直接(例如,有线地)或无线连接的一个或更多个特定协议。根据实施例,接口177可包括例如高清晰度多媒体接口(HDMI)、通用串行总线(USB)接口、安全数字(SD)卡接口或音频接口。
连接端178可包括连接器,其中,电子装置101可经由所述连接器与外部电子装置(例如,电子装置102)物理连接。根据实施例,连接端178可包括例如HDMI连接器、USB连接器、SD卡连接器或音频连接器(例如,耳机连接器)。
触觉模块179可将电信号转换为可被用户经由他的触觉或动觉识别的机械刺激(例如,振动或运动)或电刺激。根据实施例,触觉模块179可包括例如电机、压电元件或电刺激器。
相机模块180可捕获静止图像或运动图像。根据实施例,相机模块180可包括一个或更多个透镜、图像传感器、图像信号处理器或闪光灯。
电力管理模块188可管理对电子装置101的供电。根据实施例,可将电力管理模块188实现为例如电力管理集成电路(PMIC)的至少部分。
电池189可对电子装置101的至少一个部件供电。根据实施例,电池189可包括例如不可再充电的原电池、可再充电的蓄电池、或燃料电池。
通信模块190可支持在电子装置101与外部电子装置(例如,电子装置102、电子装置104或服务器108)之间建立直接(例如,有线)通信信道或无线通信信道,并经由建立的通信信道执行通信。通信模块190可包括能够与处理器120(例如,应用处理器(AP))独立操作的一个或更多个通信处理器,并支持直接(例如,有线)通信或无线通信。根据实施例,通信模块190可包括无线通信模块192(例如,蜂窝通信模块、短距离无线通信模块或全球导航卫星系统(GNSS)通信模块)或有线通信模块194(例如,局域网(LAN)通信模块或电力线通信(PLC)模块)。这些通信模块中的相应一个可经由第一网络198(例如,短距离通信网络,诸如蓝牙、无线保真(Wi-Fi)直连或红外数据协会(IrDA))或第二网络199(例如,长距离通信网络,诸如蜂窝网络、互联网、或计算机网络(例如,LAN或广域网(WAN)))与外部电子装置进行通信。可将这些各种类型的通信模块实现为单一部件(例如,单一芯片),或可将这些各种类型的通信模块实现为彼此分离的多个部件(例如,多个芯片)。无线通信模块192可使用存储在用户识别模块196中的用户信息(例如,国际移动用户识别码(IMSI))识别并验证通信网络(诸如第一网络198或第二网络199)中的电子装置101。
天线模块197可将信号或电力发送到电子装置101的外部(例如,外部电子装置)或者从电子装置101的外部(例如,外部电子装置)接收信号或电力。根据实施例,天线模块197可包括天线,所述天线包括辐射元件,所述辐射元件由形成在基底(例如,PCB)中或形成在基底上的导电材料或导电图案构成。根据实施例,天线模块197可包括多个天线。在这种情况下,可由例如通信模块190(例如,无线通信模块192)从所述多个天线中选择适合于在通信网络(诸如第一网络198或第二网络199)中使用的通信方案的至少一个天线。随后可经由所选择的至少一个天线在通信模块190和外部电子装置之间发送或接收信号或电力。根据实施例,除了辐射元件之外的另外的组件(例如,射频集成电路(RFIC))可附加地形成为天线模块197的一部分。
上述部件中的至少一些可经由外设间通信方案(例如,总线、通用输入输出(GPIO)、串行外设接口(SPI)或移动工业处理器接口(MIPI))相互连接并在它们之间通信地传送信号(例如,命令或数据)。
根据实施例,可经由与第二网络199连接的服务器108在电子装置101和外部电子装置104之间发送或接收命令或数据。电子装置102和电子装置104中的每一个可以是与电子装置101相同类型的装置,或者是与电子装置101不同类型的装置。根据实施例,将在电子装置101运行的全部操作或一些操作可在外部电子装置102、外部电子装置104或服务器108中的一个或更多个运行。例如,如果电子装置101应该自动执行功能或服务或者应该响应于来自用户或另一装置的请求执行功能或服务,则电子装置101可请求所述一个或更多个外部电子装置执行所述功能或服务中的至少部分,而不是运行所述功能或服务,或者电子装置101除了运行所述功能或服务以外,还可请求所述一个或更多个外部电子装置执行所述功能或服务中的至少部分。接收到所述请求的所述一个或更多个外部电子装置可执行所述功能或服务中的所请求的所述至少部分,或者执行与所述请求相关的另外功能或另外服务,并将执行的结果传送到电子装置101。电子装置101可在对所述结果进行进一步处理的情况下或者在不对所述结果进行进一步处理的情况下将所述结果提供作为对所述请求的至少部分答复。为此,可使用例如云计算技术、分布式计算技术或客户机-服务器计算技术。
根据各种实施例,当运行第一应用时,处理器120可以控制相机模块180以便获得至少一个图像,并且可以控制显示装置160以便在预览屏幕上显示至少一个图像。第一应用可以是使用相机提供拍摄功能的应用。例如,第一应用可以是提供拍摄功能或视频记录功能中的至少一者的相机应用。然而,以下描述的各种实施例可以不限于此,并且可以应用于使用照相机的各种应用。
根据各种实施例,处理器120可以确定由相机模块180获得的至少一个图像中是否包括文档。根据实施例,处理器120可以基于至少一个图像中是否存在文本,和/或至少一个图像中是否包括以预定形式提供的代码(例如,条形码或QR码),确定图像中是否包括文档。例如,如果图像中不包括诸如字符和/或数字的文本或以预定形式提供的代码,则处理器120可以确定图像中不包括文档。作为另一示例,如果图像中存在诸如字符和/或数字的文本,则处理器120可以基于包括图像中的文本的对象的形状来确定文档是否包括在图像中。例如,处理器120可以基于图像中包括文本的对象的边(或侧边)的数量或顶点的数量来确定文档是否包括在图像中。如果从文本周围检测到的边数量和/或顶点数量不满足预定条件,则处理器120可以确定图像中不包括文档。如果从文本周围检测到的边数量和/或顶点数量满足预定条件,则处理器120可以确定图像中包括文档。当从文本周围检测到四个顶点并且文本存在于连接四个顶点的四边形形状内时,处理器120可以确定图像中包括文档。作为另一示例,如果图像中包括预定形式的代码(例如,条形码或QR码),则处理器120可以确定图像中包括文档。确定图像中是否包括文本的上述方法仅是示例,并且各种实施例不限于此。
根据各种实施例,处理器120可以基于图像中是否包括文档来提供用户界面。根据实施例,如果至少一个图像中不包括文档,则处理器120可以提供用于拍摄图像的第一用户界面。第一用户界面可以包括与拍摄图像有关的至少一个第一图形对象。图形对象可以包括例如视觉上显示的按钮、图标、符号、项目或菜单中的至少一者。例如,第一用户界面可以包括用于提供拍摄功能的第一按钮或用于提供视频记录功能的第二按钮中的至少一者。根据实施例,如果文档被包括在至少一个图像中,则处理器120可以提供用于提供与文档相关的功能的第二用户界面。第二用户界面可以包括与拍摄图像有关的至少一个第一图形对象,并且可以另外包括指示图像中存在文档的第二图形对象和提供与文档相关的功能的至少一个第三图形对象中的至少一者。根据实施例,指示图像中存在文档的第二图形对象可以包括视觉上报告识别文档存在的图标、符号、项目或图形效果中的至少一者。例如,指示图像中存在文档的第二图形对象可以包括预定符号或指示识别(或识别出)文档存在的区域的图形效果中的至少一个。根据实施例,提供与文档相关的功能的至少一个第三图形对象可以包括例如以下至少之一:提供扫描文档的功能的扫描按钮;基于文档中包含的信来提供支付功能的支付按钮;基于文档中包含的信息来提供访问网络的功能的网络访问按钮;基于文档中包含的信息来提供添加计划的功能的计划添加按钮;基于文档中包含的信息来提供添加联系人信息的功能的联系人信息添加按钮;或者基于文档中包含的信息来提供搜索额外信息的功能的额外信息搜索按钮。上述第三图形对象仅是示例,并且各种实施例不限于此。第二用户界面可以包括例如用于提供拍摄功能的第一按钮或用于提供视频记录功能的第二按钮中的至少一者,并且可以另外包括指示图像中存在文档的符号,或者扫描按钮、网络访问按钮、支付按钮或计划添加按钮中的至少一者。根据实施例,可以基于图像中包括的文档的文档类型和/或文档中包括的信息来确定要包括在第二用户界面中的第三图形对象。
根据各种实施例,处理器120可以在显示第二用户界面的状态下基于用户输入执行与拍摄有关的功能或者可以执行与文档相关的功能。根据实施例,在显示第二用户界面的状态下,如果检测到针对至少一个第一图形对象的用户输入,则处理器120可以执行拍摄功能或视频记录功能。通过拍摄功能或视频记录功能获得的图像可以包括在预览屏幕上显示的图像。根据实施例,在显示第二用户界面的状态下,如果检测到针对至少一个第三图形对象的用户输入,则处理器120可执行与文档相关的功能。例如,如果在其上检测到用户输入的第三图形对象是用于提供扫描功能的对象,则处理器120可以从图像提取文档并存储该文档。作为另一示例,如果在其上检测到用户输入的第三图形对象是用于提供网络访问功能的对象,则处理器120可以从图像中包括的文档获得网址信息,并且可以利用获得的网址访问对应的网页。作为另一示例,如果在其上检测到用户输入的第三图形对象是提供支付功能的对象,则处理器120可以从图像中包括的文档获得支付信息,并且可以利用获得的支付信息来执行支付功能。作为另一示例,如果在其上检测到用户输入的第三图形对象提供计划添加功能,则处理器120可以从图像中包括的文档获得计划信息,并且可以将获得的计划信息添加到计划管理应用。
根据各种实施例,处理器120可以确定图像中包括的文档是否是可识别的,并且可以基于可识别性来提供用户界面。根据实施例,处理器120可以基于文档的尺寸或文档的失真程度中的至少一者来确定图像中包括的文档是否可识别。例如,如果文档的尺寸大于预定的最大尺寸,或者小于预定的最小尺寸,则处理器120可以确定图像中包括的文档是不可识别的。作为另一示例,如果文档的失真程度超出预定程度范围,则处理器120可以确定图像中包括的文档是不可识别的。根据实施例,如果图像中包括的文档是可识别的,则处理器120可以提供第二用户界面。根据实施例,如果包括在图像中的文档是不可识别的,则处理器120可以提供第三用户界面,该第三用户界面包括指示该文档不可识别的错误报告消息。错误报告消息可以包括例如请求调整拍摄位置、拍摄方向或拍摄对象距离(例如,文档与电子装置之间的距离)中的至少一者的消息。根据实施例,第三用户界面可以包括与拍摄有关的至少一个第一图形对象和错误报告消息,并且可以另外包括指示图像中存在文档的第二图形对象或提供与文档相关的功能的至少一个第三图形对象中的至少一个。第三用户界面中包括的至少一个第三图形对象可以处于去激活状态。例如,可以去激活包括在第三用户界面中的至少一个第三图形对象,以指示不允许执行与文档相关的功能。
根据各种实施例,处理器120可以基于图像中包括的文档的文档类型或文档中包括的信息中的至少一者来确定与文档相关的至少一种功能。处理器120可以基于至少一种确定的功能来确定要包括在第二用户界面中的至少一个第三图形对象。根据实施例,处理器120可以识别图像中包括的文档的文档类型,并且可以基于针对每种类型的文档列出了相关功能的表格来确定所识别的文档类型是提供单一功能的类型还是提供多个功能的类型。根据实施例,处理器120可以基于文档中包括的信息或文档的形式来确定文档的类型。例如,如果从图像中包括的文档中检测到表格,或者如果检测到包括时间和/或地点信息的计划信息,则处理器120可以将文档的类型确定为第一类型(例如,海报、备忘录或日历)。作为另一示例,如果检测到预定形式的代码,则处理器120可以将文档的类型确定为第二类型(例如,条形码或QR代码)。作为另一示例,如果从包括在图像中的文档中检测到发行者信息或作者信息中的至少一者,则处理器120可以将文档的类型确定为第三类型(例如,书籍)。作为另一示例,如果从图像中包括的文档中检测到用户名、公司名称、公司地址、电话号码、传真号码或电子邮件地址中的至少一条信息,则处理器120可以将文档类型确定为第四种类型(例如,名片)。作为另一示例,如果未检测到与第一类型到第四类型相对应的信息,则处理器120可以将文档的类型确定为第五类型(例如,其他文档)。确定文档类型的方法仅是示例,并且各种实施例不限于此。针对每种类型的文档列出了相关功能的表格可以是,例如,针对每种类型列出相关功能的表格,诸如“文档类型:第一类型(例如,海报、备忘录或日历),相关功能:扫描功能或计划添加功能”,“文档类型:第二类型(例如QR码或条形码),相关功能:支付功能或网络访问功能”,“文档类型:第三类型(例如,书籍),相关功能:扫描功能或额外信息搜索功能”,“文档类型:第四类型(例如,名片),相关功能:扫描功能或联系人信息添加功能”和“文档类型:第五类型(例如,其他文档),相关功能:扫描功能”。这仅是示例,各种实施例不限于此。如果针对所识别的文档类型确定单一相关功能,则处理器120可以将文档类型确定为提供单一功能的类型,并且可以确定能够执行单一功能的第三图形对象。如果针对所识别的文档类型确定了多个相关功能,则处理器120可以将文档类型确定为提供多个功能的类型,并且可以基于文档中包含的信息确定能够执行单一功能的第三图形对象或与多个功能相对应的多个第三图形对象。例如,如果图像中包括的文档是第一类型,则处理器120可以识别文档中包括的文本,并且可以确定文档中是否包括计划信息(例如,时间信息或地点信息)。如果文档中包括计划信息,则处理器120可以将扫描功能和计划添加功能确定为与文档相关的功能,并且可以将用于提供扫描文档的功能的扫描按钮和用于提供将计划信息添加到预定应用(例如,日历应用或计划应用)的功能的计划添加按钮确定为第三图形对象。如果文档中未包括计划信息,则处理器120可以将扫描功能确定为与文档相关的功能,并且可以将用于提供扫描文档的功能的扫描按钮确定为第三图形对象。作为另一示例,如果图像中包括的文档是第二类型(例如,QR码或条形码),则处理器120可以分析文档中的代码,并且可以确定是否包括支付信息和网址信息。如果文档中的代码仅包括网址信息,则处理器120可以将用于访问相应网页并提供信息的网页访问按钮确定为第三图形对象。如果文档中的代码包括网址信息和支付信息,则处理器120可以将网络访问按钮和支付按钮确定为第三图形对象。作为另一示例,如果图像中包括的文档是第三类型(例如,书籍、研究论文或传单),则处理器120可以识别文档中包括的文本,并且可以确定文档中是否包括可搜索信息。如果文档中包括可搜索信息,则处理器120可以将扫描功能和额外信息搜索功能确定为与文档相关的功能,并且可以将用于提供扫描功能的扫描按钮和用于提供额外信息搜索的搜索按钮确定为第三图形对象。作为另一示例,如果图像中包括的文档是第四类型(例如,名片),则处理器120可以将扫描功能和联系人信息添加功能确定为与文档相关的功能,并且可以将用于提供扫描功能的扫描按钮和用于提供将包括在名片中的联系人信息注册到电子装置的功能的联系人信息添加按钮确定为第三图形对象。作为另一示例,如果图像中包括的文档是第五类型(例如,其他文档),则处理器120可以将扫描功能确定为与文档相关的功能,并且可以将提供扫描功能的扫描按钮确定为第三图形对象。根据实施例,处理器120可以提供包括至少一个确定的第三图形对象的第二用户界面。
在以上描述中,处理器120可以基于电子装置101的存储器130中包括的与文档相关的DB(数据库)来确定图像是否包括文档、图像中包括的文档的文档类型或与文档相关的功能中的至少一者。与文档相关的DB可以包括至少确定图像中是否包括文档、图像中包括的文档的文档类型或与文档相关的功能中的至少一个所需的各种类型的信息(例如,参考值、条件、确定文档的规则、或功能)。如果处理器120无法使用存储器中包括的与文档相关的DB来确定图像中是否包括文档、图像中所包括的文档的文档类型和/或与文档相关的功能中的至少一者,则处理器120可以将图像发送到外部装置(例如,电子装置102、电子装置104或服务器108),并且可以从外部装置(例如,电子装置102,电子装置104或服务器108)接收图像中是否包括文档、图像中所包括的文档的文档类型和/或与文档相关的功能当中的至少一条信息。根据实施例,包括在存储器130中的与文档相关的DB可以通过与外部装置(例如,电子装置102、电子装置104或服务器108)的互操作来更新,并且可以通过学习来更新。
根据各种实施例,电子装置(例如,图1的电子装置101)可以包括相机(例如,图1的相机模块180)、显示器(例如,图1的显示装置160)以及处理器(例如,图1的处理器120),并且处理器120被配置为:确定从相机180提供的图像中是否包括文档;当图像中不包括文档时,提供包括用于拍摄图像的至少一个第一图形对象的;以及当图像中包含文档时,提供用于提供与文档相关的功能的第二用户界面,并且该第二用户界面包括至少一个第一图形对象、指示图像中存在文档的第二图形对象、以及用于执行与文档相关的功能的至少一个第三图形对象。
根据各种实施例,第二图形对象可以包括指示图像中存在文档的预定符号或指示图像中识别文档的区域的图形效果中的至少一者。
根据各种实施例,当图像中包括文档时,处理器120可以基于文档是否满足预定条件来确定文档是否可识别,并且当文档可识别时,处理器确定基于文档类型或文档中包括的信息来确定与文档相关的至少一种功能。
根据各种实施例,与文档相关的至少一种功能可以包括以下至少一项:扫描文档的功能,搜索与文档相关的额外信息的功能,基于文档中包括的信息的支付功能,基于文档中包括的信息的网络访问功能,基于文档中包括的信息的计划添加功能,或基于文档中包括的信息添加联系人信息的功能。
根据各种实施例,第二用户界面可以包括提供扫描文档的功能的第三图形对象,并且当在提供第二用户界面的状态下检测到针对提供扫描文档的功能的第三图形对象的用户输入时,处理器被配置为仅从图像中提取文档并存储该文档,并且当在提供第二用户界面的状态下检测到针对第一图形对象的用户输入时,处理器被配置为拍摄包括文档的图像并存储图像。
根据各种实施例,处理器可以确定文档的尺寸或文档的失真程度中的至少一者是否满足预定条件。
根据各种实施例,当文档不可识别时,处理器可以提供包括与文档的尺寸或文档的失真程度中的至少一者有关的错误报告消息的第三用户界面,并且第三用户界面还可以包括至少一个第一图形对象或指示图像中存在文档的第二图形对象中的至少一者。
根据各种实施例,第三用户界面还可以包括用于执行与文档相关的功能的至少一个第三图形对象,并且该至少一个第三图形对象可以处于去激活状态。
图2是示出根据各种实施例的电子装置基于图像中是否包括文档来提供各种用户界面的过程的流程图200。在下文提供的实施例中,可以顺序地执行操作,但是不是必须的。例如,可以改变操作的顺序,并且可以并行地执行至少两个操作。在此,电子装置可以是图1的电子装置101。在下文中,将参照图3A、图3B和图4描述图2的至少一些操作。图3A是示出根据各种实施例的电子装置基于图像中是否包括文档而提供的用户界面的示例的示图,并且图3B是示出根据各种实施例的电子装置基于图像中是否包括文档而提供的用户界面的示例的示图。图4是示出根据各种实施例的电子装置中的包括与文档相关的至少一个图形对象的用户界面的示例的示图。
参照图2,在操作201,根据各种实施例的电子装置(例如,图1的处理器120)可以确定从相机(例如,图1的相机模块180)提供的图像中是否包括文档。根据实施例,处理器120可以基于至少一个图像中是否存在文本和/或是否包括预定形式的代码(例如,条形码或QR码)来确定从相机180提供的至少一个图像中是否包括文档。例如,如果预览屏幕上显示的图像中不包括以预定形式提供的文本或代码,则处理器120可以确定图像中不包括文档。作为另一示例,如果图像中存在文本,则处理器120可以检测包括图像中的文本的对象的边或顶点,并且如果检测到的边数量和/或顶点数量不满足预定条件,则处理器120可以确定图像中不包括文档。如果从文本周围检测到的边数量和/或顶点数量满足预定条件,则处理器120可以确定图像中包括文档。作为另一示例,如果图像中包括预定形式的代码,则处理器120可以确定图像中包括文档。用于确定图像中是否包括文本的上述方法仅是示例,并且各种实施例不限于此。
根据各种实施例,如果在图像中不包括文档,则电子装置(例如,处理器120)可以在操作203中提供用于拍摄图像的第一用户界面。根据实施例,第一用户界面可以包括与拍摄图像有关的至少一个第一图形对象。图形对象可以包括例如视觉上显示的按钮、图标、符号、项目或菜单中的至少一者。例如,如图3A所示,如果在预览屏幕上显示的图像中不包括文档,则处理器120可以提供第一用户界面,该第一用户界面包括用于提供拍摄功能的拍摄按钮301和用于提供视频记录功能的视频记录按钮303。
根据各种实施例,如果在图像中包括文档,则电子装置(例如,处理器120)可以在操作205中提供用于提供与文档相关的功能的第二用户界面。根据实施例,第二用户界面可以包括与拍摄图像有关的至少一个第一图形对象,并且可以另外包括指示图像中存在文档的第二图形对象或提供与文档相关的功能的至少一个第三图形对象中的至少一者。根据实施例,指示图像中存在文档的第二图形对象可以包括视觉上报告识别出文档存在的图标、符号、项目或图形效果中的至少一者。例如,指示图像中存在文档的第二图形对象可以包括预定符号或指示文档被识别的区域的图形效果中的至少一者。根据实施例,提供与文档相关的功能的至少一个第三图形对象可以包括例如以下至少之一:提供扫描文档的功能的扫描按钮;基于文档中包括的信来提供支付功能的支付按钮;基于文档中包括的信息来提供访问网页的功能的网络访问按钮;或基于文档中包括的信息来提供添加计划的功能的计划添加按钮。上述第三图形对象仅是示例,并且各种实施例不限于此。例如,如图3B所示,如果预览屏幕上显示的图像中包括文档,则处理器120可以提供第二用户界面,该第二用户界面包括提供拍摄功能的拍摄按钮301、提供视频记录功能的视频记录按钮303、提供扫描文档的功能的扫描按钮313、指示图像中存在文档的符号317或指示识别文档的区域的图形效果315中的至少一者。根据实施例,可以由设计者和/或用户设置和改变要包括在第二用户界面中的第二图形对象和/或第三图形对象的显示位置和/或尺寸。例如,如图4所示,可以在设计者和/或用户预定的区域显示作为第三图形对象的扫描按钮401、403、405或407和/或作为第二图形对象并指示文档存在的符号411、413、415或417。根据实施例,作为第二图形对象并指示文档存在的符号可以不触发预定功能,并且可以如图4的示图413所示显示在拍摄按钮上。作为另一示例,处理器120可以基于图像中包括的文档的位置动态地改变第二图形对象和/或第三图形对象的显示位置。例如,每当图像中文档的位置改变时,处理器120可以基于文档的改变后的位置来动态地改变第三图形对象的显示位置。根据实施例,可以基于图像中包括的文档的类型和/或文档中包括的信息来确定第二用户界面中包括的第三图形对象。
图5是示出根据各种实施例的电子装置在图像中存在文档时执行与用户输入相对应的功能的过程的流程图。下面描述的图5的操作可以是图2的操作205之后的操作。在下文提供的实施例中,可以顺序地执行操作,但是不是必须的。例如,可以改变操作的顺序,并且可以并行地执行至少两个操作。在此,电子装置可以是图1的电子装置101。在下文中,将参照图6A至图6B描述图5的至少一些操作。图6A是示出根据各种实施例的电子装置执行与用户输入相对应的功能的示例的示图,并且图6B是示出根据各种实施例的电子装置执行与用户输入相对应的功能的示例的示图。
参照图5,在操作501,根据各种实施例的电子装置(例如,图1的处理器120)可以检测到针对第二用户界面的用户输入。第二用户界面可以与已经参照图2的操作205描述的第二用户界面相同。用户输入可以包括单触摸、双触摸、长触摸或按压触摸中的至少一者。
根据各种实施例,在操作503中,电子装置(例如,处理器120)可以确定用户输入是否是针对第三图形对象的输入。例如,处理器120可以确定在第二用户界面中包括的图形对象中,是否检测到针对第三图形对象的用户输入或是否检测到针对第一图形对象的用户输入。
根据各种实施例,如果用户输入是对第三图形对象的输入,则电子装置(例如,处理器120)可以在操作505中执行映射到第三图形对象的与文档相关的功能。如图2所示,第三图形对象可以包括例如扫描按钮、支付按钮、网络访问按钮或计划添加按钮中的至少一者。例如,如图6A所示,如果检测到扫描按钮的用户输入601,则处理器120可以从图像中提取文档,并且可以执行存储提取的文档603的功能。作为另一示例,如果检测到针对支付按钮的用户输入时,处理器120可以从图像中包括的文档获得支付信息,并且可以基于支付信息执行支付功能。如果检测到网络访问按钮的用户输入,则处理器120可以从图像中包括的文档获得网址信息,并且可以基于该网址信息执行访问相应网页的功能。如果检测到针对计划添加按钮的用户输入,则处理器120可以从图像中包括的文档获得计划信息,并且可以将获得的计划信息添加到管理用户计划的应用(例如,日历应用或计划管理应用)。
根据各种实施例,如果用户输入不是针对第三图形对象的输入(如果用户输入是第一图形对象的输入),则电子装置(例如,处理器120)可以在操作507中执行被映射到检测到用户输入的第一图形对象的与拍摄相关的功能。如图1所示,第一图形对象可以包括例如拍摄按钮或视频记录按钮中的至少一者。例如,参照图6B,如果检测到针对拍摄按钮的用户输入611,则处理器120可执行获取和存储图像(该图像从相机(例如,图1的相机模块180)提供的并显示在预览屏幕上)图像作为通过拍摄获得的图像的功能。这可能与普通拍摄功能相同。
图7是示出根据各种实施例的电子装置基于文档是否可识别来提供各种用户界面的过程的流程图700。以下描述的图7的操作可以是图2的操作201、203和205中的至少一些的详细操作。在下文提供的实施例中,可以顺序地执行操作,但是不是必须的。例如,可以改变操作的顺序,并且可以并行地执行至少两个操作。在此,电子装置可以是图1的电子装置101。在下文中,将参照图8A至图8E描述图7的至少一些操作。图8A是示出根据各种实施例的电子装置基于文档的类型来提供与文档相关的功能的用户界面的示例的示图,图8B是示出根据各种实施例的电子装置基于文档的类型来提供与文档相关的功能的用户界面的示例的示图,图8C是示出根据各种实施例的电子装置基于文档的类型来提供与文档相关的功能的用户界面的示例的示图,图8D是示出根据各种实施例的电子装置基于文档的类型来提供与文档相关的功能的用户界面的示例的示图,以及图8E是示出根据各种实施例的电子装置基于文档的类型来提供与文档相关的功能的用户界面的示例的示图。
参照图7,在操作701,电子装置(例如,图1的处理器120)可以操作相机(例如,图1的相机模块180),并且可以获得至少一个图像。根据实施例,当运行第一应用时,处理器120操作相机180,并且可以从相机获得至少一个图像。处理器120可以控制显示设备160,以便在预览屏幕上显示从相机模块180获得的至少一个图像。第一应用可以是使用相机提供拍摄功能的应用。例如,第一应用可以是提供拍摄功能或视频记录功能中的至少一个的相机应用。
根据各种实施例,在操作703,电子装置(例如,处理器120)可以确定图像中是否包括文档。根据实施例,确定图像中是否包括文档的操作可以与图2的操作201至少部分相同。根据各种实施例,处理器120可以基于电子装置101的存储器(例如,图1的存储器130)中包括的与文档相关的DB来确定文档是否包括在图像中。与文档相关的DB可以包括确定图像中是否包括文档所需的各种类型的信息(例如,参考值、条件、确定文档的规则、或功能)。如果识别出难以通过使用存储器130中包括的与文档相关的DB来确定图像中是否包括文档,则处理器120可以向外部装置(例如,电子装置102、电子装置104或服务器108)发送图像,并且可以请求外部装置确定图像中是否包括文档。响应于该请求,处理器120可以从外部装置(例如,电子装置102、电子装置104或服务器108)接收包括指示图像中是否包括文档的信息的响应信号。除了指示图像中是否包括文档的信息之外,响应信号还可以包括与图像中包括的文档的文档类型或与文档相关的功能相关联的至少一种信息。
根据各种实施例,如果确定图像中不包括文档,则电子装置(例如,处理器120)可以执行图2的操作203。
根据各种实施例,如果确定图像中包括文档,则电子装置(例如,处理器120)可以在操作705中确定图像中包括的文档是否可识别。根据实施例,处理器120可以基于文档的尺寸或文档的失真程度中的至少一者来确定图像中包括的文档是否可识别。例如,如果文档的尺寸大于预定的最大尺寸,或者小于预定的最小尺寸,则处理器120可以确定图像中包括的文档是不可识别的。作为另一示例,如果文档的失真程度超出预定程度范围,则处理器120可以确定图像中包括的文档是不可识别的。
根据各种实施例,如果在图像中包括的文档是可识别的,则在操作707中,电子装置(例如,处理器120)可以确定文档的文档类型是否是提供多个功能的类型。根据实施例,处理器120可以识别图像中包括的文档的文档类型,并且可以基于文档类型来确定是使用与文档相关的单一功能还是使用与文档相关的多个功能。例如,基于文档中包括的信息或文档的形式,处理器120可以确定文档类型,并且可以确定是使用与文档相关的单一功能还是使用与文档相关的多个功能。针对每种类型的文档列出了相关功能的表格可以是,例如,针对每种类型列出相关功能的表格,诸如“文档类型:第一类型,相关功能:扫描功能或计划添加功能”,“文档类型:第二类型,相关功能:支付功能或网络访问功能”,“文档类型:第三类型,相关功能:扫描功能或额外信息搜索功能”,“文档类型:第四类型,相关功能:扫描功能、联系人信息添加功能”和“文档类型:第五类型,相关功能:扫描功能”。如果所识别的文档类型是第一类型至第四类型中的任何一种,则处理器120可以将文档类型确定为提供多个功能的类型。如果所识别的文档类型是第五类型,则处理器120可以将文档类型确定为不能提供多个功能的类型(提供单一功能的类型)。
根据各种实施例,如果文档类型是提供多个功能的类型,则电子装置(例如,处理器120)可以在操作709中基于文档中包括的信息将单一或多个功能确定为与文档相关的功能,并且可以提供包括用于执行操作709中确定的与文档相关的功能的至少一个第三图形对象的第二用户界面。例如,如果图像中包括的文档是第一类型,则处理器120可以识别文档中包括的文本,并且可以确定文档中是否包括计划信息(例如,时间信息或地点信息)。如果如图8A所示文档中未包括计划信息,,则处理器120可以将扫描功能确定为与文档相关的功能,并且可以提供第二用户界面,该第二用户界面包括扫描按钮801和指示识别出文档的区域的图形效果803。如果如图8B所示文档中包括计划信息815,则处理器120可以将扫描功能和计划添加功能确定为与文档相关的功能,并且可以提供包括扫描按钮811、计划添加按钮813以及指示识别出文档的区域的图形效果817的第二用户界面。作为另一示例,如果图像中包括的文档对应于第二类型(例如,QR码或条形码),则处理器120可以分析文档中的代码,并且可以确定是否包括支付信息和网址信息。如果如图8C所示文档中的代码仅包括网址信息,则处理器120可以将网络访问功能确定为与文档相关的功能,并且可以提供包括网络访问按钮831的第二用户界面。如果如图8D所示文档中的代码包括网址信息和支付信息,则处理器120可以将网络访问功能和支付功能确定为与文档相关的功能,并且可以提供包括网络访问按钮841和支付按钮843的第二用户界面。作为另一示例,如果图像中包括的文档对应于第三类型(例如,书籍、研究论文或传单),则处理器120可以识别文档中包括的文本,并且可以确定文档中是否包括可搜索信息。如果如图8E所示文档中包括可搜索信息,则处理器120可以将扫描功能和额外信息搜索功能确定为与文档相关的功能,并且可以提供包括扫描按钮851和额外信息搜索按钮853的第二用户界面。如果可搜索信息未包括在文档中,则处理器120可以将扫描功能确定为与文档相关的功能,并且可以提供包括扫描按钮的第二用户界面。作为另一示例,如果图像中包括的文档对应于第四类型(例如,名片),则处理器120可以将扫描功能和联系人信息添加按钮确定为与文档相关的功能,并且可以提供包括扫描按钮和联系人信息添加按钮的第二用户界面。上述这些第二用户界面还可以包括与拍摄图像有关的至少一个第一图形对象和指示图像中文档的存在的第二图形对象。
根据各种实施例,如果文档类型是提供单一功能的类型,则在操作713,电子装置(例如,处理器120)可以基于文档中包括的信息将单一功能确定为与文档相关的功能,并且可以提供包括用于执行在操作713中确定的与文档相关的功能的至少一个第三图形对象的第二用户界面。例如,如果图像中包含的文档对应于第五类型(例如,其他文档),处理器120可以将扫描功能确定为与文档相关的功能,并且可以提供包括扫描按钮的第二用户界面。
根据各种实施例,如果在图像中包括的文档是不可识别的,则电子装置(例如,处理器120)可以在操作715中提供包括指示该文档不可识别的错误报告消息的第三用户界面。错误报告消息可以包括例如请求调整拍摄位置、拍摄方向或拍摄对象距离(例如,文档与电子装置之间的距离)中的至少一者的消息。错误报告消息可以包括例如与文档的尺寸相关的信息、与文档的失真相关的信息、与用于调整拍摄位置的请求相关的信息、与用于调整拍摄对象距离的请求相关的信息或与调整拍摄方向的请求相关的信息中的至少一者。根据实施例,第三用户界面可以包括与拍摄有关的至少一个第一图形对象和错误报告消息,并且可以另外包括指示图像中存在文档的第二图形对象和提供与文档相关的功能的至少一个第三个图形对象中的至少一者。第三用户界面中包括的至少一个第三图形对象可以处于去激活状态。例如,可以去激活包括在第三用户界面中的至少一个第三图形对象,以指示不允许执行与文档相关的功能。
图9是示出根据各种实施例的电子装置基于预定条件提供各种用户界面的过程的流程图。以下描述的图9的操作可以是图7的操作705至715中的至少一些的详细操作。在下文提供的实施例中,可以顺序地执行操作,但是不是必须的。例如,可以改变操作的顺序,并且可以并行地执行至少两个操作。在此,电子装置可以是图1的电子装置101。在下文中,将参考图10A至图10C以及图11A至图11C描述图9的至少一些操作。图10A是示出根据各种实施例的电子装置中的包括与文档的尺寸有关的错误报告消息的用户界面的示例的示图,图10B是示出根据各种实施例的电子装置中的包括与文档的尺寸有关的错误报告消息的用户界面的示例的示图,以及图10C是示出根据各种实施例的电子装置中的包括与文档的尺寸有关的错误报告消息的用户界面的示例的示图。图11A是示出根据各种实施例的基于电子装置中的文档的失真程度而提供的用户界面的示例的示图,图11B是示出根据各种实施例的基于电子装置中的文档的失真程度而提供的用户界面的示例的示图,以及图11C是示出根据各种实施例的基于电子装置中的文档的失真程度而提供的用户界面的示例的示图。
参照图9,根据各种实施例的电子装置(例如,图1的处理器120)可以在操作901中确定文档的尺寸是否小于或等于预定的最大尺寸。例如,处理器120可以基于文档的边数量或顶点数量来确定是将整个文档包括在图像中还是将文档的一部分包括在图像中,并且可以确定文档的尺寸是否小于或等于预定的最大尺寸。如果检测到文档的所有四个边或四个顶点,则处理器120确定整个文档包括在图像中,并且可以确定文档的尺寸小于或等于预定的最大尺寸。如果未检测到四个边或四个顶点(例如,检测到三个或更少的边或三个或更少的顶点),则处理器120可以确定图像中包括文档的一部分,并且可以确定图像的尺寸大于预定的最大尺寸。
根据各种实施例,如果文档的尺寸大于预定的最大尺寸,则电子装置(例如,处理器120)可以在操作913中提供包括请求减小操作中的文档尺寸的错误报告消息的第三用户界面。请求减小文档尺寸的错误报告消息可以是请求调整相机的拍摄位置和/或拍摄对象距离的消息,以使整个文档都被包含在图像中,因为文档的尺寸大于预定的最大尺寸。例如,如图10A所示,如果图像中仅包括日历的一部分,则处理器120可以提供包括错误报告消息1001的第三用户界面,该错误报告消息1001请求调整以使整个日历能够被包括在图像中并在不失真的情况下存储日历。根据实施例,第三用户界面可以包括第三用户界面中所包括的图形元件中的至少一些,这些图形元件已经在图7的操作705中进行了描述。
根据各种实施例,如果文档的尺寸小于或等于预定的最大尺寸,则电子装置(例如,处理器120)可以在操作903中确定文档的尺寸是否大于或等于预定的最小尺寸。根据实施例,如果图像中包括整个文档,则处理器120可以测量整个文档的尺寸,并且可以将测量到的整个文档尺寸与预定的最小尺寸进行比较。
根据各种实施例,如果文档尺寸小于预定的最大尺寸,则电子装置(例如,处理器120)可以在操作915中提供第三用户界面,该第三用户界面包括请求增加操作中的文档尺寸的错误报告消息。请求增加文档尺寸的错误报告消息可以是请求调整到用于拍摄的文档的距离以使文档的尺寸增加的消息,因为文档的尺寸小于预定的最小尺寸。例如,如图10B所示,如果图像中包括小于预定的最小尺寸的小备忘录,则处理器120可以提供包括错误报告消息1011的第三用户界面,该错误报告消息1011请求将距用于拍摄的备忘录的距离调整为更近,以便在不失真的情况下存储在存储器中。作为另一示例,如图10C所示,如果图像中包括小于预定的最小尺寸的小备忘录,则处理器120可以提供包括错误报告消息1021和图形元素1023的第三用户界面,其中,错误报告消息1021请求将距用于拍摄的备忘录的距离调整为更近,以便在不失真的情况下存储在存储器中,并且图形元素1023指示与备忘录相关联的推荐尺寸和/或区域。根据实施例,第三用户界面可以包括第三用户界面中所包括的图形元件中的至少一些,这些图形元件已经在图7的操作705中进行了描述。
根据各种实施例,如果文档的尺寸小于或等于预定的最小尺寸,则在操作905,电子装置(例如,处理器120)可以确定失真程度是否大于第一预定程度。失真程度可以是例如图像中包括的文档的失真度。根据实施例,可以基于与文档的四个顶点中的至少一个顶点相对应的角度来确定失真程度。根据实施例,可以基于文档的四个边或者文档的多个边中的至少两个边的角度来确定失真水平。第一预定程度可以是在不执行与失真有关的附加处理(例如,失真补偿)的情况下扫描和存储文档的程度,或者在无需补偿失真的情况下可识别文档中包括的文本的程度。第一预定程度可以由设计者和/或用户设置和/或改变。例如,第一预定程度可以被定义为包括:与文档的四个顶点相对应的角度都大于或等于第一阈值角度(例如,65度)的情况。例如,如果与文档的四个顶点相对应的角度都大于或等于第一阈值角度,则处理器120可以确定文档的失真程度小于或等于第一预定程度。如果与文档的四个顶点中的至少一个顶点相对应的角度小于第一阈值角度,则处理器120可以确定文档的失真程度大于第一预定程度。这仅仅是为了易于理解而提供的示例,并且各种实施例不限于此。例如,各种实施例可以使用本领域技术人员已知的各种方法来确定文档的失真水平。
根据各种实施例,如果文档的失真程度小于或等于第一预定程度,则电子装置(例如,处理器120)可以进行图7的操作707以及后续操作。例如,如果文档的失真程度小于或等于第一预定程度,则处理器120可以执行图7的操作707、709、711或713中的至少一个,可以基于文档的类型确定与文档相关的功能,并且可以提供包括用于执行与文档相关的功能的至少一个第三图形对象的第二用户界面。例如,如图11A所示,如果文档的失真程度小于或等于第一预定程度,则处理器120可以提供包括扫描按钮1101的第二用户界面。
根据各种实施例,如果文档的失真程度大于第一预定程度,则电子装置(例如,处理器120)可以在操作907中确定失真程度是否小于第二预定程度。第二预定程度可以是在补偿了文档的失真之后扫描和存储文档的程度,或者是在补偿了文档的失真之后可识别文档中包含的文本的程度。第二预定程度可以由设计者和/或用户设置和/或改变。例如,第二预定程度可以被设置为大于第一预定程度的值。例如,第二预定水平可以被定义为包括:与文档的四个顶点相对应的角度都大于第二阈值(例如,45度)以及与至少一个顶点相对应的角度小于第一阈值角度的情况。例如,如果与文档的四个顶点相对应的角度都大于第二阈值并且与至少一个顶点相对应的角度小于第一预定角度,则确定文档的失真程度小于或等于第二预定程度且大于第一预定程度。如果文档的四个顶点中的至少一个的角度小于第二阈值角度,则处理器120可以确定文档的失真程度大于第二预定程度。
根据各种实施例,如果文档的失真程度小于第二预定程度,并且大于第一预定程度,则电子装置(例如,处理器120)可以在操作909中基于文档类型确定与文档相关的功能。基于文档类型确定与文档相关的功能的操作可以与图7的操作707和操作709相同,或者可以与操作707和操作711相同。
根据各种实施例,电子装置(例如,处理器120)可以在操作911中提供第四用户界面,该第四用户界面包括用于执行所确定的与文档相关的功能的至少一个第三图形对象以及失真报告消息。第四用户界面可以包括第二用户界面中包括的至少一个图形元件,并且可以另外包括失真报告消息。例如,如图11B所示,如果文档的失真程度小于第二预定程度并且大于第一预定程度,则处理器120可以提供包括扫描按钮1111和失真报告消息1113的第四用户界面。该失真报告消息可以包括指示拍摄方向和/或文档的取向需要改变以便清楚地扫描文档而不会失真的消息。根据实施例,如果在第四用户界面中检测到针对扫描按钮的用户输入,则处理器120可以获取图像中的文档,可以补偿所获取的文档的失真,并且可以存储失真被补偿的文档。
根据各种实施例,如果文档的失真程度大于或等于第二预定程度,则在操作917中,电子装置(例如,处理器120)可以提供包括失真报告消息的第三用户界面。该失真报告消息可以包括指示拍摄方向和/或文档的取向需要改变以便清楚地扫描文档而不会失真的消息。根据实施例,第三用户界面可以包括在图7的操作715中进行描述的第三用户界面中所包括的图形元件中的至少一些。根据实施例,第三用户界面可以包括去激活的扫描按钮。例如,如图11C所示,如果文档的失真程度大于第二预定程度,则处理器120可以提供包括去激活的扫描按钮1121和失真报告消息1123的第三用户界面。
根据各种实施例,电子装置(例如,图1的电子装置101)的操作方法可以包括:确定从相机(例如,图1的相机模块180)提供的图像中是否包括文档;当图像中不包括文档时,提供包括用于拍摄图像的至少一个第一图形对象的第一用户界面;以及当图像中包括文档时,提供用于提供与文档相关的功能的第二用户界面,其中,该第二用户界面包括至少一个第一图形对象、指示图像中存在文档的第二图形对象、以及用于执行与文档相关的功能的至少一个第三图形对象。
根据各种实施例,第二图形对象可以包括指示图像中存在文档的预定符号或指示图像中可识别文档的区域的图形效果中的至少一者。
根据各种实施例,提供与文档相关的功能的第二用户界面可以包括:当图像中包括文档时,基于文档是否满足预定条件来确定文档是否可识别;以及当文档可识别时,基于文档的类型或文档中包括的信息来确定与文档相关的至少一种功能。
根据各种实施例,与文档相关的至少一种功能可以包括以下至少一项:扫描文档的功能;搜索与文档相关的额外信息的功能;基于文档中包括的信息的支付功能;基于文档中包含的信息的网络访问功能;基于文档中包括的信息的计划添加功能;或基于文档中包含的信息添加联系人信息的功能。
根据各种实施例,第二用户界面可以包括提供扫描文档的功能的第三图形对象,并且该方法还可以包括:当在提供第二用户界面的状态下检测到针对提供扫描文档的功能的第三图形对象的用户输入时,仅从图像中提取并存储文档,并且当在提供第二用户界面的状态下检测到针对第一图形对象的用户输入时,拍摄并存储包括文档的图像。
根据各种实施例,确定文档是否可识别可以包括:确定文档的尺寸或文档的失真程度中的至少一个是否满足预定条件。
根据各种实施例,该方法还可以包括:当文档不可识别时,由处理器提供第三用户界面,该第三用户界面包括与文档的尺寸或文档的失真程度中的至少一者有关的错误报告消息,其中,第三用户界面还可以包括至少一个第一图形对象或指示图像中存在文档的第二图形对象中的至少一者。
根据各种实施例,第三用户界面还可以包括用于执行与文档相关的功能的至少一个第三图形对象,并且至少一个第三图形对象可以处于去激活状态。
根据各种实施例的电子装置可以是各种类型的电子装置之一。电子装置可包括例如便携式通信装置(例如,智能电话)、计算机装置、便携式多媒体装置、便携式医疗装置、相机、可穿戴装置或家用电器。根据本公开的实施例,电子装置不限于以上所述的那些电子装置。
应该理解的是,本公开的各种实施例以及其中使用的术语并不意图将在此阐述的技术特征限制于具体实施例,而是包括针对相应实施例的各种改变、等同形式或替换形式。对于附图的描述,相似的参考标号可用来指代相似或相关的元件。将理解的是,与术语相应的单数形式的名词可包括一个或更多个事物,除非相关上下文另有明确指示。如这里所使用的,诸如“A或B”、“A和B中的至少一个”、“A或B中的至少一个”、“A、B或C”、“A、B和C中的至少一个”以及“A、B或C中的至少一个”的短语中的每一个短语可包括在与所述多个短语中的相应一个短语中一起列举出的项的任意一项或所有可能组合。如这里所使用的,诸如“第1”和“第2”或者“第一”和“第二”的术语可用于将相应部件与另一部件进行简单区分,并且不在其它方面(例如,重要性或顺序)限制所述部件。将理解的是,在使用了术语“可操作地”或“通信地”的情况下或者在不使用术语“可操作地”或“通信地”的情况下,如果一元件(例如,第一元件)被称为“与另一元件(例如,第二元件)结合”、“结合到另一元件(例如,第二元件)”、“与另一元件(例如,第二元件)连接”或“连接到另一元件(例如,第二元件)”,则意味着所述一元件可与所述另一元件直接(例如,有线地)连接、与所述另一元件无线连接、或经由第三元件与所述另一元件连接。
如这里所使用的,术语“模块”可包括以硬件、软件或固件实现的单元,并可与其他术语(例如,“逻辑”、“逻辑块”、“部分”或“电路”)可互换地使用。模块可以是被适配为执行一个或更多个功能的单一集成部件或者是该单一集成部件的最小单元或部分。例如,根据实施例,可以以专用集成电路(ASIC)的形式来实现模块。
可将在此阐述的各种实施例实现为包括存储在存储介质(例如,内部存储器136或外部存储器138)中的可由机器(例如,电子装置101)读取的一个或更多个指令的软件(例如,程序140)。例如,在处理器的控制下,所述机器(例如,电子装置101)的处理器(例如,处理器120)可在使用或无需使用一个或更多个其它部件的情况下调用存储在存储介质中的所述一个或更多个指令中的至少一个指令并运行所述至少一个指令。这使得所述机器能够操作用于根据所调用的至少一个指令执行至少一个功能。所述一个或更多个指令可包括由编译器产生的代码或能够由解释器运行的代码。可以以非暂时性存储介质的形式来提供机器可读存储介质。其中,术语“非暂时性”仅意味着所述存储介质是有形装置,并且不包括信号(例如,电磁波),但是该术语并不在数据被半永久性地存储在存储介质中与数据被临时存储在存储介质中之间进行区分。
根据实施例,可在计算机程序产品中包括和提供根据本公开的各种实施例的方法。计算机程序产品可作为产品在销售者和购买者之间进行交易。可以以机器可读存储介质(例如,紧凑盘只读存储器(CD-ROM))的形式来发布计算机程序产品,或者可经由应用商店(例如,Play StoreTM)在线发布(例如,下载或上传)计算机程序产品,或者可直接在两个用户装置(例如,智能电话)之间分发(例如,下载或上传)计算机程序产品。如果是在线发布的,则计算机程序产品中的至少部分可以是临时产生的,或者可将计算机程序产品中的至少部分至少临时存储在机器可读存储介质(诸如制造商的服务器、应用商店的服务器或转发服务器的存储器)中。
根据各种实施例,上述部件中的每个部件(例如,模块或程序)可包括单一实体或多个实体。根据各种实施例,可省略上述部件中的一个或更多个部件,或者可添加一个或更多个其它部件。可选择地或者另外地,可将多个部件(例如,模块或程序)集成为单一部件。在这种情况下,根据各种实施例,该集成部件可仍旧按照与所述多个部件中的相应一个部件在集成之前执行一个或更多个功能相同或相似的方式,执行所述多个部件中的每一个部件的所述一个或更多个功能。根据各种实施例,由模块、程序或另一部件所执行的操作可顺序地、并行地、重复地或以启发式方式来执行,或者所述操作中的一个或更多个操作可按照不同的顺序来运行或被省略,或者可添加一个或更多个其它操作。

Claims (19)

1.一种电子装置,所述电子装置包括:
相机;
显示器;以及
处理器,
其中,所述处理器被配置为:
基于从所述相机提供的图像中是否存在文本,确定所述图像中被识别出存在所述文本的区域;以及
响应于确定了所述区域,向所述显示器提供第二用户界面,所述第二用户界面用于提供与被识别出存在所述文本的所述区域相关的至少一个功能,并且
其中,所述第二用户界面包括所述图像、用于拍摄所述图像的至少一个第一图形对象、指示被识别出存在所述文本的所述区域的第二图形对象、以及用于执行与被识别出存在所述文本的所述区域相关的所述至少一个功能的至少一个第三图形对象。
2.根据权利要求1所述的电子装置,其中,当所述图像不包括所述文本时,所述处理器被配置为向所述显示器提供所述第一用户界面,所述第一用户界面包括所述图像和用于拍摄所述图像的所述至少一个第一图形对象。
3.根据权利要求1所述的电子装置,其中,所述第二图形对象包括以下至少一者:指示所述图像中存在所述区域的预定符号,以及指示所述图像中的所述区域的图形效果。
4.根据权利要求1所述的电子装置,其中,所述处理器被进一步配置为基于所述区域的类型或所述区域中包括的信息,确定与被识别出存在所述文本的所述区域相关的所述至少一个功能。
5.根据权利要求4所述的电子装置,其中,所述区域的类型包括海报、备忘录、日历、书籍和名片,并且
其中,所述区域中包括的信息是通过识别所述文本确定的。
6.根据权利要求4所述的电子装置,其中,与被识别出存在所述文本的所述区域相关的所述至少一个功能包括以下至少一者:扫描所述区域的功能、搜索与所述区域相关的额外信息的功能、基于所述区域中包括的信息的计划添加功能、以及基于所述区域中包括的信息的添加联系人信息的功能。
7.根据权利要求1所述的电子装置,其中,所述第二用户界面包括提供扫描所述区域的功能的第三图形对象,并且
其中,当在提供所述第二用户界面的状态下,对提供扫描所述区域的功能的所述第三图形对象的用户输入被检测到时,所述处理器被进一步配置为从所述图像提取所述区域。
8.根据权利要求1所述的电子装置,其中,所述处理器被配置为基于被识别出存在所述文本的所述区域的失真程度满足预定条件,提供所述第二用户界面。
9.根据权利要求8所述的电子装置,其中,当所述区域的失真程度满足所述预定条件时,所述处理器被配置为在对所述区域的失真进行补偿之后提供所述第二用户界面,以及
当所述区域的失真程度不满足所述预定条件时,所述处理器被进一步配置为提供第三用户界面,所述第三用户界面包括与所述区域的失真相关的错误报告消息。
10.一种电子装置的操作方法,所述操作方法包括:
基于从所述电子装置的相机提供的图像中是否存在文本,确定在所述图像中被识别出存在所述文本的区域;以及
响应于确定了所述区域,向所述电子装置的显示器提供第二用户界面,所述第二用户界面用于提供与被识别出存在所述文本的所述区域相关的至少一个功能,并且
其中,所述第二用户界面包括所述图像、用于拍摄所述图像的至少一个第一图形对象、指示被识别出存在所述文本的所述区域的第二图形对象以及用于执行与被识别出存在所述文本的所述区域相关的所述至少一个功能的至少一个第三图形对象。
11.根据权利要求10所述的操作方法,所述操作方法还包括:
当所述图像不包括所述文本时,向所述显示器提供所述第一用户界面,所述第一用户界面包括所述图像和用于拍摄所述图像的所述至少一个第一图形对象。
12.根据权利要求10所述的操作方法,其中,所述第二图形对象包括以下至少一者:指示所述图像中存在所述区域的预定符号,以及指示所述图像中的所述区域的图形效果。
13.根据权利要求10所述的操作方法,所述操作方法还包括:
基于所述区域的类型或所述区域中包括的信息,确定与被识别出存在所述文本的所述区域相关的所述至少一个功能。
14.根据权利要求13所述的操作方法,其中,所述区域的类型包括海报、备忘录、日历、书籍和名片,并且
其中,所述区域中包括的信息是通过识别所述文本确定的。
15.根据权利要求13所述的操作方法,其中,与被识别出存在所述文本的所述区域相关的所述至少一个功能包括以下至少一者:扫描所述区域的功能、搜索与所述区域相关的额外信息的功能、基于所述区域中包括的信息的计划添加功能、以及基于所述区域中包括的信息的添加联系人信息的功能。
16.根据权利要求10所述的操作方法,其中,所述第二用户界面包括提供扫描所述区域的功能的第三图形对象,并且
其中,所述方法进一步包括:当在提供所述第二用户界面的状态下,对提供扫描所述区域的功能的所述第三图形对象的用户输入被检测到时,从所述图像提取所述区域。
17.根据权利要求10所述的操作方法,其中,提供所述第二用户界面包括:
基于被识别出存在所述文本的所述区域的失真程度满足预定条件,提供所述第二用户界面。
18.根据权利要求17所述的操作方法,其中,基于所述区域的失真程度提供所述第二用户界面包括:
当所述区域的失真程度满足所述预定条件时,在对所述区域的失真进行补偿之后提供所述第二用户界面,以及
当所述区域的失真程度不满足所述预定条件时,提供第三用户界面,所述第三用户界面包括与所述区域的失真相关的错误报告消息。
19.一种存储有程序以实现操作的计算机可读记录介质,所述操作包括:
基于从相机提供的图像中是否存在文本,确定在所述图像中被识别出存在所述文本的区域;以及
响应于确定了所述区域,向显示器提供第二用户界面,所述第二用户界面用于提供与被识别出存在所述文本的所述区域相关的至少一个功能,并且
其中,所述第二用户界面包括所述图像、用于拍摄所述图像的至少一个第一图形对象、指示被识别出存在所述文本的所述区域的第二图形对象以及用于执行与被识别出存在所述文本的所述区域相关的所述至少一个功能的至少一个第三图形对象。
CN202110784305.6A 2019-02-19 2020-02-19 通过利用相机的应用提供各种功能的电子装置及操作方法 Active CN113630551B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110784305.6A CN113630551B (zh) 2019-02-19 2020-02-19 通过利用相机的应用提供各种功能的电子装置及操作方法

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
KR10-2019-0018890 2019-02-19
KR1020190018890A KR20200100918A (ko) 2019-02-19 2019-02-19 카메라를 이용하는 어플리케이션을 통해 다양한 기능을 제공하는 전자 장치 및 그의 동작 방법
CN202010102857.XA CN111586287B (zh) 2019-02-19 2020-02-19 通过利用相机的应用提供各种功能的电子装置及操作方法
CN202110784305.6A CN113630551B (zh) 2019-02-19 2020-02-19 通过利用相机的应用提供各种功能的电子装置及操作方法

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
CN202010102857.XA Division CN111586287B (zh) 2019-02-19 2020-02-19 通过利用相机的应用提供各种功能的电子装置及操作方法

Publications (2)

Publication Number Publication Date
CN113630551A true CN113630551A (zh) 2021-11-09
CN113630551B CN113630551B (zh) 2024-03-22

Family

ID=69784041

Family Applications (3)

Application Number Title Priority Date Filing Date
CN202110784305.6A Active CN113630551B (zh) 2019-02-19 2020-02-19 通过利用相机的应用提供各种功能的电子装置及操作方法
CN202110785310.9A Pending CN113645400A (zh) 2019-02-19 2020-02-19 通过利用相机的应用提供各种功能的电子装置及操作方法
CN202010102857.XA Active CN111586287B (zh) 2019-02-19 2020-02-19 通过利用相机的应用提供各种功能的电子装置及操作方法

Family Applications After (2)

Application Number Title Priority Date Filing Date
CN202110785310.9A Pending CN113645400A (zh) 2019-02-19 2020-02-19 通过利用相机的应用提供各种功能的电子装置及操作方法
CN202010102857.XA Active CN111586287B (zh) 2019-02-19 2020-02-19 通过利用相机的应用提供各种功能的电子装置及操作方法

Country Status (5)

Country Link
US (3) US11223728B2 (zh)
EP (1) EP3699745A1 (zh)
KR (1) KR20200100918A (zh)
CN (3) CN113630551B (zh)
WO (1) WO2020171611A1 (zh)

Families Citing this family (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
USD949162S1 (en) * 2019-02-18 2022-04-19 Samsung Electronics Co., Ltd. Display screen or portion thereof with transitional graphical user interface
KR20200100918A (ko) * 2019-02-19 2020-08-27 삼성전자주식회사 카메라를 이용하는 어플리케이션을 통해 다양한 기능을 제공하는 전자 장치 및 그의 동작 방법
US11269952B1 (en) 2019-07-08 2022-03-08 Meta Platforms, Inc. Text to music selection system
US11210339B1 (en) 2019-08-29 2021-12-28 Facebook, Inc. Transient contextual music streaming
US10911504B1 (en) 2019-08-29 2021-02-02 Facebook, Inc. Social media music streaming
US11775581B1 (en) 2019-09-18 2023-10-03 Meta Platforms, Inc. Systems and methods for feature-based music selection
US11416544B2 (en) 2019-09-25 2022-08-16 Meta Platforms, Inc. Systems and methods for digitally fetching music content
USD941325S1 (en) 2019-09-25 2022-01-18 Facebook, Inc. Display screen with a graphical user interface for music fetching
USD941324S1 (en) * 2019-09-25 2022-01-18 Facebook, Inc. Display screen with a graphical user interface for music fetching
USD977505S1 (en) * 2020-10-12 2023-02-07 Apple Inc. Display screen or portion thereof with animated graphical user interface
US20230229279A1 (en) * 2021-04-19 2023-07-20 Apple Inc. User interfaces for managing visual content in media
US11671696B2 (en) 2021-04-19 2023-06-06 Apple Inc. User interfaces for managing visual content in media

Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20040181749A1 (en) * 2003-01-29 2004-09-16 Microsoft Corporation Method and apparatus for populating electronic forms from scanned documents
US20100278453A1 (en) * 2006-09-15 2010-11-04 King Martin T Capture and display of annotations in paper and electronic documents
US20140037184A1 (en) * 2012-08-06 2014-02-06 A2iA S.A. Systems and methods for recognizing information in objects using a mobile device
CN104246678A (zh) * 2012-02-15 2014-12-24 苹果公司 用于对文档中的内容对象进行共享的设备、方法和图形用户界面
US20150062114A1 (en) * 2012-10-23 2015-03-05 Andrew Ofstad Displaying textual information related to geolocated images
US20160328394A1 (en) * 2013-11-08 2016-11-10 Google Inc. Presenting translations of text depicted in images
CN107358226A (zh) * 2017-06-23 2017-11-17 联想(北京)有限公司 电子设备的识别方法及电子设备
US20180032238A1 (en) * 2016-08-01 2018-02-01 Samsung Electronics Co., Ltd. Electronic device and method for outputting thumbnail corresponding to user input
US20180107360A1 (en) * 2016-10-14 2018-04-19 Lg Electronics Inc. Mobile terminal and method for controlling the same
CN108664829A (zh) * 2017-03-27 2018-10-16 三星电子株式会社 用于提供与图像中对象有关的信息的设备
US20180336226A1 (en) * 2017-05-16 2018-11-22 Google Llc Image archival based on image categories
US20190020823A1 (en) * 2017-07-17 2019-01-17 Lg Electronics Inc. Mobile terminal

Family Cites Families (55)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7724920B2 (en) * 1995-05-08 2010-05-25 Digimarc Corporation Digital authentication with analog documents
US6922781B1 (en) * 1999-04-30 2005-07-26 Ideaflood, Inc. Method and apparatus for identifying and characterizing errant electronic files
EP1096777A1 (en) * 1999-10-28 2001-05-02 Hewlett-Packard Company, A Delaware Corporation Document imaging system
US6763148B1 (en) * 2000-11-13 2004-07-13 Visual Key, Inc. Image recognition methods
CN1405726A (zh) * 2001-08-16 2003-03-26 力捷电脑股份有限公司 自动识别扫描区域的方法
US7286256B2 (en) * 2002-02-22 2007-10-23 Eastman Kodak Company Image application software providing a list of user selectable tasks
JP2005135210A (ja) 2003-10-31 2005-05-26 Hitachi Ltd 文字認識機能を有する携帯機器
KR100644694B1 (ko) * 2005-04-27 2006-11-10 삼성전자주식회사 프리뷰 기능을 가지는 화상독취장치 및 방법
JP4534917B2 (ja) 2005-09-08 2010-09-01 ソニー株式会社 色域圧縮方法、プログラム、色域圧縮装置
KR100667818B1 (ko) * 2005-09-27 2007-01-11 삼성전자주식회사 객체별 미리보기 화상의 생성장치 및 방법
JP4687425B2 (ja) * 2005-11-25 2011-05-25 富士ゼロックス株式会社 画像読取装置および制御方法
CN100562057C (zh) * 2006-03-16 2009-11-18 株式会社理光 图像处理装置和预览图像显示方法
US8477228B2 (en) * 2008-06-30 2013-07-02 Verizon Patent And Licensing Inc. Camera data management and user interface apparatuses, systems, and methods
US8098161B2 (en) * 2008-12-01 2012-01-17 Raytheon Company Radio frequency identification inlay with improved readability
US8345106B2 (en) * 2009-09-23 2013-01-01 Microsoft Corporation Camera-based scanning
KR20110051073A (ko) 2009-11-09 2011-05-17 엘지전자 주식회사 휴대형 단말기에서의 응용프로그램 실행 방법
EP2556679B1 (en) * 2010-04-09 2017-05-10 LG Electronics Inc. Image display apparatus and method for operating the same
JP5525923B2 (ja) * 2010-06-09 2014-06-18 任天堂株式会社 画像処理プログラム、画像処理装置、画像処理システム、および画像処理方法
US9600153B2 (en) * 2010-07-05 2017-03-21 Lg Electronics Inc. Mobile terminal for displaying a webpage and method of controlling the same
CA2824653C (en) 2010-12-22 2016-11-22 Fujitsu Limited Method for resource allocation, method for channel state information transmission, base station and user equipment
EP2637128B1 (en) * 2012-03-06 2018-01-17 beyo GmbH Multimodal text input by a keyboard/camera text input module replacing a conventional keyboard text input module on a mobile device
US8605189B2 (en) * 2012-05-01 2013-12-10 Xerox Corporation Product identification using mobile device
US9858754B2 (en) * 2012-06-14 2018-01-02 Bally Gaming, Inc. System and method for augmented reality gaming
KR20140030361A (ko) * 2012-08-27 2014-03-12 삼성전자주식회사 휴대단말기의 문자 인식장치 및 방법
KR101935039B1 (ko) * 2012-09-11 2019-01-03 엘지전자 주식회사 이동 단말기 및 이동 단말기의 제어 방법
KR102063915B1 (ko) * 2013-03-14 2020-01-08 삼성전자주식회사 사용자 기기 및 그 동작 방법
KR102098058B1 (ko) * 2013-06-07 2020-04-07 삼성전자 주식회사 뷰 모드에서 정보 제공 방법 및 장치
KR20150010070A (ko) * 2013-07-18 2015-01-28 삼성전자주식회사 휴대단말기에서 이미지를 표시하는 방법 및 장치
KR102082301B1 (ko) 2013-09-30 2020-02-27 삼성전자주식회사 카메라로 촬영한 문서 영상을 스캔 문서 영상으로 변환하기 위한 방법, 장치 및 컴퓨터 판독 가능한 기록 매체
US9489760B2 (en) 2013-11-14 2016-11-08 Intel Corporation Mechanism for facilitating dynamic simulation of avatars corresponding to changing user performances as detected at computing devices
KR102173123B1 (ko) * 2013-11-22 2020-11-02 삼성전자주식회사 전자장치에서 이미지 내의 특정 객체를 인식하기 위한 방법 및 장치
US9355313B2 (en) * 2014-03-11 2016-05-31 Microsoft Technology Licensing, Llc Detecting and extracting image document components to create flow document
JP6395423B2 (ja) 2014-04-04 2018-09-26 キヤノン株式会社 画像処理装置、制御方法及びプログラム
JP6327931B2 (ja) * 2014-05-02 2018-05-23 キヤノン株式会社 画像処理装置、情報処理方法及びプログラム
WO2016067303A2 (en) * 2014-10-29 2016-05-06 Swapnil Sarjerao Jagtap Heat recuperation system for the family of shaft powered aircraft gas turbine engines
US20160139777A1 (en) * 2014-11-18 2016-05-19 Sony Corporation Screenshot based indication of supplemental information
US10223344B2 (en) * 2015-01-26 2019-03-05 Adobe Inc. Recognition and population of form fields in an electronic document
KR20170036300A (ko) * 2015-09-24 2017-04-03 삼성전자주식회사 동영상 제공 방법 및 이를 수행하는 전자 장치
KR20170037424A (ko) * 2015-09-25 2017-04-04 엘지전자 주식회사 이동 단말기 및 그 제어방법
KR20180083764A (ko) * 2017-01-13 2018-07-23 삼성전자주식회사 전자 장치의 사용 환경에 따른 사용자 인터페이스를 제공하는 전자 장치 및 그 방법
JP6448674B2 (ja) * 2017-01-26 2019-01-09 キヤノン株式会社 文字認識可能な画像を撮影するためのガイド表示を行う、カメラ機能を有する携帯可能な情報処理装置、その表示制御方法、及びプログラム
KR20180094340A (ko) * 2017-02-15 2018-08-23 엘지전자 주식회사 이동단말기 및 그 제어 방법
WO2018222244A1 (en) 2017-06-02 2018-12-06 Apple Inc. Device, Method, and Graphical User Interface for Handling Data Encoded in Machine-Readable Format
KR102402148B1 (ko) * 2017-08-22 2022-05-26 삼성전자주식회사 전자 장치 및 그의 문자 인식 방법
US20190087602A1 (en) * 2017-09-19 2019-03-21 Electronics And Telecommunications Research Institute Offline document de-identification apparatus and method, and offline document restoration apparatus
JP6953957B2 (ja) * 2017-09-27 2021-10-27 富士フイルムビジネスイノベーション株式会社 画像処理装置及びプログラム
JP7005337B2 (ja) * 2017-12-25 2022-01-21 キヤノン株式会社 表示制御装置及びその制御方法、並びにプログラム
KR102567003B1 (ko) * 2018-05-08 2023-08-16 삼성전자주식회사 전자 장치 및 그 동작방법
CN111465918B (zh) 2018-07-25 2021-08-31 华为技术有限公司 在预览界面中显示业务信息的方法及电子设备
KR102543695B1 (ko) * 2019-01-18 2023-06-16 삼성전자주식회사 영상 처리 방법 및 이를 지원하는 전자 장치
KR20200100918A (ko) * 2019-02-19 2020-08-27 삼성전자주식회사 카메라를 이용하는 어플리케이션을 통해 다양한 기능을 제공하는 전자 장치 및 그의 동작 방법
US11106908B2 (en) * 2019-04-02 2021-08-31 State Street Bank And Trust Company Techniques to determine document recognition errors
KR20210017081A (ko) * 2019-08-06 2021-02-17 삼성전자주식회사 객체에 대응하는 그래픽 요소 표시 방법 및 장치
CN112183121B (zh) * 2019-09-20 2022-02-25 华为技术有限公司 机器翻译的方法和电子设备
CN112580400B (zh) * 2019-09-29 2022-08-05 荣耀终端有限公司 图像选优方法及电子设备

Patent Citations (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20040181749A1 (en) * 2003-01-29 2004-09-16 Microsoft Corporation Method and apparatus for populating electronic forms from scanned documents
US20100278453A1 (en) * 2006-09-15 2010-11-04 King Martin T Capture and display of annotations in paper and electronic documents
CN104246678A (zh) * 2012-02-15 2014-12-24 苹果公司 用于对文档中的内容对象进行共享的设备、方法和图形用户界面
US20140037184A1 (en) * 2012-08-06 2014-02-06 A2iA S.A. Systems and methods for recognizing information in objects using a mobile device
US20150062114A1 (en) * 2012-10-23 2015-03-05 Andrew Ofstad Displaying textual information related to geolocated images
US20160328394A1 (en) * 2013-11-08 2016-11-10 Google Inc. Presenting translations of text depicted in images
US20180032238A1 (en) * 2016-08-01 2018-02-01 Samsung Electronics Co., Ltd. Electronic device and method for outputting thumbnail corresponding to user input
US20180107360A1 (en) * 2016-10-14 2018-04-19 Lg Electronics Inc. Mobile terminal and method for controlling the same
CN108664829A (zh) * 2017-03-27 2018-10-16 三星电子株式会社 用于提供与图像中对象有关的信息的设备
US20180336226A1 (en) * 2017-05-16 2018-11-22 Google Llc Image archival based on image categories
US20180336415A1 (en) * 2017-05-16 2018-11-22 Google Llc Suggested actions for images
CN107358226A (zh) * 2017-06-23 2017-11-17 联想(北京)有限公司 电子设备的识别方法及电子设备
US20190020823A1 (en) * 2017-07-17 2019-01-17 Lg Electronics Inc. Mobile terminal

Also Published As

Publication number Publication date
CN113645400A (zh) 2021-11-12
US11223728B2 (en) 2022-01-11
WO2020171611A1 (en) 2020-08-27
US20230076093A1 (en) 2023-03-09
CN111586287B (zh) 2021-07-30
US20220078294A1 (en) 2022-03-10
EP3699745A1 (en) 2020-08-26
CN111586287A (zh) 2020-08-25
KR20200100918A (ko) 2020-08-27
US20200267267A1 (en) 2020-08-20
CN113630551B (zh) 2024-03-22
US11528370B2 (en) 2022-12-13
US11943399B2 (en) 2024-03-26

Similar Documents

Publication Publication Date Title
CN111586287B (zh) 通过利用相机的应用提供各种功能的电子装置及操作方法
US11249643B2 (en) Electronic device for displaying list of executable applications on split screen and operating method thereof
US11076037B2 (en) Electronic device for synchronizing modification among screens and operation method thereof
US20220291818A1 (en) Electronic device and layout configuration method using same
US20220101638A1 (en) Image processing method, and electronic device supporting same
US20210271508A1 (en) Electronic device for providing transaction information and operating method thereof
US11194881B2 (en) Electronic device and method for displaying web content in augmented reality mode
US11501069B2 (en) Electronic device for inputting characters and method of operation of same
US11601590B2 (en) Interface connected to image sensor and electronic device comprising interfaces connected among plurality of processors
US11182071B2 (en) Apparatus and method for providing function associated with keyboard layout
KR102436435B1 (ko) 전자 펜으로부터 수신한 신호에 기초하여 다양한 기능을 실행시키기 위한 전자 장치
US11308317B2 (en) Electronic device and method for recognizing characters
US20220005340A1 (en) Flexible electronic device and method for operating same
US11556914B2 (en) Electronic device and method for making payment by using audio module
US20230049621A1 (en) Electronic device and operation method of electronic device
US20190238891A1 (en) Method of processing images and electronic device thereof
US11164388B2 (en) Electronic device and method for providing augmented reality object therefor
US20210326388A1 (en) Electronic device for providing infographics, and method thereof
US20210027765A1 (en) Electronic device and operating method thereof
US20230258470A1 (en) Method for providing point-of-interest information, and electronic device supporting same
US20220385752A1 (en) Guide map provision method and electronic device for supporting same
US20220156026A1 (en) Foldable electronic device for displaying user interface and method therefor
US20230244351A1 (en) Audio playback and screen display method and device therefor
US20230111512A1 (en) Electronic device and method for generating additional information about file in electronic device

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant