CN106233228B - 处理内容的方法及使用该方法的电子设备 - Google Patents

处理内容的方法及使用该方法的电子设备 Download PDF

Info

Publication number
CN106233228B
CN106233228B CN201580020740.4A CN201580020740A CN106233228B CN 106233228 B CN106233228 B CN 106233228B CN 201580020740 A CN201580020740 A CN 201580020740A CN 106233228 B CN106233228 B CN 106233228B
Authority
CN
China
Prior art keywords
vector image
content
electronic equipment
image
vector
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201580020740.4A
Other languages
English (en)
Other versions
CN106233228A (zh
Inventor
李基赫
李承彻
丁晨弘
朴泰建
刘相建
尹晟豪
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics Co Ltd
Original Assignee
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Samsung Electronics Co Ltd filed Critical Samsung Electronics Co Ltd
Publication of CN106233228A publication Critical patent/CN106233228A/zh
Application granted granted Critical
Publication of CN106233228B publication Critical patent/CN106233228B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00—Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/40—Document-oriented image-based pattern recognition
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00—Handling natural language data
    • G06F40/10—Text processing
    • G06F40/103—Formatting, i.e. changing of presentation of documents
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00—Handling natural language data
    • G06F40/10—Text processing
    • G06F40/12—Use of codes for handling textual entities
    • G06F40/131—Fragmentation of text files, e.g. creating reusable text-blocks; Linking to fragments, e.g. using XInclude; Namespaces
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00—Handling natural language data
    • G06F40/10—Text processing
    • G06F40/166—Editing, e.g. inserting or deleting
    • G06F40/171—Editing, e.g. inserting or deleting by use of digital ink
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00—Handling natural language data
    • G06F40/30—Semantic analysis
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00—Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/40—Document-oriented image-based pattern recognition
    • G06V30/43—Editing text-bitmaps, e.g. alignment, spacing; Semantic analysis of bitmaps of text without OCR

Abstract

提供了一种用于在电子设备中处理内容的方法以及完成所述方法的电子设备。所述方法包括：获取包括至少一个字符在内的内容，以及执行以下至少一项：通过分析所获取的内容将所获取的内容分类到多个类别中的至少一个类别，或者基于所获取的内容来生成包括与所述至少一个字符相对应的矢量图像在内的矢量图像，以及在与电子设备功能连接的显示器上显示矢量图像中的至少一部分。

Description

处理内容的方法及使用该方法的电子设备
技术领域
本发明总体上涉及内容处理方法，且更具体地涉及通过电子设备获取内容、分析关于内容的信息、并基于该分析向用户提供内容的内容处理方法、以及使用该方法的电子设备。
背景技术
由于诸如智能电话、平板个人计算机(PC)等的最新电子设备配备有具有触摸面板的显示设备，触摸屏变得普及，触摸屏显示屏幕并允许用户通过触摸屏幕来输入信息。此外，由于电子设备具有相机功能，其用户可以捕捉静止图像或视频，而不管时间和地点如何。因此，用户可以使用诸如电子笔之类的触摸输入装置在电子设备上记录必要信息，而不是在纸上。用户还可以捕捉特定信息的图像，并存储该图像，从而用户可以在需要时查看该图像。
由于各种图像识别和/或转换技术的发展，与电子设备的上述功能结合地使用这些技术，从而促进各种图像信息的使用。例如，如果用户使用电子设备的图像传感器来捕捉文档，则通过光学字符识别(OCR)功能将所捕捉的文档的图像转换为文本信息。以这种方式，用户可以将所捕捉的图像用作文本图像。
然而，在传统图像识别技术之中，字符识别技术由于其低准确度而无法向电子设备的用户提供令人满意的性能。
此外，不存在用于准确地识别粗略手写字符的具体技术。只有当用户与在电子设备中使用的一般字体(诸如Gothic、Times New Roman等)相似地写入字符时，才可识别字符。如果用户粗略地写入字符，则字符可能是难以辨认的，因此，无法识别。
如果根据用户的手写风格，手写字符不是均匀排列的，则用户可能难以理解由电子设备获取的手写图像的内容。
传统上，没有开发出用于捕捉备忘录(或笔记)并通过对图像进行自动分类来存储所捕捉的图像的技术。结果，因必须手动地对必要图像进行分类而对用户造成不便。
发明内容
作出本发明以至少解决上述问题和/或缺点，并至少提供下述优点。因此，本发明的一个方案是提供一种在电子设备中处理内容的方法以及用于执行该方法的电子设备。
本发明的另一方案是提供一种用于允许电子设备的用户容易地编辑和使用内容的内容处理方法、以及使用该方法的电子设备。
本发明的另一方案是提供一种内容处理方法，用于当捕捉到手写笔记或使用诸如电子笔等的输入装置写入了文本时基于内容信息将手写存储为矢量图像，使得用户可以容易地编辑和使用所述手写。矢量图像可以自动地布置为使得用户能够容易地查看手写。
本发明的另一方案是提供一种内容处理方法以及使用该方法的电子设备，该方法用于生成各种笔记作为特定文件，例如，将笔记分类到数字笔记中并将笔记存储在数字笔记的类别下。
本发明的另一方案是提供一种内容处理方法以及使用该方法的电子设备，该方法用于将通过捕捉例如文档、笔记等所获取的内容自动分类到类别中，并将内容存储在该类别下。
根据本发明的一个方案，提供了一种用于在电子设备中处理内容的方法。所述方法包括：获取包括至少一个字符在内的内容；使用所获取的内容来生成多个矢量图像；以及在与电子设备功能连接的显示器上显示所述多个矢量图像，其中，所述多个矢量图像中的每个矢量图像包括所述至少一个字符的不同部分。
根据本发明的另一方案，提供了一种用于处理内容的电子设备。所述电子设备包括：显示器；以及控制器，被配置为获取包括至少一个字符在内的内容，使用所获取的内容来生成多个矢量图像，以及在与电子设备功能连接的显示器上显示所述多个矢量图像，其中，所述多个矢量图像中的每个矢量图像包括所述至少一个字符的不同部分。
从属权利要求中描述了本发明的其他有益实施例。
附图说明
通过结合附图的以下描述，本发明的以上和其他方面、特征和优点将更加清楚，在附图中：
图1是根据本发明实施例的用于处理图像的电子设备的框图；
图2是示出了根据本发明实施例的图像处理的方法的流程图；
图3A、图3B、图3C、和图3D示出了根据本发明实施例的获取图像并将所获取的图像转换为矢量图像；
图4是示出了根据本发明实施例的编辑和布置图像内容的方法的流程图；
图5A、图5B、和图5C示出了根据本发明实施例的将矢量图像元素构造成至少一个块的结果；
图6是示出了根据本发明实施例的通过调整矢量图像元素的尺寸来布置被构造成块的矢量图像元素的方法的流程图；
图7是示出了根据本发明实施例的通过调整图6中示出的矢量图像元素的尺寸来布置被构造成块的矢量图像元素的方法的流程图；
图8是示出了根据本发明实施例的通过调整图6中示出的矢量图像元素的尺寸来布置被构造成块的矢量图像元素的方法的流程图；
图9是示出了根据本发明实施例的通过调整块之间的间隔来布置块的方法的流程图；
图10示出了根据本发明实施例的通过调整块之间的间隔来布置块的结果；
图11是示出了根据本发明实施例的通过逐块调整矢量图像之间的间隔来布置矢量图像的方法的流程图；
图12是示出了根据本公开实施例的通过逐块调整矢量图像元素的旋转度来布置矢量图像元素的方法的流程图；
图13示出了根据本公开实施例的通过逐块调整矢量图像元素的旋转度来布置矢量图像元素的结果；
图14A和图14B示出了根据本发明实施例的通过编辑矢量图像元素来布置被构造成块的矢量图像元素的结果；
图15是示出了根据本发明实施例的编辑和布置图像内容的方法的流程图；
图16A和图16B示出了根据本发明实施例的编辑和布置图像内容的结果；
图17是示出了根据本发明实施例的编辑和布置图像内容的方法的流程图；
图18A和图18B示出了根据本发明实施例的编辑和布置图像内容的结果；
图19是示出了根据本发明实施例的编辑和布置图像内容的方法的流程图；
图20A和图20B示出了根据本发明实施例的所获取的图像；
图21A和图21B示出了根据本发明实施例的编辑和布置图像内容的结果；
图22A和图22B示出了根据本发明实施例的编辑和布置图像内容的结果；
图23示出了根据本发明实施例的编辑和布置图像内容的结果；
图24示出了根据本发明实施例的编辑和布置图像内容的结果；
图25是示出了根据本发明实施例的对图像进行分类的方法的流程图；
图26A、图26B、图26C、和图26D示出了根据本发明实施例的各种笔记的图像；
图27A和图27B示出了根据本发明实施例的各种笔记的图像；
图28A、图28B、图28C、和图28D是根据本发明实施例的用于描述基于笔记形状的属性分析所参考的示图；
图29示出了根据本发明实施例的用于描述基于笔记形状的属性分析所参考的笔记图像；
图30A和图30B示出了根据本发明实施例的用于描述基于从笔记图像所识别的字符的属性分析所参考的笔记图像；
图31是根据本发明实施例的包括电子设备在内的网络环境的框图；以及
图32是根据本发明实施例的电子设备的框图。
具体实施方式
提供了参照附图的以下描述来帮助全面理解由权利要求及其等同物限定的本发明的实施例。其包括各种细节以辅助理解，但这些细节应被视为仅是示例。因此，本领域普通技术人员将认识到：在不脱离本发明的范围的情况下，可以对本文描述的实施例进行各种改变和修改。贯穿附图，相似的附图标记将被理解为指代相似的部件、组件、和结构。此外，为了清楚和简明的目的，省略对公知功能和构造的描述。
以下描述和权利要求中使用的术语和词语不限于其字典含义，而是仅用于提供对本发明的清楚一致的理解。因此，本领域技术人员应当清楚的是：提供本发明的实施例的以下描述仅用于说明目的，而不是为了限制由所附权利要求及其等同物限定的本发明。
应当理解的是：除非上下文中另有明确说明，否则单数形式“一”、“一个”、和“所述”包括复数指示物。因此，例如，对“组件表面”的引用包括对一个或多个这样的表面的引用。
术语“大体上”意味着所记载的特征、参数、或者值不需要精确实现，而是可以出现包括诸如公差、测量误差、测量准确度限制、及其他本领域技术人员已知的因素在内的偏差或变化，该偏差或变化可以以不妨碍该特征预期所要提供的效果的量来出现。
根据本发明实施例的电子设备可以是具有通信能力的设备。例如，电子设备可以是以下至少一项：智能电话、平板个人计算机(PC)、移动电话、视频电话、电子书阅读器、桌面PC、膝上型PC、上网本计算机、个人数字助理(PDA)、便携式多媒体播放器(PMP)、运动图像专家组音频层3(MP3)播放器、移动医疗设备、相机、或可穿戴式设备(例如，诸如电子眼镜之类的头戴式设备(HMD)、电子服装、电子手环、电子项链、电子配饰、电子纹身、或智能表)。
根据本发明的实施例，电子设备可以是具有通信能力的智能家电。智能家电可以是例如以下至少一项：电视(TV)、数字视频盘(DVD)播放器、音频播放器、冰箱、空调、真空吸尘器、烤箱、微波炉、洗衣机、空气净化器、机顶盒、TV盒(例如，Samsung HomeSyncTM、AppleTVTM、或Google TVTM)、游戏机、电子词典、电子钥匙、便携式摄像机、或电子相框。
根据本发明的实施例，电子设备可以是医疗设备(例如，磁共振血管成像(MRA)设备、磁共振成像(MRI)设备、计算机断层扫描(CT)设备、成像设备、或超声设备)、导航设备、全球定位系统(GPS)接收器、事件数据记录器(EDR)、飞行数据记录器(FDR)、汽车信息娱乐设备、航海电子设备(例如，航海导航设备、陀螺仪、或罗盘)、航空电子设备、安保设备、车载头单元、工业或消费机器人、银行的自动柜员机(ATM)、或商店的销售点(PoS)设备。
根据本发明的实施例，电子设备可以是家具、建筑物/结构的一部分、电子板、电子签名接收设备、投影仪、或包括通信能力在内的各种测量设备(例如，水、电、气或电磁波测量设备)。根据本发明各种实施例的电子设备可以是前述设备中的一个或任何组合。此外，根据本发明各种实施例的电子设备可以是柔性设备。本领域普通技术人员应清楚的是：根据本发明的电子设备不限于前述设备。
参考附图，以下将描述根据本发明实施例的电子设备。本文中使用的术语“用户”可以指代使用电子设备的人或使用电子设备的设备(例如，人工智能电子设备)。
现在将参照附图来描述本发明的实施例。尽管在以下描述中给出了诸如类别、手写图像等的细节，但是本领域技术人员应当清楚地理解：提供这些细节以帮助全面理解本发明，因此在本发明的范围内可以对它们进行许多修改和改变。
图1是根据本发明实施例的用于处理图像的电子设备100的框图。
参照图1，电子设备100包括控制器110、显示器120、输入单元130、相机模块140、和存储器150。通过示例的方式，给出以下描述，要了解显示器120是触摸屏。
显示器120(例如，触摸屏)接收用户操纵，并显示应用程序的执行图像、操作状态、和菜单状态。显示器120可以向用户提供与各种服务(例如，呼叫、数据传输、广播、照片拍摄等)相对应的用户界面(UI)。显示器120向触摸屏控制器(未示出)发送与针对UI的至少一个触摸输入相对应的模拟信号。显示器120接收以下至少一项：手触摸输入、或诸如触控笔(下文中，称为电子笔)之类的触摸输入装置的触摸输入。此外，显示器120可以接收至少一个触摸之中的一个触摸的连续移动。显示器120向触摸屏控制器发送与触摸的连续移动相对应的模拟信号。
根据本发明的实施例，显示器120可以被实现为例如电阻型、电容型、电磁共振(EMR)型、红外型、或声波型。
根据本发明的实施例，触摸可以包括非接触触摸，不限于显示器120上的手触摸或电子笔的触摸。间隙(在超过该间隙的情况下在显示器120中可以检测到非接触式触摸)可以根据电子设备100的能力或结构而变化。例如，为了区分由显示器120与手或电子笔之间的接触所产生的触摸事件和非接触式输入事件(例如，悬停事件)，显示器120针对触摸事件和悬停事件输出不同的检测值(例如，不同的电流值等)。此外，显示器120根据悬停事件的区域和显示器120之间的距离来输出不同的检测值(例如，不同的电流值等)。
根据本发明的实施例，触摸屏控制器将从显示器120接收到的模拟信号转换为数字信号(例如，X和Y坐标)，并向控制器110发送数字信号。控制器110使用接收到的数字信号来控制显示器120。例如，控制器110可以响应于触摸事件或悬停事件来执行在显示器120上显示的快捷图标(未示出)。根据本发明的实施例，将触摸屏控制器并入控制器110中。
根据本发明的实施例，触摸屏控制器通过检测从显示器120输出的值(例如，电流值等)来确定发生悬停事件的空间和显示器120之间的距离，将该距离转换为数字信号(例如，Z坐标)，并将该数字信号提供给控制器110。
根据本发明的实施例，为了同时接收手触摸输入和电子笔的触摸输入，显示器120包括分别感测用户的手和电子笔的触摸或接近的至少两个触摸屏面板。该至少两个触摸屏面板向触摸屏控制器提供不同的输出值，并且触摸屏控制器通过区分从该至少两个触摸屏面板接收的值来确定来自显示器120的输入是用户手的输入还是电子笔的输入。
输入单元130接收用户操纵，并包括按钮、键区、或麦克风中的至少一个。根据本发明的实施例，按钮可以形成在电子设备100的壳体的前表面、侧表面、或后表面上，并可以包括电源/锁定按钮或菜单按钮中的至少一个。
根据本发明的实施例，键区从用户接收按键输入以控制电子设备100。键区可以包括形成在电子设备100中的物理键区。根据本发明的实施例，可以根据电子设备100的能力或结构而不提供物理键区。根据本发明的实施例，麦克风接收语音或声音，并在控制器110的控制下将接收到的语音或声音转换为电信号。
相机模块140包括第一相机或第二相机中的至少一个。相机模块140在控制器110的控制下执行一般数字相机的功能，包括捕捉静止图像或视频。通过激活第一相机或第二相机，相机模块140通过第一相机或第二相机中包括的图像传感器来捕捉图像。
存储器150在控制器110的控制下存储根据显示器120、输入单元130、和相机模块140的操作的输入/输出信号或数据。存储器150可以存储用于控制电子设备100或控制器110的控制程序、应用或内容。
根据本发明的实施例，术语“存储器”包括存储器150、控制器110内的只读存储器(ROM)和随机存取存储器(RAM)、或者安装到电子设备100的存储卡(例如，安全数字(SD)卡、记忆棒等)。存储器150可以包括非易失性存储器、易失性存储器、硬盘驱动器(HDD)、或固态驱动器(SSD)。
控制器110包括中央处理单元(CPU；未示出)、存储用于控制电子设备100的控制程序的ROM、以及存储从电子设备100外部接收的信号或数据或者用作由电子设备100执行的操作的存储空间的RAM。CPU可以包括一个或多个核。CPU、ROM、和RAM通过内部总线(未示出)互相连接。
控制器110在功能上连同显示器120、输入单元130、相机模块140、或存储器150中的至少一个一起控制显示器120、输入单元130、相机模块140、或存储器150中的该至少一个。
根据本发明的实施例，在获取到包括至少一个字符在内的内容时，控制器110控制以下操作中的至少一项：通过分析所获取的内容将所获取的内容分类到多个类别之一中，或者根据所获取的内容来生成包括与该至少一个字符相对应的矢量图像在内的矢量图像，以及在显示器120上显示矢量图像的至少一部分。根据本发明的实施例，控制器110可以实现为硬件模块(例如，处理器)、软件模块(例如，应用)、或它们的组合。
内容可以是通过与控制器110功能连接的相机模块140来捕捉特定对象所获取的图像。根据本发明的实施例，内容是通过执行电子设备100的功能中的屏幕捕捉功能所捕捉到的图像。根据本发明的实施例，内容是在诸如数字笔记等的手写输入应用中由诸如电子笔之类的输入装置输入到显示器120的文本。根据本发明的实施例，可以从外部电子设备接收内容，例如，各种格式的文件，例如联合图像专家组(JPG)、图形交换格式(GIF)、位图(BMP)等。
在通过相机模块140捕捉的图像作为内容的上下文中，给出对根据本发明实施例的图像处理的详细描述。
图2是示出了根据本发明实施例的处理内容(例如，图像)的方法的流程图。在图2中，内容处理方法包括编辑并布置内容的方法或对内容进行分类的方法中的至少一种。根据本发明的实施例，根据通过电子设备100获取的内容来生成矢量图像，并将矢量图像提供给用户，使得用户可以容易地识别并编辑内容。根据本发明的实施例，将电子设备100中所获取的内容自动分类到类别中，并将内容存储在该类别下。
参照图2，电子设备100(例如，控制器110)在操作210中根据用户操纵来获取内容。例如，电子设备100可以通过相机(例如，相机模块140)来获取图3A所示的内容(例如，手写笔记)。
根据本发明的实施例，电子设备100在操作220中针对所获取的内容来选择内容处理方法。例如，内容处理方法可以是内容编辑和布置或内容分类。如果在操作220中将内容编辑和布置选择为内容处理方法，则电子设备100进行到操作230。如果在操作220中将内容分类选择为内容处理方法，则电子设备100进行到操作260。根据本发明的实施例，电子设备100可以不执行操作220，但是反之可以顺序地或同时地执行操作230和操作260。
在操作220中选择了内容编辑和布置时，电子设备100在操作230中将内容转换为矢量图像。根据本发明的实施例，根据内容来创建矢量图像，使得关于内容的信息可以用形状和线条的形式来存储。例如，通过经由光学字符识别(OCR)对电子设备100所获取的内容进行预处理并根据预处理的内容生成矢量图像来创建矢量文件(或矢量图像文件)。基于OCR的预处理可以包括：从内容中包括的笔画或字符中去除不必要信息，以及对内容进行处理以促进识别。根据本发明的实施例，电子设备100对例如所捕捉的内容执行透视校正以将内容转换为矢量图像。电子设备100通过透视校正将图3B所示的内容转换为图3C所示的内容。之后，电子设备100根据透视校正后的内容来生成矢量图像，从而创建矢量图像文件。根据操作230，电子设备100通过执行应用在屏幕上显示矢量图像文件的矢量图像，如图3D所示。
在操作240中，电子设备100通过对矢量图像进行编辑来布置矢量图像。矢量图像可以包括根据内容来生成的各种类型的图像，例如点、线、曲线、多边形等。根据本发明的实施例，将矢量图像构造为至少一个块，然后，在操作240中，通过对该至少一个块的矢量图像进行编辑来布置矢量图像。通过调整以下至少一项来编辑和布置矢量图像：至少一个块中矢量图像的大小、每个块中矢量图像之间的间隔、块之间的间隔、或者每个块中矢量图像的旋转度(rotation degree)。
根据本发明的实施例，在操作240中，通过调整由电子设备100生成的矢量图像的大小、间隔、或旋转度中的至少一项来编辑和布置矢量图像。
以下参照图4至图24更详细地描述通过对矢量图像进行编辑来布置矢量图像的操作240。
在操作220中选择了内容分类时，电子设备100在操作260中分析所获取的内容。电子设备100分析所获取的内容的属性和/或确定与所获取的内容相关的信息。
在操作270中，电子设备100根据预定标准(或条件)将内容分类到多个预定类别之一。电子设备100将内容分类到多个预定类别之一并将内容存储在该类别下。该多个类别可以在电子设备100的制造期间预设或者可以由用户设置。用户可以通过删除、插入等来更改类别。
以下参照图25至图30B更详细地描述用于分析内容以及对内容进行分类的操作260和操作270。
图4是示出了根据本发明实施例的编辑并布置内容(例如，图像)的方法的流程图。在图4中，将所获取内容(例如，手写图像、笔记等)中包括的图像元素(例如，笔画、字符等)构造为至少一个块，逐块对图像元素进行编辑，然后对图像元素相应地进行重新布置。可以通过调整以下至少一项来布置图像元素：至少一个块中图像元素的尺寸、至少一个块之间的间隔、至少一个块中的每个块中图像元素之间的间隔、或者至少一个块中的每个块中图像元素的旋转度。
参照图4，电子设备100在操作410中根据用户操纵来获取内容(例如，手写图像或笔记)，并在操作420中根据内容来生成矢量图像。
在操作430中，电子设备100分析矢量图像。电子设备100将矢量图像构造为至少一个块，并分析矢量图像的该至少一个块。电子设备100可以将相邻矢量图像组成一个块(例如，如果一组相邻矢量图像形成一个字符、单词、或句子，则将该字符、单词、或句子构造为一个块)，或者可以基于矢量图像的大小或矢量图像之间的间隔中的至少一项将每个矢量图像构造为一个块。
根据本发明的实施例，在操作430中，每个块可以包括一个起始符号的一个矢量图像，如图5A所示。参照图5A，每个块可以包括多个矢量图像，例如，具有一个单词的块或具有多个单词的块。
根据本发明的实施例，确定由电子设备100生成的矢量图像之间的间隔，然后将间隔在预定范围内的矢量图像组成一个块。
根据本发明的实施例，电子设备100确定所生成的矢量图像之间的间隔和/或矢量图像的大小(例如，矢量图像的高度、宽度、高宽比等)，并将间隔和/或大小在预定范围内的矢量图像构造为一个块。电子设备100将大小与间隔比在预定范围内的矢量图像组成一个块。
根据本发明的实施例，如果符号被预先存储在表格中，则电子设备100通过将矢量图像元素或矢量图像与符号的形状进行比较来将每个矢量图像元素或多个矢量图像构造为一个块。
可以逐字符地或逐更小单元地将矢量图像构造为块。对于朝鲜语字母表，可以逐常量或逐元音地、或逐字符、逐单词、或逐句子地将矢量图像构造为块，如图5B所示。对于英语字母表，可以逐字母、逐单词、或逐句子地将矢量图像构造为块。
参照图5C，根据本发明的实施例，电子设备100分析构造为块的矢量图像。电子设备100基于包括以下项在内的各种标准来分析各块中矢量图像之间的关系：各块中矢量图像的宽度、高度、宽高比、水平中心线、垂直中心线、水平轮廓、垂直轮廓、间隔、旋转度、或中心点。电子设备100可以通过分析以下至少一项的差、平均、分布、最低值、最高值、或相似度来分析各块中矢量图像之间的关系：各块中矢量图像的宽度、高度、宽高比、水平中心线、垂直中心线、水平轮廓、垂直轮廓、间隔、旋转度、或中心点。
在图4中，在操作440中，电子设备100通过对矢量图像进行编辑来布置矢量图像。电子设备100通过调整以下至少一项来布置矢量图像：各块中矢量图像的大小(例如，宽度或高度)、各块之间的间隔、或者每个块中矢量图像的旋转度。
参照图6进一步描述用于通过调整构造为块的矢量图像的大小来编辑和布置矢量图像的操作440。
参照图6，电子设备100(例如，控制器110)在操作610中将矢量图像进行分类。根据本发明的实施例，电子设备100将构造为块的矢量图像的类型进行分类。电子设备100基于块的位置、关于块周边的信息(例如，相邻矢量图像的类型)、或块中包括的矢量图像的形状中的至少一项将块的类型进行分类。
起始符号通常布置在段落的开始，而如感叹号之类的符号通常布置在段落的结束。因此，电子设备100可以使用关于块位置的信息将块的类型进行分类。另外，在起始符号的左侧不存在其他块(也就是说，没有其他矢量图像)，而另一起始符号的矢量图像可以位于该起始符号之上或之下，并且与字符或内容相对应的矢量图像可以位于起始符号的右侧。因此，电子设备100可以基于关于块周边的信息将块的类型进行分类。如果块包括起始符号，则电子设备100通过将起始符号与表格中预存储的频繁使用的符号进行比较来将块的类型进行分类。如果块包括手写字符，则电子设备100通过将手写字符与表格中预存储的手写字符的一般形状进行比较来确定块的类型。
电子设备100基于上述分类方法将块的类型分成各种类别，例如，字符、图形、图画、符号等。
在操作620中，电子设备100根据前述分类来调整矢量图像的大小。矢量图像是在操作610中被构造为块的矢量图像。
在本发明的实施例中，以下参照图7来描述用于调整被构造为块的矢量图像的大小的操作620。
在图7中，电子设备100根据针对块的各个类型所计算的块的高度和宽度的平均值来调整块中包括的矢量图像的大小。
参照图7，电子设备100在操作710中确定每个块的高度h和宽度w。
在操作730中，电子设备100按照类型来计算块的高度平均值和宽度平均值。如果块被分类成字符和符号，则电子设备100分别计算字符块的高度和宽度的平均值以及符号块的高度和宽度的平均值。
电子设备100在操作750中将块中包括的矢量图像的大小调整为计算出的与块的类型相对应的平均值。电子设备100将字符块中包括的矢量图像的高度和宽度调整为针对字符类型所计算的平均高度和平均宽度。此外，电子设备100将符号块中包括的矢量图像的高度和宽度调整为针对符号类型所计算的平均高度和平均宽度。
反之，电子设备100可以确定块的高度或宽度，并将块中包括的矢量图像的大小调整为按照块类型所计算的块的高度或宽度的平均值。
参照图8，在本发明的实施例中，详细描述了用于调整被构造为块的矢量图像的大小的操作620。在图8中，在用于调整被构造为块的矢量图像的大小的操作中，将每种类型的块中的矢量图像的大小调整为该类型的块的高宽比的平均值。
参照图8，电子设备100在操作810中确定每个块的高宽比。
在操作830中，电子设备100按照类型来计算块的高宽比的平均值。
电子设备100在操作850中，根据块的类型，将块中包括的矢量图像的大小调整为按照类型所计算的平均高宽比。电子设备100将每种类型的块中包括的矢量图像的大小调整为针对该类型所计算的平均高宽比(平均h/w)。
在本发明的实施例中，电子设备100使用预定引导线(例如，手稿线)。电子设备100根据预定引导线的大小(例如，引导线的高度或宽度中的至少一项)来调整块中包括的矢量图像的大小。可以针对每种块类型来预设高度，并且电子设备100可以根据针对块类型预设的高度来调整块中包括的矢量图像的高度。
为了通过对矢量图像进行编辑来布置矢量图像，参照图9详细地描述通过调整矢量图像之间的间隔来布置矢量图像的方法。
参照图9，电子设备100在操作910中确定块与其相邻块之间的间隔。对于给定块，电子设备100确定该块与上相邻块、下相邻块、左相邻块、和右相邻块之间的间隔。
在操作920中，电子设备100使用在操作910中确定的间隔来调整块之间的间隔。在矢量图像的各块之中，电子设备100确定块与其左相邻块和右相邻块之间的间隔，如图10所示。
为了通过对矢量图像进行编辑来布置矢量图像，参照图11详细地描述通过逐块调整矢量图像之间的间隔来布置矢量图像的方法。
参照图11，电子设备100在操作1110中确定每个块中包括的矢量图像与其相邻矢量图像之间的间隔。对于块中包括的给定矢量图像，电子设备100确定该矢量图像与其在同一块中的上相邻图像、下相邻图像、左相邻图像、和右相邻图像之间的间隔。
在操作1120中，电子设备100使用确定的间隔来调整每个块中矢量图像之间的间隔。如果文本块中包括的相邻文本图像平均彼此分开4mm，则电子设备100统一地将该文本块中的文本图像之间的间隔调整为4mm。
为了通过对矢量图像进行编辑来布置矢量图像，参照图12详细地描述通过逐块调整矢量图像的旋转度来布置矢量图像的方法。
参照图12，电子设备100在操作1210中确定块的旋转度和/或每个块中矢量图像的旋转度。相对于预定的X轴和Y轴，电子设备100确定块的旋转度和/或每个块中矢量图像的旋转度。在另一示例中，电子设备100基于以下项来确定块的旋转度和/或每个块中矢量图像的旋转度：连接块中字符的顶部矢量图像的顶部的虚拟线的倾斜度(inclination)、以及连接块中字符的底部矢量图像的底部的虚拟线的倾斜度。
在操作1220中，电子设备100根据所确定的旋转度，在倾斜度、大小、和位移中的至少一个方面调整每个块中的矢量图像。参照图13，从文本块135中可以注意到：根据连接字符的顶部矢量图像的线136和连接字符的底部矢量图像的线137的倾斜度判断出，字符整体倾斜(旋转)。因此，电子设备100调整字符的倾斜度。电子设备100将和的大小调整为相同值或相似值，或者电子设备100通过调整或的位置(具体地将向上移动)来调整整个文本块135的旋转度。
用于通过对矢量图像进行编辑来布置矢量图像的操作440的各种实施例可以进行组合。例如，可以用组合方式来执行用于通过调整矢量图像的大小来布置构造为块的矢量图像的操作和用于通过逐块调整矢量图像的旋转度来布置矢量图像的操作。
参照图13，关于文本块131基于连接字符的顶部矢量图像的线132和连接字符的底部矢量图像的线133的倾斜度，可以确定字符朝文本块131的末端逐渐变细。在这种情况下，电子设备100将文本块131中的字符的大小调整为均匀大小。电子设备100可以增大与“는”相对应的矢量图像的大小，或减小与相对应的矢量图像的大小。
根据用于通过对矢量图像进行编辑来布置矢量图像的操作440的各种实施例的组合，例如，如果将字符的每个笔画表示为矢量图像，则矢量图像之间的间隔可以是笔画之间的间隔。在这种情况下，电子设备100可以通过基于关于笔画之间的间隔的信息调整笔画之间的间隔来布置构造为块的矢量图像。参照图14A和图14B，电子设备100调整字符中的笔画141、142、和143之间的间隔、或者字符中的笔画141、142、和143的高度、大小、或旋转度。此外，电子设备100可以调整字符中的笔画144、145、和146之间的间隔、或者字符中的笔画144、145、和146的高度、大小、或旋转度。
图15是示出了根据本发明实施例的编辑并布置内容(例如，图像)的内含物的方法的流程图。在图15中，在用于编辑并布置内容的内含物的操作中，可以对内容中包括的图像元素(例如，笔画、字符等)进行编辑，然后，将图像元素重新布置。可以通过调整所获取手写图像中包括的图像元素的大小、间隔、或旋转度中的至少一项来布置内容。
参照图15，电子设备100在操作1510中获取内容，并在操作1520中根据内容来生成矢量图像。
在操作1530中，电子设备100通过对矢量图像进行编辑来布置所生成的矢量图像。电子设备100可以通过调整所生成的矢量图像的大小、间隔、或旋转度中的至少一项来编辑并布置矢量图像。
在操作1530中进行大小调整的情况下，电子设备100可以根据矢量图像的类型以不同方式调整矢量图像的大小。电子设备100可以用不同方式调整字符矢量图像和图形矢量图像的大小。此外，电子设备100基于字符矢量图像的大小和比例将字符矢量图像调整为相似的大小和比例，并基于字符矢量图像的大小和比例将图形矢量图像调整为相似的大小和比例。此外，考虑图形矢量图像中包括的或修改了图形矢量图像的字符矢量图像的大小，电子设备100可以基于字符矢量图像的调整比例来调整图形矢量图像的大小和比例。如果图形矢量图像在预定范围内不同于字符矢量图像(例如，如果图形矢量图像是字符矢量图像的1.2倍或更小倍)，则电子设备100将图形矢量图像的大小调整为字符矢量图像的相似大小。如果图形矢量图像在预定范围之外不同于字符矢量图像(例如，如果图形矢量图像是字符矢量图像的1.2倍或更大倍)，则电子设备100将图形矢量图像的大小调整为与字符矢量图像的大小的整数倍成正比(例如，与字符矢量图像大小的两倍、三倍、或四倍相似的大小)。如果图形矢量图像是字符矢量图像的大约1.5倍，则电子设备100将图形矢量图像的大小调整为字符矢量图像大小的大约两倍。如果图形矢量图像是字符矢量图像的大约1.2倍，则电子设备100将图形矢量图像的大小调整为大约字符矢量图像的大小。
在用于通过对矢量图像进行编辑来布置所生成的矢量图像的操作1530中的用于调整矢量图像的大小的操作中，电子设备100确定矢量图像的类型，并根据类型来调整矢量图像的大小。
以与如上所述确定块类型的相同方式，可以使用矢量图像的位置、周边(关于与该矢量图像相邻的矢量图像的信息)、或形状中的至少一项来确定矢量图像的类型。可以针对矢量图像定义各种类型，其中包括字符、图形、图画、符号等。
可以根据矢量图像的类型来调整矢量图像的大小。在本发明中，电子设备100可以按照类型来计算矢量图像的高度的平均值或矢量图像的宽度的平均值中的至少一项，并将矢量图像的大小调整为针对它们的类型所计算的平均值。例如，如果存在高度分别为10mm、8mm、和6mm的文本矢量元素，则电子设备100可以将所有文本矢量图像调整为8mm的高度。
电子设备100可以按照类型来计算矢量图像的高宽比(例如，高除以宽的比)的平均值，并将矢量图像的大小调整为针对它们的类型所计算的平均高宽比。
电子设备100可以根据预定引导线大小，按照类型来调整矢量图像的大小。例如，如果针对每种类型的矢量图像预设了高度，则电子设备100可以根据矢量图像的类型将矢量图像的高度调整为预设的高度。例如，如果在背景图像中存在引导线并且针对文本矢量图像的引导线大小是12mm，则电子设备100可以将文本矢量图像的大小调整为大约9mm。
在用于通过对矢量图像进行编辑来布置矢量图像的操作1530中，电子设备100可以将不同类型的矢量图像调整到不同间隔。电子设备100可以调整相同类型的矢量图像，使得它们可以按相同间隔来布置。此外，电子设备100可以调整不同类型的矢量图像，使得它们可以按不同间隔来布置。例如，如果字符的每个笔画形成了矢量图像，则电子设备100可以分析笔画之间的间隔，并基于分析出的间隔来调整笔画之间的间隔。
在用于通过对矢量图像进行编辑来布置矢量图像的操作1530中，电子设备100可以使用矢量图像与它们相邻矢量图像之间的间隔、按类型的矢量图像与它们相邻矢量图像之间的间隔、或者按类型的矢量图像之间的预定间隔，来调整矢量图像之间的间隔。
在用于通过对矢量图像进行编辑来布置矢量图像的操作1530中，以与如上所述逐块调整矢量图像的旋转度相似的方式，电子设备100可以根据矢量图像的旋转度来调整矢量图像的倾斜度、大小、和位移中的至少一项。
如上所述用于根据所获取的内容(例如，手写图像)来生成矢量图像并通过对矢量图像进行编辑来重新布置矢量图像的操作可以导致例如图16B所示的图像。图16A示出了在编辑并布置矢量图像之前的图像，且图16B示出了通过编辑并布置矢量图像所获得的图像。根据图16A和图16B，注意到：在编辑矢量图像之后，矢量图像(例如，字符)被均匀排列。
参照图16A和图16B，布置了起始符号161和161’，并且根据起始符号161和161’的类型，还布置了之后的段落。例如，起始符号161与短语162之间的间隔等于起始符号161’与单词163“AF”之间的间隔。此外，调整了短语162的高度和字符大小。还调整了单词163“AF”的大小。具体地，可以基于图形矢量图像中包括的字符矢量图像的大小来调整单词163“AF”的大小。或者由于图形矢量图像的大小是字符矢量图像大小的预定倍数(大约1.2倍)或更小倍，可以将单词163“AF”调整为大约字符矢量图像的大小。注意到：对每个段落的位置进行校正以匹配预定引导线164，例如，(电子设备100或所捕捉图像的)手稿线。此外，调整了单词之间的间隔。
图17是示出了根据本发明实施例的编辑并布置内容(例如，手写图像)的内含物的方法的流程图。在图17中，当所获取的内容显示在屏幕上时，在用于编辑并布置内容的内含物的操作中，可以通过自动换行(word wrap)功能将内容自动布置在屏幕的预定区域内。例如，当所获取的内容(例如，手写图像中包括的字符)布置在屏幕的预定区域中时，如果确定内容的一部分预期在预定区域之外，则可以插入与该内容的该部分相对应的新区域，使得内容的该部分可被布置在所插入的区域中。
参照图17，电子设备100在操作1710中获取内容(例如，手写图像)，并可以在操作1720中根据内容来生成矢量图像。在操作1730中，电子设备100将矢量图像构造为块。当对块中的矢量图像进行编辑和布置时，在操作1740中，电子设备100确定将要布置的至少一个矢量图像元素是否将在预定区域之外。预定区域可以是例如电子设备100或特定应用的数字笔记中的预定手稿线。如果在操作1740中确定将要布置的至少一个矢量图像元素将在预定区域之外，则电子设备100进行到操作1750。否则，电子设备100进行到操作1760。
在操作1750中，电子设备100通过对矢量图像进行编辑来布置构造为块的矢量图像，同时通过自动换行来布置包括预期在预定区域之外的矢量图像在内的块中的所有矢量图像。例如，电子设备100可以将包括预期在预定区域之外的矢量图像在内的块的所有矢量图像布置在新区域中。新区域可以是与预期在预定区域之外的矢量图像相对应地插入的区域。例如，电子设备100可以在包括预期在预定区域之外的矢量图像在内的块之下插入新区域(新的行或列)，然后将块的所有矢量图像移至新区域。
在操作1760中，电子设备100通过对矢量图像进行编辑来布置块中的矢量图像。
根据本发明的上述实施例，图18B示出了自动换行的结果。参照图18A，当初始捕捉到内容时，如果短语形成了文本块181，则文本块181的矢量图像的一部分将在预定手稿线范围182之外。通过自动换行，文本块181可被移至包括位于手稿线范围182之外的字符图像元素在内的行183与下一行184之间，如图18B所示。因此，当获取到手写图像时，电子设备100将所获取的手写图像布置在预定画布(背景或手稿线)内。
图19是示出了根据本发明实施例的编辑并布置内容(例如，图像)的内含物的方法的流程图。在图19中，如果在不同时间获取的内容部分匹配(例如，句子等)，则电子设备100仅利用初始获取的内容与接下来获取的内容之间的差异来更新初始获取的内容，并布置更新后的内容。如果捕捉到手写笔记的图像，将条目添加到手写笔记，并且随后捕捉到所产生的手写笔记的图像，则电子设备100仅利用添加的手写条目来更新初始获取的图像，并且随后布置和存储更新后的初始图像。
参照图19，电子设备100在操作1910中根据用户操纵来获取内容(例如，手写图像)。
在操作1920中，电子设备100确定是否存在与所获取的内容至少部分匹配的任何内容。电子设备100搜索与所获取的内容至少部分匹配的内容，例如，通过电子设备100或网络(例如，云设备)先前获取的内容(即，初始获取的内容)之中与所获取的内容相似或相同的内容。
在操作1930中，电子设备100确定是否检测到与所获取的内容至少部分匹配的先前获取的内容。如果检测到与所获取的内容至少部分匹配的内容，则电子设备100进行到操作1940。否则，电子设备100进行到操作1950。
在操作1940中，电子设备100用所获取的内容来替换检测到的内容。电子设备100基于(通过删除、插入、或替换)所获取的内容和先前获取的检测到的内容的差异来更改所检测到的内容。
以下详细描述图19的方法。
电子设备100将所获取的内容和检测到的内容转换为矢量图像，并通过将与所获取的内容相对应的矢量图像和检测到的内容进行比较来识别所获取的内容中添加、更改、或删除的矢量图像。在所获取的内容中存在新添加的矢量图像的情况下，电子设备100将新添加的矢量图像添加到检测到的内容。在所获取的内容中存在更改的矢量图像的情况下，电子设备100在检测到的内容中反映所更改的矢量图像。在所获取的内容中存在删除的矢量图像的情况下，电子设备100在检测到的内容中删除或暂时隐藏该矢量图像。
由于矢量图像被构造在块中，可以逐块执行以上方法。在作为将所获取的内容与检测到的内容进行比较的结果而在所获取的内容中检测到更改的矢量图像时，电子设备100通过在包括所更改的矢量图像在内的块中添加、删除、或隐藏所有矢量图像，在检测到的内容中反映该更改。
如果获取到如图20B所示的内容，则电子设备100将所获取的内容与如图20A所示的初始获取的内容进行比较。然后，电子设备100用添加的内容(例如，添加的手写201a、201b、201c)更新初始获取的内容，并存储更新后的内容，例如，如图21A至图22B所示。
参照图20A和图20B，在第一时间获取到图20A所示的第一内容(即，初始获取的内容)，并在第二时间(例如，第二天)获取到图20B所示的第二内容。第一内容和第二内容部分匹配，例如，与第一内容相比，第二内容还包括附加信息(例如，手写201a、201b、201c)。
根据本发明的实施例，在获取到第二内容时，电子设备100在电子设备100或网络(例如，云设备)中搜索与第二内容相似或相同的内容，并因此可以检测到与第二内容至少部分匹配的第一内容。
参照图21A和图21B，如果在将第一内容转换为矢量图像之后不存在进一步操作，则电子设备100用图21B所示的第二内容来替换图21A所示的第一内容。电子设备100可以生成第一内容与第二内容之间的差异211a、211b、211c，并通过添加、删除、或替换在第一内容中仅反映与差异211a、211b、211c相对应的矢量图像。附加地，电子设备100可以删除或暂时隐藏具有第一内容与第二内容之间的删除短语或删除标记的块。
参照图22A和图22B，如果在将第一内容转换为虚拟图像之后不存在进一步操作，例如，如果用户编辑与第一内容相对应的矢量图像，则电子设备100生成第一内容与第二内容之间的差异221a、221b、221c，并通过添加、删除、或替换在第一内容中仅反映与差异221a、221b、221c相对应的矢量图像。
关于添加的新项目，电子设备100提供用于接收用户确认的UI。参照图23，电子设备100通过显示阴影231和/或X标记232向用户指示已添加了以及“numbering”发生了改变，并提示用户确认该添加和改变。如果用户选择图23中的X标记232，则与所选X标记232相对应的区域(即，阴影区域231)返回到它们的原始状态。可以利用新项目对与所选X标记232相对应的区域(即，阴影区域231)进行编辑或添加。
电子设备100可以在将删除功能应用于删除的短语或标记有删除标记的区域之前提示用户对删除进行确认。即使由于应用了暂时隐藏功能而暂时未显示特定区域的内容，电子设备100也可以在识别出特定手势或输入(例如，悬停)时再次显示该区域。
将参照图24来描述根据本发明实施例的用于编辑并布置内容(例如，图像)的内含物的操作。在图24中，电子设备100还响应于用户操纵在电子笔记241上指示所添加的新内容的输入位置242。另外，电子设备100将所添加的新内容与输入位置242相关地存储。
参照图24，电子设备100响应于用户操纵，在应用中(例如，在备忘录应用中)指定屏幕上所显示的电子笔记241上的区域242。电子设备100通过执行预设功能在区域242中显示并存储通过相机模块所获取的内容。如果内容是手写图像，则在显示和/或存储手写图像之前，电子设备100自动地布置手写图像的内容，使得用户可以根据上述本发明的实施例容易地查看手写。
图25是示出了根据本发明实施例的将内容(例如，图像)进行分类的方法的流程图。在图25中，电子设备100根据关于内容的属性信息或与内容相关的信息中的至少一项(例如，关于笔记图像的属性信息或相关信息)，将所获取的内容分类到类别中，并将内容存储在所分的类别下。内容可以是例如通过相机模块获取的内容、根据所获取的内容来生成的矢量图像、或矢量图像被构造成的块。内容可以通过各种方式来获取并可以采用各种形式。
参照图25，在操作2510中，电子设备100获取内容(例如，笔记图像)。
在操作2520中，电子设备100分析内容的属性和/或检查与内容相关的信息。在操作2530中，电子设备100根据属性信息和/或相关信息将内容进行分类。
内容的属性可被划分为例如形式属性和实质属性。形式属性可以包括例如内容中所包括的图案、颜色、图像、或预定形状、或内容的特定比例。实质属性与关于内容的实质信息相关。实质属性可以是与内容中所包括的字符相关的属性。
以下更详细地描述用于分析所获取的内容的属性并检查与所获取的内容相关的信息的操作2520和操作2530。
在操作2040中，电子设备100使用分类后的内容来创建预定格式的数字笔记文件。电子设备100例如通过如上所述对内容进行编辑和布置，来生成具有根据所获取的内容来创建的矢量图像的矢量文件(或矢量图像文件)。电子设备100可以通过根据所获取的内容来生成矢量图像并且通过如上所述对内容进行编辑和布置来编辑和布置所生成的矢量图像，来生成数字笔记文件。
在操作2050中，电子设备100可以将数字笔记文件存储在所分的类别下。
以下描述根据本发明实施例的通过分析内容的属性将内容进行分类。
电子设备100可以识别内容(例如，笔记图像)中所包括的图案、内容的形状、内容的格式、或内容中所包括的字符中的至少一项，并基于所识别的信息来执行属性分析。
在基于内容中所包括的图案的属性分析中，电子设备100识别内容中所印刷的图案，并且参考关于所识别图案的预存储的图案信息。如果电子设备100获取了图26A至图26D所示的笔记图像，则电子设备100可以识别笔记图像中所包括的图案(即，字符、行间距、或背景的颜色或图案(水印))，并且检查关于所识别图案的预存储信息。通过识别图案(即，电子设备100中诸如快速响应(QR)码之类的标识符)来执行基于内容中所包括的图案的属性分析。
在基于内容形状的属性分析中，电子设备100识别所获取的内容的颜色、拐角形状(corner shape)、或宽高比中的至少一项，并且参考关于所识别信息的预存储的形状信息(或预存储的参考信息)。如果电子设备100获取了图27A和图27B所示的各种笔记图像之一，则电子设备100可以识别如图28A所示的区域的封面颜色281，并且检查关于所识别封面颜色281的预存储信息。电子设备100可以识别整个封面的颜色，并且检查关于所识别颜色的预存储信息。分别如图28B、图28C、和图28D所示，电子设备100可以识别笔记图像中的拐角形状282、宽高比283、和/或螺旋装订的孔间距284，然后可以检查关于所识别信息的预存储信息。电子设备100可以确定笔记图像中页大小与字符大小之比，然后检查关于所确定比率的预存储信息。电子设备100可以识别如图29所示的索引标签291，然后检查关于所识别索引标签291的预存储信息。当笔记打开时，索引标签291可以位于笔记的左侧/右侧。电子设备100可以根据索引标签291的位置来确定所捕捉的笔记的类型。例如，如果具有索引标签1、2、和3的笔记被打开到任意页且被捕捉并且电子设备100在所打开页的左侧检测到索引标签1且在所打开页的右侧检测到索引标签2和3，则电子设备100可以将所打开的页分类为与索引标签1相关的笔记。
在基于内容(例如，笔记图像)的格式(例如，会议记录、日记、收据等)的属性分析中，电子设备100(例如，通过OCR等)识别预定位置处的文本，并分析文本的内容。如果所识别的文本是名字，则内容的格式可以是试卷(test paper)、调查问卷、字据(pledge)、合同等。如果所识别的文本是日期，则内容的格式可以是会议记录、日记、研究笔记、日程表等。如果所识别的文本是数字，则内容的格式可以是收据、家庭账簿等。
电子设备100可以通过将内容中所包括的字符识别为内容的属性，将内容进行分类。电子设备100识别所获取的内容中的字符，将字符的笔画粗度或印迹度(blottingdegree)与预存储的信息进行比较，基于该比较来识别书写字符所用的笔的类型，并从而根据笔类型将内容进行分类。电子设备100可以通过识别内容中的字符的手写风格，将内容进行分类。如果电子设备100获取了由多个用户书写的笔记页的图像，则电子设备100通过按作者识别图像，将图像进行分类。电子设备100可以通过识别内容中的字符的颜色，将内容进行分类。电子设备100可以通过识别内容中的文本的内容，将内容进行分类。电子设备100可以识别内容中的单词、句子、语言等，并将内容分类到类别。如果电子设备100识别出内容中的方程或公式，则电子设备100可以将内容分类到数学相关类别。如果电子设备100识别出与成分相关的单词，例如“糖”、“盐”等，则电子设备100可以将内容分类到菜谱相关类别。电子设备100可以基于与会者列表中所列出的与会者的名字、会议的时间和地点、或会议记录的标题，将内容分类到会议记录相关类别。考虑到概率术语经常在随机过程类中使用并且外国国名和人名经常在外国研究类中使用，如果相似特征的词语重复，则电子设备100可以识别词语，并基于所识别的词语将相应内容分类到特定类别。
电子设备100可以通过应用内容编辑和布置来分类内容，以基于作为内容属性的根据内容识别出的字符将内容进行分类。在笔记图像具有通过图30A和图30B所示的不同笔类型用不同字体书写的字符的情况下，电子设备100识别笔记图像中的字符，确定所识别的字符的笔画粗度、印迹度、或字体(或手写风格)中的至少一项，通过将确定的信息与预存储的信息进行比较将笔记图像进行分类，并将笔记图像包括在预定电子笔记的相应页中。
以下描述了基于内容相关信息的内容分类。
电子设备100可以使用电子设备100中存储的日程信息、关于电子设备100的位置的信息、或当前时间信息中的至少一项，检查与所获取的内容相关的信息。根据本发明的实施例，当电子设备100获取到内容时，电子设备100确定获取内容的时间和地点，并通过将时间和地点与预定日程信息进行比较来将内容进行分类。如果电子设备100通过在学校捕捉手写笔记获取了内容，则电子设备100通过检查捕捉内容的教室和时间，将捕捉的内容分类到与课程科目相关的类别。
电子设备100通过根据本发明的实施例对内容进行编辑和布置，使用捕捉的内容来更新关于课程科目的预存储内容。
在通过分析内容属性或检查与内容相关的信息将内容分类的情况下，如果不存在用于分类的参考数据或者由于缺乏信息而导致分类不可用，则电子设备100使用关于内容的标签信息将内容进行分类。标签信息可以由用户输入。当获取内容时，也可以自动获取标签信息并将标签信息存储在电子设备100中，例如关于图像获取地点(基于GPS)的信息、关于图像获取时间的信息等。
如果电子设备100通过由连续捕捉功能(例如，视频捕捉功能)在翻页的同时捕捉笔记或书的页来获取内容，则电子设备100通过将当前扫描信息与先前扫描信息进行比较来识别翻页，并且通过如上所述对内容进行编辑和布置来布置并存储扫描的页。例如，电子设备100可以通过如上所述对内容进行编辑和布置并将内容进行分类，顺序地生成具有通过连续捕捉所获取的内容的数字笔记的页。
电子设备100可以根据本发明的前述实施例来处理内容。尽管以上描述了本发明的具体实施例，但是可以实现其他实施例或者可以作出修改或变型。可以整体地或部分地并行执行本文中描述的本发明的实施例，可以省略实施例的操作，或者可以将操作添加到实施例。
例如，如果块在预定范围内整体地旋转，则当通过逐块调整矢量图像的旋转度来布置内容时，电子设备100可以将整个块旋转到预定角度。块可以采用矩形或任何其他多边形的形式。电子设备100可以通过确定多边形的旋转度来确定矢量图像的旋转度。
一旦电子设备100获取了内容，则电子设备100可以通过组合本发明的实施例将内容布置在预定画布(或背景)中。例如，电子设备100可以增大或减小内容的尺寸，使得整个内容可以落在画布范围内。如果由于内容的尺寸减小而导致内容的特定块(或图像元素)收缩到预定大小或在预定大小以下并因此不易辨认，则电子设备100可以将该特定块(或图像元素)的大小保持在该预定大小或该预定大小以上，并使在画布之外的块(或图像元素)经历自动换行。
虽然以上描述了初始获取的内容和接下来获取的内容具有共同内容，通过在初始获取的内容中仅反映初始获取的内容与下一获取的内容之间的差异来更新初始获取的内容，布置初始获取的内容，然后存储初始获取的内容，但是还可以预期可以组合在不同时间获取的不同内容的另一实施例。例如，电子设备100可以将接下来获取的内容添加到初始获取的内容，并更新、布置、和存储所产生的内容。
图31是根据本发明实施例的包括电子设备3101在内的网络环境3100的框图。
参照图31，电子设备3101包括总线3110、处理器3120、存储器3130、输入/输出(I/O)接口3140、显示器3150、通信接口3160、和内容处理模块3170。
总线3110是连接上述组件并控制上述组件之间的通信(例如，传输控制消息)的电路。
处理器3120从其它组件(例如，存储器3130、I/O接口3140、显示器3150、通信接口3160、或内容处理模块3170)接收指令，解释接收到的指令，并根据解释的指令执行计算或数据处理。
存储器3130存储从处理器3120或其他组件(例如，I/O接口3140、显示器3150、通信接口3160、或内容处理模块3170)接收的或者由它们产生的指令或数据。存储器3130包括诸如内核3131、中间件3132、应用编程接口(API)3133、或应用3134之类的编程模块。每个前述编程模块可以包括软件、固件、硬件、或其任何组合。
内核3131控制或管理系统资源(例如总线3110、处理器3120或存储器3130)，所述系统资源用于执行在其他编程模块(例如中间件3132、API 3133或应用3134)中实现的操作或功能。此外，内核3131提供允许中间件3132、API 3133或应用3134访问电子设备3101的各个组件的接口。
中间件3132是内核3131与API 3133或应用3134通信以发送和接收数据所通过的介质。此外，中间件3132通过例如向一个或多个应用3134分配使用电子设备3101的系统资源(总线3110、处理器3120或存储器3130)的优先级，来执行与一个或多个应用3134的工作请求相关的调度或负载均衡。
API 3133是用于控制应用3134在内核3131或中间件3132提供的功能的接口。API3133可以包括用于文件控制、窗口控制、视频处理或文本控制的至少一个接口或功能(例如，命令)。
根据本发明的实施例，应用3134可以包括例如短消息服务(SMS)/多媒体消息服务(MMS)应用、电子邮件应用、日历应用、报警应用、健康护理应用(例如锻炼量或血糖水平测量应用)或环境信息应用(例如提供气压、湿度或温度信息的应用)。附加地或者备选地，应用3134可以是与在电子设备3101和外部电子设备(例如，电子设备3104)之间的信息交换相关的应用。例如，与信息交换相关的应用可以包括用于将特定信息提供给外部电子设备的通知中继应用或者用于管理外部电子设备的设备管理应用。
例如，通知中继应用可以包括向外部电子设备(例如，电子设备3104)提供由电子设备3101的其他应用(例如，SMS/MMS应用、电子邮件应用、健康护理应用或环境信息应用)产生的通知的功能。附加地或备选地，通知中继应用可以例如从外部电子设备(例如电子设备3104)接收通知并将通知信息提供给用户。设备管理应用可以启用或禁用和外部电子设备的与电子设备3101通信的至少一部分(例如，外部电子设备本身或者外部电子设备的一个或多个组件)相关联的功能，控制外部电子设备的显示器的亮度(或分辨率)，或者管理(例如，安装、删除或更新)在外部电子设备操作的应用或由外部电子设备提供的服务(例如，语音呼叫服务或消息服务)。
根据本发明的实施例，应用3134可以包括例如根据外部电子设备(例如电子设备3104)的属性(例如，类型)确定的一个或多个应用。例如，如果外部电子设备是MP3播放器，则应用3134可以包括与音乐回放相关的应用。如果外部电子设备是移动医疗设备，则应用3134可以包括健康护理相关应用。根据本发明的实施例，应用3134可以包括预加载在电子设备3101中的应用或从外部电子设备(例如，电子设备3104或服务器3106)接收的应用中的至少一个。
I/O接口3140通过I/O设备(例如，传感器、键盘或触摸屏)从用户接收指令或数据，并通过总线3110将指令或数据发送到处理器3120、存储器3130、通信接口3160或内容处理模块3170。例如，I/O接口3140可以向处理器3120提供与经由触摸屏的用户触摸输入相关的数据。此外，例如，I/O接口3140可以经由I/O设备(例如，扬声器或显示器)输出经由总线3110从处理器3120、存储器3130、通信接口3160或内容处理模块3170接收的指令或数据。
显示器3150向用户显示各种类型的信息(例如，多媒体或文本数据)。
通信接口3160提供电子设备3101和外部电子设备(例如，电子设备3104或服务器3106)之间的通信。通信接口3160通过使用无线或有线通信与网络3162建立连接来与外部电子设备通信。无线通信可以是以下至少一项：例如，无线保真(Wi-Fi)、蓝牙、近场通信(NFC)、全球定位系统(GPS)或蜂窝通信(例如，长期演进(LTE)、高级长期演进(LTE-A)、码分多址(CDMA)、宽带CDMA(WCDMA)、通用移动电信系统(UMTS)、无线宽带(WiBro)或全球移动通信系统(GSM))。有线通信可以是以下至少一项：例如，通用串行总线(USB)、高清多媒体接口(HDMI)、推荐标准232(RS-232)或普通老式电话服务(POTS)。
根据本发明的实施例，内容处理模块3170可以是控制器110。内容处理模块3170获取至少一条内容，分析所获取的内容，并将内容分类到多个类别中的至少一个类别。内容处理模块3170根据内容来生成矢量图像，并在与电子设备3101功能连接的显示器上显示该矢量图像的至少一部分。
根据本发明的实施例，网络3162是电信网络。电信网络包括例如计算机网络、互联网、物联网和电话网络中的至少一项。根据本发明的实施例，由例如应用3134、API 3133、中间件3132、内核3131或通信接口3160中的至少一个支持用于在电子设备3101和外部电子设备之间通信的协议(例如，传输层协议、数据链路层协议或物理层协议)。
根据本发明的实施例，服务器3106通过执行电子设备3101的至少一个操作(或功能)来支持电子设备3101。例如，服务器3106可以包括内容处理服务器模块3108，该模块支持电子设备3101的内容处理模块3170。例如，内容处理服务器模块3108可以包括内容处理模块3170的至少一个组件，并因此可以代表内容处理模块3170执行内容处理模块3170的至少一个操作。
图32是根据本发明各种实施例的电子设备3201的框图。
参照图32，电子设备3201可以是例如图31所示的电子设备3101的一部分或整体。电子设备3201包括至少一个应用处理器(AP)3210、通信模块3220、订户识别模块(SIM)卡3224、存储器3230、传感器模块3240、输入模块3250、显示器3260、接口3270、音频模块3280、相机模块3291、电源管理模块3295、电池3296、指示器3297和电机3298。
AP 3210通过执行操作系统(OS)或应用程序来控制与AP 3210连接的一个或多个硬件或软件组件，或者执行包括多媒体数据在内的数据的处理或计算。AP 3210可被实现为例如系统级芯片(SoC)。AP 3210还可以包括图形处理单元(GPU)。
通信模块3220(例如，图31所示的通信接口3160)在电子设备3201与另一电子设备(例如，图31所示的电子设备3104或服务器3106)之间的通信中发送和接收数据。根据本发明的实施例，通信模块3220可以包括例如蜂窝模块3221、Wi-Fi模块3223、蓝牙(BT)模块3225、GPS模块3227、NFC模块3228和射频(RF)模块3229中的一个或多个。
蜂窝模块3221通过通信网络(例如，LTE、LTE-A、CDMA、WCDMA、UMTS、WiBro或GSM)提供语音呼叫、视频呼叫、SMS或互联网服务。蜂窝模块3221还使用订户识别模块(例如，SIM卡3224)在通信网络内识别并授权电子设备。根据本发明的实施例，蜂窝模块3221执行AP3210的功能的至少一部分。例如，蜂窝模块3221可以执行多媒体控制功能的至少一部分。
根据本发明的实施例，蜂窝模块3221可以包括通信处理器(CP)。蜂窝模块3221可以例如实现为SoC。虽然图32示出了诸如蜂窝模块3221、存储器3230和电源管理模块3295的组件作为与AP 3210分离的组件，但是根据本发明，AP 3210可以包括一个或多个前述组件(例如，蜂窝模块3221)或与一个或多个前述组件(例如，蜂窝模块3221)集成。
根据本发明的实施例，AP 3210或蜂窝模块3221(例如，CP)通过将指令或数据加载在易失性存储器中，来处理从与AP 3210或蜂窝模块3221连接的其他组件或非易失性组件中的至少一个接收到的指令或数据。此外，AP 3210或蜂窝模块3221将从其他组件中的至少一个接收到的或者由其他组件中的至少一个产生的数据存储在非易失性存储器中。
Wi-Fi模块3223、BT模块3225、GPS模块3227和NFC模块3228中的每一个都可以包括例如用于处理通过相应模块发送或接收的数据的处理器。虽然图32示出了蜂窝模块3221、Wi-Fi模块3223、BT模块3225、GPS模块3227和NFC模块3228作为单独的块，但是它们的任何组合(例如，两个或更多个)可以包括在集成电路(IC)或IC封装中。例如，分别与蜂窝模块3221、Wi-Fi模块3223、BT模块3225、GPS模块3227和NFC模块3228相对应的处理器中的至少一些(例如，与蜂窝模块3221相对应的CP和与Wi-Fi模块3223相对应的Wi-Fi处理器)可以被实现为一个SoC。
RF模块3229发送和接收RF信号。RF模块3229可以包括收发机、功率放大模块(PAM)、频率滤波器或低噪声放大器(LNA)。RF模块3229还可以包括用于在自由空间中发送和接收电磁(EM)波的一个或多个组件，例如导体或导线。虽然图32示出了蜂窝模块3221、Wi-Fi模块3223、BT模块3225、GPS模块3227和NFC模块3228共享一个RF模块3229，但是根据本发明的实施例，蜂窝模块3221、Wi-Fi模块3223、BT模块3225、GPS模块3227和NFC模块3228中的至少一个可以通过单独的RF模块来发送和接收RF信号。
SIM卡3224包括SIM，并被配置为插入形成在电子设备的预定位置的槽中。SIM卡3224包括唯一标识符(例如，集成电路卡标识符(ICCID))或订户信息(例如，国际移动订户身份(IMSI))。
存储器3230(例如，图31所示的存储器3130)可以包括内部存储器3232或外部存储器3234。内部存储器3232包括例如以下项中的至少一个：易失性存储器(例如，动态RAM(DRAM)、静态RAM(SRAM)或同步动态RAM(SDRAM))或非易失性存储器(例如，一次性可编程ROM(OTPROM)、可编程ROM(PROM)、可擦除可编程ROM(EPROM)、电可擦除可编程ROM(EEPROM)、掩膜型ROM、闪存型ROM、NAND闪存或NOR闪存)。
根据本发明的实施例，内部存储器3232可以是固态驱动器(SSD)。外部存储器3234可以是例如闪存驱动器(例如，致密闪存(CF)驱动、安全数字(SD)、微安全数字(Micro-SD)、迷你安全数字(Mini-SD)、极速数字(xD)或记忆棒)。外部存储器3234可以经由各种接口在功能上连接到电子设备3201。根据本发明的实施例，电子设备3201可以包括诸如硬盘驱动器(HDD)之类的记录设备(或记录介质)。
传感器模块3240测量物理量或检测与电子设备3201相关联的操作状态，并将测量的或检测的信息转换成诸如电信号的信号。传感器模块3240包括例如手势传感器3240A、陀螺仪传感器3240B、大气压力传感器3240C、磁传感器3240D、加速计3240E、握力传感器3240F、接近传感器3240G、颜色传感器3240H(例如，红绿蓝(RGB)传感器)、生物特征传感器3240I、温度/湿度传感器3240J、亮度传感器3240K、或紫外(UV)光传感器3240M中的至少一个。附加地或备选地，传感器模块3240还可以包括电子鼻传感器、肌电图(EMG)传感器、脑电图(EEG)传感器、红外(IR)传感器、虹膜传感器或指纹传感器。传感器模块3240还可以包括用于控制包括在其中的一个或多个传感器的控制电路。
输入模块3250包括触摸面板3252、(数字)笔传感器3254、按键3256或超声输入设备3258。触摸面板3252使用例如电容式、电阻式、红外式或超声方法来检测触摸输入。触摸面板3252还可以包括控制电路。除了物理触摸输入之外或者替代物理触摸输入，电容型触摸面板可以例如检测接近输入(例如，悬停输入)。触摸面板3252还可以包括触觉层。在这种情况下，触摸面板3252可以使用触觉层向用户提供触感反馈。
(数字)笔传感器3254可以例如使用与从用户接收触摸输入的方法相同或相似的方法或者使用单独的检测板来实现。按键3256可以是例如物理按钮、光学按键或键区。超声输入设备3258可以是被配置为通过使用麦克风(例如，麦克风3288)检测由能够产生超声信号的设备产生的超声信号来识别数据的设备。超声输入设备3258可以无线地检测数据。根据本发明的实施例，电子设备3201可以使用通信模块3220从连接到电子设备3201的外部设备(例如，计算机或服务器)接收用户输入。
显示器3260(例如，图31所示的显示器3150)包括面板3262、全息设备3264或投影仪3266。面板3262可以是例如液晶显示器(LCD)或有源矩阵有机发光二极管(AM-OLED)显示器。面板3262可以被配置为例如柔性的、透明的或可穿戴的。面板3262和触摸面板3252可以被实现为一个模块。全息设备3264可以利用光波的干涉在空的空间中提供三维图像。投影仪3266可以通过将光投影到屏幕上来提供图像。例如，屏幕可以位于电子设备3201的内部或外部。根据本发明的实施例，显示器3260还可以包括用于控制面板3262、全息设备3264或投影仪3266的控制电路。
接口3270包括例如用于HDMI 3272、USB 3274、光学接口3276或D-超小型(D-sub)3278的一个或多个接口。接口3270可被包括在例如图31中示出的通信接口3160中。附加地或备选地，接口3270可以包括例如用于安全数字(SD)/多媒体卡(MMC)或红外数据协会(IrDA)的一个或多个接口。
音频模块3280将语音编码/解码为电信号，且反之亦然。音频模块3280的至少一些组件可包括在例如图31所示的I/O接口3140中。音频模块3280可以例如对向以下各项输入或从以下各项输出的语音信息进行编码/解码：扬声器3282、听筒3284、耳机3286或麦克风3288。
相机模块3291捕捉静止图像或视频。根据本发明的实施例，相机模块3291可以包括一个或多个图像传感器(例如，前置传感器或后置传感器)、镜头、图像信号处理器(ISP)或闪光灯(例如，发光二极管(LED)或氙气灯)。
电源管理模块3295管理电子设备3201的电源。电源管理模块3295可以包括例如电源管理集成电路(PMIC)、充电器IC或电池或燃料表。
例如，可以将PMIC布置在IC或SoC半导体中。用于电子设备3201的充电方法可以包括有线充电或无线充电。充电器IC可以对电池充电，或者防止来自充电器的过电压或过电流进入电子设备3201。根据本发明的实施例，充电器IC可以包括有线充电器IC或无线充电器IC中的至少一个。无线充电器IC可以是例如磁谐振式、磁感应式或电磁波式，且可以包括用于无线充电的电路，例如，线圈回路、谐振电路或整流器。
电池表可以测量例如充电时的电荷电平、电压或电池3296的温度。电池3296可以向例如电子设备3201供电。电池3296可以是例如可再充电电池或太阳能电池。
指示器3297指示电子设备3201或其一部分(例如，AP 3210)的一个或多个状态(例如，引导状态、消息状态或充电状态)。电机3298将电信号转换为机械振动。电子设备3201可以包括用于支持移动TV的设备(例如，图形处理单元(GPU))。用于支持移动TV的设备可以依照例如数字多媒体广播(DMB)、数字视频广播(DVB)或媒体流来处理媒体数据。
根据本发明各种实施例的电子设备的每个上述组件可以包括一个或多个组件，并且组件的名称可以根据电子设备的类型而改变。根据本发明各种实施例的电子设备可以被配置为包括前述组件中的至少一个，进一步包括任何其他组件，或者不包括一部分前述组件。此外，根据本发明各种实施例的电子设备的一些组件可以组合为一个实体，该一个实体仍然执行这些组件的功能。
如本文中使用的术语“模块”可以包括其通用含义，包括但不限于例如：一个硬件、软件或固件的单元，或者两个或更多个硬件、软件或固件的组合。术语“模块”可以与诸如单元、逻辑、逻辑块、组件或电路之类的术语互换使用。模块可以是用于执行一个或多个功能的最小单元或其一部分。可以从机械上或从电学上实现模块。例如，根据本发明的模块可以包括已知的或待开发的执行特定操作的专用集成电路(ASIC)芯片、现场可编程门阵列(FPGA)或可编程逻辑器件中的至少一个。
根据各种实施例，装置(例如，模块或它们的功能)或方法(例如，操作)的至少一部分可以被实施为以编程模块的形式存储在计算机可读存储介质中的命令。当一个或多个处理器(例如，处理器3120)执行命令时，该一个或多个处理器可以执行对应于该命令的功能。例如，所述计算机可读存储介质可以是存储器3130。可以由处理器3120实现(例如，执行)编程模块的至少一部分。编程模块的至少一部分可包括例如用于执行一个或多个功能的模块、程序、例程、指令集和/或处理。
计算机可读记录介质的示例可以包括只读存储器(ROM)、随机存取存储器(RAM)、光盘、磁带、软盘、硬盘、非易失性存储器等，且还可以包括以载波形式(例如，通过互联网传输)实现的介质。此外，计算机可读记录介质可以分布在通过网络连接的计算机系统中，并且可以按照分布方式存储和执行计算机可读代码。
如根据本发明各种实施例的内容处理方法和使用该方法的电子设备的先前描述清楚的是：电子设备可以提供所获取的内容，例如，所获取的手写图像。
在根据本发明各种实施例的内容处理方法和使用该方法的电子设备中，由于通过捕捉或接收所写笔记所获取的内容中所包括的手写被存储为矢量图像，用户可以容易地对手写进行编辑。矢量图像可以自动地布置为使得任何人可以容易地查看手写。
在根据本发明各种实施例的内容处理方法和使用该方法的电子设备中，可以将各种笔记或备忘录的内容自动分类到数字笔记中并且将内容存储在数字笔记的类别下。
尽管已经参照本发明的特定实施例示出并描述了本发明，但是本领域技术人员将理解，在不脱离由所附权利要求及其等同物限定的本发明的范围的情况下，可以在其中进行形式和细节上的各种改变。

Claims (15)

1.一种在电子设备中处理内容的方法，所述方法包括：
获取包括多个字符在内的内容；
使用所获取的内容来生成多个矢量图像；
基于所述多个矢量图像的大小和所述多个矢量图像之间的间隔将所述多个矢量图像构造为多个块，其中，所述多个块中的每个块包括字符；
根据将所述多个矢量图像构造为多个块来逐块编辑所述多个矢量图像；以及
在与电子设备功能连接的显示器上显示编辑后的所述多个矢量图像，
其中，所述多个矢量图像中的每个矢量图像包括所述多个字符中的每个字符的不同部分，
其中，编辑所述多个矢量图像包括：
确定所述多个块中的相邻块之间的间隔；以及
基于所确定的相邻块之间的间隔来调整相邻块之间的间隔。
2.根据权利要求1所述的方法，其中，显示所述多个矢量图像包括：在能够经由显示器来输入手写的应用的屏幕上显示所述多个矢量图像，以及在所述屏幕上显示用户界面UI，以允许用户确认根据用于对所述多个矢量图像进行编辑的用户操纵对所显示屏幕上的所述多个矢量图像进行编辑。
3.根据权利要求1所述的方法，其中，显示所述多个矢量图像包括：
分析矢量图像；以及
基于所述分析的结果对矢量图像进行编辑并布置编辑后的矢量图像。
4.根据权利要求3所述的方法，其中，分析矢量图像包括以下至少一项：
确定所生成的矢量图像之间的间隔，并对间隔在第一预定范围内的矢量图像进行分析；
确定所生成的矢量图像之间的间隔以及所生成的矢量图像的大小，并对大小与间隔比在第二预定范围内的矢量图像进行分析；或者
通过将矢量图像的形状与预定形状进行比较来分析矢量图像。
5.根据权利要求3所述的方法，其中，布置编辑后的矢量图像包括：
使用矢量图像的位置、相邻矢量图像的类型、或矢量图像的形状中的至少一项来确定矢量图像的类型，并根据矢量图像的类型来调整矢量图像的大小；或者
确定每个矢量图像的高度或宽度中的至少一项，计算高度或宽度中的所述至少一项的平均值，或者计算矢量图像的高宽比的平均值，并且将矢量图像的大小调整为与逐类型计算的平均值相对应的大小，
其中，调整矢量图像的大小包括：将每种类型的矢量图像的大小调整为针对该类型预定的大小或针对该类型计算的矢量图像的大小的平均值，以及
其中，矢量图像的类型包括字符、图形、图画、或符号中的至少一个。
6.根据权利要求3所述的方法，其中，布置编辑后的矢量包括：根据引导线的预定大小来调整矢量图像的大小，其中，引导线的大小包括高度或宽度中的至少一项。
7.根据权利要求3所述的方法，其中，布置编辑后的矢量图像包括：
根据矢量图像的旋转度来调整矢量图像的倾斜度、大小、或位移中的至少一项；或者
调整以下至少一项：所述多个块中每个块的矢量图像的大小、逐块的所述多个块中每个块的矢量图像之间的间隔、或者逐块的所述多个块中每个块的矢量图像的旋转度。
8.根据权利要求3所述的方法，其中，布置编辑后的矢量图像包括：
当矢量图像布置在能够经由显示器输入手写的应用的屏幕的预定区域中时，确定所述矢量图像中的至少一个矢量图像是否将在所述区域之外，并且如果确定所述矢量图像中的至少一个矢量图像将在所述区域之外，则将包括将在所述区域之外的至少一个矢量图像在内的块的所有矢量图像移动至新区域，并在所述新区域中布置经移动的矢量图像，以及
其中，所述新区域包括根据被确定为在所述区域之外的所述至少一个矢量图像所插入的区域。
9.根据权利要求1所述的方法，还包括：
当获取到内容时，在电子设备或网络中搜索与所获取的内容至少部分匹配的内容；以及
如果检测到与所获取的内容至少部分匹配的内容，则用在搜索期间检测到的内容来替换所获取的内容。
10.根据权利要求1所述的方法，还包括：基于内容的属性或与内容相关的信息中的至少一项，将内容分类到多个类别中的至少一个类别，
其中，通过识别内容中所包括的图案、内容的形状、内容的形式、或内容中所包括的字符中的至少一项来确定内容的属性，并且与内容相关的信息包括电子设备中存储的日程信息、关于电子设备的位置信息、或当前时间信息中的至少一项。
11.一种电子设备，包括：
显示器；以及
控制器，被配置为：
获取包括多个字符在内的内容，
使用所获取的内容来生成多个矢量图像，
基于所述多个矢量图像的大小和所述多个矢量图像之间的间隔将所述多个矢量图像构造为多个块，其中，所述多个块中的每个块包括字符；
根据将所述多个矢量图像构造为多个块来逐块编辑所述多个矢量图像；以及
在与电子设备功能连接的显示器上显示编辑后的所述多个矢量图像，
其中，所述多个矢量图像中的每个矢量图像包括所述多个字符中的每个字符的不同部分，
其中，所述控制器还被配置为：
确定所述多个块中的相邻块之间的间隔；以及
基于所确定的相邻块之间的间隔来调整相邻块之间的间隔。
12.根据权利要求11所述的电子设备，还包括输入设备，其中，控制器还被配置为控制所述显示器，以在能够输入手写的应用的屏幕上显示所述多个矢量图像，以及控制所述显示器，以在所述屏幕上显示用户界面UI，以允许用户确认根据经由输入设备所应用的用于对矢量图像进行编辑的用户操纵对所显示屏幕上的多个矢量图像进行编辑。
13.根据权利要求11所述的电子设备，其中，控制器还被配置为控制对矢量图像的分析，基于所述分析的结果对矢量图像进行编辑，并布置编辑后的矢量图像。
14.根据权利要求13所述的电子设备，其中，控制器还被配置为控制以下至少一项：确定所生成的矢量图像之间的间隔，并对间隔在第一预定范围内的矢量图像进行分析；确定所生成的矢量图像之间的间隔以及所生成的矢量图像的大小，并对大小与间隔比在第二预定范围内的矢量图像进行分析；或者通过将矢量图像的形状与预定形状进行比较来分析矢量图像。
15.根据权利要求13所述的电子设备，其中，控制器还被配置为控制：使用矢量图像的位置、相邻矢量图像的类型、或矢量图像的形状中的至少一项来确定矢量图像的类型，并根据所述类型来调整矢量图像的大小；或者被配置为控制：确定每个矢量图像的高度或宽度中的至少一项，计算高度或宽度中的所述至少一项的平均值，或者计算矢量图像的高宽比的平均值，并且将矢量图像的大小调整为与逐类型计算的平均值相对应的大小，
其中，控制器还被配置为控制：将每种类型的矢量图像的大小调整为针对该类型预定的大小或针对该类型计算的矢量图像的大小的平均值，以及
其中，矢量图像的类型包括字符、图形、图画、或符号中的至少一项。
CN201580020740.4A 2014-04-21 2015-04-21 处理内容的方法及使用该方法的电子设备 Active CN106233228B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
KR10-2014-0047394 2014-04-21
KR1020140047394A KR102240279B1 (ko) 2014-04-21 2014-04-21 컨텐트 처리 방법 및 그 전자 장치
PCT/KR2015/003976 WO2015163675A1 (en) 2014-04-21 2015-04-21 Method of processing content and electronic device using the same

Publications (2)

Publication Number Publication Date
CN106233228A CN106233228A (zh) 2016-12-14
CN106233228B true CN106233228B (zh) 2019-08-02

Family

ID=53002534

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201580020740.4A Active CN106233228B (zh) 2014-04-21 2015-04-21 处理内容的方法及使用该方法的电子设备

Country Status (5)

Country Link
US (1) US10430648B2 (zh)
EP (1) EP2937813A3 (zh)
KR (1) KR102240279B1 (zh)
CN (1) CN106233228B (zh)
WO (1) WO2015163675A1 (zh)

Families Citing this family (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10725650B2 (en) * 2014-03-17 2020-07-28 Kabushiki Kaisha Kawai Gakki Seisakusho Handwritten music sign recognition device and program
US10614300B2 (en) * 2014-12-23 2020-04-07 Lenovo (Singapore) Pte. Ltd. Formatting handwritten content
KR101890831B1 (ko) * 2017-01-11 2018-09-28 주식회사 펍플 전자책 서비스 제공방법 및 그를 위한 컴퓨터 프로그램
CN107977392B (zh) * 2017-03-09 2020-12-04 北京物灵智能科技有限公司 绘本识别方法、装置、系统及电子设备
CN107977391B (zh) * 2017-03-09 2020-12-08 北京物灵智能科技有限公司 绘本识别方法、装置、系统及电子设备
US10895954B2 (en) * 2017-06-02 2021-01-19 Apple Inc. Providing a graphical canvas for handwritten input
US10872199B2 (en) 2018-05-26 2020-12-22 Microsoft Technology Licensing, Llc Mapping a gesture and/or electronic pen attribute(s) to an advanced productivity action
WO2020045704A1 (ko) * 2018-08-30 2020-03-05 주식회사 펍플 전자책 제작방법 및 그를 위한 컴퓨터 프로그램
CN109525795B (zh) * 2018-11-14 2020-11-24 武汉精立电子技术有限公司 将逻辑图片转化为bmp图片的方法和装置
US10970848B2 (en) * 2018-11-29 2021-04-06 Sap Se Font family and size aware character segmentation
KR102005829B1 (ko) * 2018-12-11 2019-07-31 이수민 디지털 라이브 북 제작 시스템
CN111368492B (zh) * 2018-12-24 2023-09-01 上海新微技术研发中心有限公司 一种用于在集成电路版图中设置标识信息的方法及系统
CN109871545B (zh) * 2019-04-22 2022-08-05 京东方科技集团股份有限公司 命名实体识别方法及装置
CN111079729B (zh) * 2019-07-29 2023-09-26 广东小天才科技有限公司 一种听写检测方法及电子设备、计算机可读存储介质
CN111275794B (zh) * 2019-12-09 2023-07-11 佛山欧神诺云商科技有限公司 一种自动生成表情图片的方法、装置及存储介质
US11701914B2 (en) * 2020-06-15 2023-07-18 Edward Riley Using indexing targets to index textual and/or graphical visual content manually created in a book
CN111860444B (zh) * 2020-07-31 2022-06-17 上海掌学教育科技有限公司 一种语文试卷版面分析方法及系统
KR102292628B1 (ko) * 2021-05-07 2021-08-23 주식회사 미리디 웹 서버의 메타 데이터를 이용한 적응적 출력물 디자인 생성 및 자동 검증 방법

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5734761A (en) * 1994-06-30 1998-03-31 Xerox Corporation Editing scanned document images using simple interpretations
CN1324068A (zh) * 2000-03-29 2001-11-28 松下电器产业株式会社 基于部首样式的草体汉字手写注释的检索
CN101103363A (zh) * 2005-01-11 2008-01-09 视觉客体公司 搜索、识别和定位墨水中的术语的方法、装置、程序和语言
CN101350068A (zh) * 2007-07-17 2009-01-21 佳能株式会社 显示控制设备和显示控制方法

Family Cites Families (40)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4741045A (en) 1983-09-23 1988-04-26 Dest Corporation Optical character isolation system, apparatus and method
DE3523042A1 (de) 1984-06-28 1986-01-02 Canon K.K., Tokio/Tokyo Bildverarbeitungssystem
US6002799A (en) * 1986-07-25 1999-12-14 Ast Research, Inc. Handwritten keyboardless entry computer system
JP2717537B2 (ja) * 1987-12-25 1998-02-18 蛇の目ミシン工業株式会社 刺繍ミシンの文字間隔設定方法
CA2027253C (en) * 1989-12-29 1997-12-16 Steven C. Bagley Editing text in an image
JP3576570B2 (ja) * 1991-11-19 2004-10-13 ゼロックス コーポレイション 比較方法
US5488719A (en) * 1991-12-30 1996-01-30 Xerox Corporation System for categorizing character strings using acceptability and category information contained in ending substrings
CA2154952A1 (en) * 1994-09-12 1996-03-13 Robert M. Ayers Method and apparatus for identifying words described in a page description language file
US5613017A (en) * 1994-09-29 1997-03-18 Kabushiki Kaisha Toshiba Apparatus for processing image data among media having different image output sizes
US5737443A (en) * 1994-11-14 1998-04-07 Motorola, Inc. Method of joining handwritten input
EP0739521B1 (en) * 1994-11-14 2001-10-31 Motorola, Inc. Method of splitting handwritten input
JPH08202711A (ja) 1995-01-23 1996-08-09 Canon Inc 文書編集操作電子装置
US6005680A (en) * 1995-04-04 1999-12-21 Canon Information Systems, Inc. Method for capturing a document image, a scanner using the method and a document image management system using the scanner
CA2176691C (en) * 1995-05-15 2004-04-13 Junji Tanaka Hand-written character recognition apparatus and facsimile apparatus
JPH09161089A (ja) 1995-12-12 1997-06-20 Matsushita Electric Ind Co Ltd 手書きデータ編集装置及びその方法
TW362070B (en) * 1995-12-28 1999-06-21 Seiko Epson Corp Method and apparatus for word composition design, portrait making and impress making
US5803629A (en) * 1997-03-14 1998-09-08 Paul H. Neville Method and apparatus for automatic, shape-based character spacing
US6332148B1 (en) * 1997-03-31 2001-12-18 Adobe Systems Incorporated Appearance and positioning annotation text string and base text string specifying a rule that relates the formatting annotation, base text characters
US6975425B1 (en) * 1998-02-26 2005-12-13 Canon Kabushiki Kaisha Information processing apparatus and information processing method
JP2000331121A (ja) 1999-05-21 2000-11-30 Mitsui High Tec Inc 手書き文字認識方法及びその装置
US7139004B2 (en) 2002-01-25 2006-11-21 Xerox Corporation Method and apparatus to convert bitmapped images for use in a structured text/graphics editor
US7751623B1 (en) 2002-06-28 2010-07-06 Microsoft Corporation Writing guide for a free-form document editor
US20050281467A1 (en) 2003-01-24 2005-12-22 Stahovich Thomas F Recognizing multi-stroke symbols
US6989822B2 (en) * 2003-11-10 2006-01-24 Microsoft Corporation Ink correction pad
KR20050054713A (ko) 2003-12-05 2005-06-10 (주)동방에스앤씨 문자 군집화 기술 기반 문서의 디지털화 검증 시스템 및방법
KR20050116900A (ko) 2004-06-08 2005-12-13 삼성전자주식회사 스캐닝 이미지를 메모지 형식으로 표현하는 방법
FR2880709B1 (fr) 2005-01-11 2014-04-25 Vision Objects Procede de recherche, reconnaissance et localisation dans l'encre, dispositif, programme et langage correspondants
US7392473B2 (en) * 2005-05-26 2008-06-24 Xerox Corporation Method and apparatus for determining logical document structure
US7933395B1 (en) * 2005-06-27 2011-04-26 Google Inc. Virtual tour of user-defined paths in a geographic information system
KR100785083B1 (ko) * 2005-12-26 2007-12-12 삼성전자주식회사 화상형성장치 및 그의 제어방법과 포토드라마 화상형성장치 및 그의 이미지 편집 저장방법
KR100656875B1 (ko) 2006-02-10 2006-12-14 삼성전자주식회사 휴대단말을 이용한 가계부 작성 방법 및 장치
US20070245229A1 (en) 2006-04-17 2007-10-18 Microsoft Corporation User experience for multimedia mobile note taking
US7817857B2 (en) 2006-05-31 2010-10-19 Microsoft Corporation Combiner for improving handwriting recognition
KR100869712B1 (ko) 2007-02-09 2008-11-21 (주)펜앤프리 필기 입력 방법 및 장치와 이를 이용하는 입력 시스템
JPWO2008132977A1 (ja) 2007-04-24 2010-07-22 コニカミノルタホールディングス株式会社 画像編集装置及び画像編集システム
US8331677B2 (en) 2009-01-08 2012-12-11 Microsoft Corporation Combined image and text document
JP5531412B2 (ja) 2009-01-14 2014-06-25 シャープ株式会社 電子機器および情報処理方法
KR101848507B1 (ko) 2011-10-12 2018-04-13 삼성전자주식회사 미려화 필기 메시지 전송 장치 및 방법
JP2013182512A (ja) 2012-03-02 2013-09-12 Casio Comput Co Ltd 手書き文字処理装置およびプログラム
WO2015112755A1 (en) * 2014-01-22 2015-07-30 AI Squared Emphasizing a portion of the visible content elements of a markup language document

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5734761A (en) * 1994-06-30 1998-03-31 Xerox Corporation Editing scanned document images using simple interpretations
CN1324068A (zh) * 2000-03-29 2001-11-28 松下电器产业株式会社 基于部首样式的草体汉字手写注释的检索
CN101103363A (zh) * 2005-01-11 2008-01-09 视觉客体公司 搜索、识别和定位墨水中的术语的方法、装置、程序和语言
CN101350068A (zh) * 2007-07-17 2009-01-21 佳能株式会社 显示控制设备和显示控制方法

Also Published As

Publication number Publication date
CN106233228A (zh) 2016-12-14
KR20150121483A (ko) 2015-10-29
WO2015163675A1 (en) 2015-10-29
US20150302242A1 (en) 2015-10-22
EP2937813A2 (en) 2015-10-28
EP2937813A3 (en) 2016-03-02
US10430648B2 (en) 2019-10-01
KR102240279B1 (ko) 2021-04-14

Similar Documents

Publication Publication Date Title
CN106233228B (zh) 处理内容的方法及使用该方法的电子设备
US11113523B2 (en) Method for recognizing a specific object inside an image and electronic device thereof
US10021569B2 (en) Theme applying method and electronic device for performing the same
CN107665485B (zh) 用于显示图形对象的电子装置和计算机可读记录介质
KR102309175B1 (ko) 스크랩 정보를 제공하는 전자 장치 및 그 제공 방법
KR102367828B1 (ko) 이미지 운용 방법 및 이를 지원하는 전자 장치
US9734591B2 (en) Image data processing method and electronic device supporting the same
KR102199786B1 (ko) 콘텐트를 기반으로 하는 정보 제공 방법 및 장치
US10410407B2 (en) Method for processing image and electronic device thereof
KR102355039B1 (ko) 잠금 화면 출력 제어 방법 및 이를 지원하는 전자 장치
EP3276942B1 (en) Electronic device and method for controlling the same
CN108513060A (zh) 使用外部电子设备的拍摄方法和支持该方法的电子设备
CN107784268B (zh) 基于红外线传感器使用其来测量心率的方法和电子设备
KR20150114184A (ko) 컨텐츠 운용 방법 및 이를 지원하는 전자 장치
CN105446523A (zh) 用于在电子设备中输入对象的方法和装置
CN108230014A (zh) 电子装置及使用电子装置显示网页的方法
US10185724B2 (en) Method for sorting media content and electronic device implementing same
KR20150059989A (ko) 문서 인식 방법 및 장치
KR20180121273A (ko) 객체에 대응하는 콘텐트를 출력하기 위한 방법 및 그 전자 장치
US20150278207A1 (en) Electronic device and method for acquiring image data
KR102303206B1 (ko) 전자장치에서 이미지 내의 특정 객체를 인식하기 위한 방법 및 장치
KR20180111242A (ko) 채색 가능한 콘텐트를 제공하는 전자 장치 및 그 방법

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant