CN106663185A - 数字图像处理设备和系统及其控制方法 - Google Patents

数字图像处理设备和系统及其控制方法 Download PDF

Info

Publication number
CN106663185A
CN106663185A CN201480080350.1A CN201480080350A CN106663185A CN 106663185 A CN106663185 A CN 106663185A CN 201480080350 A CN201480080350 A CN 201480080350A CN 106663185 A CN106663185 A CN 106663185A
Authority
CN
China
Prior art keywords
information
mark
freehandhand
image processing
complete information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201480080350.1A
Other languages
English (en)
Other versions
CN106663185B (zh
Inventor
朴时和
金志桓
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
LG Electronics Inc
Original Assignee
LG Electronics Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by LG Electronics Inc filed Critical LG Electronics Inc
Priority claimed from PCT/KR2014/009462 external-priority patent/WO2016006764A1/en
Publication of CN106663185A publication Critical patent/CN106663185A/zh
Application granted granted Critical
Publication of CN106663185B publication Critical patent/CN106663185B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00—Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/10—Character recognition
    • G06V30/32—Digital ink
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/017—Head mounted
    • G02B27/0172—Head mounted characterised by optical features
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16—Constructional details or arrangements
    • G06F1/1613—Constructional details or arrangements for portable computers
    • G06F1/163—Wearable computers, e.g. on a belt
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/58—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/583—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
    • G06F16/5838—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content using colour
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013—Eye tracking input arrangements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/042—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means
    • G06F3/0425—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means using a single imaging device like a video camera for tracking the absolute position of a single or a plurality of objects with respect to an imaged reference surface, e.g. video camera imaging a display or a projection screen, a table or a wall surface, on which a computer generated image is displayed or projected
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/20—Image preprocessing
    • G06V10/22—Image preprocessing by selection of a specific region containing or referencing a pattern; Locating or processing of specific regions to guide the detection or recognition
    • G06V10/235—Image preprocessing by selection of a specific region containing or referencing a pattern; Locating or processing of specific regions to guide the detection or recognition based on user input or interaction
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/20—Scenes; Scene-specific elements in augmented reality scenes
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00—Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/10—Character recognition
    • G06V30/32—Digital ink
    • G06V30/36—Matching; Classification
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G02B2027/0138—Head-up displays characterised by optical features comprising image capture systems, e.g. camera
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G02B2027/0141—Head-up displays characterised by optical features characterised by the informative content of the display

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • Computer Hardware Design (AREA)
  • Library & Information Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • Optics & Photonics (AREA)
  • User Interface Of Digital Computer (AREA)
  • Processing Or Creating Images (AREA)

Abstract

公开了数字图像处理设备、系统及其控制方法。该数字图像处理设备包括：图像传感器单元，该图像传感器单元用于感测手绘信息；显示单元，该显示单元用于显示包括所感测的信息作为部分信息的完整信息；通信单元，该通信单元用于将从所述完整信息当中选择的完整信息发送到服务器；以及控制器。该控制器控制所述显示单元以通过搜索完整信息来显示所述完整信息，并且还控制所述显示单元以在选择了所检索的完整信息中的一条时，显示所选择的完整信息。所述控制器感测手绘标记，并且当所感测的标记是共用属性标记时，将所述共用属性标记与所选择的完整信息相链接并且控制所述通信单元以将所选择的完整信息与所述共用属性标记一起发送。

Description

数字图像处理设备和系统及其控制方法
技术领域
本说明书涉及数字图像处理设备和系统及其控制方法。
背景技术
随着数字装置越来越普及，出现了具有触摸传感器的一些数字装置，这些触摸传感器使得用户能够使用铁笔或手指在数字装置上进行绘制或书写。这些数字装置将触摸传感器感测到的信息存储在数字图像中，并且相比于传统的手绘草稿，所存储的数字图像有利地提供了更高的便携性并且更容易进行校正。
然而，尽管上述数字装置得到普及，然而用户仍然利用的是通过使用钢笔、铅笔等将字母写在笔记本或纸上而获取的手绘信息，并且这可以给用户提供不能够在数字装置上提供的书写感觉。
此外，用户会需要与他人共用存储在他/她的数字装置中的信息。然而，当用户只记住信息的一部分时，使用所记住的部分信息来搜索所存储的信息需要大量时间，并且不方便。
因此，需要容易地使用手绘的部分信息来搜索并且共用存储在数字装置中的信息的方法。
发明内容
技术问题
因此，本发明涉及基本上消除了由于相关技术的局限和缺点而导致的一个或更多个问题的数字图像处理设备和系统及其控制方法。
本说明书的目的是提供可以通过感测手绘的部分信息来搜索其中存储的完整信息并且可以共用所检索的完整信息的数字图像处理设备、数字图像处理系统及其控制方法。
另外的优点、目的和特征将在随后的描述中部分地阐述，并且对于阅读了下文的本领域的普通技术人员而言将部分变得清楚或者可以通过实践而获知。可以通过书面的说明书及其权利要求以及附图中具体指出的结构来实现并且获取目的和其它优点。
问题的解决方案
按照本说明书的一个实施方式，一种数字图像处理设备包括：图像传感器单元，该图像传感器单元被配置为感测手绘信息；显示单元，该显示单元被配置为显示包括所感测的信息的一条或更多条完整信息，所感测的信息是部分信息；通信单元，该通信单元被配置为将从所述一条或更多条完整信息当中选择的完整信息发送到服务器；以及控制器，其中，所述控制器控制所述显示单元以搜索并显示包括所感测的信息的所述一条或更多条完整信息，并且还控制所述显示单元以在选择了所检索的所述一条或更多条完整信息中的一条时，显示所选择的完整信息，并且其中，所述控制器感测手绘标记，并且当所感测的标记是共用属性标记时，将所述共用属性标记与所选择的完整信息相链接并且控制所述通信单元以将所选择的完整信息与所述共用属性标记一起发送。
所述控制器可以控制所述显示单元以将所述共用属性标记与所选择的完整信息一起显示，并且可以在感测到沿着所显示的共用属性标记绘制的手绘标记时，将所述共用属性标记与所选择的完整信息相链接。
这里，所选择的完整信息可以包括账户编号、电话号码、信用卡编号、密码、邮寄地址、电子邮件地址和备忘录中的至少一个。
所选择的完整信息可以与所述共用属性标记相链接并且被发送到所述服务器，因此具有共用属性。
此外，该数字图像处理设备还可以包括被配置为存储信息的存储单元，并且所述控制器可以基于所感测的信息来搜索所存储的信息，并且可以控制所存储的信息当中的包括所感测的信息的一条或更多条完整信息的显示。
这里，所述共用属性标记可以是由用户设置的标记。
所述共用属性标记可以是随机生成的。
此外，所述控制器可以从将要显示的一组共用属性标记中将与所选择的完整信息一起发送的所述共用属性标记排除在外。
所述控制器可以将被排除在外的所述共用属性标记添加到在经过预定时间之后将要显示的所述一组共用属性标记中。
当从所述服务器中删除了所发送的完整信息时，所述通信单元可以从所述服务器接收指示所述完整信息被删除的消息，并且所述控制器可以将被排除在外的所述共用属性标记添加到将要显示的所述一组共用属性标记中。
这里，所述标记可以包括至少一个符号、图形、字符和数字。
所述控制器可以将所选择的完整信息划分成所感测的信息的区域和剩余的自动完成区域。
所述控制器可以在经由所述图像传感器单元同时感测到所述手绘信息和所述手绘标记时，控制从所述服务器接收包括所述手绘信息和所述手绘标记的完整信息并显示所述完整信息。
所述控制器还可以发送与所选择的完整信息相关的附加信息。
所述控制器可以在所述手绘标记中包括预定编辑符号时执行编辑模式，并且可以控制在完成了与所选择的完整信息相关的编辑时向所述服务器发送所选择的完整信息，或者将所述附加信息与所选择的完整信息一起发送到服务器。
此外，可以执行与所选择的完整信息相关的编辑，以包括虚拟键盘输入和语音输入中的至少一个。
所述控制器可以控制在所述手绘标记中包括预定删除符号时向所述服务器发送用于删除所选择的完整信息的命令。
所述控制器可以控制用于确认所选择的完整信息是否被删除的消息的输出。
按照本说明书的另一个实施方式，一种数字图像发送/接收系统包括数字图像发送设备、数字图像接收设备和服务器，其中，所述数字图像发送设备感测手绘信息，显示包括所感测的信息的一条或更多条完整信息，所感测的信息是部分信息，当选择了所述一条或更多条完整信息中的一条时，显示所选择的完整信息，感测手绘标记，并且当所感测的标记是共用属性标记时，将所述共用属性标记与所选择的完整信息相链接并且将所选择的完整信息与所述共用属性标记一起发送，其中，所述服务器接收并存储所选择的完整信息和所链接的共用属性标记，并且在从所述数字图像接收设备接收到所述手绘信息连同所述手绘标记时发送包括所接收到的标记和所接收到的信息的完整信息，并且其中，所述数字图像接收设备在经由图像传感器单元同时感测到所述手绘信息和所述手绘标记时向所述服务器请求信息，并且从所述服务器接收包括所述手绘信息和所述手绘标记的完整信息并显示所述完整信息。
按照本说明书的又一实施方式，一种数字图像处理设备的控制方法包括以下步骤：感测手绘信息，并且搜索并显示包括所感测的信息的一条或更多条完整信息，所感测的信息是部分信息；当选择了所检索的所述一条或更多条完整信息中的一条时，显示所选择的完整信息；以及感测手绘标记，并且当所感测的标记是共用属性标记时，将所述共用属性标记与所选择的完整信息相链接并且将所选择的完整信息与所述共用属性标记一起发送。
要理解的是，本说明书的以上总体描述和以下详细描述都是示例性和说明性的，并不旨在提供对要求保护的本说明书的进一步说明。
本发明的有益效果
如根据上述实施方式而显而易见的，通过数字图像处理设备和系统及其控制方法，能够感测手绘的部分信息并且搜索所存储的包括所感测的部分信息的完整信息。
另外，通过数字图像处理设备和系统及其控制方法，能够共用所检索的完整信息。
另外，通过数字图像处理设备和系统及其控制方法，能够在感测手绘的部分信息和具有共用属性的手绘标记时显示匹配的完整信息。
附图说明
附图被包括以提供对本说明书的进一步理解，并入本申请中并构成本申请的一部分，附图例示了本发明的实施方式并且与描述一起用于说明本说明书的原理。在附图中：
图1是说明关于使用数字图像处理设备的一个实施方式的视图；
图2是根据一个实施方式的数字图像处理设备的框图；
图3是根据另一个实施方式的数字图像处理设备的框图；
图4是说明关于手绘的部分信息的感测和完整信息的共用的一个实施方式的视图；
图5是说明关于完整信息的发送以及相关的附加信息的一个实施方式的视图；
图6是说明关于接收并显示共用的完整信息的一个实施方式的视图；
图7是说明关于将手绘区域与剩余的自动完成区域分离的一个实施方式的视图；
图8是说明根据一个实施方式的用户设置标记的方法的视图；
图9是说明关于所使用标记的区分的一个实施方式的视图；
图10是说明根据一个实施方式的具有编辑属性的标记的视图；
图11是说明根据一个实施方式的具有删除属性的标记的视图；
图12是根据一个实施方式的数字图像处理系统的时序图；以及
图13是根据一个实施方式的数字图像处理设备的控制方法的流程图。
具体实施方式
下文中，将参照附图详细地描述用于具体实现上述目的实施方式。在这种情况下，在附图中示出并且基于附图描述的本说明书的配置和操作被描述为至少一个实施方式，并且本说明书的技术精神及其核心配置和操作不受描述的限制。
虽然尽可能在考虑到功能的情况下用目前广泛使用的常见术语来选择本说明书中使用的术语，但可以基于本领域的普通技术人员的意图、惯例、新技术的出现等用其它术语取代这些术语。另外，在特定情况下，可以使用申请人任意选择的术语。在这种情况下，可以在本说明书的对应描述部分中描述这些术语的含义。因此，应该注意，本文中使用的术语应该基于其实际含义和本说明书的整体内容进行理解，而非仅仅基于术语的名称进行理解。
在本说明书中，手绘信息或手绘字母是通过用户的手绘而沉积的液体或固体材料所表达的实体文本，并且可以包括例如用铅笔在纸上绘制的数字、用记号笔在白板上写的字母、用喷漆在墙壁上绘制的字符等。另外，诸如上述纸、白板、墙壁等这样的使得能够在其上手绘字母的物体可以被称为实体对象(physical object)。本说明书的数字图像处理设备可以包括具有带有图像传感器的相机和投影仪的头戴式显示器(HMD)。
图1是说明关于使用数字图像处理设备的一个实施方式的视图。
数字图像处理设备100可以感测用户书写的手绘字母。数字图像处理设备100可以使用图像传感器来感测用沉积在诸如笔记本、纸、白板等这样的实体对象1上的液体或固体材料而呈现的手绘字母。例如，信息可以包括电话号码、账户编号、信用卡编号、密码、邮寄地址、电子邮件地址、备忘录、日记、日程安排等。数字图像处理设备100可以供私人使用。如此，存储在数字图像处理设备100中的信息可以是个人信息，并因此具有个人属性或排他属性。个人属性可以被设置成以各信息为基础而分配的字段值。另选地，存储在数字图像处理设备100中的信息可不包括专用属性值，而没有专用属性值的信息可被判断为具有个人属性。
数字图像处理设备100可以将感测到的手绘字母识别为具有文本属性。例如，数字图像处理设备100可以感测在纸上书写的字母“3456”并且将其识别为文本“3”、“4”、“5”和“6”。手绘的字母可意指手绘信息。数字图像处理设备100可以将手绘信息与所存储的信息相匹配。手绘信息可以是与所存储的全部信息的一部分对应的信息。数字图像处理设备100可以搜索所存储的包括手绘信息的信息。也就是说，数字图像处理设备100可以搜索包括手绘信息作为部分信息的完整信息。
数字图像处理设备100可以显示接收到的完整信息。当存在多条检索到的完整信息时，数字图像处理设备100可以显示所有完整信息。当没有匹配的完整信息时，数字图像处理设备100可不显示信息。
数字图像处理设备100可以接收用户所输入的用于选择完整信息中的一条的命令。数字图像处理设备100可以只显示所选择的完整信息并且还在所选择的完整信息旁边显示标记。该标记可以与用于共用所选择的完整信息的命令对应。该标记可以具有共用属性。因此，标记可以被称为共用属性标记。标记可以由用户设置，或者可以由数字图像处理设备100随机生成。
在一个实施方式中，数字图像处理设备100可以包括关于一个或多个共用属性标记的信息。另外，数字图像处理设备100可以只显示所选择的完整信息，而不显示标记。数字图像处理设备100可以感测手绘的标记。数字图像处理设备100可以判断所感测到的手绘标记是否是共用属性标记。当手绘标记是共用属性标记时，数字图像处理设备100可以将共用属性标记与所选择的完整信息相链接。如上所述，手绘标记是共用属性标记。因此，数字图像处理设备100可以将所感测到的手绘标记与所选择的完整信息相链接。也就是说，共用属性标记和所选择的完整信息之间的链接具有与感测到的手绘标记和所选择的完整信息之间的链接相同的含义。
在另一个实施方式中，数字图像处理设备100可以包括透明显示单元。数字图像处理设备100可以在显示单元上显示标记。用户可以将标记识别为经由显示单元在记录有手绘信息的实体对象1上显示。也就是说，数字图像处理设备100可以查看背景中的实体对象1上的标记。在一些情况下，数字图像处理设备100可以将标记投影到实体对象1上。用户可以在实体对象1上面手绘标记。数字图像处理设备100可以感测手绘标记。数字图像处理设备100可以将所感测的标记与所选择的完整信息相链接并且将其发送到服务器。也就是说，标记可以具有服务器发送属性。如上所述，所感测的标记与所选择的完整信息之间的链接具有与共用属性标记与所选择的完整信息之间的链接相同的含义。
数字图像处理设备100可以包括投影仪或头戴式显示器(MHD)。下文中，将详细地描述数字图像处理设备100的配置和操作方法。
图2是根据一个实施方式的数字图像处理设备的框图。
参照图2，数字图像处理设备100可以包括图像传感器单元110、显示单元120、控制器130和通信单元140。
图像传感器单元110可以感测手绘信息。图像传感器单元110可以包括运动传感器、视频传感器等。数字图像处理设备100可以使用图像传感器单元110来感测手绘信息并且将其转换成数字图像。图像传感器单元110可以感测手绘的部分信息并且将其转换成数字图像，并且可以感测手绘标记并且将其转换成数字图像。例如，图像传感器单元110可以采取相机的形式。
显示单元120可以显示包括所感测的信息作为部分信息的完整信息。显示单元120可以是透明显示单元。另外，显示单元120可以将数字图像投影到实体对象上。显示单元120可以包括HMD或光束投影仪的显示单元。显示单元120可以显示标记。当选择了一条完整信息时，标记可以被显示在所选择的完整信息旁边。显示单元120可以将标记以数字图像形式显示在实体对象上，或者可以将标记以数字图像形式投影到实体对象上。
控制器130可以从预先存储的信息当中搜索包括所感测的信息的信息。手绘信息是全部信息的一部分，因此可以被称为部分信息，并且预先存储的信息是全部信息，因此可以被称为完整信息。完整信息是存储在数字图像处理设备100中的信息，并且数字图像处理设备100可以供私人使用。因此，完整信息可以是个人信息。
控制器130可以控制显示单元120，以搜索并显示包括所感测的信息的一条或更多条完整信息。如上所述，完整信息可以被显示在显示单元120上，或者可以被投影到实体对象上以显示在实体对象上。
数字图像处理设备100接收用户所输入的用于选择一条完整信息的命令。当选择了所检索的完整信息中的一条时，控制器130可以控制显示单元120以将标记与所选择的完整信息一起显示。当感测到沿着所显示的标记绘制的手绘标记时，控制器130 可以将标记与所选择的完整信息相链接，并且控制通信单元140以将标记和所选择的完整信息一起发送。因此，标记可以具有服务器发送属性。存在包括符号、图形、字符和数字的标记。标记包括符号、图形、字符和数字中的一个、或者其中两个或更多个的组合。
通信单元140可以将所选择的完整信息发送到服务器。通信单元140可以按照有线或无线方式连接到外部网络，以发送和接收数字数据。当数字图像处理设备100感测到手绘的部分信息和手绘标记时，通信单元140可以从服务器接收匹配的完整信息。
虽然完整信息可以是个人信息，但是因为该完整信息与标记相链接并且被发送到服务器，所以其他人可以共用该完整信息。因此，所发送的完整信息可以具有共用属性。
图3是根据另一个实施方式的数字图像处理设备的框图。
参照图3，数字图像处理设备可以包括图像传感器单元110、显示单元120、控制器130、通信单元140、传感器单元150、存储单元160、音频单元170和电源单元180。
图像传感器单元110、显示单元120、控制器130和通信单元140与以上参照图2描述的这些单元相同。
传感器单元150可以使用安装在数字图像处理设备中的多个传感器来将数字图像处理设备所识别的用户输入或环境发送到控制器130。传感器单元150可以包括多个传感器。所述传感器可以包括重力传感器、地磁传感器、运动传感器、陀螺仪传感器、加速计、倾斜度传感器、亮度传感器、高度传感器、嗅觉传感器、温度传感器、深度传感器、压力传感器、弯曲传感器、音频传感器、视频传感器、GPS传感器、触摸传感器等。
存储单元160可以存储诸如音频、视频、图片、移动图像、应用等这样的各种数字数据。存储单元160可以存储用户的个人信息。例如，个人信息可以包括电话号码、账户编号、信用卡编号、密码、邮寄地址、电子邮件地址、备忘录、日记、日程安排等。另外，存储单元160可以存储用户所设置的标记或者预定标记。另选地，存储单元160可以存储可以随机生成标记的程序、标记生成函数等。
数字图像处理设备可以基于经由图像传感器单元110感测到的手绘信息来搜索存储在存储单元160中的信息。数字图像处理设备可以将所存储的信息当中的与所感测的手绘信息匹配的信息显示在显示单元120上。
例如，存储单元160可以包括硬盘驱动(HDD)、固态驱动(SSD)、压缩盘(CD)、数字视频盘(DVD)、蓝光(Blu-Ray)盘、软盘驱动(FDD)、磁盘、RAM、ROM、存储卡、闪存存储器、USB存储器等。
音频单元170可以包括诸如扬声器等这样的音频输出装置和诸如麦克风等这样的音频输入装置，并且可以执行从数字图像处理设备的音频输出和到数字图像处理设备的音频输入。音频单元170可以用作音频传感器。
音频单元170可以通过分析并处理经由视频输入装置输入的语音来识别用户命令。所识别的命令可以被发送到控制器130，以控制数字图像处理设备。在一个实施方式中，数字图像处理设备可以处理在备忘录采用模式下经由音频单元170输入的用户语音并且将处理后的用户语音以文本备忘录形式存储。
电源单元180是包含在数字图像处理设备中的电池或者与外部电源连接的电源。电源单元180可以向数字图像处理设备供电。
到目前为止，已经描述了数字图像处理设备的各个构成元件。下文中，将描述数字图像处理设备的详细操作方法。
图4是说明关于手绘的部分信息的感测和完整信息的共用的一个实施方式的视图。
参照图4的(1)，示出了数字图像处理设备100和上面书写了手绘信息11的实体对象1。数字图像处理设备100可以使用图像传感器单元110来感测书写在实体对象1上的手绘信息11。如图4的(1)中示例性示出的，数字图像处理设备100可以感测手绘信息11并且使用所感测的信息来搜索所存储的信息。数字图像处理设备100可以搜索所存储的全部信息当中的与所感测的信息匹配的信息。与所感测的信息匹配的信息可以与全部信息对应，或者可以与全部信息中的一部分对应。为了方便描述，所感测的手绘信息被称为部分信息并且所检索的信息被称为完整信息。
数字图像处理设备100可以显示完整信息。当存在多条完整信息并且不能够在单个屏幕上显示所有完整信息时，数字图像处理设备100可以显示可能显示数目的完整信息。另外，数字图像处理设备100可以使用上下滚动符号来显示存在另外的完整信息。图4的(1)中示例性示出的数字图像处理设备100包括这些上下滚动符号。这意指在所显示的完整信息的上方和下方存在另外的完整信息。数字图像处理设备100可以通过用户选择来选择一条完整信息21。数字图像处理设备100可以处理所选择的完整信息21，以通过如下方式来可视地显示该完整信息21：将完整信息21高亮，通过将完整信息21以不同的书写风格显示，通过以三维方式显示完整信息21等。
参照图4的(2)，示出了显示有所选择的完整信息21的数字图像处理设备100。当选择了一条完整信息21时，数字图像处理设备100可以在所选择的完整信息旁边显示标记22。数字图像处理设备100可以将标记22显示在显示单元上，并且可以将标记22投影到实体对象1上以将标记22显示在实体对象1上。数字图像处理设备100可以包括透明显示单元。因此，即使当标记22被显示在显示单元上时，数字图像处理设备100也可以使得标记22能够被用户察知到，如同被投影到实体对象1上一样。
标记22可以是随机生成的，并且可以由用户设置。另外，数字图像处理设备100可以在识别到标记22时将所选择的完整信息发送到服务器200，因此，标记22可以具有服务器发送属性。可以用符号、图形、字符和数字来表达标记22。
参照图4的(3)，示出了显示有所选择的完整信息21和标记22的数字图像处理设备100以及显示有手绘的部分信息11和手绘标记12的实体对象1。
数字图像处理设备100可以将标记22显示在显示单元上，或者可以将标记22投影到实体对象1上。基于所显示的标记22，用户可以手绘具有与所显示的标记22相同的形状的标记12。数字图像处理设备100可以感测手绘标记12。数字图像处理设备100可以判断手绘标记12和所显示的标记22是否相同。可以经由图像处理来执行关于手绘标记12和所显示的标记22是否相同的判断。
在一个实施方式中，数字图像处理设备100可以从手绘标记12的f个主要部分中提取特征点并且从所显示的标记22的主要部分中提取特征点。数字图像处理设备100可以将所提取的特征点互连。数字图像处理设备100可以通过比较特征点、特征点之间的连接线、连接线之间的线段等来判断手绘标记12和所显示的标记22是否相同。
参照图4的(4)，示出向服务器200发送信息的数字图像处理设备100。数字图像处理设备100可以感测手绘标记12，以判断手绘标记12和所显示的标记22是否相同。当判断这两个标记相同时，数字图像处理设备100可以将手绘标记12与所选择的完整信息21相链接。代替将手绘标记12与所选择的完整信息21相链接，数字图像处理设备100可以将校正后的标记与所选择的完整信息21相链接。也就是说，数字图像处理设备100可以将所显示的标记22与所选择的完整信息21相链接。如上所述，数字图像处理设备100已经确认了手绘标记12和所显示的标记22是相同的。因此，对于数字图像处理设备100而言，将这两个标记中的任一个与所选择的完整信息21相链接是相同的。也就是说，数字图像处理设备100可以链接标记信息而非真正的标记。
数字图像处理设备100可以将所选择的完整信息21和所链接的标记22发送到服务器200。服务器100可以接收并存储从数字图像处理设备100发送的所选择的完整信息21和所链接的标记22。一旦完成了发送，数字图像处理设备100就可以显示发送完成消息31。
如上所述，数字图像处理设备100可以包括不止一个共用属性标记，但是不显示标记。数字图像处理设备100可以感测用户所手绘的标记并且判断所感测的手绘标记是否是共用属性标记。当所感测的标记是共用属性标记时，数字图像处理设备100可以将共用属性标记与所选择的完整信息相链接并且将其发送到服务器。也就是说，数字图像处理设备100可以将所感测的标记与所选择的完整信息相链接并且将其发送到服务器。
已经参照图4描述了数字图像处理设备100只将诸如账户编号、电话号码等这样的完整信息发送到服务器200的实施方式。下文中，将描述数字图像处理设备100发送与完整信息相关的附加信息的实施方式。
图5是说明关于完整信息的发送以及相关的附加信息的一个实施方式的视图。
参照图5的(1)，示出了实体对象1和数字图像处理设备100。如以上参照图4描述的，当用户在实体对象1上手绘了信息14时，数字图像处理设备100可以感测实体对象1上的手绘信息14。数字图像处理设备100可以基于所感测的手绘信息14来搜索所存储的信息。数字图像处理设备100可以显示所检索的信息并且通过用户选择来选择所检索的信息(或完整信息)中的一条。
在一个实施方式中，用“Kim”表达的手绘名字14可以被书写到实体对象1上，并且数字图像处理设备100可以搜索包括“Kim”的多条信息。数字图像处理设备100可以通过用户选择来选择用“Kim aaa”表达的名字24。数字图像处理设备100的存储单元160还可以存储与所选择的名字相关的信息。例如，存储单元160可以存储名字“Kim aaa”以及诸如电话号码、电子邮件地址和邮寄地址这样的相关的附加信息。
数字图像处理设备100可以将标记25显示在所选择的完整信息24旁边并且感测实体对象1上的手绘标记15。数字图像处理设备100可以判断手绘标记15和所显示的标记25是否相同。
参照图5的(2)，示出了向服务器200发送信息的数字图像处理设备100。数字图像处理设备100可以在判断了这两个标记相同时将标记25与所选择的完整信息24相链接。数字图像处理设备100可以将所选择的完整信息24和所链接的标记25发送到服务器200。数字图像处理设备100还可以发送与所选择的完整信息24相关的附加信息。服务器200可以从数字图像处理设备100接收所选择的完整信息24、所链接的标记22和附加信息并且将其进行存储。在一个实施方式中，数字图像处理设备100可以将所选择的完整信息“Kim aaa”和包括电话号码、电子邮件地址和邮寄地址等在内的附加信息与标记相链接并且将其发送到服务器200。另选地，数字图像处理设备100可以将标记与所选择的完整信息相链接并且还将所选择的完整信息与相关的附加信息相链接，然后将其发送到服务器200。附加信息可以包括电话号码、ID、SNS地址、图片等。数字图像处理设备100可以在完成发送之后显示发送完成消息33。
数字图像处理设备100可以用作接收器。
图6是说明关于接收并显示共用的完整信息的一个实施方式的视图。
参照图6的(1)，示出了包括手绘信息的实体对象1和数字图像处理设备100。实体对象1可以包括手绘的部分信息11和手绘标记12。如以上参照图2描述的，即使数字图像处理设备100向服务器200发送所选择的完整信息和标记，实体对象1上的手绘字母也保留。数字图像处理设备100可以使用上面保留手绘字母的实体对象1来接收存储在服务器200中的信息。
数字图像处理设备100可以感测书写在实体对象1上的手绘的部分信息11和手绘标记12。数字图像处理设备100可以在同时感测到手绘的部分信息11和手绘标记12时将手绘的部分信息11和手绘标记12发送到服务器200。
参照图6的(2)，示出了从服务器200接收匹配信息的数字图像处理设备100。匹配信息是指包括所发送的信息和标记的完整信息。例如，当所发送的信息是“1234”时，所发送的标记是α(alpha)并且存储在服务器200中的第一信息是1234-5678-9012+α(alpha)，所存储的第一信息是与所发送的信息和标记匹配的信息。
服务器200可以接收部分信息11和标记12并且搜索所存储的信息。服务器200可以搜索包括部分信息11的完整信息并且判断所检索的完整信息是否与所链接的标记匹配。当检索到与所链接的标记匹配并且包括部分信息11的完整信息时，服务器200可以将所检索的完整信息发送到数字图像处理设备100。数字图像处理设备100可以接收并输出完整信息41。数字图像处理设备100可以只输出完整信息41，而不输出标记。
此外，数字图像处理设备100可以在将所选择的完整信息发送到服务器时，分离地识别手绘区域和自动选择的区域。
图7是说明关于将手绘区域与剩余的自动完成区域分离的一个实施方式的视图。
参照图7的(1)，示出了向服务器200发送所选择的完整信息的数字图像处理设备100。以上已经描述了数字图像处理设备100感测书写在实体对象上的手绘信息和标记并且将其发送到服务器200的处理，因此，以下将省略对其的详细描述。
当数字图像处理设备100选择一条完整信息并且显示标记时，所选择的完整信息和标记可以被划分成两个部分或三个部分。当被划分成两个部分时，所选择的完整信息和标记可以被划分成手绘区域21a和21c以及自动完成区域21b。当被划分成三个部分时，所选择的完整信息和标记可以被划分成手绘信息区域21a、自动完成信息区域21b和手绘标记区域21c。手绘信息区域21a可以被称为感测信息区域。自动完成信息区域21b可以被称为自动完成区域。数字图像处理设备100可以将所划分的两个或三个区域的信息以及所选择的完整信息和标记发送到服务器200。服务器200可以存储从数字图像处理设备100接收的所划分的两个或三个区域的信息以及所选择的完整信息和标记。
在图7的(2)中，示出了使用区域信息来搜索服务器200的数字图像处理设备100。用户可以在向服务器200发送存储在数字图像处理设备100中的信息时，在实体对象上手绘部分信息。数字图像处理设备100可以显示包括部分信息的完整信息。然后，当选择了一条完整信息时，数字图像处理设备100可以在所选择的完整信息旁边显示标记。数字图像处理设备100可以将标记显示在显示单元上，或者可以将标记投影到实体对象上。
数字图像处理设备100可以感测手绘标记。在用户手绘标记的情况下，用户可以在查看数字图像处理设备100上显示的完整信息和标记的同时在实体对象上手绘标记。由于标记被显示在完整信息旁边，因此如图7的(1)中示例性示出的，手绘标记可以与手绘的部分信息11分隔开给定距离。数字图像处理设备100可以将手绘的部分信息11和手绘标记12之间的给定距离感测为自动完成信息区域21b，并且将各区域的信息发送到服务器200。
假定用户在另一个实体对象2上手绘信息和标记13，该信息和标记13与图7的(1)中示出的信息和标记相同，但是它们之间没有距离。数字图像处理设备100可以感测新的手绘信息和标记13。然而，服务器200将所划分的两个或三个区域的信息与手绘信息和标记一起存储。因此，即使手绘信息和标记13彼此匹配，当区域信息不匹配时，服务器200也可以不判断匹配的完整信息的存在。服务器200可以在没有匹配的完整信息时向数字图像处理设备100发送信息不存在消息。数字图像处理设备100可以显示指示不存在匹配信息的消息43。
假定数字图像处理设备100感测到在原始实体对象1上绘制的手绘信息11和标记12。在原始实体对象1上绘制的手绘信息11和标记12之间存在给定区域。因此，数字图像处理设备100可以将给定区域感测为自动完成信息区域21b。数字图像处理设备100可以将手绘信息、标记和该区域的信息发送到服务器200，服务器200可以搜索与手绘信息、标记和区域信息匹配的完整信息。数字图像处理设备100可以从服务器200接收并显示所检索的完整信息。
此外，可以由用户来设置标记。
图8是说明根据一个实施方式的由用户设置标记的方法的视图。
参照图8的(1)，数字图像处理设备100可以执行标记设置模式51。数字图像处理设备100可以包括标记设置模式51并且通过用户选择来执行标记设置模式51。在一个实施方式中，数字图像处理设备100可以显示指示标记设置模式启动的消息，并且可以显示代表标记设置模式状态的通知。另选地，数字图像处理设备100可以输出命令绘制将设置在实体对象3上的标记的消息。
参照图8的(2)，数字图像处理设备100可以感测绘制在实体对象3上的标记16。数字图像处理设备100可以使用图像处理来识别用户所绘制的标记16。例如，数字图像处理设备100可以识别所绘制的图像形式、文本形式等的标记16。另选地，数字图像处理设备100可以识别多种形式的组合的标记16。数字图像处理设备100 可以将所识别的标记53显示在显示单元上，以使得用户能够确认标记53。
参照图8的(3)，数字图像处理设备100可以将所识别的标记16设置成具有服务器发送属性的标记。数字图像处理设备100可以将所识别的标记16设置成在从用户接收到设置命令时共用的标记。如上所述，数字图像处理设备100中包括的个人信息可以联接到标记并且被发送到服务器，以使得其他用户能够共用该个人信息。如此，标记可以具有服务器发送属性和共用属性。数字图像处理设备100可以输出设置完成消息55。
此外，可以以各信息为基础独立地使用标记，以区分发送到服务器的信息。
图9是说明关于区分所使用的标记的一个实施方式的视图。
参照图9的(1)，示出了发送一条信息的数字图像处理设备100。如上所述，数字图像处理设备100可以在感测到实体对象4上的手绘的部分信息时，输出包括部分信息的完整信息。数字图像处理设备100可以选择一条完整信息并且显示标记。数字图像处理设备100可以在将该手绘标记感测为所显示的标记时，将所选择的完整信息发送到服务器。
在一个实施方式中，标记可以被存储在存储单元160中。数字图像处理设备100可以显示所存储的标记当中的一个标记。另选地，数字图像处理设备100可以包括标记生成算法。数字图像处理设备100可以使用该算法来生成标记。可以随机地生成标记。
在一个实施方式中，数字图像处理设备100可以显示用α(alpha)表达的标记61，以向服务器发送第一信息。用α(alpha)表达的标记61可以是预先存储的标记，或者可以是使用标记生成算法所生成的第一标记。
当绘制与显示在实体对象上的标记61相同的标记17时，数字图像处理设备100可以将所显示的标记61与所选择的完整信息相链接并且将其发送到服务器。如上所述，所显示的标记16和所绘制的标记17相同。数字图像处理设备100可以检查所使用的标记，以便区分所发送的信息。也就是说，数字图像处理设备100可以从将要显示的标记中排除与所选择的完整信息一起发送的标记。
参照图9的(2)，示出了发送其它信息的数字图像处理设备100。数字图像处理设备100可以发送其它信息。数字图像处理设备100可以显示标记，以将其发送到服务器。所显示的标记可以是从存储在存储单元160中的标记当中选择的任意标记。然而，不可以选择先前所使用的用α(alpha)表达的标记61。另选地，数字图像处理设备100可以生成除了先前所使用的用α(alpha)表达的标记61以外的任意标记。在一个实施方式中，数字图像处理设备100可以选择并显示用χ(chi)表达的标记63。
数字图像处理设备100可以感测另一个实体对象5上的手绘的部分信息和手绘标记18。当判断手绘标记18和所显示的用χ(chi)表达的标记63相同时，数字图像处理设备100可以将所选择的完整信息与所显示的标记63相链接并且将其发送到服务器。数字图像处理设备100可以从将要显示的标记中排除所发送的标记(即，用χ(chi)表达的标记63)。
标记可以基本上具有服务器发送属性。另外，这些标记还可以具有一种或更多种其它属性。
图10是说明根据一个实施方式的具有编辑属性的标记的视图。
参照图10的(1)，示出了具有编辑属性的标记。数字图像处理设备100可以通过感测绘制在实体对象6上的部分信息来输出完整信息，并且在选择了一条完整信息27时显示标记29a。标记29a可以包括用于以基础形式识别附加属性的选项。在一个实施方式中，标记29a可以包括用于识别编辑属性的“E”选项和用于识别删除属性的“D”选项。如在图10的(1)中示例性示出的，这些附加属性选项可以与标记29a一起显示。另选地，虽然标记29a包括这种附加属性选项，但是数字图像处理设备100可以不显示附加属性选项。例如，虽然数字图像处理设备100只显示了用β(beta)表达的标记29a而没有显示任何附加属性选项，但是当用户绘制“E”连同用β(beta)表达的标记29a时，数字图像处理设备100可以感测“E”为具有编辑属性的标记。
参照图10的(2)，示出了执行编辑模式的数字图像处理设备100。在一个实施方式中，数字图像处理设备100可以在感测到用“E”表达的编辑符号连同显示在实体对象上的标记19a时执行编辑模式。
数字图像处理设备100可以使用各种方法来从用户接收文本。在一个实施方式中，数字图像处理设备100可以在所选择的完整信息27下方显示编辑窗口61和输入窗口63。数字图像处理设备100可以通过感测用户眼睛位于所显示的输入窗口63上来接收文本并且将该文本显示在编辑窗口61中。在另一个实施方式中，数字图像处理设备100可以在外部空间中显示虚拟键盘9。数字图像处理设备100可以通过感测位于虚拟键盘9上的用户的手等来接收文本并且将该文本显示在编辑窗口61中。在其它实施方式中，数字图像处理设备100可以经由音频单元来接收用户语音，并且将经由语音处理而获取的文本显示在编辑窗口61中。
在完成编辑之后，数字图像处理设备100可以只向服务器发送所选择的完整信息。数字图像处理设备100可以将与所选择的完整信息相关的编辑内容存储在存储单元中。另选地，数字图像处理设备100可以将编辑内容作为附加信息连同所选择的完整信息一起发送到服务器。数字图像处理设备100还可以将编辑内容存储在存储单元中。
图11是说明根据一个实施方式的具有删除属性的标记的视图。
参照图11的(1)，示出了具有删除属性的标记。数字图像处理设备100可以通过感测实体对象7上绘制的部分信息来输出完整信息并且通过用户选择来选择一条完整信息。可以在数字图像处理设备100中生成标记，或者可以由用户来预置标记。如以上参照图9描述的，数字图像处理设备100可以生成或显示与先前所使用的标记65a不同的标记(即，用α(alpha)表达的标记)。然而，当用户手绘先前所使用的标记65a而非所显示的标记时，数字图像处理设备100可以感测先前所使用的标记65a并且将所选择的完整信息28发送到服务器200。这是因为不必防止用户使用标记65a，尽管数字图像处理设备100将先前所使用的标记65a排除在外的原因是防止信息重复。另外，如图11的实施方式中一样，常常必须使用先前所使用的标记65a。数字图像处理设备100仅仅将先前所使用的标记65a排除在外，并且不删除先前所使用的标记65a。
数字图像处理设备100可以感测在实体对象7上绘制的标记19b和用于识别删除属性的选项(例如，“D”)。用于识别删除属性的选项可以被称为删除符号。数字图像处理设备100可以在向服务器200发送所选择的完整信息28和所感测的标记的同时发送用于删除所选择的完整信息的命令。
参照图11的(2)，示出了从中被删除所选择的完整信息的服务器200。服务器200可以从数字图像处理设备100接收所选择的完整信息28、所链接的标记29b和用删除符号表达的删除命令。服务器200搜索所存储的与所选择的完整信息28匹配的信息以及所链接的标记29b。当检索到所存储的匹配的信息时，服务器200可以删除所检索的信息。当服务器200删除所存储的信息时，服务器200可以向数字图像处理设备100发送删除完成消息。
数字图像处理设备100可以在从服务器200接收到删除完成消息时，输出用于确认是否删除了所选择的完整信息的消息35。数字图像处理设备100上的用α(alpha)表达的标记在所选择的完整信息被删除时变成未使用的标记。因此，数字图像处理设备100可以再次将用α(alpha)表达的标记添加到将显示的标记65b。此后，数字图像处理设备100可以显示将发送的用α(alpha)表达的标记。
下文中，将描述数字图像处理设备向服务器发送信息并且再从服务器接收信息的过程。
图12是根据一个实施方式的数字图像处理系统的时序图。
参照图12，数字图像处理设备100a可以感测手绘信息(S1210)。手绘信息可以是与信息的一部分对应的部分信息。
数字图像处理设备100a可以显示包括所感测的信息的一条或更多条完整信息，所感测的信息是部分信息(S1215)。可以存在一条完整信息，或者不存在完整信息。在一些情况下，所感测的信息可以与所存储的信息完全匹配。数字图像处理设备100a可以通过用户选择来选择一条完整信息。
当选择了完整信息时，数字图像处理设备100a可以显示所选择的完整信息(S1220)。数字图像处理设备100a可以感测用户在实体对象上手绘的标记(S1225)。可以由数字图像处理设备100a随机地生成标记。可以由用户预置标记。
在判断了所感测的标记是共用属性标记时，数字图像处理设备100a可以将所感测的共用属性标记连同所选择的完整信息一起发送到服务器200(S1230)。服务器200可以存储所发送的完整信息和所发送的标记(S1235)。
数字图像处理设备100b可以一起感测手绘信息和手绘标记(S1240)。手绘信息和手绘标记可以被绘制在实体对象上，以便数据从数字图像处理设备100a发送到服务器。数字图像处理设备100b可以将所感测的手绘信息和所感测的手绘标记发送到服务器并且请求匹配的信息(S1245)。
服务器200可以基于接收到的手绘信息和接收到的手绘标记来搜索所存储的信息(S1250)。一旦检索到包括接收到的信息和接收到的标记的完整信息，服务器200就将所检索的完整信息发送到数字图像处理设备100b(S1255)。
数字图像处理设备100b可以显示接收到的完整信息(S1260)。
下文中，将描述数字图像处理设备的控制方法的流程图。
图13是根据一个实施方式的数字图像处理设备的控制方法的流程图。
参照图13，数字图像处理设备可以感测手绘信息，并且可以搜索并显示包括所感测的信息的一条或更多条完整信息，所感测的信息是部分信息(S1310)。所感测的信息可以是与所检索的信息的一部分对应的信息，并且可以是所检索的信息本身。完整信息可以是个人信息。例如，个人信息可以包括账户编号、电话号码、信用卡编号、密码、邮寄地址、电子邮件地址、备忘录等。
数字图像处理设备可以在所检索的信息当中选择一条或更多条完整信息中的一条并且显示所选择的完整信息(S1320)。数字图像处理设备可以通过用户选择来选择一条完整信息。在一个实施方式中，数字图像处理设备可以显示预先存储的标记中的一个，并且可以使用标记生成算法来生成并显示标记。标记可以随机生成。另选地，可以由用户生成并设置标记。标记可以包括符号、图形、字符、数字等。
数字图像处理设备可以感测手绘标记，并且当所感测的标记是共用属性标记时，将共用属性标记连同所选择的完整信息一起发送(S1330)。标记可以具有服务器发送属性。
根据本说明书的数字图像处理设备和系统及其控制方法应该不限于以上实施方式的配置和方法，并且各个实施方式中的所有或一些可以被选择性地组合来实现各种修改形式。
此外，根据本说明书的数字图像处理设备和系统及其控制方法可以被实现为能够由设置在数字图像处理设备中的处理器读取的记录介质中的软件。处理器可读记录介质可以是按照处理器可读方式存储数据的任何类型的记录装置。处理器可读记录介质的示例可以包括ROM、RAM、CD-ROM、磁带、软盘和光学数据存储装置。另外，处理器可读记录介质包括载波(例如，通过互联网进行数据传输)。另外，处理器可读记录介质可以分布于与网络连接的计算机系统，使得处理器可读代码被存储在其中并且按照分散方式用其执行。
虽然以上例示并描述了示例性实施方式，但当然，对于本领域的技术人员将显而易见的是，本说明书不限于上述的特定实施方式，并且能够在不脱离本申请的精神或范围的情况下对本说明书进行各种修改和变型，并且所述修改和变型不应该被理解为脱离了本说明书的观点或范围。
用于本发明的模式。

Claims (20)

1.一种数字图像处理设备，该数字图像处理设备包括：
图像传感器单元，该图像传感器单元被配置为感测手绘信息；
显示单元，该显示单元被配置为显示包括所感测的手绘信息的一条或更多条完整信息，所感测的手绘信息是部分信息；
通信单元，该通信单元被配置为将从所述一条或更多条完整信息当中选择的完整信息发送到服务器；以及
控制器，
其中，所述控制器控制所述显示单元以搜索并显示包括所感测的手绘信息的所述一条或更多条完整信息，并且控制所述显示单元以在选择了所检索的所述一条或更多条完整信息中的一条时，显示所选择的完整信息，并且
其中，所述控制器感测手绘标记，并且当所感测的手绘标记是共用属性标记时，将所述共用属性标记与所选择的完整信息相链接并且控制所述通信单元以将所选择的完整信息与所述共用属性标记一起发送。
2.根据权利要求1所述的设备，其中，所述控制器控制所述显示单元以将所述共用属性标记与所选择的完整信息一起显示，并且在感测到沿着所显示的共用属性标记绘制的手绘标记时，将所述共用属性标记与所选择的完整信息相链接。
3.根据权利要求1所述的设备，其中，所选择的完整信息包括账户编号、电话号码、信用卡编号、密码、邮寄地址、电子邮件地址和备忘录中的至少一个。
4.根据权利要求1所述的设备，其中，所选择的完整信息与所述共用属性标记相链接并且被发送到所述服务器，因此具有共用属性。
5.根据权利要求1所述的设备，该设备还包括被配置为存储信息的存储单元，
其中，所述控制器基于所感测的信息来搜索所存储的信息，并且控制所存储的信息当中的包括所感测的信息的一条或更多条完整信息的显示。
6.根据权利要求1所述的设备，其中，所述共用属性标记是由用户设置的标记。
7.根据权利要求2所述的设备，其中，所述共用属性标记是随机生成的。
8.根据权利要求2所述的设备，其中，所述控制器从将要显示的一组共用属性标记中将与所选择的完整信息一起发送的所述共用属性标记排除在外。
9.根据权利要求8所述的设备，其中，所述控制器将被排除在外的所述共用属性标记添加到在经过预定时间之后将要显示的所述一组共用属性标记中。
10.根据权利要求8所述的设备，其中，当从所述服务器中删除了所发送的完整信息时，所述通信单元从所述服务器接收指示所述完整信息被删除的消息，并且
其中，所述控制器将被排除在外的所述共用属性标记添加到将要显示的所述一组共用属性标记中。
11.根据权利要求1所述的设备，其中，所述标记包括至少一个符号、图形、字符和数字。
12.根据权利要求1所述的设备，其中，所述控制器将所选择的完整信息划分成所感测的信息的区域和剩余的自动完成区域。
13.根据权利要求1所述的设备，其中，所述控制器在经由所述图像传感器单元同时感测到所述手绘信息和所述手绘标记时，控制从所述服务器接收包括所述手绘信息和所述手绘标记的完整信息并显示所述完整信息。
14.根据权利要求1所述的设备，其中，所述控制器还发送与所选择的完整信息相关的附加信息。
15.根据权利要求14所述的设备，其中，所述控制器在所述手绘标记中包括预定编辑符号时执行编辑模式，并且控制在完成了与所选择的完整信息相关的编辑时向所述服务器发送所选择的完整信息，或者将所述附加信息与所选择的完整信息一起发送到所述服务器。
16.根据权利要求15所述的设备，其中，执行与所选择的完整信息相关的编辑，以包括虚拟键盘输入和语音输入中的至少一个。
17.根据权利要求1所述的设备，其中，所述控制器控制在所述手绘标记中包括预定删除符号时向所述服务器发送用于删除所选择的完整信息的命令。
18.根据权利要求17所述的设备，其中，所述控制器控制用于确认所选择的完整信息是否被删除的消息的输出。
19.一种数字图像发送/接收系统，该数字图像发送/接收系统包括数字图像发送设备、数字图像接收设备和服务器，
其中，所述数字图像发送设备感测手绘信息，显示包括所感测的手绘信息的一条或更多条完整信息，所感测的信息是部分信息，当选择了所述一条或更多条完整信息中的一条时，显示所选择的完整信息，感测手绘标记，并且当所感测的手绘标记是共用属性标记时，将所述共用属性标记与所选择的完整信息相链接并且将所选择的完整信息与所述共用属性标记一起发送，
其中，所述服务器接收并存储所选择的完整信息和所链接的共用属性标记，并且在从所述数字图像接收设备接收到所述手绘信息连同所述手绘标记时发送包括所接收到的标记和所接收到的信息的完整信息，并且其中，所述数字图像接收设备在经由图像传感器单元同时感测到所述手绘信息和所述手绘标记时向所述服务器请求信息，并且从所述服务器接收包括所述手绘信息和所述手绘标记的完整信息并显示所述完整信息。
20.一种数字图像处理设备的控制方法，该控制方法包括以下步骤：
感测手绘信息，并且搜索并显示包括所感测的手绘信息的一条或更多条完整信息，所感测的手绘信息是部分信息；
当选择了所检索的所述一条或更多条完整信息中的一条时，显示所选择的完整信息；以及
感测手绘标记，并且当所感测的手绘标记是共用属性标记时，将所述共用属性标记与所选择的完整信息相链接并且将所选择的完整信息与所述共用属性标记一起发送。
CN201480080350.1A 2014-07-08 2014-10-08 数字图像处理设备和系统及其控制方法 Expired - Fee Related CN106663185B (zh)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
KR10-2014-0084957 2014-07-08
KR1020140084957A KR20160005899A (ko) 2014-07-08 2014-07-08 디지털 이미지 처리 장치, 시스템 및 제어 방법
US14/464,256 2014-08-20
US14/464,256 US9582712B2 (en) 2014-07-08 2014-08-20 Digital image processing apparatus and system and control method thereof
PCT/KR2014/009462 WO2016006764A1 (en) 2014-07-08 2014-10-08 Digital image processing apparatus and system and control method thereof

Publications (2)

Publication Number Publication Date
CN106663185A true CN106663185A (zh) 2017-05-10
CN106663185B CN106663185B (zh) 2020-06-16

Family

ID=55067808

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201480080350.1A Expired - Fee Related CN106663185B (zh) 2014-07-08 2014-10-08 数字图像处理设备和系统及其控制方法

Country Status (5)

Country Link
US (2) US9582712B2 (zh)
EP (1) EP3167405B1 (zh)
KR (1) KR20160005899A (zh)
CN (1) CN106663185B (zh)
ES (1) ES2738727T3 (zh)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20160005899A (ko) 2014-07-08 2016-01-18 엘지전자 주식회사 디지털 이미지 처리 장치, 시스템 및 제어 방법
US11054894B2 (en) 2017-05-05 2021-07-06 Microsoft Technology Licensing, Llc Integrated mixed-input system
US10895966B2 (en) 2017-06-30 2021-01-19 Microsoft Technology Licensing, Llc Selection using a multi-device mixed interactivity system
US11023109B2 (en) * 2017-06-30 2021-06-01 Microsoft Techniogy Licensing, LLC Annotation using a multi-device mixed interactivity system
EP3881296A4 (en) * 2018-12-20 2022-01-05 Samsung Electronics Co., Ltd. METHOD AND DEVICE FOR EXTENDED REALITY

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6304234B1 (en) * 1997-02-26 2001-10-16 Olympus Optical Co., Ltd. Information processing apparatus
CN101093433A (zh) * 2007-07-18 2007-12-26 江苏新科数字技术有限公司 导航装置的手写输入的工作法
CN101356468A (zh) * 2005-11-15 2009-01-28 卡尔蔡司视觉澳大利亚控股有限公司 眼镜片模拟系统和方法
CN103460256A (zh) * 2011-03-29 2013-12-18 高通股份有限公司 在扩增现实系统中将虚拟图像锚定到真实世界表面
CN103733196A (zh) * 2011-08-03 2014-04-16 谷歌公司 用于实现现实世界用户经历的可搜索历史的方法及设备

Family Cites Families (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5875017A (en) * 1996-05-31 1999-02-23 Hoya Corporation Ocular optical system simulation apparatus
JP2004094653A (ja) * 2002-08-30 2004-03-25 Nara Institute Of Science & Technology 情報入力システム
US20060212430A1 (en) 2005-03-18 2006-09-21 Searete Llc, A Limited Liability Corporation Of The State Of Delaware Outputting a saved hand-formed expression
US7996589B2 (en) 2005-04-22 2011-08-09 Microsoft Corporation Auto-suggest lists and handwritten input
US8732570B2 (en) 2005-09-08 2014-05-20 Ricoh Co. Ltd. Non-symbolic data system for the automated completion of forms
US8358320B2 (en) 2007-11-02 2013-01-22 National University Of Singapore Interactive transcription system and method
US8856903B2 (en) * 2008-09-10 2014-10-07 Nec Corporation Content delivery system
BRPI1014397A2 (pt) * 2009-05-27 2016-04-05 Google Inc dados de aplicação por computador em resultados de pesquisa
US8433759B2 (en) 2010-05-24 2013-04-30 Sony Computer Entertainment America Llc Direction-conscious information sharing
US8633947B2 (en) * 2010-06-02 2014-01-21 Nintendo Co., Ltd. Computer-readable storage medium having stored therein information processing program, information processing apparatus, information processing system, and information processing method
US20120297294A1 (en) 2011-05-17 2012-11-22 Microsoft Corporation Network search for writing assistance
US9122321B2 (en) * 2012-05-04 2015-09-01 Microsoft Technology Licensing, Llc Collaboration environment using see through displays
KR101977072B1 (ko) 2012-05-07 2019-05-10 엘지전자 주식회사 음성 파일과 관련된 텍스트의 표시 방법 및 이를 구현한 전자기기
WO2013191315A1 (ko) * 2012-06-21 2013-12-27 엘지전자 주식회사 디지털 이미지 처리 장치 및 방법
KR102063952B1 (ko) * 2012-10-10 2020-01-08 삼성전자주식회사 멀티 디스플레이 장치 및 멀티 디스플레이 방법
KR20140052294A (ko) * 2012-10-24 2014-05-07 삼성전자주식회사 헤드-마운티드 디스플레이 장치에서 가상 이미지를 사용자에게 제공하는 방법, 기계로 읽을 수 있는 저장 매체 및 헤드-마운티드 디스플레이 장치
KR101991133B1 (ko) * 2012-11-20 2019-06-19 마이크로소프트 테크놀로지 라이센싱, 엘엘씨 헤드 마운트 디스플레이 및 그 제어 방법
US9026429B2 (en) 2012-12-05 2015-05-05 Facebook, Inc. Systems and methods for character string auto-suggestion based on degree of difficulty
KR102098815B1 (ko) * 2013-05-20 2020-04-08 삼성전자주식회사 어플리케이션의 운영을 위한 전자 장치
KR102108066B1 (ko) * 2013-09-02 2020-05-08 엘지전자 주식회사 헤드 마운트 디스플레이 디바이스 및 그 제어 방법
KR20160005899A (ko) * 2014-07-08 2016-01-18 엘지전자 주식회사 디지털 이미지 처리 장치, 시스템 및 제어 방법
JP6524661B2 (ja) * 2014-12-19 2019-06-05 富士通株式会社 入力支援方法、入力支援プログラムおよび入力支援装置

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6304234B1 (en) * 1997-02-26 2001-10-16 Olympus Optical Co., Ltd. Information processing apparatus
CN101356468A (zh) * 2005-11-15 2009-01-28 卡尔蔡司视觉澳大利亚控股有限公司 眼镜片模拟系统和方法
CN101093433A (zh) * 2007-07-18 2007-12-26 江苏新科数字技术有限公司 导航装置的手写输入的工作法
CN103460256A (zh) * 2011-03-29 2013-12-18 高通股份有限公司 在扩增现实系统中将虚拟图像锚定到真实世界表面
CN103733196A (zh) * 2011-08-03 2014-04-16 谷歌公司 用于实现现实世界用户经历的可搜索历史的方法及设备

Also Published As

Publication number Publication date
US20160012284A1 (en) 2016-01-14
EP3167405B1 (en) 2019-07-03
US9582712B2 (en) 2017-02-28
US20170124389A1 (en) 2017-05-04
EP3167405A4 (en) 2018-02-28
CN106663185B (zh) 2020-06-16
EP3167405A1 (en) 2017-05-17
US9940512B2 (en) 2018-04-10
KR20160005899A (ko) 2016-01-18
ES2738727T3 (es) 2020-01-24

Similar Documents

Publication Publication Date Title
US11182609B2 (en) Method and apparatus for recognition and matching of objects depicted in images
KR102161764B1 (ko) 카툰 이미지를 이용한 메신저 대화창 표시 방법 및 컴퓨터 판독 가능한 기록 매체
CN104104768B (zh) 通过使用呼叫方电话号码来提供附加信息的装置和方法
CN102377873B (zh) 显示信息的方法和使用该方法的移动终端
CN106663185A (zh) 数字图像处理设备和系统及其控制方法
TWI539303B (zh) 用以標記多個數位影像之系統及方法
US20170357443A1 (en) Intelligent virtual keyboards
EP3096207B1 (en) Display control method, data process apparatus, and program
CN109074172A (zh) 向电子设备输入图像
CN110084056A (zh) 在个人设备上显示隐私信息
CN110325987B (zh) 语境语音驱动深度书签
US10191920B1 (en) Graphical image retrieval based on emotional state of a user of a computing device
US10140747B2 (en) Method and apparatus for controlling playback speed of animation message in mobile terminal
CN107209863A (zh) 信息处理装置和程序
CN106683201A (zh) 一种基于三维虚拟现实的场景编辑方法和装置
CN111512370A (zh) 在录制的同时对视频作语音标记
CN109815462A (zh) 一种文本生成方法及终端设备
CN106687944A (zh) 使用语言生成进行的基于活动的文本重写
JP2018109893A (ja) 情報処理方法、装置、及びプログラム
US10503758B2 (en) Information processing apparatus using hierarchical tags for streamlining the presentation of information and non-transitory computer readable medium for the same
JP7069631B2 (ja) 情報処理装置及び情報処理プログラム
CN107301159A (zh) 一种文档定位方法及装置
CN117912064A (zh) 一种指纹录入方法及相关装置
CN113032057A (zh) 一种交互方法、装置和电子设备
CN113383302A (zh) 局部选取轨迹和轨迹拆合的方法、电子设备、存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20200616

Termination date: 20211008

CF01 Termination of patent right due to non-payment of annual fee