CN1154039C - 用于记录手写信息的设备和方法及确定手持设备位置的方法 - Google Patents

用于记录手写信息的设备和方法及确定手持设备位置的方法 Download PDF

Info

Publication number
CN1154039C
CN1154039C CNB998066753A CN99806675A CN1154039C CN 1154039 C CN1154039 C CN 1154039C CN B998066753 A CNB998066753 A CN B998066753A CN 99806675 A CN99806675 A CN 99806675A CN 1154039 C CN1154039 C CN 1154039C
Authority
CN
China
Prior art keywords
equipment
hand
image
character
information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CNB998066753A
Other languages
English (en)
Other versions
CN1303496A (zh
Inventor
���ء����߸�
克里斯特·法雷尤斯
�������ɭ
奥拉·雨果森
彼得·埃里森
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Anoto Group AB
Original Assignee
C Technologies AB
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from SE9801535A external-priority patent/SE511855C2/sv
Application filed by C Technologies AB filed Critical C Technologies AB
Publication of CN1303496A publication Critical patent/CN1303496A/zh
Application granted granted Critical
Publication of CN1154039C publication Critical patent/CN1154039C/zh
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0354Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of 2D relative movements between the device, or an operating part thereof, and a plane or surface, e.g. 2D mice, trackballs, pens or pucks
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/038Control and interface arrangements therefor, e.g. drivers or device-embedded control circuitry
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/0304Detection arrangements using opto-electronic means
    • G06F3/0317Detection arrangements using opto-electronic means in co-operation with a patterned surface, e.g. absolute position or relative movement detection for an optical mouse or pen positioned with respect to a coded surface
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0346Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of the device orientation or free movement in a 3D space, e.g. 3D mice, 6-DOF [six degrees of freedom] pointers using gyroscopes, accelerometers or tilt-sensors
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0354Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of 2D relative movements between the device, or an operating part thereof, and a plane or surface, e.g. 2D mice, trackballs, pens or pucks
    • G06F3/03545Pens or stylus
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/10Character recognition
    • G06V30/14Image acquisition
    • G06V30/142Image acquisition using hand-held instruments; Constructional details of the instruments
    • G06V30/1423Image acquisition using hand-held instruments; Constructional details of the instruments the instrument generating sequences of position coordinates corresponding to handwriting
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/10Character recognition
    • G06V30/32Digital ink

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Multimedia (AREA)
  • Image Input (AREA)
  • Character Input (AREA)
  • Input Circuits Of Receivers And Coupling Of Receivers And Audio Equipment (AREA)
  • Management Or Editing Of Information On Record Carriers (AREA)
  • Position Input By Displaying (AREA)
  • Processing Or Creating Images (AREA)

Abstract

一种用于以字符、符号、图形、绘画、手迹及由手的移动所限定的类似手写信息的形式记录手写信息的设备,包括适于由手的移动进行手的移动并在记录装置移动时记录一组带有部分重叠内容的图像的记录装置(3)。该设备进一步包括图像处理装置(4),它适于借助部分重叠的内容确定图像的相对位置,用于提供该单元已被如何移动的数字格式的说明及以这种方式的手写信息的数字表示。记录手写信息的一种方法也被公开。

Description

用于记录手写信息的设备和方法及确定手持设备位置的方法
本发明涉及一种用于记录以字符、符号、图形、手迹及由手的移动所限定的类似于手写信息的形式手写的设备,包括适于进行手的移动由手移动的并在记录装置被移动时适于记录带有部分重叠内容的多个图像的记录装置,本发明也涉及一种用于记录手写信息的方法。
今天,实际上所有的信息处理都在计算机中进行。处理的信息通常包括借助于键盘被输入到计算机的文本。如果要被输入的文本已被写在一张纸上,一台扫描仪有时被用于输入。
有时,需要把手写的或手产生的其它信息输入到计算机。这方面的一个例子是某人想要输入个人的签名。近来,这可以通过扫描该签名或通过该人借助于鼠标在绘画程序中写出他的签名来进行。
某些更小的计算机,所谓的袖珍计算机,具有能借助一支笔使手写的文本输入的界面。更具体地,这样的计算机具有在其上使用者用笔书写的一个触敏屏幕。该计算机记录笔通过屏幕的移动。ICR软件(ICR=智能字符识别)识别由记录的移动所表示的字符并将它们以字符编码格式存入计算机。这项技术的缺点是需要利用触敏屏幕。
此外,通过JP03265023,可了解借助于其顶端带有一个小球的笔将手写文本输入到计算机。当某人用笔在一个衬底(substrat)上“写”时,球滚动。借助于关于球移动多远和其方向的信息,计算机可以确定笔如何被移动。以移动机械元件为基础的这个设备和其它设备的缺点是移动元件使设备更难于制造且不耐用。
此外,EP 0 629 759公开了一种用于以图像的形式存储手写文本的设备。这种设备没有移动部件。它包括一个笔尖和一个被用于再现用笔尖所写内容的CCD平面传感器。在一个实施例中,设备具有在第一端的笔尖和在第二端的CCD传感器。在这种情况下,使用者首先用笔尖书写,然后旋转设备并启动CCD传感器以再现已写的内容。在另一个实施例中,笔尖和CCD传感器位于设备的同一端。在这种情况下,CCD传感器通过记录图像不断地再现书写的内容。具有部分重叠内容的图像被组合到已被书写的复合图像中。当已写的信息要被显示时,复合图像被显示。
本发明的一个目的是要提供用于记录字符、符号,图形、手迹和由手的移动所限定的类似于手写信息形式的手写信息的一种可替换的方法和一种可替换的设备。
这个目的通过以下设备和方法来实现:
一种用于以字符、符号、图形、绘画、手迹及由手的移动所限定的类似的手写信息形式记录手写信息的设备,包括适于由手所移动进行手的移动并在记录装置被移动时记录一组带有部分重叠内容的图像的记录装置,其特征在于:该设备进一步包括图像处理装置,它适于借助部分重叠内容确定图像的相对位置,用于提供记录装置已被如何移动的数字格式说明及用这种方式手写信息的数字表示。
一种以字符、符号、图形、绘画、手迹和由手的移动所限定的类似手写信息的形式记录手写信息的方法,包括如下步骤:-用手移动一设备进行手的移动;-在移动该设备时,记录一组带有部分重叠内容的图像;及-借助于部分重叠内容确定图像的相对位置,用于提供该设备已被如何移动的数字格式的说明及以这种方式手写信息的数字表示。
因此,根据第一方面,本发明涉及用于记录字符、符号、图形、手迹及由手的移动所限定的类似于手写信息形式的手写信息的一种设备。该设备包括记录装置,它适于由进行手的移动的手所移动并在记录装置被移动时记录一组带有部分重叠内容的图像。该设备进一步包括适于借助于部分重叠内容确定图像的相对位置的图像处理装置,用于以数字格式提供记录装置已被如何移动的说明及以这种方式手写信息的数字显示。
此外,该设备以使用图像的设想为基础。然而,图像不像在现有技术中被用来再现手写信息而是被用来确定,在使用者完成手的移动例如“写”或“画”某物时,记录装置如何被移动。因此,该设备不必存储手写信息的图像但足够存储关于移动的信息。这也意味着手写信息可以被输入计算机,而无需任何信息同时在书写表面由笔尖以墨水或某些颜料被“书写”。如果只有记录装置在给出图像内容使它能确定图像如何重叠的表面被引导时,该信息能直接在空中“书写”。不用说,该设备也可以装有笔尖,并且“基于颜料”的书写可以伴随电子记录同时发生。然而,在这种情况下,基于颜料的书写不必发生在记录装置的视野之内。当手写信息在记录后要被表示时,这在基于记录装置已被如何移动的存储说明的基础上被进行。
因此,该设备进行手的移动的数字化以便一台计算机能处理由手的移动所代表的信息。在这篇文本中,应该指出记录装置的移动由记录装置的末端投射在记录装置在其上被引导的表面所表示。
图像处理装置最好借助于适当的编程处理器被执行。这也可以用硬件或用硬件和软件的某种结合被完全执行。
在一个有益的实施例中,该设备适于以数字格式存储所述的说明。然后,比如它可以借助于说明表示记录的手写信息。可供选择地,说明可以被发送到,比如,可以产生显示的个人计算机。
该设备的一个主要优点是图像记录功能可以被用于其它用途以及由此使它能提供一种有几个不同应用领域的设备。例如,图像记录功能可以被用于输入文本和图像,它们在信息载体的某种形式上通过借助于传感器使文本和/或图像成像已被限定。这使使用者利用全新工具能更有效地工作。单用这个工具,使用者由此可以记录不同来源的文本和图像并用手写信息补充它。用这种方式,该设备可以成为供学生、职员和其工作涉及信息处理的其它个人使用的重要工具。
相应地,说明包括一组移动矢量,每个矢量表示单元如何在记录的两个图像间地移动。移动矢量可以借助于在某些合适的坐标系中表示的在第一幅图像中某一点的坐标和在第二幅图像中相同点的坐标来叙述。移动矢量构成了存储记录单元已被如何移动的说明的存贮器存储方式。
在某些应用中,对于计算机要了解在手的移动期间记录单元已被如何移动可能是有利的。例如,这可能是某人想要输入手迹或对应于不是均匀线条的其它信息的情况。为此,说明可包括旋转指示,每个指示表示记录单元在两个图像的记录之间被如何旋转。
此外,在某一个实施例中,设备适于确定记录单元在两个图像的记录之间移动的速度。在这个实施例中,设备可以确定在由手的移动所规定的移动路径的不同部分的速度。这可能是有意义的,例如,假如某人想要检查签字的真实性,为此目的设备可以进一步适于将由此确定的速度与预记录的速度值相比较,以便检查实际的签字人是与签写早期签名的是同一人,由此记录的速度值被获得。
如通过说明所提到的,某人想要在计算机中处理的信息通常由文本,即各种类型的字符所组成。由于这个原因,设备有益地适于借助于以数字格式的记录单元已被如何移动的说明,识别字符并将它们以字符编码格式存储。ICR软件有益地被用于这个目的。在设备中以字符编码格式存储输入信息的优点是它需要更少的存储空间。
有益地,该设备具有带有一个二维传感器表面用于记录图像的一个光感应传感器装置。在这篇文本中,二维传感器表面实际上指的是传感器表面必须能使带有象素矩阵的表面成像以便图像能被记录并带有重叠内容。CCD传感器和CMOS传感器就是合适的传感器的例子。
图像的相对位置的确定应该水平地和垂直地被进行以便能输入由手的随意移动所规定的手写信息。
当记录单元被移动时,它被引导到借助于图像被成像的表面上。该单元可以与该表面接触着扫过该表面,在这种情况下手的移动以与假设某人正用笔在该表面上写和画同样的方式被进行。作为一种变形,它可以被保持在距该表面一定的距离,因此它不需要一个平滑的表面而是可以具任何种类的外形,在这种情况下手的移动用与假设某人正在空中写和画同样的方式被进行。这二种情况的目的都是记录单元将连续地沿它的移动路径记录位于它的视野之内的图像。
为了使它更易于让使用者借助记录单元去“看”他正在写或画的,该设备最好包括用于指示在表面上单元如何被移动的跟踪装置。当然,跟踪装置可以包括一种笔的功能,但最好它们应该在它们被引导的衬底上留下非永久的标志。例如,它们可以包括适于将光投射到该表面一个照明装置。
在一个最佳实施例中,记录装置和图像处理装置被装在公共的盒内,它适于由手移动进行手的移动。然后它成为便于使用者单独携带并且随后易于在所有的情况下使用的一种工具。当然,记录的手写信息从该设备被发送到,比如,一台固定的计算机。
在一种可供选择的实施例中,记录装置被装在第一个壳内而图像处理装置被装在第二个壳内,例如,记录装置被连接至其上的一台固定式计算机。
前面提到的可供选择的实施例的优点实际上是需要更少的数据从设备传送到计算机。
此外,在一个特殊的最佳实施例中,该设备对于一种操作模式是可调节的,其中它适于通过借助于一组带有部分重叠内容的图像使信息成像而记录被设置在信息载体上的预定的信息,特别是文本。在这个实施例中,设备记录图像的能力以二种方式被利用,使用者明显地发现了感兴趣的是它没有责任为这些功能去使用带有不同技术解决方案的二种不同的工具。
此外,设备有助于调节到另一种操作模式,其中它适于使位于距该设备一定距离的对象成像。在这个操作模式中,该设备由此具有摄像的功能。在这个操作模式中,该设备由此具有摄像的功能。这个操作模式可以要求设备装备可调节的透镜系统,它使得在更长的距离上可以轮廓分明地成像。
此外,设备可以有益地装有用于与一个外部单元无线通讯的收发器。用这种方式,信息可以在设备和比如一台外部计算机之间被传送。该收发器可能是一个IR收发器,一个移动无线电收发器,或一些合适的其它收发器。
根据本发明的第二方面,它涉及一种用于记录字符、符号、图形、画、手迹和由手的移动所规定类似于手写信息形式的手写信息的方法,包括如下步骤:用手移动一个设备进行手的移动;在该设备移动时记录一组带有重叠内容的图像;及借助于部分重叠内容确定图像的相对位置,它用于提供设备被如何移动的数字格式的说明和以这种方式的手写信息的数字表示。该方法具有根据设备与上文所述的同样的优点。
根据本发明的第三个方面,它涉及一种用于确定适于在被移动时记录一组图像的设备位置的方法,该图像随被用于确定设备的位置的部分重叠内容被记录。该发明的这个方面,例如,可以被用于解决:与确定三维鼠标位置有关的问题。三维鼠标是带有至少六个自由度的控制设备。现在,加速度表被用于确定三维鼠标如何被移动。这些加速表的缺点就是它们只能确定相对位置。因此,它们不能确定何时控制设备以返回到初始位置这样的方式被移动。如果不是那样,一个三维鼠标装有一个或多个带有上述结构的设备,每个设备可以通过记录带有部分重叠内容的图像被用于确定沿一个轴的平移位置和绕该轴的旋转位置。通过将每个图像与初始位置的图像相比较,能确定该设备何时返回到初始位置。此外,通过确定图像的相对位置和借助于图像记录频率,可能确定移动的速度、距离和移动的方向及现在的位置。
本发明现在将通过表示发明能被如何执行的一个例子的方式,根据附图被说明,其中
图1示意地表示根据本发明的一种设备的一个实施例;
图2是在根据本发明设备的一个实施例中电子电路的框图;
图3是表示该设备运行的流程图;
图4是表示一个与手写信息的输入有关的表面如何被成像的示意说明;
图5说明输入信息怎样能在显示器中被显示;
图6是说明该设备如何被用在扫描仪模式中的一个流程图;及
图7a-7e示意地表示文本怎样以扫描仪模式被记录。
在图1所表示的根据本发明的设备的实施例中,它包括具有大约和传统的强光笔同样形状的外壳1。壳的一个短边具有一个窗2,它在信息借助于该设备要被输入到计算机时,是用来靠着或被保持在距表面一定距离处。窗2稍微凹入壳中以便不会损坏纸。
壳1主要包含一个光学部件3,信息被馈送到其中的一个电子电路部件4,和一个电源5。
光学部件3被用于记录图像并因此作为记录装置能被如何执行的一个例子。它包括发光二极管(LED)6,透镜系统7及光感应传感器8,它们构成与电子电路部件4的接口。
LED6的尾部要照亮现在正位于窗下的一个表面。一个漫射器9装在LED6的前面用于漫射光线。
透镜系统7具有将位于窗2下表面的图像尽可能准确地投射到光感应传感器8的任务。如果传感器8具有一个比窗2小的光感应区域,则透镜系统7也需要减小图像。
在这个例子中,光感应传感器8包括一个带有内装A/D转换器的二维、方形CCD单元(CCD=充电耦合装置)。这样的传感器是在市场上购买的。传感器8以与窗2成一个小角度安装并装在它自己的印刷电路板11上。
设备的电源从电池12获得,它被装在壳内的隔离仓13中。
图2的框图示意地表示了电子电路部件4。它被用于处理记录的图像并由此作为图像处理装置能被如何执行的一个例子。它包括处理器20,处理器借助总线21被连接到其中处理器的程序被存储的ROM22,构成处理器的工作存储器并且其中来自传感器的图像以及识别和翻译的字符被存储的读/写存储器23,控制逻辑单元24以及传感器8和LED6。控制逻辑单元24依次被连接到一些外围单元上,包括被装在壳内的显示器25,用于传送至/来自外部计算机的信息的一个收发机26,借助于它使用者能控制设备并且具体地在,其中手写信息被输入的第一模式,其中设备作为一个扫描仪操作的第二模式和其中设备作为一个摄像机操作的第三模式之间可调节设备的按钮27,发射一束光束使其更易于使用者了解他输入的信息的一个跟踪LED28,以及在笔准备记录信息时指示的一个指示设备29,例如一个LED。到存储器、传感器和外围设备的控制信息在控制逻辑单元24中被产生。控制逻辑也控制对处理器的中断的产生和优先次序。按钮27,IR收发机26,显示器25和跟踪LED28,及LED6通过处理器在控制逻辑单元中的寄存器内的写和读被存取。按钮27在它们被启动时产生对处理器20的中断信号。
设备的操作现在将被叙述,预先假设使用者首先要输入手写文本。使用者在具有某种格式的表面上引导设备。例如,该表面可能是载有文本的一页纸、一面墙或一碗糖。他按动按钮27去启动该设备并随后用引导到选择的表面上的设备“写”他想要输入的文本。跟踪LED28借助于发光点连续地在表面上指示移动的路径使使用者对移动有所了解。当使用者启动该笔时,处理器20命令LED6开始产生选通脉冲,以一个预定的频率、合适的约25Hz,因此由传感器记录的图像被存储在读/写存储器23中。当使用者已写出了他想要输入的信息,他释放按钮27,于是处理器20切断LED6。然后使用者可以控制该设备将输入的信息显示在显示器25上或通过IR收发机26将它传送到一台外部计算机上。在显示器上直接地显示所扫描信息的可能性已证实非常重要,因为使用者经常想要核对是否正确的信息已被扫描。
图3的流程图更详细地表示了设备功能怎样与手写信息的输入相联系。在步骤301中,当该设备在相对于其被引导的表面上被移动时,图像被扫描并带有重叠内容。该扫描的图像被存储在读/写存储器23内。该图像作为图像,即借助于一组每个具有从白到黑范围的灰度值的象素,被存储。
一旦一幅图像已被记录,确定当前的图像和前面的图像如何重叠的程序开始,步骤302,即,其中在图像的内容之间相对位置的最佳匹配被获得。为此,在图像之间的每个重叠位置在象素级上被检验,并且一个重叠的测量被确定如下:
1)对于每个重叠的象素位置,如果两个相关象素不是白的,它们的灰度值被加起来。其中没有一个象素是白色的这样的象素位置被指定为一个加位置。
2)对于所有加位置的灰度和被加起来。
3)每个象素的相邻位置被检验。如果一个重叠的象素位置不是加位置的相邻位置并由白色的象素和不是白色的象素位置组成,则非白象素的灰度值可以被乘以一个常数从2)项的和中减去。
4)提供如上文所表示的最高重叠测量的重叠位置被选择。在由此产生的复合图像中,重叠象素灰度值的平均值被使用。用这种方式,可以在重叠区域内抑制噪声。由此,组合垂直和水平地被进行。如果检测到,在它被组合时,该图像未在水平线上结束,则复合图像被适当地调整以便通过比如转动复合图像使它变成水平。
我们的瑞典专利申请No.9704924-1和相应的美国申请No.024,641,叙述了比较图像的一种可供选择的方式以便找到最佳重叠位置。这些申请的内容通过参考的方法被结合起来。
当两幅图像的相对位置已被确定时,处理器20确定一个移动矢量,步骤303,它表示了设备在图像的记录之间已被移动了多远和方向。移动矢量作为设备被如何移动的数字说明部分被存储于存储器中。处理器也确定第二幅图像如何相对于第一幅图像被转动,即,设备如何在图像的记录之间转动。这通过检验在第一和第二幅图像之间不同旋转位置的重叠被进行。该旋转作为旋转指示被存储在存储器中并且它也构成设备已如何移动的一部分说明。当这个步骤被完成时,第一幅图像被放弃而第二幅图像成为第一幅图像,此后,随后的扫描图像和这个新的第一幅图像的组合开始。应该指出在多数情况下,移动矢量和旋转指示不必在分立的步骤中被确定但它们可以直接由于图像相对位置的确定被获得。从上文所述很明显,步骤301-303可以或多或少地并行进行。
当设备检测一信息单元的输入,例如通过使用者释放按钮27或通过设备在至少一个预定的时间段未被移动,被完成时,该设备决定输入的信息是否要翻译,步骤304,如果使用者通过按动按钮表示输入的信息是要被翻译的文本信息时,处理器20在上述信息单元的说明中将移动矢量读到识别移动矢量代表的字符的一个ICR模块。接着,识别的字符以字符编码格式被存储于存储器中。如果使用者通过按动按钮表示这个选择,该翻译的字符可以在显示器25上被显示。如果使用者未表示信息要被翻译,关于信息单元,没有进一步的动作被采取并且设备准备记录另外的信息单元。
图4示意地表示,当设备如上文所述在一页纸上被引导及设备在形成字母“R”的移动路径中被移动时,带有重叠内容的图像如何被记录。为了简明起见,图像的内容未在图4中表示。
图5表示根据由用于图4中图像的设备所确定的相对位置,输入的字母R如何能再现在设备的显示器上。因此,在这种情况下,该设备借助于移动矢量表示了输入字符的“图像”,而不是翻译的字符。
上面的说明概述了该设备怎样用在用于输入手产生的信息的第一模式中。然而,在第二模式中,该设备也可以被用作扫描仪,即,用于在一个信息载体上扫描预定的文本和图像信息。如果使用者想要以这种方式使用该设备,他通过按动按钮以合适的方式来表示。
假设现在使用者想要从一页纸扫描文本。在这种情况下,使用者在带有文本的这页纸上在他想要开始记录字符串的位置引导该设备。他按下按钮27去启动该笔并用与某人阅读该文本时同样的方式跟随着扫过要记录的文本。跟踪LED28发射使它更易于跟随该行的光束。当使用者启动笔时,处理器20用与上文所述同样的方式根据手所产生的输入信息,控制LED6扫描图像。当使用者已将设备扫过所选的文本或已来到一行字符的末端时,他将笔抬离这页纸并释放启动按钮,因此处理器20切断LED6。
图6的流程图详细地说明了该设备如何以这种方式操作。在步骤601中,带有重叠内容的图像用与第一种模式同样的方式被扫描和存储。
在步骤602中,对于每对图像,最佳重叠位置以与上述用于第一模式同样的方式被确定。在这个位置,图像被组合成一幅包括一组可能是整行字符的复合图像。
在步骤603中,处理器20的软件将复合的图像分成了子图像,每个子图像只包括一个字符。这个步骤的目的是要产生输入信号给要翻译字符的OCR软件。这个细分通过在复合图像中将用于每行象素和每列象素的象素灰度值加起来来实现。通过研究这样获得的行和及列和的局部强度最小值,对于在图像中每个字符的范围边界可以被确定。
在步骤604中,每个子图像通过将子图像细分成成组的象素来被按比例缩小为一个预定的象素格式,其每个象素由其灰度值对应包含于该组的象素灰度值的平均值的一个象素所代替。如果必要,类似的缩减可以在根据本发明方法的其它步骤之间被进行。此外,字符根据它的平衡点被对中并且灰度值被标称以便每个象素灰度值的平方和为一个固定值。
接着,在步骤605中,在记录的字符串的复合图像中,每个字符均被翻译。共同构成只包含一个字符的子图像其象素的灰度值作为一个输入信号被馈送到OCR软件。在步骤606中,识别的字符使用一个预定的字符编码格式,例如ASCII码,被存储在用于翻译字符的存储区域内的读/写存储器23中。当字符的识别和以字符编码格式的存储完成时,处理器启动指示设备29以通知使用者它准备记录新的字符串,步骤607。接着,它回到步骤601。
在第一和第二两个模式中的以上步骤由此通过处理器20借助于相关的单元和合适的软件被进行。这样的软件如果不能在市场上购买到,可以由熟练的技术人员借助于上面的说明被开发。
图7a-7e说明了字符串“Flygande bckasiner”如何被扫描。图7a表示在一页纸上的文本,也具有一定数量的小黑点形式的“点干扰”。图7b表示了借助于传感器被记录的图像。如从这个图能看到图像的部分重叠内容。例如,字母l在No.1图像中完全显示而在No.2图像中部分地显示。重叠的程度取决于追踪速度。即,相对于传感器的内容被读出的频率,使用者牵引着设备以其扫过文本的速度。图7c表示整个复合图像看起来象什么。应该注意到,图像一直用象素的形式存储。图7d说明了复合图像细分成子图像。图7e表示按比例缩小和标准化的字母作为输入信号被用于神经网络。当该方法被进行,文本“Flygande bckasiner”作为ASCII码被存储于设备的读/写存储器中。
如上文所表示的,该设备也可以用第三种模式,摄像模式,被用于记录位于距该设备一定距离的对象的图像。为了在各种距离获得外形清晰的图像,透镜系统7可以在两个固定位置之间被调整,一个被用在扫描模式中而另一个用在摄像模式中。可供选择地,透镜系统7的位置是可以滑动调节以用于提供一种自动调焦功能。透镜系统的调节可以借助于与用于摄像同样的技术被实现。

Claims (21)

1.一种用于以字符、符号、图形、绘画、手迹及由手的移动所限定的类似的手写信息形式记录手写信息的设备,包括适于由手移动进行手的移动并在记录装置被移动时记录一组带有部分重叠内容的图像的记录装置(3),其特征在于:该设备进一步包括图像处理装置(4),它适于借助部分重叠内容确定图像的相对位置,用于提供记录装置已被如何移动的数字格式说明及用这种方式手写信息的数字表示。
2.如权利要求1所述的设备,其中该设备适于以数字格式存储所述的说明。
3.如权利要求1或2所述的设备,其中所述的说明包括一组移动矢量,每个矢量表示记录装置如何在二个图像的记录之间被移动。
4.如权利要求1或2所述的设备,其中所述的说明包括旋转指示,每个旋转指示表示记录装置在二个图像的记录之间如何被旋转。
5.如权利要求1或2所述的设备,其中所述的设备适于根据图像的重叠内容确定记录装置在二个图像的记录之间的移动速度。
6.如权利要求5所述的设备,其中所述的设备适于将速度与预记录的速度值相比较,用于检查输入信息的真实性。
7.如权利要求1或2所述的设备,其中手写信息包括字符并且其中图像处理装置进一步适于借助数字格式的说明识别该字符并将识别的字符以字符编码格式存储。
8.如权利要求1或2所述的设备,其中所述的设备具有带有一个二维传感器表面用于记录图像的一个光感应传感器装置(8)。
9.如权利要求1或2所述的设备,其中所述的图像处理装置适于垂直和水平地确定图像的相对位置。
10.如权利要求1或2所述的设备,其中记录装置在被移动时适于被引导到借助于所述的那组图像成像的表面。
11.如权利要求1或2所述的设备,进一步包括用于在该表面指示记录装置移动的跟踪装置(28)。
12.如权利要求11所述的设备,其中跟踪装置(28)包括将光投射到该表面上的一个照明装置。
13.如权利要求1或2所述的设备,其中记录装置和图像处理装置被装在一个公共的壳(1)中,它适于由手移动进行手移动。
14.如权利要求1或2所述的设备,其中记录装置被装在第一个壳中而图像处理装置装于第二个壳中。
15.如权利要求1或2所述的设备,其中图像处理装置包括一个处理器(20)。
16.如权利要求1或2所述的设备,其中所述设备可调节到一种操作模式,在该操作模式中,它适于通过借助带有部分重叠内容的一组图像使该信息成像,去记录位于一信息载体上的预定信息,最好是文本。
17.如权利要求1或2所述的设备,其中所述的设备可调节到一种操作模式,其中它适于使位于距该设备一定距离的对象成像。
18.如权利要求1或2所述的设备,进一步包括用于与一个外部单元无线连接的一个收发器(26)。
19.一种以字符、符号、图形、绘画、手迹和由手的移动所限定的类似手写信息的形式记录手写信息的方法,包括如下步骤:
-用手移动一设备进行手的移动;
-在移动该设备时,记录一组带有部分重叠内容的图像;及
-借助于部分重叠内容确定图像的相对位置,用于提供该设备已被如何移动的数字格式的说明及以这种方式手写信息的数字表示。
20.如权利要求19所述的方法,其中由手的移动所限定的信息包括字符并且进一步包括如下步骤:借助于说明识别该字符并将它们以字符编码数字格式存储。
21.一种确定手持设备位置的方法,该设备适于在它移动时记录一组图像,其特征在于包括步骤:
移动手持设备;
当移动设备时记录多个带有部分重叠内容的图像;
借助于部分重叠内容确定各图像的相对位置;
借助于相对位置确定手持设备的位置。
CNB998066753A 1998-04-30 1999-04-30 用于记录手写信息的设备和方法及确定手持设备位置的方法 Expired - Fee Related CN1154039C (zh)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
SE98015357 1998-04-30
SE9801535A SE511855C2 (sv) 1998-04-30 1998-04-30 Anordning och sätt för inmatning av handskriven information till en dator
US9132398P 1998-06-30 1998-06-30
US60/091,323 1998-06-30

Publications (2)

Publication Number Publication Date
CN1303496A CN1303496A (zh) 2001-07-11
CN1154039C true CN1154039C (zh) 2004-06-16

Family

ID=26663292

Family Applications (1)

Application Number Title Priority Date Filing Date
CNB998066753A Expired - Fee Related CN1154039C (zh) 1998-04-30 1999-04-30 用于记录手写信息的设备和方法及确定手持设备位置的方法

Country Status (11)

Country Link
EP (1) EP1073945B1 (zh)
JP (1) JP2002516427A (zh)
KR (1) KR20010052281A (zh)
CN (1) CN1154039C (zh)
AT (1) ATE462164T1 (zh)
AU (1) AU759166B2 (zh)
BR (1) BR9910087A (zh)
CA (1) CA2331095A1 (zh)
DE (1) DE69942177D1 (zh)
IL (1) IL139105A0 (zh)
WO (1) WO1999060467A1 (zh)

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7295193B2 (en) 1999-12-23 2007-11-13 Anoto Ab Written command
US6992655B2 (en) 2000-02-18 2006-01-31 Anoto Ab Input unit arrangement
US7054487B2 (en) 2000-02-18 2006-05-30 Anoto Ip Lic Handelsbolag Controlling and electronic device
US6839453B1 (en) 2000-05-16 2005-01-04 The Upper Deck Company, Llc Method and apparatus for authenticating unique items such as sports memorabilia
JP3554703B2 (ja) 2000-10-12 2004-08-18 リバーベル株式会社 情報端末装置
US7142197B2 (en) 2002-10-31 2006-11-28 Microsoft Corporation Universal computing device
US7809214B2 (en) 2005-08-22 2010-10-05 Samsung Electronics Co., Ltd. Device and a method for identifying movement patterns
WO2008154611A2 (en) * 2007-06-11 2008-12-18 Honeywell International Inc. Optical reader system for extracting information in a digital image

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE3275769D1 (en) * 1982-12-22 1987-04-23 Ibm A method and apparatus for continuously updating a display of the coordinates of a light pen
US4656662A (en) * 1983-07-18 1987-04-07 Ncr Corporation Personal identification method and apparatus
JP3265023B2 (ja) 1993-01-11 2002-03-11 新日本製鐵株式会社 耐食性および加工性の優れた鋼および鋼管の製造方法
FR2707030B1 (zh) 1993-06-21 1995-07-28 Valeo Electronique
JPH08237407A (ja) * 1994-12-09 1996-09-13 Xerox Corp 画像タイルの相対的なアラインメントを見当合わせすると共に透視歪みを修正するための方法
US5793033A (en) * 1996-03-29 1998-08-11 Metanetics Corporation Portable data collection device with viewing assembly

Also Published As

Publication number Publication date
AU4303299A (en) 1999-12-06
EP1073945A1 (en) 2001-02-07
KR20010052281A (ko) 2001-06-25
JP2002516427A (ja) 2002-06-04
BR9910087A (pt) 2000-12-26
IL139105A0 (en) 2001-11-25
WO1999060467A1 (en) 1999-11-25
ATE462164T1 (de) 2010-04-15
CN1303496A (zh) 2001-07-11
DE69942177D1 (de) 2010-05-06
AU759166B2 (en) 2003-04-10
CA2331095A1 (en) 1999-11-25
EP1073945B1 (en) 2010-03-24

Similar Documents

Publication Publication Date Title
CN1160657C (zh) 记录方法和装置
CN1152296C (zh) 输入单元及其使用方法和输入系统
US6985643B1 (en) Device and method for recording hand-written information
US5661506A (en) Pen and paper information recording system using an imaging pen
CN100347720C (zh) 图像处理设备和图像处理方法
CN1229757C (zh) 从白板扫描的记录的索引和检索系统及方法
US7221810B2 (en) Method and device for recording of information
KR20000023515A (ko) 비접촉형 화상 판독 장치 및 그것을 이용한 시스템
EP1697880B1 (en) Method, apparatus, computer program and storage medium for recording a movement of a user unit
CN1154039C (zh) 用于记录手写信息的设备和方法及确定手持设备位置的方法
CN108268634A (zh) 拍照及搜索方法、智能笔、搜索终端及存储介质
CN1138227C (zh) 用于在不同方式中记录信息的设备
US6715686B1 (en) Device for recording information in different modes
EP1073990A1 (en) Device for recording information in different modes
CN116800894A (zh) 扫描笔的倾斜角度调节方法、装置和电子设备
SE511855C2 (sv) Anordning och sätt för inmatning av handskriven information till en dator
MXPA00010548A (en) Device and method for recording hand-written information
JPS6276962A (ja) 原稿認識装置
CN1178956A (zh) 全像扫描装置与方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
REG Reference to a national code

Ref country code: HK

Ref legal event code: WD

Ref document number: 1037042

Country of ref document: HK

C17 Cessation of patent right
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20040616

Termination date: 20140430