CN107251538A - 光学终端装置及扫描程序 - Google Patents

光学终端装置及扫描程序 Download PDF

Info

Publication number
CN107251538A
CN107251538A CN201680008054.XA CN201680008054A CN107251538A CN 107251538 A CN107251538 A CN 107251538A CN 201680008054 A CN201680008054 A CN 201680008054A CN 107251538 A CN107251538 A CN 107251538A
Authority
CN
China
Prior art keywords
image
picture data
cell picture
terminal device
optic terminal
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201680008054.XA
Other languages
English (en)
Inventor
中山光雄
末高弘之
本山英树
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
OCR Systems Inc Japan
Original Assignee
OCR Systems Inc Japan
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by OCR Systems Inc Japan filed Critical OCR Systems Inc Japan
Publication of CN107251538A publication Critical patent/CN107251538A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/0304—Detection arrangements using opto-electronic means
    • G06F3/0317—Detection arrangements using opto-electronic means in co-operation with a patterned surface, e.g. absolute position or relative movement detection for an optical mouse or pen positioned with respect to a coded surface
    • G06F3/0321—Detection arrangements using opto-electronic means in co-operation with a patterned surface, e.g. absolute position or relative movement detection for an optical mouse or pen positioned with respect to a coded surface by optically sensing the absolute position with respect to a regularly patterned surface forming a passive digitiser, e.g. pen optically detecting position indicative tags printed on a paper sheet
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/04—Scanning arrangements, i.e. arrangements for the displacement of active reading or reproducing elements relative to the original or reproducing medium, or vice versa
    • H04N1/10—Scanning arrangements, i.e. arrangements for the displacement of active reading or reproducing elements relative to the original or reproducing medium, or vice versa using flat picture-bearing surfaces
    • H04N1/107—Scanning arrangements, i.e. arrangements for the displacement of active reading or reproducing elements relative to the original or reproducing medium, or vice versa using flat picture-bearing surfaces with manual scanning
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0346—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of the device orientation or free movement in a 3D space, e.g. 3D mice, 6-DOF [six degrees of freedom] pointers using gyroscopes, accelerometers or tilt-sensors
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0354—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of 2D relative movements between the device, or an operating part thereof, and a plane or surface, e.g. 2D mice, trackballs, pens or pucks
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T1/00—General purpose image data processing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/387—Composing, repositioning or otherwise geometrically modifying originals
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00—Geometric image transformations in the plane of the image
    • G06T3/40—Scaling of whole images or parts thereof, e.g. expanding or contracting
    • G06T3/4038—Image mosaicing, e.g. composing plane images from plane sub-images
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/70—Determining position or orientation of objects or cameras

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Image Input (AREA)
  • Facsimile Scanning Arrangements (AREA)
  • Editing Of Facsimile Originals (AREA)
  • Image Processing (AREA)

Abstract

本发明提供一种无需过度关注的、操作性高的光学终端装置及扫描程序。一种光学终端装置，其用于获取扫描对象范围的整体图像，所述光学终端装置具备：影像采集部10，包含摄像元件11而构成，对扫描对象范围内的各区域进行拍摄，并获取所述各区域的单元图像数据；位置信息获取部20，获取与单元图像数据对应的影像位置信息；以及图像合成部40，对多个所述单元图像数据进行合成，并生成所述扫描对象范围的整体图像，位置信息获取部20包括：六维传感器21，设置于装置主体，并检测加速度及角速度；以及运算部22，基于所述加速度及所述角速度，算出单元图像数据的影像位置信息。

Description

光学终端装置及扫描程序
技术领域
本发明涉及一种对对象物进行扫描并获取规定范围的图像数据的光学终端装置及在光学终端装置上执行的扫描程序。
背景技术
扫描仪(scanner)是用于以数字图像数据的形式获取印刷物等原稿上的规定区域。作为扫描仪，例如有如下扫描仪：像复印机那样将原稿固定于稿台玻璃(platenglass)，从下方照射光使读取装置扫描以读取图像的平板扫描仪(flat bed scanner)、或一边自动供给原稿一边进行图像的获取及原稿排出的馈纸式扫描仪(sheet feedscanner)。这些扫描仪只能获得整个纸面的图像，不适于获取纸面内的规定的限定区域的图像。
另一方面，有通过用户使扫描仪在想获得原稿的图像的区域上移动来获取图像的手持类型(handy type)的扫描仪。作为此种扫描仪，有鼠标扫描仪(mouse scanner)。鼠标扫描仪是在与计算机一同使用的鼠标上搭载有扫描仪功能的装置。
图10是鼠标扫描仪的结构图，(a)是俯视图，图(b)是仰视图。如图10所示，鼠标扫描仪内置有照相机111，经由设置于其底面的透明的窗112来获取文件等扫描对象物上的图像。另外，在鼠标扫描仪的底面，设置有作为光学传感器的两个位置传感器120，利用这些位置传感器获取鼠标的位置坐标。即，使鼠标扫描仪在扫描对象物上移动，并且获取多个区域的图像及该区域的位置坐标。基于这些图像及其位置坐标生成整个区域的图像。
如图11(a)所示，在通过用户操作使鼠标扫描仪100移动来进行扫描的情况下，有时因移动时未平行地滑动，所拍摄图像的角度发生偏差。为了获得扫描对象的图像，借由将所拍摄的单元图像贴合等合成方式生成整个扫描对象的图像，但如图11(b)所示，若在所拍摄图像的角度存在偏差的情况下直接贴合，则所获得的整体图像的精度劣化。因此，为了修正该偏差，如图10(b)所示，在以往的鼠标扫描仪中，在其底面例如以成为对角的方式设置两个位置传感器120。
即，利用两个位置传感器120，可获得两个位置坐标，并且可获得将两位置传感器间的位置坐标相连的线段。如图11(c)所示，在两个单元图像中，所述线段间所成的角Δθ是角度的偏差，基于该角度变化，进行单元图像的角度修正。
现有技术文献
专利文献
专利文献1日本专利特开2010-153984号公报
发明内容
发明所要解决的问题
但是，在鼠标扫描仪等通过用户操作使照相机移动进行扫描的情况下，为了确保角度变化检测的精度，两个位置传感器需要一定的间隔而彼此隔开设置。因此，若要对想扫描的对象范围的端部进行拍摄，则一个位置传感器超出该对象范围而无法进行位置测定。因此，必须慎重操作以使得不会超出对象范围。
另外，存在如下问题：在扫描过程中会无意识地抬起鼠标扫描仪，至少一个位置传感器离开文件等扫描对象而无法获取位置坐标，从而无法准确地获得被扫描的图像。因此，必须在过度关注下进行操作，从而并不便捷。
此种操作的问题不限于鼠标扫描仪，而是适用于通过用户操作使装置移动并利用照相机等摄像手段进行扫描的所有光学终端装置的问题。
本发明是为了解决所述课题而成者，其目的在于提供一种无需过度关注的、操作性高的光学终端装置及扫描程序。
解决问题的技术手段
本发明的光学终端装置用于获取扫描对象范围的整体图像，所述光学终端装置的特征在于具备：影像采集部，包含摄像元件而构成，对所述扫描对象范围内的各区域进行拍摄，并获取所述各区域的单元图像数据；位置信息获取部，获取与所述单元图像数据对应的影像位置信息；以及图像合成部，对多个所述单元图像数据进行合成，并生成所述扫描对象范围的整体图像，所述位置信息获取部包括：六维传感器，设置于装置主体，并检测加速度及角速度；以及运算部，基于所述加速度及所述角速度，算出所述单元图像数据的影像位置信息。
所述六维传感器可设置于所述影像采集部的后方。所述运算部可基于所述角速度算出所述单元图像数据的姿势信息。
本发明也可为：具备对所述摄像元件的拍摄进行控制的控制部，所述运算部算出高度位移作为所述影像位置信息之一，所述控制部包括：判定部，判定所述高度位移是否处于规定的高度位移的范围内；以及摄像控制部，基于所述判定部的判定结果，指示所述摄像元件进行拍摄或使所述摄像元件的拍摄停止。
本发明也可为：所述运算部算出高度位移作为所述影像位置信息之一，所述图像处理部包括判定部，所述判定部判定所述高度位移是否处于规定的高度位移的范围内，所述判定部舍弃被判定为不处于所述规定的高度位移的范围内的所述单元图像数据。
本发明也可为：具备图像处理部，将所述影像位置信息与所述单元图像数据相关联而制成包(package)单元图像数据。
本发明也可为：具备显示图像的显示部，所述显示部在扫描执行过程中显示所述单元图像或所述整体图像。
另外，本发明也可为一种光学终端装置，其用于获取扫描对象范围的整体图像，所述光学终端装置具备：影像采集部，包含摄像元件而构成，对所述扫描对象范围内的各区域进行拍摄，并获取所述各区域的单元图像数据；位置信息获取部，获取与所述单元图像数据对应的影像位置信息；输出部，输出所述单元图像数据及所述影像位置信息；以及定点(pointing)部，所述位置信息获取部包括：六维传感器，设置于装置主体，并检测加速度及角速度；以及运算部，基于所述加速度及所述角速度，算出所述单元图像数据的影像位置信息，所述输出部连接于外部的计算机或服务器，向由所述定点部指定的规定部位进行输出。
另外，也可从扫描程序的观点掌握本发明。即，本发明也可为一种扫描程序，其在光学终端装置上被执行，所述光学终端装置具备：影像采集部，包含摄像元件而构成，对扫描对象范围内的各区域进行拍摄，并获取所述各区域的单元图像数据；六维传感器，设置于装置主体，并检测加速度及角速度；以及计算机，所述扫描程序是用于使所述计算机作为：基于所述加速度及所述角速度，算出与所述单元图像数据对应的影像位置信息的运算手段；以及对多个所述单元图像数据进行合成，并生成所述扫描对象范围的整体图像的图像合成手段发挥功能。
发明的效果
根据本发明，可获得一种无需过度关注的、操作性高的光学终端装置及扫描程序。
附图说明
图1是第1实施方式的光学终端装置的功能框图。
图2是第1实施方式的光学终端装置(鼠标扫描仪)结构图，(a)是俯视图，(b)是侧剖面图。
图3是用于对第1实施方式的光学终端装置中所使用的传感器进行说明的图。
图4是用于对图像的粘贴进行说明的图。
图5是表示第1实施方式的光学终端装置的动作的流程图。
图6是第2实施方式的光学终端装置的功能框图。
图7是包含第3实施方式的光学终端装置的功能框图。
图8是包含第4实施方式的光学终端装置的功能框图。
图9是包含第5实施方式的光学终端装置的功能框图。
图10是以往的鼠标扫描仪的结构图，(a)是其俯视图，(b)是其仰视图。
图11是用于说明以往的角度修正技术的图。
具体实施方式
以下，参照附图对本发明的实施方式的光学终端装置及扫描程序进行说明。
[1.第1实施方式]
[1-1.结构]
本实施方式的光学终端装置是用于获取扫描对象物中的扫描对象范围的整体图像的装置。该装置利用照相机等摄像元件拍摄对象范围内的一部分而获取单元图像数据，并将该单元图像数据与其影像位置信息设为一个组。另外，基于影像位置信息，进行将单元图像数据贴合的图像合成，从而生成扫描对象的整体图像。
在光学终端装置上搭载包含存储有程序的存储器(memory)及中央处理器(Central Processing Unit，CPU)的微型计算机(microcomputer)，在随机存取存储器(Random Access Memory，RAM)中适当展开程序并利用CPU进行处理，由此进行位置信息的算出、该位置信息与单元图像数据的相关联、以及整体图像的生成等处理。
对光学终端装置的结构进行更详细的说明。作为本光学终端装置，可列举具有扫描仪功能的鼠标扫描仪、智能手机、输入板等终端装置，但在本实施方式中，以鼠标扫描仪为例进行说明。
图1是本实施方式的光学终端装置的功能框图。图2(a)是本实施方式的光学终端装置(鼠标扫描仪)的俯视图，图2(b)是其侧剖面图。
如图1及图2所示，鼠标扫描仪具备影像采集部10、位置信息获取部20、以及图像处理部30。影像采集部10包含摄像元件11而构成，对扫描对象物中的扫描对象范围内的各区域进行拍摄，并获取所述各区域的单元图像数据。
具体来说，摄像元件11是电荷耦合器件(Charge Coupled Device，CCD)或互补金属氧化物半导体(Complementary Metal Oxide Semiconductor，CMOS)等的照相机，以摄像面朝向鼠标扫描仪的底面侧而设置于鼠标扫描仪的框体的内部空间，通过按下设置于图2(a)所示的鼠标扫描仪上的导入开始按钮13，经由设置于底面的透明的板12对纸面等扫描对象物进行拍摄。扫描结束时，按下设置于鼠标扫描仪的导入结束按钮14。
此外，也可设为一个导入按钮。在此情况下，可对按钮按下次数进行计数，将第奇数次设为导入开始，将第偶数次设为导入结束，也可将扫描开始及扫描过程中设为已按下按钮的状态，并设为在结束时松开按钮。另外，也可设置检测鼠标扫描仪与扫描对象物是否紧贴的接近传感器，还可设置照射扫描对象的发光二极管(Light-Emitting Diode，LED)等灯、或反射镜、透镜等光学系统。
位置信息获取部20检测与影像采集部10的高度相关的信息，并获取与单元图像数据对应的影像位置信息。所谓影像位置信息，是指如下文所述般粘贴单元图像数据时的单元图像数据的坐标或角度变化等与单元图像数据相关的信息。位置信息获取部20包含传感器21与运算部22而构成，所述传感器21检测与包含影像采集部10的高度在内的位置及姿势相关的信息，所述运算部22基于所述传感器21检测到的信息，算出单元图像数据的影像位置信息。
如图2所示，传感器21在本实施方式中内置于鼠标扫描仪中，与影像采集部10(摄像元件11)的相对位置关系被固定而设置于所述影像采集部10(摄像元件11)的后方。若与摄像元件11的相对位置关系为固定，则也可安装于鼠标扫描仪的框体外部。
如图3所示，该传感器21是六维传感器(六轴传感器)，包括：检测影像采集部10的三维加速度ax、ay、az的加速度传感器21a；以及检测影像采集部10的三维角速度ωx、ωy、ωz的三维陀螺仪传感器，三维陀螺仪传感器包括三个陀螺仪传感器21b～21d，陀螺仪传感器21b～21d分别配置于彼此正交的x轴、y轴、z轴，检测围绕各轴的角速度。关于六维传感器，既可将三个加速度传感器与三个陀螺仪传感器在正交的x轴、y轴、z轴分别各设置一个并进行组装，也可使用将三个加速度传感器与三个陀螺仪传感器封装而成的六轴传感器。
作为加速度传感器21a及陀螺仪传感器21b～21d，可使用利用微机电系统(MicroElectro Mechanical System，MEMS)技术的传感器等各种公知的传感器。除此以外，作为加速度传感器21a，例如可列举压敏电阻型、静电电容型及压电元件型的加速度传感器，作为陀螺仪传感器21b～21d，可列举环状激光陀螺仪、光纤陀螺仪。但是并不限定于这些列举出的传感器。
运算部22主要包含CPU而构成，基于来自加速度传感器21a及陀螺仪传感器21b～21d的加速度或角速度，利用积分等运算求出包含位置及姿势的变化量在内的影像位置信息。由此，可获得例如此次拍摄的单元图像数据相对于上一次拍摄的单元图像数据的相对位置、相对角度等。此外，不仅可求出与上一次的单元图像数据的相对位置、相对角度，也可求出与上上次等过去多次的单元图像数据的相对位置、相对角度。由运算部22求出的角度或姿势的变化量在后述的图像合成处理中可用于图像合成时的修正。如此，运算部22算出影像采集部10的相对位移，并将该相对位移设为单元图像的位移。或者，也可基于规定的关系算出单元图像的位移。利用运算部22，可追踪三维空间的相对位置。
图像处理部30连接于影像采集部10与位置信息获取部20，从影像采集部10输入单元图像数据，从位置信息获取部20输入单元图像数据的影像位置信息。
图像处理部30将利用影像采集部10获得的单元图像数据与利用位置信息获取部20获得的影像位置信息相关联，而制成包单元图像数据。此处提及的相关联，是指将单元图像数据及与其对应的影像位置信息设为一个组的处理。由此，在图像合成中，会与单元图像数据的粘贴位置坐标、角度修正等产生关系。此外，在所述相关联中，以可知晓对应关系的方式，在从影像采集部10及位置信息获取部20输出各数据、信息时附加顺序信息，从而将顺序相同的数据、信息相关联。例如按下时间戳(time stamp)。
另外，作为本实施方式的光学终端装置的鼠标扫描仪具备图像合成部40，所述图像合成部40对来自图像处理部30的多个包单元图像数据进行合成处理，并生成扫描对象范围的整体图像。图像合成部40基于包单元图像数据中包含的影像位置信息，进行各包单元图像数据的贴合、修正等处理，从而进行合成。
例如，如图4所示，当在水平放置的纸面D上扫描时，在使鼠标扫描仪MS在水平方向上倾斜且围绕铅垂方向即z轴旋转同时进行移动的情况下，当将最初的包单元图像数据I1及其下一次的包单元图像数据I2贴合时，利用运算部22可知，若将最初的粘贴位置P1设为例如(0，0，0)，则所述下一次的单元图像数据I2的粘贴位置P2是从所述位置移动水平方向的变化量(Δx，Δy，0)之后的位置，因此可将两单元图像粘贴。此时，利用运算部22可知，鼠标扫描仪MS围绕z轴旋转了角度θ，因此相应地在粘贴时也进行角度修正。
此外，在粘贴接近的单元图像数据的情况下，也可通过利用图像的花纹等的图案匹配(pattern matching)将重复的其中一个部分删除等。单元图像数据的合成可使用公知的手法。
本实施方式的鼠标扫描仪具备控制部50，所述控制部50基于来自位置信息获取部20的影像位置信息，指示或停止影像采集部10的拍摄。即，控制部50包括：判定部51，判定鼠标扫描仪的自扫描对象物起的高度位移是否处于规定的高度的位移范围内；以及摄像控制部52，在判定部51判定为处于规定的高度位移范围内的情况下对摄像元件11输出摄像命令。规定的高度位移的范围内的移动例如可列举影像采集部10的水平方向的移动。所谓规定的高度位移的范围内，既可以绝对数值的形式预先设定，也可根据高度的变动算出三维空间中的扫描对象物延展的平面或曲面，并可变地设定为不会脱离该平面或曲面的范围。
[1-2.作用]
使用图5对作为本实施方式的光学终端装置的鼠标扫描仪的动作进行说明。为了简单起见，将扫描对象物设为纸面，在三维坐标中，设为配置于水平面上。即，设为高度一定且纸面上的任意的坐标点可由(x，y，0)表示。
将鼠标扫描仪的底面设定在纸面的扫描对象范围的规定区域，在紧贴于纸面的状态下按下导入开始按钮13，由此开始扫描(步骤S01)。然后，利用影像采集部10获取该规定区域的单元图像数据(步骤S02)，粘贴该单元图像数据(步骤S03)。将所述单元图像数据的位置坐标(x0，y0，0)设为初始位置。
此处，若按下导入结束按钮14(步骤S04的是(Yes))，则结束扫描。另一方面，在未按下导入结束按钮14的情况下(步骤S04的否(No))，则从位置信息获取部20获取位置信息(步骤S05)，利用判定部51根据位置信息判定是否存在高度方向成分的移动，即是否存在相对于纸面而为垂直方向成分的移动(步骤S06)。在判定为不存在垂直方向的移动的情况下(步骤S06的No)，利用判定部51判定是否存在水平方向的移动(步骤S07)。在不存在水平方向的移动的情况下(步骤S07的No)返回步骤S04。此是为了确认扫描结束的用户的意图。
另一方面，在存在水平方向的移动的情况下(步骤S07的Yes)，从摄像控制部52输出摄像指令，利用摄像元件11对规定区域内进行拍摄，并获取单元图像数据(步骤S08)。进而，在移动后的位置粘贴单元图像(步骤S09)，重复进行步骤S04～步骤S09的动作。在判定为存在垂直方向的移动的情况下(步骤S06的Yes)，意味着鼠标扫描仪已离开纸面。在此情况下，判定部51继续从位置信息获取部20获取位置信息(步骤S10)，判定高度是否变为0(步骤S11)。即，在判定为高度变为0的情况下(步骤S11的Yes)，表示鼠标扫描仪的底面紧贴于纸面。在此情况下，进入步骤S07，若直接或间接进入步骤S04，并按下导入结束按钮(步骤S04的Yes)，则结束扫描。
[1-3.效果]
(1)本实施方式的光学终端装置用于获取扫描对象范围的整体图像，所述光学终端装置具备：影像采集部10，包含摄像元件11而构成，对扫描对象范围内的各区域进行拍摄，并获取所述各区域的单元图像数据；位置信息获取部20，获取与单元图像数据对应的影像位置信息；以及图像合成部40，对多个所述单元图像数据进行合成，并生成所述扫描对象范围的整体图像，位置信息获取部20包括：六维传感器21，设置于装置主体，并检测加速度及角速度；以及运算部22，基于所述加速度及所述角速度，算出单元图像数据的影像位置信息。
由此，六维传感器不管该传感器所设的位置如何，可检测影像采集部10的加速度及角速度，因此可提高操作性。即，不会像以往的光学终端装置那样，因隔开设置两个位置传感器而受到摄像范围的制约，因此，即便是扫描对象物的一端也能够进行扫描，无需留意摄像范围。因此，用户无须给予过度关注，可实现高操作性。
(2)六维传感器21设置于影像采集部10的后方。由此，可消除传感器21对摄像元件11的拍摄范围的制约。由于可获得大幅的拍摄范围，故可迅速获得所需范围的图像。
(3)运算部22基于所述角速度，算出所述单元图像数据的姿势信息。由此，即便是弯曲的二维面上，也能够获取扫描图像。即，通过进行将弯曲的二维面上的单元图像数据接在一起的合成处理，可获取立体表面的三维数据。例如，可扫描三维球面，可简单地获取如三维打印机中所使用的三维数据。
(4)具备对摄像元件11的拍摄进行控制的控制部50，运算部22算出高度位移作为影像位置信息之一，控制部50包括：判定部51，判定所述高度位移是否处于规定的高度位移的范围内；以及摄像控制部52，基于判定部51的判定结果，指示摄像元件11进行拍摄或使所述摄像元件11的拍摄停止。由此，在不处于规定的高度位移的范围内的情况下，停止摄像，因此可简化图像合成处理。另外，由于处理中不使用离开扫描对象物(例如文档表面)的图像，换句话说，可仅将精度高的单元图像数据用于图像合成，故可获得精度高的整体图像。
(5)具备将影像位置信息与单元图像数据相关联而制成包单元图像数据的图像处理部30。由此，可防止所获取的图像与影像位置信息之间的偏差，可实现准确的扫描。
[2.第2实施方式]
[2-1.结构]
使用图6对第2实施方式进行说明。第2实施方式与第1实施方式的基本结构相同。因此，仅说明与第1实施方式的不同之处，对与第1实施方式相同的部分赋予相同符号并省略详细的说明。
图6是第2实施方式的光学终端装置的功能框图。如图6所示，第2实施方式中未设置控制部50，取而代之的是，图像处理部30包括判定部31。
即，不进行基于移动方向的摄像元件11的控制，摄像元件11以规定时间间隔进行拍摄。图像处理部30的判定部31根据由运算部22算出的包单元图像数据的影像位置信息，判定为了获得该数据而进行拍摄时的影像采集部10的高度位移是否处于规定的高度位移的范围内。
若不处于该范围内，则判定部31不会将该包单元图像数据输出至图像合成部40。例如，舍弃该数据。由此，可仅将高度为0的情况下的鼠标扫描仪与纸面接触时的单元图像数据用于图像合成，因此可提高整体图像的精度。
本实施方式不限于鼠标扫描仪，在移动电话、智能手机、输入板等移动终端的情况下，也可未必紧贴于扫描对象物而拍摄。在此情况下，可设定规定的高度位移的范围，并使得处于该范围外的单元图像数据不用于图像合成处理。既可将该规定的高度位移范围设为绝对基准而预先设定为10cm、3cm等，也可存储扫描开始时的高度，将该高度设为基准，并根据高度的变动来设定范围。
[2-2.作用效果]
本实施方式中，运算部22算出高度位移作为影像位置信息之一，图像处理部30包括判定部31，所述判定部31判定所述高度位移是否处于规定的高度位移的范围内，判定部31舍弃被判定为不处于规定的高度范围内的包单元图像数据。由此，可判别鼠标扫描仪是否已离开扫描对象物。即，可自动挑选出精度低的单元图像，可利用精度高的单元图像数据进行图像合成，因此操作性高，而且可提高扫描对象范围的所获得整体图像的精度。
[3.第3实施方式]
使用图7对第3实施方式进行说明。第3实施方式能够应用于第1实施方式或第2实施方式。此处，基本结构设为与第2实施方式相同。因此，仅说明与第2实施方式的不同之处，对与第2实施方式相同的部分赋予相同符号并省略详细的说明。
图7是包含第3实施方式的光学终端装置的功能框图。第3实施方式中，在鼠标扫描仪中不设置图像合成部40，取而代之的是，具备连接于图像处理部30的输出部60。输出部60利用通用串行总线(Universal Serial Bus，USB)或蓝牙(Bluetooth)(注册商标)、互联网线路等有线或无线的通信手段与外部的计算机或服务器连接。例如，在连接于计算机的情况下，将由图像处理部30生成的包单元图像数据输出至计算机。
在该计算机中设置图像合成部40。即，也可通过执行存储于计算机的硬盘驱动器(Hard Disk Drive，HDD)或固态驱动器(Solid State Drive，SSD)等中的程序，使计算机实现作为图像合成部40的功能，从而进行扫描对象范围的整体图像的合成处理。在此情况下，在鼠标扫描仪中设置输入部70来接收在外部计算机中生成的整体图像的输入，使该整体图像显示于显示部80。
作为显示部80的使用例，既可设为显示已进行合成处理的扫描图像，也可显示扫描过程中所得的单元图像。即，通过进行实时显示，若用户判断未获得扫描对象范围的图像，则可立即中止并重新扫描。或者，也可在扫描执行过程中使单元图像或整体图像显示在连接于计算机的显示器上。此外，外部的计算机例如包含个人计算机、智能手机、输入板终端等。
[4.第4实施方式]
使用图8对第4实施方式进行说明。第3实施方式能够应用于第1实施方式或第2实施方式。此处，基本结构设为与第2实施方式相同。因此，仅说明与第2实施方式的不同之处，对与第2实施方式相同的部分赋予相同符号并省略详细的说明。
图8是包含第4实施方式的光学终端装置的功能框图。第4实施方式中设置有字符识别部90与输出部60b。字符识别部90从由图像合成部40发送的整体图像中提取字符串，制成字符数据。输出部60b利用有线或无线与外部的计算机或服务器连接，并向它们输出字符数据。
本实施方式的鼠标扫描仪具备定点功能，可利用输出部60b与外部计算机C连接而作为定点设备(pointing device)来使用。即，可经由连接于外部计算机C的显示器DIS，利用鼠标的光标P，指定字符数据的输出目的地。
举例来说，要利用键盘输入诸如文件中记载的统一资源定位器(uniformresource locator，URL)或不认识的汉字可能是麻烦的或无法做到的。即使在此种情况下，通过在鼠标扫描仪上搭载字符识别软件，也可读取文件中记载的字符串并制成字符数据，且将该字符数据复制到显示器DIS中所显示的字处理软件或表格计算软件、浏览器的搜索窗等规定的输入目的地。此外，字符识别部90也可作为从图像合成部40发送的整体图像中识别条码(bar code)、二维码(QR code)等非识别字符串的图像识别部而发挥功能。
[5.第5实施方式]
使用图9对第5实施方式进行说明。第5实施方式是第3实施方式与第4实施方式的组合。基本结构与第3实施方式相同，仅说明与第3实施方式的不同之处，对与第3实施方式相同的部分赋予相同符号并省略详细的说明。另外，对于与第4实施方式相同的部分，同样地也适当省略说明。
图9是包含第5实施方式的光学终端装置的功能框图。第5实施方式中，第4实施方式的图像合成及字符识别不在本光学终端装置中进行，而在外部的计算机或服务器中进行。即，本光学终端装置内的输出部60将在图像处理部30中生成的包单元图像数据输出至外部的计算机或服务器。此处，在输出部60上连接有外部的计算机。
在该计算机中设置有图像合成部40、字符识别部90。即，通过执行存储于计算机的HDD或SSD等中的程序，使计算机实现作为图像合成部40及字符识别部90的功能，从而进行扫描对象范围的整体图像的合成处理与字符识别。将利用外部的计算机所获得的整体图像与字符数据显示于显示器DIS。此外，字符识别部90既可从整体图像中提取字符串并制成字符数据，也可从包单元图像数据中提取字符串，制成字符数据。另外，也可与第4实施方式同样地，利用本实施方式的鼠标扫描仪的指针(pointer)功能，将字符数据输入至规定的输入目的地。另外，也可利用该指针功能，将整体图像的数据输入至规定的输入目的地，例如图像搜索软件的搜索窗。由此，可利用搭载于计算机的图像搜索软件搜索图像。
如上所述，通过将包单元图像数据输出至外部，即便在本光学终端装置的CPU等的处理能力低的情况下，也可在处理能力相对较高的外部计算机等中进行整体图像的生成及字符识别。因此，也可应对包单元图像数据的数据量多的情况。
[6.其他实施方式]
本发明并不限定于第1实施方式至第5实施方式，也包含以下所示的其他实施方式。另外，本发明也包含将第1实施方式至第5实施方式及下述其他实施方式的至少任意两个组合而成的形态。
第1实施方式至第5实施方式中，针对与高度相关的判定，仅以z轴方向的坐标判定是否已离开扫描对象物，但在扫描对象物并非平面而是弯曲的情况下，也可不仅基于z轴方向的坐标而且也基于围绕其他轴的旋转坐标判定是否已离开扫描对象物。
第1实施方式至第5实施方式中，仅使用六维传感器作为位置信息获取的传感器，但除六维传感器以外，也可设置光学传感器。
[符号的说明]
10：影像采集部
11：摄像元件
12：透明的板
13：导入开始按钮
14：导入结束按钮
20：位置信息获取部
21：传感器(六维传感器)
21a：三维加速度传感器
21b～21d：陀螺仪传感器
22：运算部
30：图像处理部
31：判定部
40：图像合成部
50：控制部
51：判定部
52：摄像控制部
60、60b：输出部
70：输入部
80：显示部
90：字符识别部
C：计算机
D：纸面
DIS：显示器
MS：鼠标扫描仪
I1：最初的包单元图像数据
I2：下一次的包单元图像数据
P：鼠标的光标
P1：最初的包单元图像数据的粘贴位置
P2：下一次的包单元图像数据的粘贴位置
Δθ：围绕z轴的旋转角

Claims (11)

1.一种光学终端装置，其用于获取扫描对象范围的整体图像，所述光学终端装置的特征在于具备：
影像采集部，包含摄像元件而构成，对所述扫描对象范围内的各区域进行拍摄，并获取所述各区域的单元图像数据；
位置信息获取部，获取与所述单元图像数据对应的影像位置信息；以及
图像合成部，对多个所述单元图像数据进行合成，并生成所述扫描对象范围的整体图像，
所述位置信息获取部包括：
六维传感器，设置于装置主体，并检测加速度及角速度；以及
运算部，基于所述加速度及所述角速度，算出所述单元图像数据的影像位置信息。
2.根据权利要求1所述的光学终端装置，其特征在于，
所述六维传感器设置于所述影像采集部的后方。
3.根据权利要求1或2所述的光学终端装置，其特征在于，
所述运算部基于所述角速度算出所述单元图像数据的姿势信息。
4.根据权利要求1至3中任一项所述的光学终端装置，其特征在于具备：
对所述摄像元件的拍摄进行控制的控制部，
所述运算部算出高度位移作为所述影像位置信息之一，
所述控制部包括：判定部，判定所述高度位移是否处于规定的高度位移的范围内；以及
摄像控制部，基于所述判定部的判定结果，指示所述摄像元件进行拍摄或使所述摄像元件的拍摄停止。
5.根据权利要求1至3中任一项所述的光学终端装置，其特征在于，
所述运算部算出高度位移作为所述影像位置信息之一，
所述图像处理部包括判定部，所述判定部判定所述高度位移是否处于规定的高度位移的范围内，
所述判定部舍弃被判定为不处于所述规定的高度位移的范围内的所述单元图像数据。
6.根据权利要求1至5中任一项所述的光学终端装置，其特征在于具备：
图像处理部，将所述影像位置信息与所述单元图像数据相关联而制成包单元图像数据。
7.根据权利要求1至6中任一项所述的光学终端装置，其特征在于具备：
显示图像的显示部，
所述显示部在扫描执行过程中显示单元图像或所述整体图像。
8.一种光学终端装置，其用于获取扫描对象范围的整体图像，所述光学终端装置的特征在于具备：
影像采集部，包含摄像元件而构成，对所述扫描对象范围内的各区域进行拍摄，并获取所述各区域的单元图像数据；
位置信息获取部，获取与所述单元图像数据对应的影像位置信息；
输出部，输出所述单元图像数据及所述影像位置信息；以及
定点部，
所述位置信息获取部包括：
六维传感器，设置于装置主体，并检测加速度及角速度；以及
运算部，基于所述加速度及所述角速度，算出所述单元图像数据的影像位置信息，
所述输出部连接于外部的计算机或服务器，向由所述定点部指定的规定部位进行输出。
9.一种扫描程序，所述扫描程序在光学终端装置上被执行，所述光学终端装置具备：影像采集部，包含摄像元件而构成，对扫描对象范围内的各区域进行拍摄，并获取所述各区域的单元图像数据；六维传感器，设置于装置主体，并检测加速度及角速度；以及计算机，
所述扫描程序是用于使所述计算机作为：
基于所述加速度及所述角速度，算出与所述单元图像数据对应的影像位置信息的运算手段；以及
对多个所述单元图像数据进行合成，并生成所述扫描对象范围的整体图像的图像合成手段发挥功能。
10.根据权利要求9所述的，其特征在于，
使所述计算机作为：
算出高度位移作为所述影像位置信息之一的运算手段；
判定所述高度位移是否处于规定的高度位移的范围内的判定手段；以及
基于所述判定手段的判定结果，指示所述摄像元件进行拍摄或使所述摄像元件的拍摄停止的摄像控制手段发挥功能。
11.根据权利要求9所述的扫描程序，其特征在于，
使所述计算机作为：
算出高度位移作为所述影像位置信息之一的运算手段；
判定所述高度位移是否处于规定的高度位移的范围内的判定手段；以及
舍弃被判定为不处于所述规定的高度位移的范围内的所述单元图像数据的舍弃手段发挥功能。
CN201680008054.XA 2015-02-02 2016-02-01 光学终端装置及扫描程序 Pending CN107251538A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2015018891 2015-02-02
JP2015-018891 2015-02-02
PCT/JP2016/052895 WO2016125732A1 (ja) 2015-02-02 2016-02-01 光学端末装置及びスキャンプログラム

Publications (1)

Publication Number Publication Date
CN107251538A true CN107251538A (zh) 2017-10-13

Family

ID=56564077

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201680008054.XA Pending CN107251538A (zh) 2015-02-02 2016-02-01 光学终端装置及扫描程序

Country Status (5)

Country Link
US (1) US20180018025A1 (zh)
EP (1) EP3255870A4 (zh)
JP (2) JP6245671B2 (zh)
CN (1) CN107251538A (zh)
WO (1) WO2016125732A1 (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
ES2905523T3 (es) 2016-09-08 2022-04-11 Schneider Electric Ind Sas Procedimiento para la interacción entre un dispositivo de tratamiento de datos y un dispositivo móvil, así como disposición para realizar el procedimiento

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007184694A (ja) * 2006-01-05 2007-07-19 Seiko Epson Corp 画像読取装置
CN101715053A (zh) * 2008-10-03 2010-05-26 索尼株式会社 成像设备、成像方法和程序
CN101753818A (zh) * 2008-12-08 2010-06-23 索尼株式会社 成像设备、成像方法和程序
CN101764907A (zh) * 2008-12-24 2010-06-30 精工爱普生株式会社 原稿读取装置
CN102164214A (zh) * 2010-01-13 2011-08-24 夏普株式会社 拍摄图像处理系统、便携终端装置以及图像输出装置
CN102905079A (zh) * 2012-10-16 2013-01-30 北京小米科技有限责任公司 用于全景拍摄的方法、装置及移动终端
US20130208308A1 (en) * 2008-11-17 2013-08-15 Image Trends, Inc. Image capture unit and computer readable medium used in combination with same
EP2696566A1 (en) * 2012-08-10 2014-02-12 LG Electronics, Inc. Handheld scanning apparatus and control method thereof
CN103763470A (zh) * 2014-01-10 2014-04-30 重庆路威科技发展有限公司 一种便携式场景拍照装置

Family Cites Families (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3177746B2 (ja) * 1991-03-20 2001-06-18 株式会社日立製作所 デ−タ処理システム及び方法
JPH09261520A (ja) * 1996-03-25 1997-10-03 Sharp Corp 画像入力装置
JPH09312739A (ja) * 1996-05-23 1997-12-02 Matsushita Electric Ind Co Ltd 画像読み取り装置
JP3655065B2 (ja) * 1997-08-20 2005-06-02 株式会社リコー 位置・姿勢検出装置と位置・姿勢検出方法と３次元形状復元装置及び３次元形状復元方法
JP3732335B2 (ja) * 1998-02-18 2006-01-05 株式会社リコー 画像入力装置及び画像入力方法
JP4256083B2 (ja) * 2001-07-09 2009-04-22 パナソニック株式会社 画像処理装置
JP4007899B2 (ja) * 2002-11-07 2007-11-14 オリンパス株式会社 運動検出装置
KR100543701B1 (ko) * 2003-06-17 2006-01-20 삼성전자주식회사 공간형 입력 장치 및 방법
JP4479195B2 (ja) * 2003-09-02 2010-06-09 ソニー株式会社 光学式マウス及び情報装置システム
JP2007166465A (ja) * 2005-12-16 2007-06-28 Seiko Epson Corp 画像読取装置
TWI317498B (en) * 2006-12-12 2009-11-21 Ind Tech Res Inst Inertial input apparatus with six-axial detection ability and the opearting method thereof
DE102007060263A1 (de) * 2007-08-16 2009-02-26 Steinbichler Optotechnik Gmbh Vorrichtung zur Ermittlung der 3D-Koordinaten eines Objekts, insbesondere eines Zahns
JP5163409B2 (ja) * 2008-10-03 2013-03-13 ソニー株式会社 撮像装置、撮像方法、およびプログラム
US8441696B2 (en) * 2009-05-20 2013-05-14 Dacuda Ag Continuous scanning with a handheld scanner
KR101027306B1 (ko) * 2009-12-14 2011-04-06 이명술 핸디 스캐너 장치 및 그 제어방법
EP2400261A1 (de) * 2010-06-21 2011-12-28 Leica Geosystems AG Optisches Messverfahren und Messsystem zum Bestimmen von 3D-Koordinaten auf einer Messobjekt-Oberfläche
WO2012086152A1 (ja) * 2010-12-24 2012-06-28 パナソニック株式会社 超音波画像生成装置及び画像生成方法
JP5780865B2 (ja) * 2011-07-14 2015-09-16 キヤノン株式会社 画像処理装置、撮像システム、画像処理システム
JP5769755B2 (ja) * 2013-04-24 2015-08-26 キヤノン株式会社 画像処理システム、画像処理装置及び画像処理方法
US9124734B2 (en) * 2013-07-05 2015-09-01 Lg Electronics Inc. Mouse having scanning function

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007184694A (ja) * 2006-01-05 2007-07-19 Seiko Epson Corp 画像読取装置
CN101715053A (zh) * 2008-10-03 2010-05-26 索尼株式会社 成像设备、成像方法和程序
US20130208308A1 (en) * 2008-11-17 2013-08-15 Image Trends, Inc. Image capture unit and computer readable medium used in combination with same
CN101753818A (zh) * 2008-12-08 2010-06-23 索尼株式会社 成像设备、成像方法和程序
CN101764907A (zh) * 2008-12-24 2010-06-30 精工爱普生株式会社 原稿读取装置
CN102164214A (zh) * 2010-01-13 2011-08-24 夏普株式会社 拍摄图像处理系统、便携终端装置以及图像输出装置
EP2696566A1 (en) * 2012-08-10 2014-02-12 LG Electronics, Inc. Handheld scanning apparatus and control method thereof
CN102905079A (zh) * 2012-10-16 2013-01-30 北京小米科技有限责任公司 用于全景拍摄的方法、装置及移动终端
CN103763470A (zh) * 2014-01-10 2014-04-30 重庆路威科技发展有限公司 一种便携式场景拍照装置

Also Published As

Publication number Publication date
EP3255870A4 (en) 2018-09-12
US20180018025A1 (en) 2018-01-18
JP6891094B2 (ja) 2021-06-18
JPWO2016125732A1 (ja) 2017-06-08
EP3255870A1 (en) 2017-12-13
WO2016125732A1 (ja) 2016-08-11
JP2018057010A (ja) 2018-04-05
JP6245671B2 (ja) 2017-12-13

Similar Documents

Publication Publication Date Title
KR102664688B1 (ko) 가상 캐릭터 기반 촬영 모드를 제공하는 전자 장치 및 이의 동작 방법
JP6884248B2 (ja) プリント用画像生成プログラム
US9111150B2 (en) Authentication system, and method for registering and matching authentication information
TW201214293A (en) Hybrid system for identifying printed page
KR102472156B1 (ko) 전자 장치 및 그 깊이 정보 생성 방법
CN102890825B (zh) 图像处理装置及图像处理方法
US11048923B2 (en) Electronic device and gesture recognition method thereof
CN106022323B (zh) 手指识别系统和手指识别方法及指纹识别装置
JP2008003989A (ja) 生体認証装置
US20130076909A1 (en) System and method for editing electronic content using a handheld device
CN113301883A (zh) 药剂识别系统、药剂识别装置、药剂识别方法以及程序
US20190272423A1 (en) Method for generating plural information using camera to sense plural wave bandwidth and apparatus thereof
CN107251538A (zh) 光学终端装置及扫描程序
CN111639726B (zh) 一种基于印章的身份认证系统和方法
JP6507865B2 (ja) 情報処理装置、画像形成システム、画像形成装置
KR20230172390A (ko) 사물 식별 장치 및 방법
EP1073945B1 (en) Device and method for recording hand-written information
WO2018167971A1 (ja) 画像処理装置、制御方法及び制御プログラム
JP7131637B2 (ja) 物体とｎ次元シンボルとを関連付けるシステム
JP4370855B2 (ja) 固体撮像デバイス、この固体撮像デバイスを用いた撮像方法および装置並びに距離計測方法およびシステム
JP6777895B2 (ja) 個体識別装置
JP7484103B2 (ja) 通信端末、通信システム、通信方法、及びプログラム
CN108262969A (zh) 图像采集终端及方法
KR20230082523A (ko) 신체 치수 측정 장치 및 방법
US20050117911A1 (en) Multifunctional optical device

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20171013