CN106104452B - 信息显示处理装置以及信息显示处理装置的控制方法 - Google Patents

信息显示处理装置以及信息显示处理装置的控制方法 Download PDF

Info

Publication number
CN106104452B
CN106104452B CN201480076834.9A CN201480076834A CN106104452B CN 106104452 B CN106104452 B CN 106104452B CN 201480076834 A CN201480076834 A CN 201480076834A CN 106104452 B CN106104452 B CN 106104452B
Authority
CN
China
Prior art keywords
pixel
code image
pixels
identification header
analysis
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201480076834.9A
Other languages
English (en)
Other versions
CN106104452A (zh
Inventor
木原隆幸
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shimadzu Corp
Original Assignee
Shimadzu Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shimadzu Corp filed Critical Shimadzu Corp
Publication of CN106104452A publication Critical patent/CN106104452A/zh
Application granted granted Critical
Publication of CN106104452B publication Critical patent/CN106104452B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/186—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
    • G06F11/0703—Error or fault processing not based on redundancy, i.e. by taking additional measures to deal with the error or fault not making use of redundancy in operation, in hardware, or in data representation
    • G06F11/0706—Error or fault processing not based on redundancy, i.e. by taking additional measures to deal with the error or fault not making use of redundancy in operation, in hardware, or in data representation the processing taking place on a specific hardware platform or in a specific software environment
    • G06F11/0736—Error or fault processing not based on redundancy, i.e. by taking additional measures to deal with the error or fault not making use of redundancy in operation, in hardware, or in data representation the processing taking place on a specific hardware platform or in a specific software environment in functional embedded systems, i.e. in a data processing system designed as a combination of hardware and software dedicated to performing a certain function
    • G06F11/0739—Error or fault processing not based on redundancy, i.e. by taking additional measures to deal with the error or fault not making use of redundancy in operation, in hardware, or in data representation the processing taking place on a specific hardware platform or in a specific software environment in functional embedded systems, i.e. in a data processing system designed as a combination of hardware and software dedicated to performing a certain function in a data processing system embedded in automotive or aircraft systems
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
    • G06F11/0703—Error or fault processing not based on redundancy, i.e. by taking additional measures to deal with the error or fault not making use of redundancy in operation, in hardware, or in data representation
    • G06F11/0766—Error or fault reporting or storing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/182—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a pixel
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N30/00—Investigating or analysing materials by separation into components using adsorption, absorption or similar phenomena or using ion-exchange, e.g. chromatography or field flow fractionation
    • G01N30/02—Column chromatography
    • G01N30/86—Signal analysis
    • G01N30/8651—Recording, data aquisition, archiving and storage

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Quality & Reliability (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Image Processing (AREA)
  • User Interface Of Digital Computer (AREA)
  • Editing Of Facsimile Originals (AREA)
  • Image Analysis (AREA)

Abstract

本发明为一种信息显示处理装置(1)，其将规定的处理结果显示在显示部(14)的画面上，该信息显示处理装置(1)包括：编码单元(34)，其对自身装置所保持的信息进行编码来制作代码图像；以及显示控制单元(35)，其将编码单元(34)制作好的所述代码图像和与该代码图像处于规定位置关系的1个识别标头显示在所述画面上；由此，在经由软件式图像识别来支援用户的操作的系统中，减轻图像检索所耗费的计算机的处理负荷。

Description

信息显示处理装置以及信息显示处理装置的控制方法
技术领域
本发明涉及一种用以经由以软件方式识别图像来支援用户的操作的信息显示处理装置及操作支援装置等。
背景技术
近来，使用在普通计算机上运行的控制用及解析用软件来进行分析装置的控制、或者作为分析结果而获得的分析数据的解析处理。这种软件的主要用户实际上是使用分析设备的分析人员。
由于用户未必熟悉该软件的操作，因此有时即便从开发人员的观点来看该软件是在加入了充分的功能之后提供的，但需要更多的追加功能(例如按钮或描述文字等GUI(Graphical User Interface，图形用户界面))这一情况却在事后显现出来。此外，虽然在开发阶段可在一定程度上掌握有可能发生的错误的内容，但对于发生错误时的对策，有时无法在开发阶段准备充分的支持。即，用户确实会在各种状况下遇到错误的发生，而在发生状况处于开发人员的设想之外的情况下，用户有时难以根据销售前制作的描述文字来找出恰当的恢复方法。如此，在软件作为产品而提供给用户之后，往往有可能发生希望追加功能或支持的状况。
本发明者鉴于这种情况，考虑过将区别于本体软件的操作支援程序安装在计算机中，通过对该本体软件所显示的规定图像进行检测来显示追加的GUI等。
另外，作为通过对画面上所显示的图像进行检测来以某种形式支援用户的操作的现有技术，例如有像非专利文献1那样对画面进行检索，在检测到与由用户预先登记的图像一致的图像时自动点击该图像的技术。非专利文献2也揭示有同样的技术，而它还可通过图形识别来进行类似图像的检测。
现有技术文献
非专利文献
非专利文献1：山本格也，“AutoMouse”，[online]，2001年3月2日，[2014年1月24日检索]，网址<URL:http://www.vector.co.jp/soft/win95/util/se074062.html>
非专利文献2：小野高弘，“RocketMouse Pro v8.5”，[online]，2012年4月27日，mojosoft，[2014年1月24日检索]，网址<URL:http://mojosoft.biz/products/rocketmousepro/>
发明内容
发明要解决的问题
但是，这种利用一致判定的图像的检索中，计算机的处理负荷容易成为问题。例如，即便是在像非专利文献1那样检索完全一致图像的情况下，根据所检索的图像的大小，需要的计算量也较多。同样地，若要同时检索多个图像，则在一致判定中进行比较的像素的数量会增多，因此有可能容易产生如下问题：CPU(Central Processing Unit)的使用率达到上限，导致本体程序的处理停滞。在经由图像识别来传递各种信息的系统中，为了应对大量的信息、条件，设想同时检索大量图像的状况，因此必须抑制图像的检索所耗费的处理负荷。
本发明是鉴于上述情况而完成，其目的在于提供一种用以在经由软件式图像识别来支援用户的操作的系统中减轻图像的检索所耗费的计算机的处理负荷的信息显示处理装置及操作支援装置等。
解决问题的技术手段
为了解决上述问题而成的第1发明为一种信息显示处理装置，其将规定的处理结果显示在显示部的画面上，该信息显示处理装置的特征在于包括：
a)编码单元，其对自身装置所保持的信息进行编码来制作代码图像；以及
b)显示控制单元，其将所述编码单元制作好的所述代码图像和与该代码图像处于规定位置关系的1个识别标头显示在所述画面上。
根据上述构成，信息显示处理装置所保持的规定信息通过编码单元而转换为代码图像，该代码图像通过显示控制单元而与1个识别标头一起显示在显示部的画面上。由于识别标头与代码图像处于规定位置关系，因此信息显示处理装置的用以支援用户的操作支援程序仅检索1个识别标头，就可根据预先设定的位置关系而检测出代码图像，从而可将该代码图像解码而获得规定信息。即，可免去代码图像的检索。
由于识别标头只要具有足够表示代码图像的位置的信息即可，因此通常具有比代码图像所表示的信息的量少的信息量。因而，操作支援程序能以比检索代码图像本身的情况少的计算量检测出代码图像。因此，图像的检索所耗费的计算机的处理负荷得以减轻。
作为通过编码单元加以编码的信息，可列举信息显示处理装置内所发生的错误的内容，或者，若信息显示处理装置为分析装置的控制用装置，则可列举分析参数等。
优选所述代码图像及所述识别标头由具有用户难以目视判别的色差的多个像素构成，
所述显示控制单元在被接近所述多个像素的颜色占据的规定范围内的均匀颜色区域内显示所述代码图像及所述识别标头。
根据该构成，由于代码图像及识别标头在画面上不易辨认，因此可防止它们降低其他物体的可视性、或者使用户感到不快。
也可设为如下构成，即，所述识别标头包含第1像素组和第2像素组，所述第1像素组由以3以上的自然数N沿行方向连续N个的同一颜色的像素构成，所述第2像素组在该行内与所述第1像素组相邻，由颜色不同于该第1像素组的1或多个像素构成。
根据该构成，识别标头包含在行方向上相邻的第1像素组和第2像素组，各组由同一颜色的像素构成，两组间，像素的颜色不一样。进而，第1像素组由沿行方向连续N个的像素构成。
因而，例如，操作支援程序沿从第1像素组去往第2像素组的方向在显示部的画面上进行检索，在连续的2个像素的颜色不同的情况下，将该2个像素中在检索方向上为后方的像素假定为第2像素组中最前头的像素并对其进行验证，在验证的结果为该假定错误的情况下将检索位置前进N列，若如此，则每当判定上述假定错误时，操作支援程序可省略对N－1个像素的检索。因而，因显示部的画面上的像素的颜色的不均匀而省略检索的像素的数量增大。由此，可进一步抑制图像检索所耗费的处理负荷。
也可设为如下构成，即，所述第2像素组由以比N大的自然数M沿行方向连续M个的同一颜色的像素构成。
根据该构成，在识别标头中，第1像素组由沿行方向连续N个的像素构成，第2像素组由沿行方向连续M个的像素构成，且N＜M。由此，例如，上述操作支援程序进而在连续的2个像素的颜色相同的情况下将该2个像素假定为第2像素组中最前头的2个像素或者在行内处于它们附近的2个像素，并从该2个像素中后方的像素起将检索位置前进M列，在前进后所在位置的像素的颜色与第2像素组的颜色一致的情况下，倒退至原检索位置，在不一致的情况下，从原检索位置起前进M－N+1列，若如此，则每当判定上述假定错误时，操作支援程序可省略对M－N个像素的检索。由此，通过恰当地设定M的值，可进一步抑制图像检索所耗费的处理负荷。
为了解决上述问题而完成的第2发明为一种操作支援装置，其用以支援与对象软件有关的用户的操作，该操作支援装置的特征在于包括：
a)识别标头检测单元，其检测显示部的画面上所显示的1个识别标头；
b)代码图像检测单元，其根据与所述识别标头检测单元所检测到的所述识别标头的位置关系，检测与所述对象软件有关的规定信息经编码而成的代码图像；
c)解码单元，其对所述代码图像检测单元所检测到的所述代码图像进行解码，获取所述规定信息；以及
d)执行单元，其执行与所述解码单元所获取到的所述规定信息相关联的规定处理。
根据上述构成，当识别标头检测单元检测到1个识别标头时，代码图像检测单元根据与该识别标头的位置关系来检测规定信息经编码而成的代码图像。所检测到的代码图像通过解码单元加以解码，执行单元执行与通过该解码而获得的规定信息相关联的规定处理。即，操作支援装置仅对1个识别标头进行检索即可，可免去代码图像的检索。
由于识别标头具有足够表示代码图像的位置的信息即可，因此通常具有比代码图像所表示的信息的量少的信息量。因而，操作支援装置能以比检索代码图像本身的情况少的计算量检测出代码图像。因此，图像的检索所耗费的计算机的处理负荷得以减轻。
可设为如下构成，即，所述识别标头检测单元针对3以上的自然数N而沿行方向检索画面上的像素的值，在检测到颜色与前一像素不同的像素的情况下，判定该检测到的像素是否为所述识别标头的第N+1列像素，在该判定结果为否的情况下，从与所述检测到的像素相距N列后方的像素起重新开始检索。
根据该构成，操作支援程序每当检测到颜色与前一像素不同的像素、且判定该检测到的像素不是识别标头的第N+1列像素时，可省略对N－1个像素的检索。因而，因显示部的画面上的像素的颜色的不均匀而省略检索的像素的数量增大。因此，通过将包含由沿行方向连续N个的同一颜色的像素构成的第1像素组和在该行内与所述第1像素组相邻且由颜色不同于该第1像素组的像素构成的第2像素组的图像作为识别标头，对象软件可进一步抑制图像检索所耗费的处理负荷。
可设为如下构成，即，所述识别标头检测单元进而在针对比N大的自然数M而检测到颜色与前一像素相同的像素的情况下，判定与该检测到的像素相距M列后方的像素的颜色与所述识别标头的第N+1列到第N+M列像素的颜色是否一致，在判定为一致的情况下，从所述检测到的像素的后一像素起重新开始检索，在判定为不一致的情况下，从与所述检测到的像素相距M－N+1列后方的像素起重新开始检索。
根据该构成，操作支援程序每当检测到颜色与前一像素相同的像素、且判定与该检测到的像素相距M列后方的像素与识别标头的第N+1列到第N+M列像素的颜色不一致时，可省略对M－N个像素的检索。因而，因显示部的画面上的像素的颜色的不均匀而省略检索的像素的数量增大。因此，若将包含由沿行方向连续N个的同一颜色的像素构成的第1像素组和在该行内与所述第1像素组相邻且由呈不同于该第1像素组的单一颜色的M个像素构成的第2像素组的图像作为识别标头，并恰当地设定M的值，则对象软件可进一步抑制图像检索所耗费的处理负荷。
发明的效果
根据第1发明及第2发明，在经由软件式图像识别来支援用户的操作的系统中，图像的检索所耗费的计算机的处理负荷得以减轻。
附图说明
图1为表示本发明的第1实施方式所涉及的分析控制装置的概略构成的框图。
图2的(a)为该实施方式所涉及的分析控制装置的分析控制软件的窗口的画面显示例，图2的(b)为图2的(a)所示的区域A内所显示的识别标头及代码图像的一例。
图3的(a)为该实施方式所涉及的分析控制装置在画面上的被具有RGB值(200、200、200)的像素占据的规定区域内嵌入的识别标头的RGB值的一例，图3的(b)为该实施方式所涉及的分析控制装置在该区域内嵌入的代码图像的RGB值与送液模式的对应关系的一例。
图4为表示由该实施方式所涉及的分析控制装置进行的代码图像嵌入处理的流程的一例的流程图。
图5为表示由该实施方式所涉及的分析控制装置进行的检索-操作支援处理的流程的一例的流程图。
图6为表示经过图5所示的检索-操作支援处理的结果、显示了与送液模式相应的GUI的状态的画面显示例。
图7为本发明的第2实施方式所涉及的分析控制装置在画面上嵌入的识别标头的一例。
图8为表示由该实施方式所涉及的分析控制装置进行的检索-操作支援处理的流程的流程图。
图9为表示在图8所示的流程图中检测到识别标头的情况下的处理的流程的流程图。
图10为由该实施方式所涉及的分析控制装置进行的图像检索的说明图。
图11为使用该实施方式所涉及的分析控制装置的图像的检索所需的处理负荷的比较表。
图12为本发明的第3实施方式所涉及的分析控制装置在画面上嵌入的识别标头的一例。
图13为表示由该实施方式所涉及的分析控制装置进行的检索-操作支援处理的流程的流程图。
图14为表示在该实施方式所涉及的分析控制装置中同一颜色的像素连续的情况下的处理的流程的流程图。
图15为由该实施方式所涉及的分析控制装置进行的图像检索的说明图。
图16为使用该实施方式所涉及的分析控制装置的图像的检索所需的处理负荷的比较表。
具体实施方式
下面，一边参考附图，一边对用以实施本发明的实施方式进行详细说明。在以下的记载中，对具有与前面已说明过的附图相同的功能的构件标注同一符号，并省略其说明。
[第1实施方式]
图1表示本发明的第1实施方式所涉及的分析控制装置(信息显示处理装置-操作支援装置)1。分析控制装置1的实际形态为计算机，存储器12、由LCD(Liquid CrystalDisplay)等构成的显示器(显示部)14、由键盘和鼠标等构成的输入部16、存储部20与作为中央运算处理装置的CPU(Central Processing Unit)10相互连接。其中，上述存储器12由RAM(Random Access Memory)等易失性存储装置构成，存储部20由ROM(Read onlyMemory)、闪存、EPROM(Erasable Programmable ROM)、EEPROM(注册商标)(ElectricallyEPROM)、HDD(Hard Disc Drive)、SSD(Solid State Drive)等非易失性存储装置构成。在存储部20中设置有分析控制程序21、操作支援程序22。分析控制程序21及操作支援程序22所具备的后文叙述的各要素是通过由CPU 10将这些程序读出至存储器12并加以执行来实现的功能单元。此外，存储部20中还存储有OS(Operating System)29。
分析控制装置1包括用以掌管与外部装置的直接连接、或者与外部装置等的经由LAN(Local Area Network)等网络的连接的接口(I/F)18，从该I/F 18经由网络线缆NW(或无线LAN)与分析装置A1连接。
再者，与分析控制装置1连接的分析装置也可为多台。此外，分析控制装置1与分析装置A1也可构成为一体装置。
在本实施方式中，分析装置A1设为液相色谱质谱分析装置(LC-MS)。但分析装置A1的实际形态并不限定于此，也可为气相色谱装置(GC)或液相色谱装置(LC)、以及气相色谱质谱分析装置(GC-MS)。分析装置A1也可为其他实验设备或医疗设备，只要为可由计算机进行控制或监视的分析装置，则测定的方法或对象不限。
分析控制程序21为用以控制由分析装置A1进行的分析的应用软件，确定各种参数，并命令分析装置A1执行遵循该参数的分析。此外，分析控制程序21将由分析装置A1得到的分析结果实时显示在显示器14的画面上。
在图1中，以关联至分析控制程序21的方式表示有参数确定部31、分析执行命令部32、分析数据存储部33、编码部(编码单元)34及显示控制部(显示控制单元)35。虽然分析控制程序21除了这些功能以外还可具备作为对由分析装置A1得到的分析结果进行解析的解析软件的功能，但由于不在本发明的宗旨之内，因此省略图示及说明。
参数确定部31根据经由输入部16的用户输入来确定由分析装置A1进行分析的各种参数。上述各种参数，可以为例如温度、压力、泵的送液模式、泵的流速等，也可为在分析装置A1的分析执行过程中能加以变更。
分析执行命令部32将参数确定部31所确定的分析参数通知分析装置A1，并命令分析装置A1执行遵循该所通知的参数的分析。这些通知及命令是经由I/F 18而进行。
分析数据存储部33为将分析装置A1根据上述命令加以执行所得的分析结果以分析数据的形式加以保存的存储区域。
编码部34对分析控制程序21所保持的规定信息进行编码来制作代码图像。作为上述规定信息，例如可列举参数确定部31所确定的参数、分析数据存储部33中所保存的分析结果、以及分析控制程序21上发生的错误的内容等。作为上述代码图像，可使用根据信息的内容而分配有不同RGB(RGB color model，三原色光模式)值的1或多个像素，也可使用像QR(Quick Response，快速响应)码(注册商标)等那样编码-解码算法已知的二值图像。在被编码的信息的可取值限于数级的情况下，采用前者即可，在信息为连续的变量或字符串而导致难以仅仅通过受到限制的范围的RGB值来加以表现的情况下，采用后者即可。此外，也可将跨及多行的QR码的各行的图像分离而连结在1行内，以此作为代码图像。
显示控制部35对显示器14输出经分析控制程序21处理后的各种信息的图像信号。具体而言，将通过分析控制程序21所配备的未图示的分析数据处理部实施规定处理(例如图表化等)后的分析数据以图像形式像图2的(a)那样显示在显示器14的画面上。图2的(a)为显示控制部35显示在显示器14的画面上的分析控制程序21的窗口200的一例。进而，作为本实施方式的特征，显示控制部35对编码部34制作好的代码图像附加后文叙述的识别标头并将其显示在画面上的规定位置(例如该图中由虚线围成的区域A内)。在以下的记载中，将使识别标头及代码图像显示在画面上的操作称为“嵌入”。关于识别标头及代码图像的嵌入目标位置，典型而言为被规定背景色占据的空白区域，优选避免识别标头或代码图像与特定物体重叠。
此处，对本实施方式中的识别标头进行说明。
所谓识别标头，是指用以使后文叙述的操作支援程序22易于检测显示器14的画面上所显示的代码图像的物体。即，识别标头具有可容易地被检测到的特殊的排列图形，并且相对于代码图像而具有规定的相对位置。作为具体例，在像图2的(b)所示那样以单一像素220为代码图像的情况下，可将具有在行方向上与该像素220相邻的一端且具有各不相同的规定RGB值的3个连续像素201～203作为识别标头210。图2的(b)为将图2的(a)中的区域A内的图像放大后的图，表示有该区域A内所嵌入的识别标头210及第4像素(代码图像)220。
此处，作为本实施方式的特征，识别标头及代码图像具有在已嵌入在画面上的状态下用户难以辨认的颜色，即，具有如下RGB值：与在显示位置上相邻的像素的色差很小，为用户无法目视识别的程度。
参考图3来展示具体例。识别标头210及第4像素220被嵌入至图2的(a)所示的区域A内，区域A其整体被具有窗口200的背景色(200、200、200)的RGB值的像素占据。再者，显示器14的R、G、B各种颜色可表现256色阶。图3的(a)为表示显示控制部35在显示器14的画面上嵌入的识别标头210的各像素的RGB值的表。如该图所示，对第1像素201分配的是(201、201、201)这一RGB值，对第2像素202分配的是(199、199、199)这一RGB值，对第3像素203分配的是(202、202、202)这一RGB值，不论送液模式如何，这些值都不会变化。
另一方面，第4像素220根据送液模式而被分配不同的RGB值。图3的(b)为表示第4像素220的RGB值与送液模式的对应关系的表。送液模式有等度溶出模式、双梯度溶出模式、低压梯度溶出模式3种，对应于这些模式，第4像素220的RGB值分别被分配(201、200、200)、(202、200、200)、(203、200、200)。在该图所示的例子中，仅R值根据送液模式而变化，但当然也可改变G值或B值，并且，也可组合改变这些值。
根据上述例示的RGB值可知，识别标头210及第4像素220被嵌入在区域A内之后，相对于相邻像素而言只有极小的色差，可以说用户几乎不可能通过目视来识别所嵌入的图像。另一方面，由于操作支援程序22会参考像素的RGB值，因此也可准确地识别对于用户而言无法判别的色差，从而检测出识别标头210，此外，可准确地识别第4像素220可采取的3种状态中的各方。因而，显示控制部35可在不降低画面上的其他物体的可视性或者不会使用户感到不快的情况下将编码后的信息嵌入在画面上。在使用QR码作为代码图像的情况下，与上述一样，将构成该QR码的像素组的颜色(通常为2色阶)设为用户难以辨认的RGB值即可。
再者，上述各RGB值仅为一例，根据显示这些像素组的区域来酌情设定具体值即可。典型而言，只要设定为与在分析控制程序21的窗口200中占据大部分空白区域的颜色相近的值，显示位置的自由度就比较高而适于实用。此外，就防止误检测的观点而言，识别标头210的各像素的RGB值优选以成为画面上通常不使用的颜色的排列的方式进行设定。进而，出于同样的观点，识别标头的像素数优选设为3以上。
此外，在将QR码这样的由大量像素构成的图像作为代码图像的情况下，为了操作支援程序22可准确地检测代码图像，也可根据预先制定的规则在紧跟识别标头的后面附加表示代码图像的尺寸信息的像素。例如，在代码图像的尺寸有数级的情况下，可设为对各尺寸分配不同的RGB值的构成。上述表示尺寸信息的像素可为代码图像的一部分，也可为独立于代码图像的像素。
再次参考图1，对分析控制装置1的存储部20中所设置的操作支援程序22进行说明。
操作支援程序22为用以支援分析控制程序21上的用户的操作的程序。操作支援程序22可在之后安装至已安装有分析控制程序21的计算机，也可与分析控制程序21同时安装。
在图1中，像操作支援程序22所关联的那样表示有标头检测部(识别标头检测单元)41、代码图像检测部(代码图像检测单元)42、解码部(解码单元)43、操作支援执行部(执行单元)44及数据库(DB)45。
标头检测部41检测显示器14的画面上所显示的识别标头。具体而言，例如从显示器14的画面的左上端的像素起朝右方扫描RGB值，检索与识别标头一致的图像。再者，当扫描到达右端后，前进1行，再次从左端的像素起朝右方进行扫描。
代码图像检测部42检测代码图像。具体而言，基于识别标头与代码图像的预先规定的位置关系，根据标头检测部41所检测到的识别标头的位置来求代码图像的位置，并检测该求出的位置上显示的代码图像。
解码部43对代码图像检测部42所检测到的代码图像进行解码，获取原信息。具体而言，在信息以代码图像的RGB值的形式进行了编码的情况下，解码部43参考数据库45中所存储的、将代码图像的RGB值与规定信息关联而得的代码对应表，从而确定与代码图像检测部42所检测到的代码图像的RGB值相关联的信息。该代码对应表例如具有前面参考过的图3的(b)所示的表那样的数据结构。此外，在将像QR码等那样编码-解码算法已知的图像作为代码图像的情况下，解码部43可使用对应的解码算法来获取原信息。
操作支援执行部44根据解码部43所获取到的信息来执行规定处理。作为上述规定处理，例如，若所获取到的信息为应用中的分析参数，则列举与该参数相应的说明注释或规定按钮等GUI的显示。此外，若对分析控制程序21的发文是已知的，则显示与应用中的分析参数相应的分析控制程序21上的设定画面也较为有用。作为另一例，若解码部43所获取到的信息包含发生错误的内容，则也可显示用以教导用户从该错误中恢复的步骤的注释。这些规定处理是通过参考数据库45中所存储的、将规定信息与处理关联而得的操作支援处理对应表(未图示)来加以确定。
数据库45存储有将代码图像与规定信息关联而得的代码对应表、以及将规定信息与规定处理关联而得的操作支援处理对应表。为了解码部43从代码图像来解码原信息而参考代码对应表，为了操作支援执行部44根据该原信息来确定应执行的动作而参考操作支援处理对应表。再者，在解码部43通过已知的解码算法(例如QR码的读取技术)来进行代码图像的解码的情况下，上述那样的代码对应表不是必需的。
[代码图像嵌入处理的流程]
此处，一边参考作为流程图的图4并且视需要参考图2～3，一边对本实施方式的由分析控制程序21进行的代码图像嵌入处理的流程进行说明。此处，使用上述中说明过的图2及图3的例子。由分析控制程序21进行的代码图像嵌入处理的开始时刻可为参数确定部31确定好送液模式的时间点，也可为分析执行命令部32命令分析装置A1执行分析的时间点。或者，也能以一定的时间间隔反复执行代码图像嵌入处理。
首先，编码部34获取送液模式(步骤S101)。具体而言，编码部34获取参数确定部31所确定的参数信息，提取多个参数中与送液模式有关的参数。
接着，编码部34根据送液模式而确定第4像素220的RGB值(步骤S102)。具体而言，根据图3的(b)所示的对应关系，将与送液模式相应的RGB值分配至第4像素220。此处，作为例子，送液模式设为低压梯度溶出模式，编码部34分配(203、200、200)这一RGB值。
接着，显示控制部35将识别标头210及第4像素220显示在规定位置(步骤S103)。具体而言，显示控制部35在图2的(a)所示的窗口200内的规定位置(例如被具有窗口200的背景色(200、200、200)的RGB值的像素占据的区域A内)嵌入图2的(b)所示的4个连续的像素201、202、203、220。其中最前面的3个像素为识别标头210，如图3(a)所示，对第1像素201分配(201、201、201)这一RGB值，对第2像素202分配(199、199、199)这一RGB值，对第3像素203分配(202、202、202)这一RGB值。第4像素220的RGB值为步骤S102中所确定的(203、200、200)。再者，显示识别标头210及第4像素220的位置并不限定于区域A内，只要为整体或大部分的RGB值为(200、200、200)或接近(200、200、200)的值的区域即可。在普通的应用窗口中，空白区域的颜色(背景色)较为均匀，因此实际上显示控制部35可在窗口200内的几乎任意空白区域内嵌入识别标头210及第4像素220。
其后，若通过参数确定部31变更了送液模式(步骤S104中为是)，则代码图像嵌入处理返回至步骤S101，编码部34获取变更后的送液模式信息。若送液模式无变更(步骤S104中为否)，则显示控制部35维持识别标头210及第4像素的嵌入显示。作为另一例，在从步骤S103起经过了一定时间的情况下，显示控制部35也可解除显示。
通过以上所说明的处理，分析控制程序21将以RGB值的形式对送液模式进行编码而得的第4像素220嵌入在显示器14的画面上。此时，通过对第4像素220附加识别标头210，操作支援程序22可通过检测识别标头210而根据规定的位置关系来间接地检测第4像素。进而，通过将识别标头210及第4像素220设为与显示区域的背景色相近的颜色，使得它们难以被用户辨认出来，从而可防止其他物体的可视性降低、或者使用户感到不快。
[检索-操作支援处理的流程]
接着，一边参考作为流程图的图5并且视需要参考图6，一边对本实施方式的由操作支援程序22进行的检索-操作支援处理的流程进行说明。此处，通过上述所说明的代码图像嵌入处理，分析控制程序21已将识别标头210及第4像素220嵌入到了窗口200内。由操作支援程序22进行的检索-操作支援处理能以一定的时间间隔反复执行，也可根据用户的指示来执行。或者，也可设为如下构成：在规定时刻(例如步骤S103的完毕时间点)从分析控制程序21对操作支援程序22输出检索-操作支援处理的开始命令，操作支援程序22根据该命令而开始检索-操作支援处理。
首先，标头检测部41从画面的左上端起检索行内的像素(步骤S201)。具体而言，针对显示器14的画面的抓取图像，参考第1行左端的像素(1,1)的RGB值。此处的“抓取图像”是使用普通计算机的OS所配备的、将画面的显示内容复制并存储至临时存储区域的画面抓取功能而获得的图像。标头检测部41指示OS 29抓取显示器14的画面，并参考由此获得的图像内的像素的RGB值。抓取图像的尺寸设为宽X像素、高Y像素。
标头检测部41一边朝右方检索行内一边参考像素的RGB值(步骤S202)，判定有无与识别标头210一致的图像，即，判定有无从最前头起RGB值为(201、201、201)、(199、199、199)、(202、202、202)的3个连续的像素(步骤S204)。若未检测到识别标头210(步骤S204中为否)，则返回至步骤S202继续检索。再者，若检索到达了抓取图像的右端列(步骤S203中为是)，则不进行一致判定而将检索对象移至下一行的左端(步骤S208)，返回至步骤S202继续检索。在通过步骤S208而使得检索对象行超出抓取图像的下端的情况下(步骤S209中为是)，意味着整个画面的检索已结束，因此检索-操作支援处理结束。
在检索到达了抓取图像的右端的情况下(步骤S203中为是)，不进行与识别标头210的一致判定的原因在于，在画面的右端的像素为识别标头210的第3像素203时，第4像素220已超出画面外，无法检测。在代码图像为宽W像素、高H像素的图像的情况下，步骤S203及S209中的判定式例如为下式(1)及式(2)。
x＞X－W…(1)
y＞Y－H+1…(2)
上述式(1)及(2)设想的是将识别标头210的后一像素设为左上端的代码图像。如要注意的是，若识别标头210与代码图像的位置关系不一样，则判定式也会发生变化。
当检测到识别标头210时(步骤S204中为是)，接着，代码图像检测部42检测第4像素220(步骤S205)。具体而言，将识别标头210的第3像素203的后一(图2的(b)所示的例子中为在右侧相邻的)检索对象像素识别为第4像素220。
接着，解码部43根据第4像素220的RGB值来确定送液模式(步骤S206)。具体而言，参考数据库45中所存储的代码对应表，确定与代码图像检测部42所检测到的第4像素220的RGB值相关联的送液模式。更具体而言，检索上述代码对应表中表示第4像素的RGB值的表格栏的数据值与步骤S205中代码图像检测部42所检测到的像素的RGB值一致的记录，确定一致的记录中表示送液模式的表格栏的数据值。作为代码对应表的数据结构的一例，若参考图3的(b)，则在“第4像素”表格栏中具有RGB值(203、200、200)的数据值的记录的“送液模式”表格栏的数据值为“低压梯度溶出”，因此解码部43确定送液模式为低压梯度溶出模式。
接着，操作支援执行部44执行与送液模式相应的处理(步骤S207)。具体而言，参考数据库45中所存储的、将规定信息与处理关联而得的未图示的操作支援处理对应表，执行与解码部43所确定的送液模式相关联的处理。在步骤S206中，确定了送液模式为低压梯度溶出模式。此处，作为例子，对分析控制程序21发送消息，以显示梯度时间程序设定画面。将作为本步骤的结果而显示有梯度时间程序设定画面600的状态示于图6。作为另一例，也可将对用户通知应用中的送液模式的描述文字等GUI显示在画面上。
以上，检索-操作支援处理结束。再者，在分析控制程序21可同时嵌入多个识别标头及代码图像的情况下，设为在步骤S207之后返回至步骤S202继续检索的构成即可。
通过以上所说明的处理，当操作支援程序22检索显示器14的画面而检测到识别标头210时，根据与识别标头210的规定的位置关系来检测第4像素220。继而，根据检测到的第4像素的RGB值来确定编码部34编码后的送液模式，并执行与该确定的送液模式相关联的规定处理(例如GUI的显示等)，由此可支援分析控制程序21的用户的操作。
通过上述代码图像嵌入处理与检索-操作支援处理的组合，进一步获得如下效果。即，例如在像第4像素220那样以1或多个像素的RGB值的形式对信息进行了编码的情况下，操作支援程序22要直接检测代码图像，就必须针对代码图像可能采用的每一RGB值来进行与检索对象像素的一致判定。这种方法的处理负荷较大，并且，在代码图像的像素数较少的情况下，将无关系的像素误检测为代码图像的危险性较高，因此并不现实。相对于此，在本实施方式中，由于通过相对于被编码的信息而言不变的识别标头210来规定代码图像的位置，因此操作支援程序22只要检测出该识别标头210，也就是说，通过对1个图像的检索，就可高精度地检测出代码图像。此外，在将QR码作为代码图像的情况下也一样，与检索与跨及多行的QR码完全一致的图像的处理相比，对识别标头210这样的1行内的像素的连接进行检测的处理的计算量被抑制为较少。因而，根据本实施方式，图像的检索所耗费的计算机的处理负荷得以减轻。
上述中，为了简化说明，对如下构成进行了说明：分析控制程序21以第4像素220的RGB值的形式仅编码送液模式，操作支援程序22对其进行解码并显示规定的设定画面。作为应用例，也可为：分析控制程序21以QR码形式对送液模式和当前的泵的流速值两方进行编码，对其进行了解码的操作支援程序22在将上述流速值输入为“初始浓度”的状态下使梯度时间程序设定画面600(参考图6)进行显示。
[第2实施方式]
参考图7～图11，对本发明的第2实施方式所涉及的分析控制装置1进行说明。本实施方式的分析控制装置1的功能模块构成与上述第1实施方式相同，但显示控制部35所显示的识别标头的形态以及标头检测部41的检索方法不一样。
图7表示本实施方式中显示控制部35在显示器14的画面上嵌入的识别标头的一例。识别标头710中，从第1像素P1起到第N像素PN为止的N个像素(第1像素组)均具有相同的RGB值，从第N+1像素PN+1起到第N+a像素PN+a为止的a个像素(第2像素组)具有与前面的N个像素不同的RGB值。N的值设为3以上，a的值为1以上的任意数。再者，该图中，识别标头710是以1行像素的连接的形式加以表示，但也可为跨及多行的图像，只要在其第一行具有图中所示那样的排列即可。关于各RGB值的具体值，与上述第1实施方式中的识别标头210的各像素一样，以相对于在嵌入位置上相邻的像素的色差极小的方式进行设定。本实施方式中的代码图像嵌入处理的流程与上述第1实施方式相同(参考图4)。
[检索-操作支援处理的流程]
接着，一边参考作为流程图的图8及图9，一边对本实施方式的由操作支援程序22进行的检索-操作支援处理的流程进行说明。关于开始检索-操作支援处理的时刻，设为与上述第1实施方式中的检索-操作支援处理相同。
首先，标头检测部41检索行内的像素(步骤S301)。具体而言，针对显示器14的画面的抓取图像，参考第1行第N列像素(N,1)的RGB值。抓取图像的尺寸设为宽X像素、高Y像素，代码图像的尺寸设为宽W像素、高H像素。
标头检测部41一边朝右方检索行内一边参考像素的RGB值(步骤S302)，判定RGB值是否自前一像素发生了变化(步骤S304)。该判定是通过如下操作来进行：每当前进1列像素时，执行处于存储器区域内的、对数据进行比较的函数(以下，称为存储器比较函数)，对前一像素的数据与RGB值进行比较。若相同RGB值连续(步骤304中为否)，则返回至步骤S302继续检索。再者，在步骤S302的结果为检索对象像素向右超出与抓取图像的右端相距W+a像素近前的位置的情况下(步骤S303中为是)，不判定RGB值有无变化而将检索对象移至下一行的第N列(步骤S308)，返回至步骤S302继续检索。在通过步骤S308而使得检索对象行向下超出与抓取图像的下端行相距H－1行近前的行的情况下(步骤S309中为是)，意味着可检测到代码图像的画面范围的检索已结束，因此检索-操作支援处理结束。
此处，在步骤S304中判定的只是检索对象像素的RGB值是否自前一像素发生了变化，需要注意的是，与识别标头710的第N+1像素PN+1的RGB是否一致这一内容并不包含在判定条件内。当检测到RGB值自前一像素发生了变化时(步骤S304中为是)，接着，标头检测部41判定检索对象像素是否为识别标头710的第N+1像素PN+1(步骤S305)。具体而言，标头检测部41将当前的检索对象像素(x,y)假定为识别标头710的第N+1像素PN+1，判定从(x－N,y)起到(x+a－1,y)为止的N+a个像素的连接与识别标头710是否一致。该判定是通过如下操作来进行：对上述N+a个连续的像素执行存储器比较函数，判定其与识别标头710是否一致。在识别标头710为跨及多行的图像的情况下，若在第一行观察到了一致，则前进1行而执行同样的存储器比较函数，以如此形式对识别标头710的所有行进行一致的判定。再者，针对连续的多个像素的存储器比较函数与步骤S304中的单一像素单位的存储器比较函数在处理负荷上无大的差异。
上述处理在概念上换句话说就是，标头检测部41以将RGB值自前一像素发生了变化的像素假定为识别标头710的第N+1像素PN+1并验证该假定的形式进行检索。
即，在步骤S301及S308中从第N列像素开始检索的原因在于，RGB值自从第1列起到第N－1列为止的像素发生变化的像素不可能成为第N+1像素PN+1的候选。在假定识别标头710是从抓取图像的左端开始的情况下，可知，由于第N+1像素PN+1是作为RGB值不同于第N列像素的第N+1列像素来加以检测，因此不需要与第N－1列以前的像素进行比较。因而，从认作第N像素PN的位置的、最左端列即第N列开始检索。
在从(x－N,y)起到(x+a－1,y)为止的N+a个像素的连接与识别标头710一致的情况下(步骤S305中为是)，该判定结果意味着检测到了识别标头710。因而，检索-操作支援处理转移至图9所示的步骤S401。
首先，代码图像检测部42检测代码图像(步骤S401)。具体而言，将相对于识别标头710而处于规定的相对位置的(例如将第N+a像素PN+a的后一像素作为左上端的)宽W像素、高H像素的图像识别为代码图像。
接着，解码部43对代码图像进行解码来确定分析参数(步骤S402)。具体而言，参考数据库45中所存储的代码对应表，确定与代码图像检测部42所检测到的代码图像相关联的分析参数。或者，也可使用规定的解码算法来确定分析参数。作为本步骤的具体例之一，能够列举上述第1实施方式中说明过的步骤S206。
接着，操作支援执行部44执行与分析参数相应的处理(步骤S403)。具体而言，参考数据库45中所存储的、将规定信息与处理关联而得的未图示的操作支援处理对应表，执行与解码部43所确定的分析参数相关联的处理。作为本步骤的具体例之一，能够列举上述第1实施方式中说明过的步骤S207。
在步骤S305中检测到了识别标头的情况下，检索-操作支援处理在步骤S403之后结束。与上述第1实施方式一样，也可设为在步骤S403之后返回至步骤S302继续检索的构成。
再次参考图8。在从(x－N,y)起到(x+a－1,y)为止的N+a个像素的连接与识别标头710不一致的情况下(步骤S305中为否)，标头检测部41将检索对象像素前进N－1列(步骤S306)，若检索对象像素未向右超出与抓取图像的右端相距W+a像素近前的位置(步骤S307中为否)，则返回至步骤S302继续检索。在步骤S306的结果为检索对象像素向右超出与抓取图像的右端相距W+a像素近前的位置的情况下(步骤S307中为是)，转移至步骤S308，从下一行的第N列像素起进行检索。
在步骤S306中将检索对象像素前进N－1列的原因在于，从后一像素(x+1,y)起到(x+N－1,y)为止的N－1个像素不可能是识别标头710的第N+1像素PN+1。在图10中表示具体例来加以说明。该图中，设定N＝5、a＝1。标头检测部41沿图中白色箭头的方向检索行内。现在，针对在步骤S304中判定RGB值自前一像素1000发生了变化的检索对象像素1001，在步骤S305中获得了并非识别标头710的第N+1像素PN+1这一判定结果。在该情况下，第N+1像素PN+1距检索对象像素1001最近的状况是像该图所示那样检索对象像素1001为识别标头710的第1像素P1的情况。因而，出于与步骤S301及S308中从第N列像素起开始检索的原因相同的原因，从认作当前的检索对象行中的第N像素PN的位置的、最左端的像素即N－1列前方的像素1002起重新开始检索。再者，该图中，作为代码图像的一例，展示的是识别标头710的后一像素1020，但如上所述，代码图像并不限定于单一像素。
根据以上所说明的处理，在行内连续的2个像素的RGB值不同的情况下，标头检测部41将2个像素中处于后方的像素假定为识别标头710的第N+1像素PN+1并验证该假定，若验证结果为否，则将检索对象像素前进N列而重新开始检索。即，在作为第N+1像素PN+1的候选的像素不是第N+1像素PN+1的情况下，可跳过对N－1个像素的检索。由此，处理负荷进一步得到减轻。再者，若画面内的像素的RGB值不均匀，则跳过的机会增多，此外，N的值越大，被跳过的像素的数量就越多，有助于处理效率的提高。
对由本实施方式获得的处理负荷的减轻率进行具体说明。设想在抓取图像中未检测到识别标头710而检索整个画面的状况，在不使用本实施方式的情况下和使用本实施方式的情况下，对成为检索中的处理负荷增大的主要因素的存储器比较函数的执行次数进行比较。此处的所谓“不使用本实施方式的情况”，是指采用像上述第1实施方式那样逐一检索画面上的像素来检索与识别标头完全一致的图像的方法的情况。
将抓取图像的尺寸设为宽X像素、高Y像素，将包含识别标头710和代码图像两方的矩形区域的尺寸设为宽Wq、高Hq像素。此外，将在抓取图像上沿行方向连续的像素中RGB值不同的比例设为P(％)。此时，不使用本实施方式的情况下的处理负荷Q1以下式(3)表示。
Q1＝(X－Wq)*(Y－Hq)…(3)
分别减去Wq及Hq是为了将识别标头710或代码图像超出画面外的情况排除在外。
另一方面，使用本实施方式的情况下的处理负荷Q2以下式(4)表示。
Q2＝{(100－P)+P*2/N}*(X－Wq)*(Y－Hq)/100…(4)
根据上述式(3)及(4)可知，在P的值为0时，即，在抓取图像中的所有像素具有均匀的RGB值时，不产生由本实施方式获得的处理负荷的减轻。但在实际使用上，一开始就不会考虑这种状况，认为P的取值为20～90。
图11表示使用本实施方式的情况下的识别标头710的检索所需的处理负荷。表示有将不使用本实施方式的情况下的处理负荷设为1的值。如该图所示，P的值越大，此外，N的值越大，处理负荷越得以减轻。
[第3实施方式]
参考图12～图16，对本发明的第3实施方式所涉及的分析控制装置1进行说明。本实施方式的分析控制装置1的功能模块构成与上述第1实施方式相同，但显示控制部35所显示的识别标头的形态以及标头检测部41的检索方法是对上述第2实施方式加入了进一步的变更。
图12表示在本实施方式中显示控制部35在显示器14的画面上嵌入的识别标头的一例。识别标头1210中，从第1像素P1起到第N像素PN为止的N个像素(第1像素组)均具有相同的RGB值，从第N+1像素PN+1起到第N+M像素PN+M为止的M个像素(第2像素组)具有与前面的N个像素不同的RGB值(Mr、Mg、Mb)。N的值设为3以上，M的值设为比N大的数。与上述第2实施方式一样，识别标头1210也可为跨及多行的图像。本实施方式中的代码图像嵌入处理的流程与上述第1实施方式相同(参考图4)。关于各RGB值的具体值，与上述第1实施方式中的识别标头210的各像素一样，以与在嵌入位置上相邻的像素的色差极小的方式进行设定。
但上述M个像素的RGB值(Mr、Mg、Mb)优选设为在显示器14的画面上不怎么使用的值。例如，Mr＝Mg＝Mb成立的颜色在Windows(注册商标)上使用得较多，另一方面，Mr≠Mg、Mg≠Mb、Mb≠Mr成立的颜色不怎么被使用，因此分配满足后面3式这样的RGB值。
[检索-操作支援处理的流程]
接着，一边参考作为流程图的图13及图14，一边对本实施方式的由操作支援程序22进行的检索-操作支援处理的流程进行说明。关于开始检索-操作支援处理的时刻，设为与上述第1实施方式中的检索-操作支援处理相同。
图13所示的步骤S501～S503、S505～S509中的处理与上述第2实施方式中参考图8而说明过的步骤S301～S303、S305～S309相同。在步骤S503及S507中，a被替换成了M，而这是识别标头710、1210中的第N+1像素PN+1之后的像素的数量的差异造成的。在其他各步骤中，也将a替换为M。
关于步骤S504，就判定处理的内容而言，与步骤S304也是一样的。但在本实施方式中，在判定RGB值自前一像素未发生变化时(步骤504中为否)，即，在相同颜色的像素连续时，标头检测部41不是直接检索下一像素，而是转移至图14所示的步骤S601。
在相同颜色的像素连续的情况下，标头检测部41将检索对象像素前进M列(步骤S601)。继而，判定当前的检索对象像素的RGB值与从第N+1像素PN+1起到第N+M像素PN+M为止的M个像素是否一致(步骤S602)。具体而言，在将步骤S504的时间点上的检索对象像素设为(x,y)时，判定(x+M,y)的RGB值是否为(Mr、Mg、Mb)。在一致的情况下(步骤S602中为是)，将检索对象像素倒退M列(步骤S604)，即倒退至(x,y)，返回至步骤S502继续检索。
在步骤S601中将检索对象像素前进M列后所在位置的像素(x+M,y)的RGB值为在识别标头1210之外加以使用的可能性较低的(Mr、Mg、Mb)的情况下，该像素(x+M,y)为识别标头1210的上述M个像素中的1个的可能性极高。此时，由于认为在像素(x,y)的后方的较近位置存在识别标头1210的第N+1像素PN+1，因此在步骤S604中将检索对象像素倒退至(x,y)。即，在本实施方式中，标头检测部41是以如下形式进行检索：在具有相同RGB值的像素连续2个时，将这2个像素假定为识别标头1210的第1像素P1及第2像素P2或者它们周边的像素，并验证该假定。
另一方面，在检索对象像素的RGB值不是(Mr、Mg、Mb)的情况下(步骤S602中为否)，标头检测部41将检索对象像素倒退N列(步骤S603)，即，将(x+M－N,y)作为检索对象像素，返回至步骤S502继续检索。
在步骤S602的判定结果为否时不将(x,y)的后方M－N－1个像素作为检索对象像素的原因在于，这些像素不可能成为识别标头1210中所包含的像素的候选。在图15中表示具体例来加以说明。该图中，设定N＝3、M＝6。标头检测部41沿图中白色箭头的方向检索行内。现在，针对从在步骤S504中被判定RGB值与前一像素1500相同的检索对象像素1501起前进6列后所在的像素1502，在步骤S602中获得了RGB值与(Mr、Mg、Mb)不一致这一判定结果。在该情况下，识别标头1210的上述M个像素的最前头即第N+1像素PN+1距检索对象像素1502最近的状况是像该图所示那样检索对象像素1502为识别标头1210的第N像素PN的情况。此时，位于识别标头1210前一位的像素为检索对象像素1502的3列近前的像素1503。因而，若通过将检索对象像素倒退N列而移动至像素1503，则在后一像素1504(即第1像素P1)的RGB值不同于像素1503的情况下(步骤S504中为是)，通过步骤S505～S506而使得检索对象像素移动至识别标头1210的第N像素PN，并通过步骤S502～S505而检测到紧跟其后的第N+1像素PN+1。再者，该图中，作为代码图像的一例，展示的是识别标头1210的后一像素1520，但如上所述，代码图像并不限定于单一像素。
根据以上所说明的处理，标头检测部41在上述第2实施方式的构成的基础之上，进而在具有同一RGB值的像素在行内连续2个的情况下，将这2个像素假定为识别标头1210的第1像素P1及第2像素P2或者它们周边的像素。继而，从这2个像素中处于后方的像素起将检索对象前进至M列前的像素，并判定该像素的RGB值与从识别标头1210的第N+1像素PN+1起到第N+M像素PN+M为止的M个像素的RGB值是否一致。在一致的情况下，从当前位置倒退至M－1列近前即原位置的后一像素而继续检索，在不一致的情况下，从当前位置倒退至N－1列程度近前，即从原位置起前进M－N+1列而继续检索。即，若判断在上述2个像素的后方的较近位置没有识别标头1210，则可跳过对M－N个像素的检索。由此，处理负荷进一步得到减轻。此外，M与N的差越大，被跳过的像素的数量就越多，有助于处理效率的提高。
对由本实施方式得到的处理负荷的减轻率进行具体说明。关于比较方法，与上述第2实施方式相同，不使用本实施方式的情况下的处理负荷Q1以式(3)表示。另一方面，使用本实施方式的情况下的处理负荷Q3以下式(5)表示。
Q3＝{(100－P)*2/(M－N)+P*2/N}*(X－Wq)*(Y－Hq)/100…(5)
图16表示使用本实施方式的情况下的识别标头1210的检索所需的处理负荷。表示有将不使用本实施方式的情况下的处理负荷设为1的值。为简便起见，设定M＝2N。在该情况下，不论P的值如何，处理负荷的减轻率是固定的。再者，根据式(4)及(5)，在M＝N+2时，Q3与Q2相等，因此，要比上述第2实施方式进一步提高减轻率，设为N+2＜M即可。
此处，针对识别标头1210的每一形状下的处理效率而展示若干具体例。例如，在将宽20像素、高20像素的图像作为识别标头1210的情况下，处理负荷被抑制在不使用本实施方式的情况的30％左右。此外，在将在行内连续的60个像素的连接作为识别标头1210的情况下，处理负荷被抑制在不使用本实施方式的情况的10％左右。虽然处理效率随着识别标头1210的宽度N+M的增大而提高，但高度的增大无助于处理效率的提高。其原因在于，由标头检测部41进行的检索为行方向的扫描。
[变形例]
在上述各实施方式中，操作支援程序22是以与分析控制程序21一起使用为前提，识别标头的各像素的RGB值对于操作支援程序22而言是已知的。然而，在操作支援程序22以各种软件为对象的情况下，设为如下构成也将较为有用。
例如，在分配至代码图像及识别标头的RGB值不是已知的情况下，标头检测部41在几乎所有像素具有均匀的RGB值(以下，称为背景色)的规定尺寸的区域中检测到具有预先规定的色差的像素组时，可将其检测为识别标头。具体而言，在图3所示的例子中，在背景色为(R、G、B)的规定区域中检测到RGB值以(R+1,G+1,B+1),(R-1,G-1,B-1),(R+2,G+2,B+2)方式连续的3个像素的情况下，将其识别为识别标头210。关于第4像素220，也是设为根据与背景色的差分值对信息进行解码的构成即可。在代码图像为QR码的情况下，预先规定好构成该QR码的像素与背景色的差分即可。以如此方式构成时，若各像素与背景色的色差、色差与编码后的信息的对应关系是已知的，则可对应于各种UI(User Interface)设计来支援用户的操作。
再者，上述各实施方式及变形例为本发明的例子，在本发明的宗旨的范围内酌情进行变更、修正、追加、组合当然也是包含在本申请的申请专利范围内的。
例如，在上述各实施方式中，对将识别标头附加在代码图像的左上端的前一位置的构成进行了说明，但也可将识别标头附加在代码图像的左下端的前一位置、或者右上端或右下端的后一位置。此外，也可将多种识别标头同时显示在显示器14的画面上，从而也可设为标头检测部41对它们分别进行检测的构成。
符号说明
1 分析控制装置
21 分析控制程序
22 操作支援程序
34 编码部
35 显示控制部
41 标头检测部
42 代码图像检测部
43 解码部
44 操作支援执行部
210、710、1210 识别标头
220 第4像素
1020、1520 代码图像。

Claims (8)

1.一种信息显示处理装置，其执行分析控制程序来控制分析装置，并将规定的处理结果显示在显示部的画面上，所述信息显示处理装置特征在于，包括：
a)编码单元，其对由所述分析装置进行的分析的各种参数进行编码来制作代码图像；以及
b)显示控制单元，其将所述编码单元制作好的所述代码图像和与该代码图像处于规定位置关系的一个识别标头显示在所述画面上，
通过仅检索所述一个识别标头，就可检测出所述代码图像，
所述代码图像及所述识别标头由具有用户难以目视判别的色差的多个像素构成，
所述代码图像根据由所述分析装置进行的分析的各种参数的内容而被分配不同的RGB值，
所述显示控制单元在接近所述多个像素的颜色所占据的规定范围内的均匀颜色区域内显示所述代码图像及所述识别标头。
2.根据权利要求1所述的信息显示处理装置，其特征在于，所述识别标头包含第1像素组和第2像素组，所述第1像素组由沿行方向连续N个的同一颜色的像素构成，N为3以上的自然数，所述第2像素组在该行内与所述第1像素组相邻，由颜色不同于该第1像素组的1或多个像素构成。
3.根据权利要求2所述的信息显示处理装置，其特征在于，所述第2像素组由沿行方向连续M个的同一颜色的像素构成，M为比N大的自然数。
4.一种操作支援装置，其用于支援分析控制程序上的用户的操作，所述分析控制程序用于控制由分析装置进行的分析，所述操作支援装置特征在于，包括：
a)识别标头检测单元，其检测显示部的画面上所显示的一个识别标头；
b)代码图像检测单元，其根据代码图像与所述识别标头检测单元所检测到的所述识别标头的规定位置关系，检测由所述分析装置进行的分析的各种参数经编码而成的所述代码图像；
c)解码单元，其对所述代码图像检测单元所检测到的所述代码图像进行解码，获取所述各种参数；以及
d)执行单元，其执行与所述解码单元所获取到的所述各种参数相关联的规定处理，
通过仅检索所述一个识别标头，就可检测出所述代码图像，
所述代码图像及所述识别标头由具有用户难以目视判别的色差的多个像素构成，
所述代码图像根据由所述分析装置进行的分析的各种参数的内容而被分配不同的RGB值，
所述代码图像及所述识别标头在接近所述多个像素的颜色所占据的规定范围内的均匀颜色区域内显示。
5.根据权利要求4所述的操作支援装置，其特征在于，所述识别标头检测单元沿行方向检索画面上的像素的值，在检测到颜色与前一像素不同的像素的情况下，判定该检测到的像素是否为所述识别标头的第N+1列像素，在该判定结果为否的情况下，从与所述检测到的像素相距N列后方的像素起重新开始检索，N为3以上的自然数。
6.根据权利要求5所述的操作支援装置，其特征在于，所述识别标头检测单元进而在检测到颜色与前一像素相同的像素的情况下，判定与该检测到的像素相距M列后方的像素的颜色与所述识别标头的第N+1列到第N+M列像素的颜色是否一致，在判定为一致的情况下，从所述检测到的像素的后一像素起重新开始检索，在判定为不一致的情况下，从与所述检测到的像素相距M－N+1列后方的像素起重新开始检索，M为比N大的自然数。
7.一种信息显示处理方法，其执行分析控制程序来控制分析装置，并将规定的处理结果显示在显示部的画面上，所述信息显示处理方法的特征在于，
a)对由所述分析装置进行的分析的各种参数进行编码来制作代码图像；
b)将所述代码图像和与该代码图像处于规定的位置关系的一个识别标头显示在所述画面上，
通过仅检索所述一个识别标头，就可检测出所述代码图像，
所述代码图像及所述识别标头由具有用户难以目视判别的色差的多个像素构成，
所述代码图像根据由所述分析的各种参数的内容而被分配不同的RGB值，
所述代码图像及所述识别标头在接近所述多个像素的颜色所占据的规定范围内的均匀颜色区域内显示。
8.一种操作支援方法，其用于支援分析控制程序上的用户的操作，所述分析控制程序用于控制由分析装置进行的分析，所述操作支援方法特征在于，
a)检测显示部的画面上所显示的一个识别标头；
b)根据代码图像与检测到的所述识别标头的规定位置关系，检测由所述分析装置进行的分析的各种参数经编码而成的所述代码图像；
c)对检测到的所述代码图像进行解码，获取所述各种参数；
d)执行与获取到的所述各种参数相关联的规定处理，
通过仅检索所述一个识别标头，就可检测出所述代码图像，
所述代码图像及所述识别标头由具有用户难以目视判别的色差的多个像素构成，
所述代码图像根据由所述分析装置进行的分析的各种参数的内容而被分配不同的RGB值，
所述代码图像及所述识别标头在接近所述多个像素的颜色所占据的规定范围内的均匀颜色区域内显示。
CN201480076834.9A 2014-03-05 2014-03-05 信息显示处理装置以及信息显示处理装置的控制方法 Active CN106104452B (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2014/055598 WO2015132900A1 (ja) 2014-03-05 2014-03-05 情報表示処理装置及び情報表示処理装置の制御プログラム

Publications (2)

Publication Number Publication Date
CN106104452A CN106104452A (zh) 2016-11-09
CN106104452B true CN106104452B (zh) 2020-06-19

Family

ID=54054737

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201480076834.9A Active CN106104452B (zh) 2014-03-05 2014-03-05 信息显示处理装置以及信息显示处理装置的控制方法

Country Status (5)

Country Link
US (1) US10455239B2 (zh)
EP (1) EP3115876B1 (zh)
JP (1) JP6132068B2 (zh)
CN (1) CN106104452B (zh)
WO (1) WO2015132900A1 (zh)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2017219978A (ja) * 2016-06-06 2017-12-14 グレープシティ株式会社 プログラム自動テストのための方法およびプログラム
JP7172537B2 (ja) * 2018-12-11 2022-11-16 株式会社島津製作所 イメージング分析装置
JP7434884B2 (ja) * 2019-12-24 2024-02-21 株式会社島津製作所 分析装置
CN114217756B (zh) * 2021-11-26 2023-09-19 海信电子科技(武汉)有限公司 显示设备、图像检测方法及装置
CN117112446B (zh) * 2023-10-16 2024-02-02 腾讯科技（深圳）有限公司 编辑器调试方法、装置、电子设备及介质

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101398907A (zh) * 2007-09-26 2009-04-01 中国科学院自动化研究所 一种用于移动机器人的二维码结构及解码方法
CN102034127A (zh) * 2009-09-28 2011-04-27 上海易悠通信息科技有限公司 新型大容量二维条码与系统及其编解码方法和应用

Family Cites Families (29)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5721788A (en) * 1992-07-31 1998-02-24 Corbis Corporation Method and system for digital image signatures
US5829895A (en) * 1995-12-27 1998-11-03 Pitney Bowes Inc. Method for printing an image indicative of value such as a postal indicia
US7236610B1 (en) * 1998-04-30 2007-06-26 Fraunhofer Gesellschaft Authenticating executable code and executions thereof
US6449669B1 (en) * 1999-08-30 2002-09-10 Intel Corporation Method and apparatus for providing bimodal voltage references for differential signaling
US6687384B1 (en) * 2000-03-27 2004-02-03 Sarnoff Corporation Method and apparatus for embedding data in encoded digital bitstreams
GB2375419A (en) * 2001-02-09 2002-11-13 Enseal Systems Ltd Document printed with graphical symbols which encode information
GB0117391D0 (en) * 2001-07-17 2001-09-05 Optaglio Ltd Optical device and method of manufacture
AU2002332900A1 (en) * 2001-09-06 2003-03-24 Digimarc Corporation Pattern recognition of objects in image streams
JP4013747B2 (ja) * 2002-11-21 2007-11-28 松下電器産業株式会社 情報処理装置およびプログラム
US7752617B2 (en) * 2003-11-20 2010-07-06 International Business Machines Corporation Apparatus, system, and method for updating an embedded code image
US7720253B2 (en) * 2006-09-14 2010-05-18 Microsoft Corporation Visual perception model for hi-fidelity image watermarking
US20090050700A1 (en) * 2007-08-26 2009-02-26 Noboru Kamijoh Adding and detecting bar code printed with ink invisible to human eye onto printed medium
JP2010010835A (ja) * 2008-06-24 2010-01-14 Canon Inc 画像処理装置及び画像処理方法
US8670560B2 (en) * 2008-10-23 2014-03-11 University Of Ulster Encryption method
US20110083108A1 (en) * 2009-10-05 2011-04-07 Microsoft Corporation Providing user interface feedback regarding cursor position on a display screen
TW201128574A (en) * 2010-02-11 2011-08-16 Univ Nat Taiwan Science Tech Image data processing systems for hiding secret information and data hiding methods thereof
US8933951B2 (en) * 2010-03-31 2015-01-13 Intel Corporation Techniques for controlling frame refresh
WO2012021502A2 (en) * 2010-08-09 2012-02-16 Board Of Regents, The University Of Texas System Using higher order statistics to estimate pixel values in digital image processing to improve accuracy and computation efficiency
US20120167146A1 (en) * 2010-12-28 2012-06-28 White Square Media Llc Method and apparatus for providing or utilizing interactive video with tagged objects
WO2012127611A1 (ja) * 2011-03-22 2012-09-27 富士通株式会社 位置情報付加装置、位置情報付加方法及び位置情報付加用コンピュータプログラムならびに位置検出装置
US8967456B2 (en) * 2011-05-26 2015-03-03 International Business Machines Corporation Method for tagging elements in a user interface
US9569554B2 (en) * 2011-07-29 2017-02-14 Xink System and computer-implemented method for incorporating an image into a page of content for transmission over a telecommunications network
WO2013181465A2 (en) * 2012-05-30 2013-12-05 Arboc, Llc Biometric based demography tool
WO2014014252A1 (en) * 2012-07-16 2014-01-23 Lg Electronics Inc. Method and apparatus for processing digital service signals
JP2014032518A (ja) * 2012-08-02 2014-02-20 Ricoh Co Ltd 表示装置、ネットワークシステム、及びプログラム
US9165538B2 (en) * 2013-03-13 2015-10-20 Displaylink (Uk) Limited Image generation
WO2015106114A1 (en) * 2014-01-13 2015-07-16 T1visions, Inc. Display capable of object recognition
US9620082B2 (en) * 2015-05-15 2017-04-11 Hewlett-Packard Development Company, L.P. Correcting artifacts on a display
US10276085B2 (en) * 2015-07-16 2019-04-30 Apple Inc. Pixel signal compensation for a display panel

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101398907A (zh) * 2007-09-26 2009-04-01 中国科学院自动化研究所 一种用于移动机器人的二维码结构及解码方法
CN102034127A (zh) * 2009-09-28 2011-04-27 上海易悠通信息科技有限公司 新型大容量二维条码与系统及其编解码方法和应用

Also Published As

Publication number Publication date
EP3115876B1 (en) 2019-01-02
JPWO2015132900A1 (ja) 2017-03-30
JP6132068B2 (ja) 2017-05-24
EP3115876A1 (en) 2017-01-11
CN106104452A (zh) 2016-11-09
EP3115876A4 (en) 2017-06-07
US20170078679A1 (en) 2017-03-16
WO2015132900A1 (ja) 2015-09-11
US10455239B2 (en) 2019-10-22

Similar Documents

Publication Publication Date Title
CN106104452B (zh) 信息显示处理装置以及信息显示处理装置的控制方法
US8675012B2 (en) Selective display of OCR&#39;ed text and corresponding images from publications on a client device
US9208138B2 (en) Range adjustment for text editing
US10234958B2 (en) Input method editors for Indic languages
US9378297B2 (en) Task-based address bar and tabs scaling
US7647317B2 (en) Search techniques for page-based document layouts
US8897594B2 (en) Image reader, mobile terminal apparatus, and non-transitory computer readable medium
TWI433028B (zh) 顯示螢幕上促進物件選擇之方法、裝置及程式
CN107408112B (zh) 用于翻译的协调用户词选择和所选词的上下文信息的获得
RU2665274C2 (ru) Всплывающая панель верификации
RU2605078C2 (ru) Сегментация изображения для верификации данных
US20140281948A1 (en) Information displaying apparatus, information editing method and non-transitory computer-readable storage medium
JP5255483B2 (ja) オブジェクトの選択を容易にするための方法、装置およびプログラム
JP5077221B2 (ja) テキスト範囲選択処理プログラム、方法及び装置
US20220198142A1 (en) Information processing apparatus and non-transitory computer readable medium storing program
US20160321516A1 (en) Text parsing in complex graphical images
JP2010009426A (ja) 情報処理装置及び情報処理方法
JP6696119B2 (ja) 変換装置、変換方法、及び変換プログラム
CN110262911A (zh) 输入框的优化方法、优化装置、控制器及存储介质
US11481447B2 (en) Information processing device and non-transitory computer readable medium
JP2015203919A (ja) 情報処理装置、情報処理方法、及びプログラム
US20140163950A1 (en) Translation system and method thereof
CN104615265B (zh) 一种输入字符的方法
JP6244676B2 (ja) 操作支援プログラム及び操作支援方法並びに情報処理装置
JP2013182459A (ja) 情報処理装置、情報処理方法及びプログラム

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant