CN102017595B - 具备显示图像数据的同时读取近旁的物体的像的面状部件的设备及控制方法 - Google Patents

具备显示图像数据的同时读取近旁的物体的像的面状部件的设备及控制方法 Download PDF

Info

Publication number
CN102017595B
CN102017595B CN201080001437.7A CN201080001437A CN102017595B CN 102017595 B CN102017595 B CN 102017595B CN 201080001437 A CN201080001437 A CN 201080001437A CN 102017595 B CN102017595 B CN 102017595B
Authority
CN
China
Prior art keywords
reading
display
image
data
window
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN201080001437.7A
Other languages
English (en)
Other versions
CN102017595A (zh
Inventor
三村俊彦
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sharp Corp
Original Assignee
Sharp Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sharp Corp filed Critical Sharp Corp
Publication of CN102017595A publication Critical patent/CN102017595A/zh
Application granted granted Critical
Publication of CN102017595B publication Critical patent/CN102017595B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00127—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture
    • H04N1/00347—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with another still picture apparatus, e.g. hybrid still picture apparatus
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00127—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture
    • H04N1/00204—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a digital computer or a digital computer system, e.g. an internet server
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00127—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture
    • H04N1/00204—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a digital computer or a digital computer system, e.g. an internet server
    • H04N1/00244—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a digital computer or a digital computer system, e.g. an internet server with a server, e.g. an internet server
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/0035—User-machine interface; Control console
    • H04N1/00405—Output means
    • H04N1/00408—Display of information to the user, e.g. menus
    • H04N1/00413—Display of information to the user, e.g. menus using menus, i.e. presenting the user with a plurality of selectable options
    • H04N1/00416—Multi-level menus
    • H04N1/00419—Arrangements for navigating between pages or parts of the menu
    • H04N1/00421—Arrangements for navigating between pages or parts of the menu using drop-down menus
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/0035—User-machine interface; Control console
    • H04N1/00405—Output means
    • H04N1/00408—Display of information to the user, e.g. menus
    • H04N1/00413—Display of information to the user, e.g. menus using menus, i.e. presenting the user with a plurality of selectable options
    • H04N1/00416—Multi-level menus
    • H04N1/00419—Arrangements for navigating between pages or parts of the menu
    • H04N1/00424—Arrangements for navigating between pages or parts of the menu using a list of graphical elements, e.g. icons or icon bar
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/0035—User-machine interface; Control console
    • H04N1/00405—Output means
    • H04N1/00408—Display of information to the user, e.g. menus
    • H04N1/0044—Display of information to the user, e.g. menus for image preview or review, e.g. to help the user position a sheet
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/0035—User-machine interface; Control console
    • H04N1/00405—Output means
    • H04N1/00408—Display of information to the user, e.g. menus
    • H04N1/00464—Display of information to the user, e.g. menus using browsers, i.e. interfaces based on mark-up languages
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/0035—User-machine interface; Control console
    • H04N1/00405—Output means
    • H04N1/00474—Output means outputting a plurality of functional options, e.g. scan, copy or print
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/04—Scanning arrangements, i.e. arrangements for the displacement of active reading or reproducing elements relative to the original or reproducing medium, or vice versa
    • H04N1/0461—Scanning arrangements, i.e. arrangements for the displacement of active reading or reproducing elements relative to the original or reproducing medium, or vice versa part of the apparatus being used in common for reading and reproducing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/04—Scanning arrangements, i.e. arrangements for the displacement of active reading or reproducing elements relative to the original or reproducing medium, or vice versa
    • H04N1/19—Scanning arrangements, i.e. arrangements for the displacement of active reading or reproducing elements relative to the original or reproducing medium, or vice versa using multi-element arrays
    • H04N1/195—Scanning arrangements, i.e. arrangements for the displacement of active reading or reproducing elements relative to the original or reproducing medium, or vice versa using multi-element arrays the array comprising a two-dimensional array or a combination of two-dimensional arrays
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/04—Scanning arrangements, i.e. arrangements for the displacement of active reading or reproducing elements relative to the original or reproducing medium, or vice versa
    • H04N1/10—Scanning arrangements, i.e. arrangements for the displacement of active reading or reproducing elements relative to the original or reproducing medium, or vice versa using flat picture-bearing surfaces
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00—Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/0008—Connection or combination of a still picture apparatus with another apparatus
    • H04N2201/001—Sharing resources, e.g. processing power or memory, with a connected apparatus or enhancing the capability of the still picture apparatus
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00—Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/0008—Connection or combination of a still picture apparatus with another apparatus
    • H04N2201/0034—Details of the connection, e.g. connector, interface
    • H04N2201/0037—Topological details of the connection
    • H04N2201/0039—Connection via a network
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00—Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/0008—Connection or combination of a still picture apparatus with another apparatus
    • H04N2201/0063—Constructional details
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00—Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/0077—Types of the still picture apparatus
    • H04N2201/0081—Image reader
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00—Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/0077—Types of the still picture apparatus
    • H04N2201/0089—Image display device
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00—Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/04—Scanning arrangements
    • H04N2201/0402—Arrangements not specific to a particular one of the scanning methods covered by groups H04N1/04 - H04N1/207
    • H04N2201/0422—Media holders, covers, supports, backgrounds; Arrangements to facilitate placing of the medium
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00—Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/04—Scanning arrangements
    • H04N2201/0402—Arrangements not specific to a particular one of the scanning methods covered by groups H04N1/04 - H04N1/207
    • H04N2201/0452—Indicating the scanned area, e.g. by projecting light marks onto the medium

Abstract

具备显示图像的同时，读取近旁的像的显示/光传感部(300)、将包含载置对象物的载置区域的窗口，显示在显示/光传感部(300)上的浏览器处理部(11)、将表示所述载置区域在所述窗口中的配置的第1区域信息，转换为表示所述载置区域在所述显示/光传感部(300)中的配置的第2区域信息的API处理部(12)、获取显示/光传感部(300)的，根据所述第2区域信息所特定的区域上读取到的近旁的像的图像，即读取图像的驱动程序处理部(15)。

Description

具备显示图像数据的同时读取近旁的物体的像的面状部件的设备及控制方法
技术区域
本发明涉及能够同时进行图像的显示以及对象物的读取的图像显示/像检测设备及其控制方法、控制程序，以及记录有该控制程序的计算机可读记录媒体。
背景技术
近年来，随着因特网的普及，PC(Personal Computer；个人电脑)等客户机利用WWW(World Wide Web；万维网)浏览器等，从服务器获取(下载)数据，或向服务器发送(上传)数据的技术被广泛地利用。从而，用户能够利用WWW浏览器，从服务器获取特定的网页等，而且，也能够将利用扫描仪等读取到的原稿的图像等发送到服务器上。
利用WWW浏览器，从客户机发送数据到服务器时，例如，能够利用如图18所示的网页。图18是，显示有向服务器发送数据时的网页的WWW浏览器的画面的一例。在此，作为发送到服务器上的数据，例举利用扫描仪等读取到的名片的图像。
所述网页用HTML(HyperText Markup Language；超文本链接标示语言)等语言所描述，使得能够将文本框中指定的图像，通过按下图示的“发送”按键而发送到服务器上。
因此，利用所述网页时，用户可以通过进行下列操作将名片的图像发送到服务器上。(1)首先，利用扫描仪等读取名片，并生成名片的图像；(2)其后，在所述网页上，指定所述生成的图像，并按下“发送”按键。
而且，现有技术中公开了具有扫描功能的客户机。尤其是，其中存在能够在1个画面上进行图像的显示和原稿等的读取的显示/读取设备。详细来说，存在一种将用于图像显示的多个发光元件和用于读取载置在显示画面上的原稿等的多个受光元件，配置在同一个画面内的设备。在这种显示/读取设备上搭载WWW浏览器的情况下，用户就能够在1个画面上进行原稿的读取和利用WWW浏览器的原稿等的图像的发送。但是，在这种情况下，需要用户分别独立地进行原稿等的读取操作和图像的发送操作，这样才能够将名片的数据发送到服务器上。
然而，所谓的利用Web技术将数据从客户机发送到服务器上的技术，除了所述的例以外，还有专利文献1以及2公开的技术。
专利文献1中公开了一种基于HTML文件以及CGI(Common Gateway Interface；公共网关接口)程序，将保存在PC、移动信息终端的数据上传到传真机上的技术。而且，专利文献2中公开了一种基于从服务器获取到的HTML文件，在显示部上显示特定的按键的同时，通过按下该按键，将扫描仪所扫描到的原稿的图像发送到服务器上的图像处理设备。
专利文献1：日本国专利申请，特开2002-132651号公报，公开日：2002年5月10日
专利文献2：日本国专利申请，特开2005-149320号公报，公开日：2005年6月9日
发明内容
如上所述，利用如图18所示的网页，将扫描仪或所述的显示/读取设备所读取到的原稿的图像等发送到服务器上时，需要用户分别进行原稿等的读取操作和WWW浏览器上的发送操作。
而且，所述的显示/读取设备的读取面上的原稿等的读取功能和所谓的Web技术之间没有密切的合作，很难用服务器提供对读取面上的原稿等进行读取的网页(SaaS(Software as a Service；软件运营服务)。
为了解决所述问题，考虑到在共用显示面和读取面的显示/读取设备中，可以读取显示有服务器所提供的网页的WWW浏览器上所登载的原稿等的方案。而且，可以考虑将读取到的图像通过WWW浏览器发送到服务器上。然而，专利文献1以及2中没有公开这种技术。
鉴于以上问题，本发明的目的在于，提供一种能够在共用显示面和读取面的设备中，显示出显示位置不固定的载置区域的同时，读取载置在该载置区域上的对象物的像的图像显示/像检测设备及其控制方法、控制程序，以及存储该控制程序的计算机可读记录媒体。
为了解决上述问题，本发明的图像显示/像检测设备具备显示图像的同时读取近旁的像的面状部件，而且还具备：窗口显示控制单元，将包 含载置对象物的载置区域的窗口，显示在所述面状部件上；坐标转换单元，将表示所述载置区域在所述窗口中的配置的第1区域信息，转换为表示所述载置区域在所述面状部件中的配置的第2区域信息；图像获取单元，获取读取图像，该读取图像是所述面状部件根据所述第2区域信息所特定的区域上读取到的近旁的像的图像。
而且，本发明的图像显示/像检测设备的控制方法是，对具备显示图像的同时读取近旁的像的面状部件的图像显示/像检测设备的控制方法，该方法包含：窗口显示控制步骤，将包含载置对象物的载置区域的窗口，显示在所述面状部件上；坐标转换步骤，将表示所述载置区域在所述窗口中的配置的第1区域信息，转换为表示所述载置区域在所述面状部件中的配置的第2区域信息；图像获取步骤，获取读取图像，该读取图像是所述面状部件根据所述第2区域信息所特定的区域上读取到的近旁的像的图像。
根据上述结构，能够将包含载置对象物的载置区域的窗口显示在面状部件上。而且，能够将表示载置区域在窗口中的配置的第1区域信息，转换为表示载置区域在面状部件中的配置的第2区域信息。而且，能够获取面状部件根据第2区域信息所特定的区域上读取到的近旁的像的图像，即读取图像。
从而，由于能够从第1区域信息得到第2区域信息，因此，不论窗口显示在显示面的什么位置，载置区域配置在窗口中的什么位置，都能够特定出载置区域在面状部件上的读取位置。
因此，能够用面状部件可靠地读取载置于窗口的载置区域上的对象物的图像。即，能够用面状部件可靠地读取载置于面状部件上的显示位置不固定的载置区域上的对象物的图像。
附图说明
图1是表示本发明的一实施方式中的数据显示/传感器设备的详细结构的方框图。
图2是表示本发明的一实施方式中的数据显示/传感器设备所具备的传感器内置型液晶面板的截面的模式图。
图3是表示本发明的一实施方式中的数据显示/传感器设备所具备的传感器内置型液晶面板上通过检测反射像来检测对象物的图像的模 样的模式图。
图4是表示本发明的一实施方式中的数据显示/传感器设备的主要结构的方框图。
图5是表示本发明的一实施方式中的数据显示/传感器设备所利用的指令的帧结构的一例的模式图。
图6是表示图5所示的指令所包含的各字段中可以指定的值的一例，以及其概要的说明图。
图7(a)是表示在本发明的一实施方式的数据显示/传感器设备中的传感器内置型液晶面板上没有放置对象物时，扫描整个传感器内置型液晶面板所得到图像数据的图；图7(b)是表示在本发明的一实施方式的数据显示/传感器设备上，用户用手指触摸传感器内置型液晶显示面板时，扫描整个传感器内置型液晶面板所得到图像数据的图。
图8是表示本发明的一实施方式中的数据显示/传感器设备所具备的传感器内置型液晶面板的结构以及其外围电路的结构的方框图。
图9是表示包含本发明的一实施方式中的数据显示/传感器设备的系统的概略结构的模式图。
图10(a)是表示作为对象物的名片的表面的说明图。图10(b)是表示作为对象物的名片的背面的说明图。
图11是表示在本发明的一实施方式中的数据显示/传感器设备所具备的传感器内置型液晶面板的整个显示面即桌面区域上重叠显示有作为OS程序的桌面画面和作为应用程序的浏览器，并且在浏览器的客户区域上，基于从外部服务器所获取的源代码H显示有读取页的模样的模式图。
图12是表示本发明的一实施方式中的数据显示/传感器设备所处理的源代码H的描述例的模式图。
图13是表示在图11所示的状态下用户在读取区域放置了名片时的模样的模式图。
图14是表示利用本发明的一实施方式中的数据显示/传感器设备所具备的传感器内置型液晶面板，读取载置在读取区域上的名片的表面的图像时，作为其结果，所生成的图像的模式图。
图15是表示桌面区域和客户区域和读取区域的位置关系的模式图。
图16是表示本发明的一实施方式中的数据显示/传感器设备，对载 置于显示有读取区域的区域的对象物进行读取的同时，在外部服务器上对该读取的图像进行文字识别处理的流程的流程图。
图17是在本发明的一实施方式中的数据显示/传感器设备上，未显示为可观测整个读取区域的情况下所提示的信息的示例图。
图18是显示有向服务器发送数据的网页的WWW浏览器的画面示例图。
[符号说明]
11     浏览器处理部(窗口显示控制单元、源代码获取单元、图像发送单元)
12     API处理部(坐标转换单元)
13     显示API处理部
14     读取API处理部
15     驱动程序处理部(图像获取单元、图像存储单元)
16     显示驱动程序处理部
17     读取驱动程序处理部
24     读取图像存储部(存储部)
100    数据显示/传感器设备(图像显示/像检测设备)
300    显示/光传感部
301    传感器内置型液晶面板(面状部件)
700    数据处理部
800    主控制部
1000   外部服务器(第1外部设备、第2外部设备)
C      名片(对象物)
H      源代码
W      浏览器(窗口)
CG     读取图像
CP     读取页(内容)
RA     载置区域
具体实施方式
以下，基于图1～图17说明本发明的一实施方式。
大体来说，本实施方式中的数据显示/传感器设备(图像显示/像检 测设备)100是，具备能够显示图像等数据的同时检测近旁的像的传感器内置型液晶面板(面状部件)301(后述)，并在传感器内置型液晶面板301上显示图像的状态下，能够进行传感器内置型液晶面板301近旁的对象物的图像的读取的设备(参照图4)。
其中，对象物是指作为传感器内置型液晶面板301所要读取的像的对象的物体。更详细地说，是指记载有文字、图像等的文件等，书籍、卡片、宣传单、各种资料等都属于对象物。在本说明书中，将记载有姓名、地址、邮件地址等的名片C假定为对象物。而且，在以下说明中，对象物的像的读取也称为扫描。
(各设备的概略结构)
以下，参照图9，说明包含本实施方式中的数据显示/传感器设备100，以及外部服务器(第1外部设备、第2外部设备)1000的系统1100的概略结构。图9是表示该系统1100的概略结构的模式图。数据显示/传感器设备100以及外部服务器1000，连接于一般的通信网络1120上，利用HTTP(Hyper Text Transfer Protocol；超文本传输协议)等一般的通信协议，相互间能够进行通信。
数据显示/传感器设备100是，具有向外部服务器1000请求用HTML描述的网页的源代码(以下称为源代码H)的功能的PC等客户终端。而且，数据显示/传感器设备100基于从外部服务器1000获取的源代码H，利用WWW浏览器(窗口)显示网页。 
以下，将WWW浏览器表示为浏览器W。浏览器W通过数据显示/传感器设备100的OS(Operating System；操作系统)程序，显示于传感器内置型液晶面板301上。并且，浏览器W的显示位置以及显示大小不是固定的，可以通过用户的操作等来改变。
在此，所述源代码H被描述为，能够将既是(1)表示载置对象物的范围的区域(载置区域)，也是(2)表示在传感器内置型液晶面板301的整个读取面上读取的图像中抽取作为读取结果的图像(后述的读取图像CG)的范围的区域(以下称为读取区域RA)，显示在网页(内容(Contents))上。并且，根据用户的指示被描述为，发出在传感器内置型液晶面板301的读取面读取近旁的像的指示的同时，将读取图像CG发送到外部服务器1000上。并且，这些是，利用后述的scan标签ST等标签描述的。
因此，在数据显示/传感器设备100中，根据从外部服务器1000获取的源代码H而显示的网页上，显示有读取区域RA。并且，在传感器内置型液晶面板301的整个读取面所读取到的图像中，数据显示/传感器设备100抽取读取到读取区域RA的区域，并将其作为读取图像CG。而且，通过浏览器W，将抽取出的读取图像CG发送到外部服务器1000(更详细来说，利用HTTP的POST方式发送)。以下，将显示读取区域RA的所述网页，表示为读取页CP。
另一方面，外部服务器1000是，具有根据来自数据显示/传感器设备100的请求将源代码H提供给数据显示/传感器设备100的功能的服务器。而且，外部服务器1000具备存储各种数据的存储部1030。各种数据是指，提供至数据显示/传感器设备100的源代码H、从数据显示/传感器设备100发送的读取图像CG等。
并且，在外部服务器1000中，运行对于数据显示/传感器设备100所发送的读取图像CG进行特定处理的应用程序。本实施方式中，由于假定对象物为名片C，因此所述应用程序假定为，进行识别姓名、地址、邮件地址等文字的同时，将识别到的文字的数据登录到作为收纳在存储部1030中的地址录的表格(Table)中的处理的程序。以下，将该应用程序称为文字识别应用程序。
并且，在外部服务器1000运行文字识别应用程序时，也可以将系统1100称为名片管理系统。
(利用数据显示/传感器设备读取对象物的状态)
其次，参照图10～14，说明数据显示/传感器设备100用传感器内置型液晶面板301来读取载置于读取页CP所显示的读取区域RA上的对象物的图像的、处理的典型例。在此，只说明处理的概要，对于各个处理的详细内容将在后文中说明。
首先，参照图10，说明显示在作为对象物的名片C上的文字的具体例。图10(a)是表示名片C的表面的图。如图所示，名片C的表面上，记载有姓名“三村”，地址“奈良县大和郡山市”，邮箱地址“mimuraxxx.com”。图10(b)是表示名片C的背面的图。
其次，图11是表示在传感器内置型液晶面板301的整个显示面即桌面(Disk Top)区域DA上，重叠显示有作为OS程序的桌面画面和作为应用程序的浏览器W，并且在浏览器W的客户区域CA(后述)上， 基于从外部服务器1000获取的源代码H，显示有读取页CP的模样的模式图。如图所示，读取页CP上，显示有读取区域RA。图11中，读取区域RA显示为灰色(gray)。
另外，客户区域CA是指浏览器W的窗口区域中，显示有网页等的内容(Content)的部分(即，除去标题栏、状态栏等的部分)。图11中，用虚线包围的区域为客户区域CA。
其次，说明数据显示/传感器设备100所处理的源代码H的描述例。图12是表示源代码H的描述例的模式图。如图所示，源代码H中，尤其描述有form标签FT、scan标签ST、input标签IT。
form标签FT，用于描述以下动作(Action)，即对于表示为“http://meishi.jp”的URL(Uniform Resource Locator)，通过POST方式进行发送处理。其中，表示为“http://meishi.jp”的URL是，外部服务器1000上的URL。并且，通过POST方式发送的数据是，后述的读取图像CG。
scan标签ST用于描述读取区域RA。在图示的例中，描述读取区域RA的幅宽(width)为“440”，读取区域RA的高度(height)为“300”，读取区域RA的背景颜色(bgcolor)为“gray(灰色)”。
并且，scan标签ST不是在HTML的标准规格中所规定的标签。因此，在此利用的是自定义scan标签ST的，扩展标准规格的HTML的标签。而且，浏览器W被功能扩展为，能够解释scan标签ST并进行相应的处理。
input标签IT，用于描述用户可按的按键BT。当按下按键BT时，开始进行传感器内置型液晶面板301读取载置在读取区域RA上的对象物的图像的处理，同时，按照form标签FT所描述，通过POST方式发送作为读取结果而生成的图像。
其次，图13是表示在图11所示的状态下，为了读取名片C的表面，用户将名片C载置于读取区域RA上的模样的模式图。并且，为了读取名片C的表面，采用了将名片C的表面接触到传感器内置型液晶面板301上的载置方式。因此，如图所示，用户能够看到名片C的背面。
而且，载置好名片C的状态下，用户按下按键BT，则进行传感器内置型液晶面板301读取载置在读取区域RA上的名片C的表面的图像的处理。
其次，图14是表示作为用传感器内置型液晶面板301读取载置在读取区域RA上的名片C的表面的图像的结果的，生成在数据显示/传感器设备100中的图像的模式图。
数据显示/传感器设备100，从传感器内置型液晶面板301的整个读取面所读取的图像中，只抽取相当于读取区域RA的区域，而生成所述图像。因此，所生成的图像与读取区域RA是同样的大小的图像。而且，所述抽取的图像，通过POST方式，发送到外部服务器1000。并且，所述抽取的图像为读取图像CG。
用户将名片C载置于读取区域RA内时，如图所示，读取图像CG中包含，记载在名片C的表面上的姓名“三村”、地址“奈良县大和郡山市”、邮箱地址“mimuraxxx.com”等文字。而且，在外部服务器1000中，通过文字识别应用程序来识别读取图像CG中所包含的姓名、地址、邮箱地址等文字，同时将该识别到的文字数据登录到表格中，并将该表格作为地址录收纳在存储部1030中。
其中，作为传感器内置型液晶面板301所读取的对象物的图像，能得到与对象物的表面成镜像关系的图像，因此将该得到的图像，用一般方法进行镜像反转。
(坐标系)
为了在传感器内置型液晶面板301的整个读取面所读取的图像中抽取(切出)读取图像CG，需要对表示桌面区域DA的左上(即，D0)为原点的坐标系(以下，标为桌面坐标系)中读取区域RA的配置的信息(第2区域信息)进行特定。所述表示配置的信息，具体来说，是读取区域RA的代表点(顶点)的坐标的集合。
并且，OS程序用桌面坐标系对显示在桌面画面上的部件(窗口、图标等)的显示位置进行管理。而且，桌面区域DA与传感器内置型液晶面板301的整个显示面一致，因此，表示传感器内置型液晶面板301的显示面的物理地址时，利用桌面坐标系。
在此，由于浏览器W，在客户区域CA中显示读取区域RA，因此能够得知表示客户区域CA的左上(即，CO)为原点的坐标系(以下，称为客户坐标系)中的读取区域RA的配置的信息(第1区域信息)。并且，浏览器W用客户坐标系，对作为内容的读取页CP上所显示的部件(按键、图标、文字等)的显示位置进行管理。
因此，在本实施方式中，在抽取读取图像CG前，对表示读取区域RA的配置的信息进行从客户坐标系转换到桌面坐标系的处理。而且，利用该转换后的信息，进行读取图像CG的抽取处理。
以下，将客户坐标系中的坐标记载为“客户坐标”，将桌面坐标上的坐标记载为“桌面坐标”。
以下，参照图15，对读取区域RA的客户坐标以及桌面坐标进行详细的说明。图15是，表示桌面区域DA和客户区域CA和读取区域RA的位置关系的模式图。
图15中，读取区域RA是，左上位置为点R1且右下位置为点R2的矩形区域。
将点R1以及点R2表示成客户坐标，则分别为(Xb，Yb)以及(Xb+Xc，Yb+Yc)。而且，“Xb”、“Yb”、“Xc”以及“Yc”是，浏览器W为了在读取页CP内显示读取区域RA，而得到的值。
另一方面，将点R1以及点R2表示成桌面坐标，则分别为(Xa+Xb，Ya+Yb)以及(Xa+Xb+Xc，Ya+Yb+Yc)。
即，在此例中，只在客户坐标上加上“Xa”以及“Ya”，即可转换成桌面坐标。如上所述，只用简单的运算即可进行客户坐标和桌面坐标之间的转换。
换言之，根据桌面坐标系中的客户区域CA的左上(C0)位置和客户坐标系中的读取区域RA的位置(R1、R2)的相对位置，即可算出。
(传感器内置型液晶面板的概要)
所述数据显示/传感器设备100所具备的传感器内置型液晶面板301是，显示数据的同时，能够进行对象物的图像检测的液晶面板。在此，对象物的图像检测例如是指对用户用手指或者笔等指点(触摸)的位置的检测，或者对印刷物等的图像的读取(扫描)。而且，用于显示的设备不限于液晶面板，也可以使用有机EL(Electro Luminescence；有机场致发光)面板等。
以下，参照图2，说明传感器内置型液晶面板301的结构。图2是示意性地表示传感器内置型液晶面板301的截面的图。然而，此处说明的传感器内置型液晶面板301只是一例，只要是共用显示面和读取面的结构，可利用任意的结构。
如图所示，传感器内置型液晶面板301具备配置在背面侧的有源矩 阵基板51A以及配置在表面侧的对置基板51B，并具有在所述两个基板之间封入了液晶层52的结构。有源矩阵基板51A上配设有像素电极56、数据信号线57、光传感器电路32(未图示)、取向膜58、偏光板59等。对置基板51B上配设有彩色滤光片53r(红)、53g(绿)、53b(蓝)、遮光膜54、对置电极55、取向模58、偏光板59等。而且，传感器内置型液晶面板301的背面上配设有背光源307。
而且，包含在光传感器电路32中的光电二极管6配设在配置蓝的彩色滤光片53b的像素电极56的近旁，但是不限于此结构，可以配设在配置红的彩色滤光片53r的像素电极56的近旁，也可以配设在配置绿的彩色滤光片53g的像素电极56的近旁。
其次，基于图3，说明检测对象物的图像的方法。图3是，通过检测反射像来检测对象物的图像的状态的模式图。当背光源307发射光63时，包含光电二极管6的光传感器电路32，检测通过名片C等对象物所反射的光63。由此，可检测出对象物的反射像。如上所述，传感器内置型液晶面板301，通过检测反射像，能够检测出对象物的图像。
(数据显示/传感器设备的主要结构)
其次，参照图4，说明所述数据显示/传感器设备100的主要结构。图4是表示数据显示/传感器设备100的主要结构的方框图。如图所示，数据显示/传感器设备100具备显示/光传感部300、电路控制部600、数据处理部700、主控制部800、存储部901、暂存部902、操作部903、外部通信部907、声音输出部908以及声音输入部909。
显示/光传感部300是所谓的内置光传感器型液晶显示设备。显示/光传感部300包含传感器内置型液晶面板301、背光源307，以及用于驱动这些部件的外围电路309。
传感器内置型液晶面板301包含配置为矩阵状的多个像素电路31以及光传感器电路32。传感器内置型液晶面板301的详细的结构后述。
外围电路309包含液晶面板驱动电路304、光传感器驱动电路305、信号转换电路306以及背光源驱动电路308。
液晶面板驱动电路304是，根据来自电路控制部600的显示控制部601的时钟控制信号(TC1)以及数据信号(D)输出控制信号(G)以及数据信号(S)，并驱动像素电路31的电路。像素电路31的详细的驱动方法后述。
光传感器驱动电路305是，根据来自电路控制部600的显示控制部602的时钟控制信号(TC2)向信号线(R)施加电压，并驱动光传感器电路32的电路。光传感器电路32的详细的驱动方法后述。
信号转换电路306是，将光传感器电路32所输出的传感器输出信号(SS)转换为数字信号(DS)，并将该转换后的信号发送到传感器控制部602的电路。
背光源307包含多个白色LED(Light Emitting Diode)，并配置在传感器内置型液晶面板301的背面。而且，当背光源驱动电路308向背光源307施加电压时，背光源307点亮，并向传感器内置型液晶面板301照射光。然而，背光源307不限于白色LED，也可以包含其它颜色的LED。而且，代替LED，作为背光源307也可以采用如包含冷阴极管(CCFL：Cold Cathode Fluorescent Lamp)的部件。
当来自电路控制部600的背光源控制部603的控制信号(BK)为高电平时，背光源驱动电路308向背光源307施加电源电压，相反地，当来自背光源控制部603的控制信号为低电平时，背光源驱动电路308不会向背光源307施加电源电压。
其次，说明电路控制部600。电路控制部600具有控制显示/光传感部300的外围电路309的，作为设备驱动器(Device Driver)的功能。电路控制部600具备显示控制部601、传感器控制部602、背光源控制部603以及显示数据存储部604。
显示控制部601，从数据处理部700的显示数据处理部701接收显示数据，同时根据来自显示数据处理部701的指示，向显示/光传感部300的液晶面板驱动电路304发送时钟控制信号(TC1)以及数据信号(D)，并在传感器内置型液晶面板301上显示所述接收的显示数据。
而且，显示控制部601，将从显示数据处理部701所接收的显示数据，暂存到显示数据存储部604。而且，根据该暂存的显示数据，生成数据信号(D)。作为显示数据存储部604例如有VRAM(Video Random Access Memory；视频随机存取存储器)等。
传感器控制部602根据来自数据处理部700的传感器数据处理部703的指示，向显示/光传感部300的光传感器驱动电路305发送时钟控制信号(TC2)，从而使传感器内置型液晶面板301进行扫描。 
而且，传感器控制部602接收来自信号转换电路306的数字信号 (DS)。之后，基于对应于包含在传感器内置型液晶面板301中的全部的光传感器32所输出的传感器输出信号(SS)的数字信号(DS)，生成图像数据。即，生成传感器内置型液晶面板301的整个读取区域所读取的图像数据。之后，将该生成的图像数据发送到传感器数据处理部703。
背光源控制部603，根据来自显示数据处理部701以及传感器数据处理部703的指示，向显示/光传感部300的背光源驱动电路308发送控制信号(BK)，而驱动背光源307。
并且，在数据显示/传感器设备100具有多个显示/光传感部300的情况下，显示控制部601从数据处理部700接收由哪一个显示/光传感部300显示显示数据的指示后，根据该指示控制显示/光传感部300的液晶面板驱动电路304。而且，传感器控制部602，从数据处理部700接收由哪一个显示/光传感部300对对象物进行扫描的指示后，根据该指示控制显示/光传感部300的光传感器驱动电路305的同时，根据该指示从显示/光传感部300的信号转换电路306接收数字信号(DS)。
其次，说明数据处理部700。数据处理部700具有根据从主控制部800接收的“指令”，向电路控制部600予以指示的作为桥梁的功能。关于指令的详细内容将在后文中说明。
数据处理部700具备显示数据处理部701以及传感器数据处理部703。而且，数据处理部700在接收来自主控制部800的指令时，根据包含在该接收的指令中的各个字段(Field)(后述)的值，显示数据处理部701以及传感器数据处理部703的至少一方启动。
显示数据处理部701接收来自主控制部800的显示数据的同时，按照数据处理部700所接收的指令，向显示控制部601以及背光源控制部603予以指示，并将所述接收的显示数据显示在传感器内置型液晶面板301上。按照指令进行的显示数据处理部701的动作将在后文中说明。
传感器数据处理部703按照数据处理部700所接收的指令，向传感器控制部602以及背光源控制部603予以指示。 
而且，传感器数据处理部703接收来自传感器控制部602的图像数据，并将该图像数据直接存储到图像数据缓冲器704中。而后，传感器数据处理部703按照数据处理部700所接收的指令，并基于保存在图像数据缓冲器704的图像数据，将“整体图像数据”、“部分图像数据(包 含部分图像的坐标数据)”以及“坐标数据”中的至少一个发送到主控制部800中。关于整体图像数据、部分图像数据以及坐标数据将在后文中说明。而且，按照指令进行的传感器数据处理部703的动作将在后文中说明。
还有，主控制部800用于控制数据显示/传感器设备100所具备的各部的动作。主控制部800读取存储在存储部901中的各种程序，以此控制数据显示/传感器设备100的各部，并实现数据显示/传感器设备100所具备的各种功能。
主控制部800为了在传感器内置型液晶面板301上显示数据或用传感器内置型液晶面板301进行对象物的扫描，向数据处理部700发送指令以及显示数据。而且，指定了指令的“数据类型”时，作为该指令的应答，从数据处理部700接收整体图像数据、部分图像数据以及坐标数据中的至少一个数据。
而且，电路控制部600、数据处理部700以及主控制部800，可以分别由CPU(Central Processing Unit)以及存储器等构成。而且，数据处理部700，也可以由ASIC(Application Specific Integrate Circuit)等电路构成。
还有，存储部901用于存储主控制部800所运行的(1)各部的控制程序；(2)OS程序；(3)应用程序；以及，(4)运行这些程序时所读取的各种数据。存储部901可以由快闪存储器(flash Memory)等非易失性存储设备构成。并且，应用程序使用OS的功能时所需的API(Application ProgrammingInterface；应用编程接口)，或者与各种设备进行通信的驱动程序也包含在存储部901中。
暂存部902由RAM(Random Access Memory)等易失性存储设备构成，其在作为主控制部800运行所述各种程序的过程中，使用为暂存数据的工作区域。
还有，操作部903用于接受数据显示/传感器设备100的用户的输入操作。操作部903由例如开关、遥控器、鼠标、键盘等的输入设备所构成。而且，操作部903按照数据显示/传感器设备100的用户的输入操作生成控制信号，并将该生成的控制信号发送到主控制部800。
并且，作为所述开关的例子，假定有切换电源的开和关的电源开关905、预先赋有特定的功能的用户开关906等硬件开关。
此外，根据需要，也可以在数据显示/传感器设备100上配设通过无线/有线通信与外部设备进行通信的外部通信部907、用于输出声音的扬声器等的声音输出部908、用于输入声音信号的麦克风等的声音输入部909等。
(详细的指令)
以下，参照图5以及图6，说明从主控制部800发送到数据处理部700中的指令的详细内容。图5是表示指令的帧结构的一例图。而且，图6是说明包含在指令中的各字段能够指定的值的一例，以及其概要的图。
如图5所示，指令包含“帧头”、“数据获取时间(timing)”、“数据类型”、“扫描方式”、“扫描图像灰度”、“扫描分辨率”、“扫描面板”、“显示面板”以及“备用”等各个字段。而且，对于各个字段，能够指定如图6所示的值。
“帧头”字段是，表示帧的开始的字段。只要能够识别出“帧头”字段，“帧头”字段的值可以是任意的值。
其次，“数据获取时间”字段是，指定应向主控制部800发送数据的时间的字段。“数据获取时间”字段的值可以指定为，例如“00(sense)”“01(event)”以及“10(all)”。
其中，“sense”用于指定立即发送最新数据的事宜。所以，当传感器数据处理部703接收到“数据获取时间”字段的值为“sense”的指令时，将被“数据类型”字段所指定的最新的数据立即发送到主控制部800。
而且，“event”用于指定从传感器控制部602所接收的图像数据发生变化时发送数据的事宜。所以，当传感器数据处理部703接收到“数据获取时间”字段的值为“event”的指令时，在从传感器控制部602所接收的图像数据发生比规定的阈值更大的变化的时间里，将被“数据类型”字段所指定的数据发送到主控制部800。
而且，“all”用于指定按照一定周期发送数据的事宜。所以，当传感器数据处理部703接收到“数据获取时间”字段的值为“all”的指令时，将被“数据类型”字段所指定的数据，按照一定的周期发送到主控制部800。其中，所述一定的周期与光传感器电路32进行扫描的周期一致。
其次，“数据类型”字段是，指定从传感器数据处理部703获取的 数据的类型的字段。而且，“数据类型”字段的值可以指定为，例如“001(坐标)”、“010(部分图像)”以及“100(整体图像)”。而且，通过加算这些值，能够同时指定“坐标”和“部分图像/整体图像”。例如，同时指定“坐标”和“部分图像”时，可以指定为“011”。
当传感器数据处理部703接收到“数据类型”字段的值为“整体图像”的指令时，将存储在图像数据缓冲器704中的图像数据发送到主控制部800。将存储在图像数据缓冲器704中的图像数据，称为“整体图像数据”。
而且，当传感器数据处理部703接收到“数据类型”字段的值为“部分图像”的指令时，从传感器控制部602所接收的图像数据中抽取包含比规定的阈值发生更大变化的部分的区域，并将该抽取的区域中的图像数据发送到主控制部800。在此，将该图像数据称为“部分图像数据”。而且，抽取到多个所述部分图像数据时，传感器数据处理部703将该抽取到的各个部分图像数据发送到主控制部800。
而且，当传感器数据处理部703接收到“数据类型”字段的值为“部分图像”的指令时，检测出部分图像数据中的代表坐标，并将表示该代表坐标在部分图像数据中的位置的坐标数据发送到主控制部800。而且，作为所述代表坐标，可以举出例如所述部分图像数据的中心的坐标、所述部分图像数据的重心的坐标等。
其次，当传感器数据处理部703接收到“数据类型”字段的值为“坐标”的指令时，将表示所述代表坐标在整体图像数据中的位置的坐标数据发送到主控制部800。而且，抽取出多个所述部分图像数据时，传感器数据处理部703检测该抽取出的各个部分图像数据在整体图像数据中的代表坐标，并将表示该代表坐标的各个坐标数据发送到主控制部800(多点检测)。
关于整体图像数据、部分图像数据以及坐标数据的具体例，将在后文中参照模式图进行说明。
其次，“扫描方式”字段是进行扫描时指定背光源307的点亮与否的字段。“扫描方式”字段的值，可以指定为，例如“00(反射)”、“01(透射)”以及“10(反射/透射)”。
“反射”用于指定在背光源307处于点亮的状态下进行扫描的事宜。所以，当传感器数据处理部703接收到“扫描方式”字段的值为“反射” 的指令时，向传感器控制部602和背光源控制部603予以指示，使得光传感器驱动电路305和背光源驱动电路308的动作同步。
还有，“透射”用于指定在背光源307处于熄灭的状态下进行扫描的事宜。所以，当传感器数据处理部703接收到“扫描方式”字段的值为“透射”的指令时，向传感器控制部602和背光源控制部603予以指示，使光传感器驱动电路305进行动作，且背光源驱动电路308不进行动作。而且，“反射/透射”用于指定并用“反射”和“透射”进行扫描的事宜。
其次，“扫描图像灰度”字段是指定部分图像数据以及整体图像数据的灰度的字段。“扫描图像灰度”字段的值可以指定为，例如“00(2值)”以及“01(多值)”。
在此，当传感器数据处理部703接收到“扫描图像灰度”字段的值为“2值”的指令时，将部分图像数据以及整体图像数据作为黑白数据，发送到主控制部800。
而且，当传感器数据处理部703接收到“扫描图像灰度”字段的值为“多值”的指令时，将部分图像数据以及整体图像数据作为多灰度数据，发送到主控制部800。
其次，“扫描分辨率”字段是指定部分图像数据以及整体图像数据的分辨率的字段。“扫描分辨率”字段的值可以指定为，“0(高)”以及“1(低)”。
在此，“高”用于指定高分辨率。所以，当传感器数据处理部703接收到“扫描分辨率”字段的值为“高”的指令时，将部分图像数据以及整体图像数据以高分辨率发送到主控制部800。例如，对于进行图像识别等图像处理的对象的图像数据(指纹等图像数据)，优选指定为“高”。
而且，“低”用于指定低分辨率。所以，当传感器数据处理部703接收到“扫描分辨率”字段的值为“低”的指令时，将部分图像数据以及整体图像数据以低分辨率发送到主控制部800。例如，对于只要达到能够得知触摸的位置的程度即可的图像数据(触摸的手指、手的图像数据等)，优选指定为“低”。
其次，“扫描面板”字段是指定用哪一个显示/光传感部300执行对象物的扫描的字段。“扫描面板”字段的值可以指定为，例如“001(第 1显示/光传感器300)”、“010(第2显示/光传感部300)”。而且，通过加算这些值，可以同时指定多个显示/光传感部300。例如，同时指定第1以及第2显示/光传感部300时，可以指定为“011”。
在此，传感器数据处理部703向传感器控制部602和背光源控制部603予以指示，从而使这些控制部控制传感器数据处理部703所接收的指令中由“扫描面板”字段所指定的显示/光传感部300的光传感器驱动电路305以及背光源驱动电路308。
其次，“显示面板”字段是指定用哪一个显示/光传感部300进行显示数据的显示的字段。“显示面板”的值可以指定为，例如“001(第1显示/光传感部300)”、“010(第2显示/光传感部300)”。而且，通过加算这些值，可以同时指定多个显示/光传感部300。例如，同时指定第1以及第2显示/光传感部300时，可以指定为“011”。
在此，当显示数据处理部701接收到例如“显示面板”字段的值为第1显示/光传感部300的指令时，为了使显示数据显示到第1显示/光传感部300上，显示数据处理部701向显示控制部601和背光源控制部603予以指示，从而使这些控制部控制显示/光传感部300的液晶面板驱动电路304以及背光源驱动电路308。
以下，为了方便说明，假定本实施方式中的数据显示/传感器设备100只具备1个显示/光传感部300。因此，进行扫描时，作为“扫描面板”字段的值，向数据处理部700发送指定为“第1显示/光传感部(001)”的指令；进行数据显示时，作为“显示面板”字段的值，向数据处理部700发送指定为“第1显示/光传感部(001)”的指令。
其次，“备用”字段是在有必要对所述字段中指定的信息以外的其他信息进行指定时，适当地对其他信息进行指定的字段。
另外，由主控制部800所运行的应用程序，在发送指令时，无需使用所述的全部字段，将不使用的字段设定为无效值(NULL值等)即可。
而且，想获取用户用手指或笔等所触摸的位置的坐标数据时，需要将“数据类型”字段指定为“坐标”的指令发送到数据处理部700，然而，由于手指或笔等会动，所以优选再将该指令的“数据获取时间”字段指定为“all”，而获取坐标数据。而且，由于只要获取所触摸的位置的坐标数据即可，因此扫描的精度不高也可以。从而，将所述指令中“扫描分辨率”字段的值指定为“低”即可。
而且，在将指令的“数据类型”字段指定为“坐标”的情况下，例如，当用户用多根手指或笔等同时触摸传感器内置型液晶面板301时，可以获取各个所触摸的位置的坐标信息(多点检测)。
而且，获取原稿等对象物的图像数据时，需要将“数据类型”字段指定为“整体图像”的指令发送到数据处理部700，然而，通常由于原稿等对象物是在静态下执行扫描的，所以没有必要周期性地进行扫描。因此，此时，优选将“数据获取时间”字段的值指定为“sense”或者“event”。并且，扫描原稿等对象物时，为了能让用户容易地读到文字，扫描精度优选为偏高。因此，优选将“扫描分辨率”字段的值指定为“高”。
(整体图像数据/部分图像数据/坐标数据)
以下，参照图7，举例说明整体图像数据、部分图像数据以及坐标数据。图7(a)所示的图像数据是，在传感器内置型液晶面板301上没有放置对象物时，扫描整个传感器内置型液晶面板301所得到的图像数据。而且，图7(b)所示的图像数据是，用户用手指触摸传感器内置型液晶面板301时，扫描整个传感器内置型液晶面板301所得到的图像数据。
当用户用手指触摸传感器内置型液晶面板301时，由于该触摸部分近旁的光传感器电路32所接受的光量发生变化，因此该光传感器电路32所输出的电压发生变化，其结果，在传感器控制部602所生成的图像数据中，用户所触摸的部分的像素值的亮度发生变化。
与图7(a)所示的图像数据相比，图7(b)所示的图像数据中，对应于用户的手指的部分的像素值的亮度偏高。而且，在图7(b)所示的图像数据中，包含所有的亮度比规定的阈值发生更大的变化的像素值的、最小的矩形区域(区域PP)是“部分图像数据”。
另外，表示为区域AP的图像数据是“整体图像数据”。
而且，部分图像数据(区域PP)的代表坐标Z在整体图像数据(区域AP)中的坐标数据为(Xa，Ya)，且其在部分图像数据(区域PP)中的坐标数据为(Xp，Yp)。
(传感器内置型液晶面板的结构)
其次，参照图8，说明传感器内置型液晶面板301的结构，以及传感器内置型液晶面板301的外围电路309的结构。图8是表示显示/光传感部300的主要部分的，尤其是传感器内置型液晶面板301的结构以及 外围电路309的结构的方框图。
传感器内置型液晶面板301具备用于设定光透过率(亮度)的像素电路31，以及，根据自身所接受的光的强度输出电压的光传感器电路32。并且，将分别对应于红色、绿色、蓝色的彩色绿光片的R像素电路31r、G像素电路31g、B像素电路31b总称为像素电路31。
在传感器内置型液晶面板301的列方向(纵方向)上，配置有m个像素电路31，且在传感器内置型液晶面板301的行方向(横方向)上配置有3n个像素电路31。而且，在所述行方向(横方向)上连续配置有由R像素电路31r、G像素电路31g以及B像素电路31b构成的组。该组形成一个像素。
设定像素电路31的光透过率时，首先，向连接于包含在像素电路31的TFT(Thin Film Transistor；薄膜晶体管)33的栅极端子的扫描信号线Gi施加高电平的电压(使TFT处于接通状态的电压)。其后，向连接于R像素电路31r的TFT33的源极端子的数据信号线SRj施加规定的电压。同样地，对于G像素电路31g以及B像素电路31b，也设定光透过率。而且，通过设定这些光透过率，在传感器内置型液晶面板301上显示图像。
其次，光传感器电路32配置在每个像素上。当然，也可以在各个R像素电路31r、G像素电路31g、以及B像素电路31b的近旁各配置一个。
为了使光传感器电路32输出与光的强度相应的电压，首先，向连接于电容35的一侧电极上的传感器读取线RWi和连接于光电二极管36的正极端子上的传感器复位线RSi施加规定的电压。此状态下，当光入射到光电二极管36，则与入射的光量相应的电流流到光电二极管36。而且，根据该电流，电容35的另一侧的电极和光电二极管36的负极端子的连接点(以下，称为连接点V)的电压降低。之后，向连接于传感器前置放大器37的发射极端子上的电压施加线SDj施加电源电压VDD，则连接点V的电压增幅，并且从传感器前置放大器37的源极端子输出到数据输出线SPj。之后，根据该输出的电压，可以算出光传感器电路32所接收的光量。
其次，说明作为传感器内置型液晶面板301的外围电路的液晶面板驱动电路304、光传感器驱动电路305以及传感器输出放大器44。
液晶面板驱动电路304是用于驱动像素电路31的电路，包含扫描 信号线驱动电路3041以及数据信号线驱动电路3042。
扫描信号线驱动电路3041，根据从显示控制部601接收的时钟控制信号TC1，在每个扫描期间，从扫描信号线G1～Gm中依次选择1根扫描信号线，并向该被选择的扫描信号线施加高电平电压的同时，向其他的扫描信号线施加低电平的电压。
数据信号线驱动电路3042，根据从显示控制部601接收的显示数据D(DR、DG以及DB)，在每个扫描期间，将对应于1行份的显示数据的规定的电压施加到数据信号线SR1～SRn、SG1～SGn、SB1～SBn(线顺序方式)。另外，数据信号线驱动电路3042也可以是以点顺序方式进行驱动。
光传感器驱动电路305是用于驱动光传感器电路32的电路。光传感器电路305，根据从传感器控制部602接收的时钟控制信号TC2，在每个扫描期间，向选自传感器读取信号线RW1～RWm中的1根传感器读取信号线施加规定的读取用电压的同时，向其他的扫描数据线施加规定的读取用电压以外的电压。而且，同样地，根据时钟控制信号TC2，在每个扫描期间，向选择自传感器复位信号线RS1～RSm中的1根传感器复位信号线施加规定的复位用电压的同时，向其他的传感器复位信号线施加规定的复位用电压以外的电压。
传感数据输出信号线SP1～SPn，被分为p个组(p为1以上n以下的整数)，属于各组的传感数据输出信号线，通过以时分方式依次接通的开关47，连接于传感器输出放大器44。传感器输出放大器44对来自传感数据输出信号线的组的电压进行增幅，并作为传感器输出信号SS(SS1～SSp)输出到信号转换电路306，其中，这里的传感数据输出信号线是通过开关47相连接的。
(数据显示/传感器设备的更加详细的结构)
其次，参照图1，更加详细地说明数据显示/传感器设备100的结构。在此，为了方便说明，省略说明位于主控制部800和显示/光传感部300之间的数据处理部700以及电路控制部600的动作。准确地说，在进行数据的显示以及对象物的读取时，主控制部800的各部向数据处理部700发送指令，数据处理部700根据指令控制电路控制部600，电路控制部600再向显示/光传感部300发送信号。而且，作为对数据处理部700所发送的指令的应答，主控制部800从数据处理部700获取整体图 像数据。
图1是表示数据显示/传感器设备100的主控制部800、存储部901以及暂存部902的更加详细的结构的方框图。
如图所示，主控制部800包含浏览器处理部(窗口显示控制单元、源代码获取单元、图像发送单元)11、API处理部(坐标转换单元)12以及驱动程序处理部(图像获取单元、图像存储单元)15。
首先说明浏览器处理部11。浏览器处理部11用于对存储在后述的浏览器存储部21中的浏览器W的程序进行读取，并运行该程序。之后，由浏览器处理部11所运行的浏览器W，将通过外部通信部907，向外部服务器1000请求获取描述有读取页CP的源代码H的同时，作为其应答，从外部服务器1000接收所述源代码H。而且，为了根据所接收的源代码H而显示读取页CP，调用显示用API。在此，该显示用API是由后述的显示API处理部13所处理的，用于与后述的显示用驱动程序进行通信的API。
对于由浏览器处理部11所运行的浏览器W，进行了功能上的扩展，使其能够解释所述的scan标签ST，除了这一点，所具备的功能与一般的WWW浏览器(Internet Explorer等)相同，因此，省略详细的说明。
而且，从外部服务器1000获取源代码H的时间没有特别的限定，可以是例如向浏览器W输入表示源代码H的地址的URL的时间，也可以是启动浏览器W的时间。
而且，由浏览器处理部11所运行的浏览器W从用户那里接受执行对象物的读取的指示(按下按键等)时，为了进行对象物的读取而调用读取用API。此时，浏览器W获取描述在源代码H上的读取区域RA的客户坐标，并将所获取的该客户坐标作为参数，调用所述读取用API。
另外，所述读取用API是，由后述的读取API处理部14所执行的、用于与后述的读取用驱动程序进行通信的API。
而且，作为来自所述调用的读取用API的应答(反馈值)，由浏览器处理部11所运行的浏览器W将接受能够特定后述的读取图像存储部24内的地址的信息，。并且，如后文所述，读取图像存储部24的该地址中存储有读取图像CG。而且，浏览器W根据所接受的信息读取存储在特定的地址下的图像CG，并将所读取的该读取图像CG，通过外部通信部907发送到外部服务器1000。
其次，说明API处理部12。API处理部12读取存储在后述的API存储部22中的显示用API以及读取用API，并运行。显示用API以及读取用API是，用于浏览器W读取OS程序的功能的API。API处理部12包含显示API处理部13以及读取API处理部14。
显示API处理部13用于从API存储部22读取显示用API，并运行。当浏览器W为了显示读取页CP而调用显示用API时，显示API处理部13运行显示用API。而且，显示用API为了显示读取页CP，还调用显示用驱动程序。
并且，所述显示用驱动程序是由后述的显示驱动程序处理部16所运行的，用于显示驱动程序处理部16与数据处理部700进行通信的驱动程序。
读取API处理部14从API存储部22读取读取用API，并运行。当浏览器W为了进行对象物的读取而调用读取用API时，读取API处理部14将运行读取用API。
首先，读取用API将调用时的参数所指定的读取区域RA的客户坐标转换为桌面坐标。之后，为了进行对象物的读取，还调用读取用驱动程序。此时，读取用API将转换后的读取区域RA的桌面坐标作为参数调用所述读取用驱动程序。
并且，所述读取用驱动程序是由后述的读取驱动程序处理部17所运行的，用于读取驱动程序处理部17与数据处理部700进行通信的驱动程序。
而且，作为来自所述调用的读取用驱动程序的应答(反馈值)，读取用API接收能够特定读取图像存储部24内的地址的信息。之后，读取用API将所接收的信息作为反馈值，发送到作为调用源的浏览器W。
其次，说明驱动程序处理部15。驱动程序处理部15用于读取存储在后述的驱动程序存储部23中的显示用驱动程序以及读取用驱动程序，并运行。为此，驱动程序处理部15包含显示驱动程序处理部16以及读取驱动程序处理部17。
显示驱动程序处理部16用于从驱动程序存储部23读取显示用驱动程序，并运行。当显示用API为了显示读取页CP而调用显示用驱动程序时，显示驱动程序处理部16将运行显示用驱动程序。之后，显示用驱动程序生成显示数据，使得读取页CP显示在传感器内置型液晶面板 301上，而且将该生成的显示数据发送到数据处理部700。结合于此，显示用驱动程序将作为“显示面板”字段的值而指定了“001(第1显示/光传感部)”指令，发送到数据处理部700。
读取驱动程序处理部17用于从驱动程序存储部23读出读取用驱动程序，并运行。当读取用API为了进行对象物的读取而调用读取用驱动程序时，读取驱动程序处理部17运行读取用驱动程序。之后，读取用驱动程序为了使传感器内置型液晶面板301进行对象物的读取而生成指令，并将该生成的指令发送到数据处理部700。
并且，将所述生成的指令的各个字段的值指定为以下的值。即，“数据获取时间”字段的值指定为“01(event)”、“数据类型”字段的值指定为“100(整体图像)”、“扫描方式”字段的值指定为“00(反射)”、“扫描图像灰度”字段的值指定为“01(多值)”、“扫描分辨率”字段的值指定为“0(高)”、“扫描面板”的字段的值指定为“001(第1显示/光传感部)”。
如上所述，尤其是为了从数据处理部700获取整体图像，将“数据类型”字段的值指定为“100(整体图像)”。而且，假定为读取名片C的表面的图像的同时，在外部服务器1000中进行文字识别处理，因此，优选“扫描图像灰度”字段的值指定为“01(多值)”，“扫描分辨率”字段的值指定为“0(高)”。
而且，作为读取用驱动程序按照所述指令使传感器内置型液晶面板301执行读取的结果，从数据处理部700获取整体图像。而且，利用调用时指定为参数的读取区域RA的桌面坐标，进行从所述获取的整体图像抽取读取图像CG的处理。
而且，读取用驱动程序将所述抽取的读取图像CG存入读取图像存储部24的同时，将能够特定存储读取图像CG的地址的信息作为反馈值，发送到作为调用源的读取用API中。
其次，存储部901包含浏览器存储部21、API存储部22以及驱动程序存储部23。浏览器存储部21以可读形式存储浏览器W的程序。API存储器22以可读形式存储显示用API以及读取用API。驱动程序存储部23以可读形式存储显示用驱动程序以及读取用驱动程序。
其次，暂存部902包含读取图像存储部24。读取图像存储部24用于存储通过读取驱动程序处理部17执行的读取用驱动程序所存入的读 取图像CG。并且，读取图像CG至少存储到被浏览器处理部11所运行的浏览器W读取为止即可。因此，以提高保密性为目的，也可以在由浏览器W进行读取后立即删除。
(对象物读取处理的流程)
其次，参照图16，举例说明本实施方式中的数据显示/传感器设备100对载置在显示读取区域RA的区域上的对象物的图像进行读取，同时通过外部服务器对该读取的图像进行文字识别处理的步骤。
图16是表示本实施方式中的数据显示/传感器设备100对载置在显示读取区域RA的区域上的对象物的图像进行读取，同时通过外部服务器对该读取到的图像进行文字识别处理的步骤的流程图。
首先，当用户通过向浏览器W输入描述读取页CP的源代码H的地址的URL等方式来指示读取页CP的获取时(步骤S11)，由浏览器处理部11所运行的浏览器W通过外部通信部907向外部服务器1000请求获取所述源代码H(步骤S12)。之后，外部服务器1000根据所述请求发送所述源代码H(步骤S13)。
其次，浏览器W从外部服务器1000接收所述源代码H时，为了根据该接收的源代码H来显示读取页CP，而调用显示用API(步骤S14)。当调用显示用API时，显示API处理部13运行显示用API。之后，显示用API再调用显示用驱动程序(步骤S15)。
显示用驱动程序被调用时，显示驱动程序处理部16运行显示用驱动程序。之后，显示用驱动程序为了能够在内置传感器型液晶面板301显示读取页CP而生成显示数据，并将该生成的显示数据发送到数据处理部700的同时，将作为“显示面板”字段的值而指定为“001(第1显示/光传感部)”的指令发送到数据处理部700(步骤S16)。
之后，数据处理部700基于显示数据以及指令控制电路控制部600，并且通过电路控制部600向显示/光传感部300发送信号，将读取页CP显示在传感器内置型液晶面板301上(步骤S17)。
读取页CP显示到传感器内置型液晶面板301后，用户将作为对象物的名片C放置在传感器内置型液晶面板301的显示读取区域RA的区域上(步骤S18)，同时通过按下“发送”按键等，指示执行对象物的读取(步骤S19)，此时浏览器W获取源代码H中所描述的读取区域RA的客户坐标，并将该获取的客户坐标作为参数调用读取用API(步 骤S20)。
读取用API被调用时，读取API处理部14运行读取用API。读取用API将调用时指定为参数的读取区域RA的客户坐标，转换为桌面坐标后，将桌面坐标作为参数调用读取用驱动程序(步骤S21)。
而后，读取用驱动程序被调用时，读取驱动程序处理部17运行读取用驱动程序。而后，为了让传感器内置型液晶面板301进行对象物的读取，读取用驱动程序生成指令，并将该生成的指令发送到数据处理部700(步骤S22)。其中，所述生成的指令的各字段，如上所述。尤其是为了能够从数据处理部700获取整体图像，“数据类型”字段的值指定为“100(整体图像)”。
而后，数据处理部700根据所述指令控制电路控制部600，通过电路控制部600向显示/光传感部300发送信号，在传感器内置型液晶面板301上执行读取。而后，作为进行读取的结果，数据处理部700生成整体图像，并将该整体图像发送到读取用驱动程序(步骤S23)。
而后，读取用驱动程序从数据处理部700获取整体图像时，利用调用时指定为参数的读取区域RA的桌面坐标，进行从所述获取的整体图像中抽取读取图像CG的处理。而后，将该抽取的读取图像CG存入读取图像存储部24的同时，向作为调用源的读取用API发送作为反馈值的能够特定存入所述读取图像CG的地址的信息(步骤S24)。
而后，读取用API从所述读取用驱动程序中接收能够特定所述地址的信息的同时，向作为调用源的浏览器W发送作为反馈值的该接收的信息(步骤S25)。
而后，在浏览器W从所述读取用API接收到能够特定地址的信息时，其根据该接收的信息读取存入在特定的地址下的读取图像CG，并通过外部通信部907将该读取的读取图像CG发送到外部服务器1000(步骤S26)。
而后，当外部服务器1000从浏览器W接收图像时，其将该接收的读取图像CG存入到存储部1030的同时(步骤S27)，启动文字识别应用程序，进行从该存入的读取图像CG识别文字的处理(步骤S28)。
[变形例]
(传感器内置型液晶面板301的显示面的坐标系和读取面的坐标系之间的转换)
传感器内置型液晶面板301的显示面的分辨率和读取面的分辨率并不一定相同。例如，存在显示面的分辨率为纵1024×横768，而读取面的分辨率为显示面的2倍的分辨率，即纵2048×横1536的情况。如所述，当传感器内置型显示面板301的显示面的分辨率与读取面的分辨率不同时，为了正确地抽取读取图像CG，需要将表示读取区域RA的显示面上的位置的信息(坐标)转换为表示读取面上的位置的信息(坐标)。
以下，说明所述转换的具体例。例如，假定显示面的分辨率为纵1024×横768，且显示面上的读取区域RA为由坐标(x1d，y1d)和坐标(x2d，y2d)所围成的矩形区域。而且，假定读取面的分辨率为纵2048×横1536，且在整个读取面所读取的图像中相当于读取区域RA的区域是由坐标(x1s，y1s)和坐标(x2s，y2s)所围成的区域。
此时，坐标(x1s，y1s)和坐标(x2s，y2s)，如下式，可以通过转换坐标(x1d，y1d)和坐标(x2d，y2d)来求得。
(x1s，y1s)＝(x1d×2，y1d×2)
(x2s，y2s)＝(x2d×2+1，y1d×2+1)
而且，可以采用由读取用API进行所述转换处理的结构，也可以采用由读取用驱动程序进行所述转换处理的结构。
(执行各处理的动作主体)
关于动作主体，上文中说明了：(1)由浏览器处理部11所执行的浏览器W，获取读取区域RA的客户坐标；(2)由读取API处理部14所执行的读取用API，将读取区域RA的客户坐标转换为桌面坐标；(3)由读取驱动程序处理部17所运行的读取用驱动程序生成指令，从而使传感器内置型液晶面板301进行对象物的读取，，然而，执行各处理的动作的主体，并不限于此。
例如，将客户坐标转换为桌面坐标的动作主体可以是浏览器W，也可以是读取用驱动程序。但是，为了简便应用程序的开发，坐标的转换处理优选由置于下层的读取用API或读取用驱动程序来进行。
而且，上文中还说明了：(4)由读取驱动程序处理部17所运行的读取用驱动程序从整体图像中抽取读取图像CG的同时，将其存入读取图像存储部24；(5)由浏览器处理部11所执行的浏览器W，从读取图像存储部24中读取读取图像CG，然而，执行各处理的动作的主体，并不限于此。
例如，从整体图像中抽取读取图像CG的动作主体，可以是读取用API或浏览器W。
而且，上文中说明了主控制部800具有由浏览器处理部11、API处理部12以及驱动程序处理部15所构成的3层结构，但是并不限于此种结构。例如，可以将API处理部12以及驱动程序处理部15作为1个部件，而使全体具有由2层部件构成的结构，或者，也可以将浏览器处理部11、API处理部12以及驱动程序处理部15作为1个部件，而使全体具有由1个部件构成的结构。
(读取页CP的描述的变化)
在上文中，利用可描述scan标签ST的HTML来描述了读取页CP的源代码H。这种情况，虽然需要扩展HTML标准规格，同时还需要扩展浏览器W的功能而使其能够对应该扩展的HTML，但是对以下方面有效，即用户只需将该扩展了功能的浏览器W安装到数据显示/传感器设备100中，就能够利用所述系统1100。
并且，由于只要在源代码H中描述scan标签ST即可，因此，还有助于读取页CP的提供者能够容易地描述源代码H。
而且，读取页CP也可以用Java(注册商标)Script等脚本语言来描述。这种情况，虽然需要扩展脚本语言的规格，同时还需要扩展浏览器W的功能而使其能够解释该扩展的脚本语言，但是对以下方面也有效，即用户只需将该扩展了功能的浏览器W安装到数据显示/传感器设备100中，就能够利用所述系统1100的性能。
并且，虽然读取页CP的提供者需要利用所述扩展的脚本语言来描述脚本，但是对能够生成动态的网页也有效。
而且，读取页CP可以由进行显示以及读取的指示的插件程序(plug-in)来实现。这种情况对以下方面有效，即不需要扩展如上所述的HTML标准规格、语言的规格，而且不需要扩展浏览器W的功能。
但是，用户需要安装所述插件程序。而且，读取页CP的提供者需要作出执行时能够调用插件程序的读取页CP。
(未显示为可观测到整个读取区域的情况下的对策)
由于用户操作浏览器W的滚动条(Scroll Bar)，或缩小浏览器W的大小，因而发生未显示客户区域CA的整个范围的情况。此时，希望催促用户，使得将读取区域RA的整个范围显示出来。
参照图17，说明向用户提示的信息的一例。图17是表示显示的部分不能观测到整个读取区域时，所提示的信息的一例的模式图。图17所示的例中，显示了信息MS，以此催促用户显示整个读取区域RA。
(来自外部服务器的应答)
在上述结构中，没有采用外部服务器1000针对接收读取图像CG的动作向数据显示/传感器设备100发送应答的结构，但是可以采用将所述应答发送到数据显示/传感器设备100的同时，在数据显示/传感器100中显示所述应答的内容的结构。由此，数据显示/传感器设备100的用户可以确认在外部服务器1000操作是否已完成，以及是否已执行用户所期待的处理。
另外，作为所述应答的内容，例如，可以是包含旨在外部服务器1000已接收读取图像CG的信息，也可以是显示外部服务器1000所接收的读取图像CG的画面，也可以是显示文字识别应用程序所识别的文字的画面。
(只在读取面的规定区域上进行读取的方式)
上文中，对传感器内置型显示面板301经常在整个读取面上检测近旁的像的结构进行了说明，但是也可以采用只在读取面的规定的区域上检测近旁的像的结构(即，只在部分区域上执行读取)。
此时，主控制部800向数据处理部700发送包含指定传感器内置型显示面板301的读取面的规定区域的信息的指令，并且，数据处理部700根据该指令控制电路控制部600，并且，电路控制部600根据该控制对显示/光传感部300发送信号即可。而且，作为针对向数据处理部700发送的所述指令的应答，主控制部800从数据处理部700中获取在读取面的规定区域上读取到的图像数据。
另外，就所述规定区域来说，在读取区域RA是将被读取的区域时，从数据处理部700中获取到的图像即为读取图像CG，因此不需要读取用驱动程序中的抽取处理。
(主控制部800的控制对象)
而且在上文中，说明了数据显示/传感器设备100具备数据处理部700、电路控制部600的结构，但是不限于此结构。例如，也可以采用主控制部800直接控制电路控制部600，由主控制部800生成整体图像数据/部分图像数据/坐标数据的结构。而且，还可以采用主控制部800 直接控制显示/光传感部300的结构。
[备注事项]
如上所述，本发明的图像显示/像检测设备是，具备显示图像的同时还读取近旁的像的面状部件的图像显示/像检测设备，其具备：窗口显示控制单元，将包含载置对象物的载置区域的窗口，显示在所述面状部件上；坐标转换单元，将表示所述载置区域在所述窗口中的配置的第1区域信息，转换为表示所述载置区域在所述面状部件中的配置的第2区域信息；图像获取单元，获取读取图像，即获取所述面状部件在根据所述第2区域信息所特定的区域上读取到的近旁的像的图像。
而且，本发明的图像显示/像检测设备的控制方法是，具备显示图像的同时还读取近旁的像的面状部件的图像显示/像检测设备的控制方法，其包含：窗口显示控制步骤，将包含载置对象物的载置区域的窗口，显示在所述面状部件上；坐标转换步骤，将表示所述载置区域在所述窗口中的配置的第1区域信息，转换为表示所述载置区域在所述面状部件中的配置的第2区域信息；图像获取步骤，获取读取图像，即获取所述面状部件在根据所述第2区域信息所特定的区域上读取到的近旁的像的图像。
从而，由于能够从第1区域信息得到第2区域信息，因此不论窗口显示在显示面的什么位置，载置区域配置在窗口中的什么位置，都能够特定载置区域在面状部件上的位置。因此，能够可靠地特定面状部件上的读取区域。
因此，起到能够用面状部件可靠地读取到载置于窗口的载置区域上的对象物的图像的效果。即，用面状部件能够可靠地读取载置于面状部件上的显示位置不固定的载置区域上的对象物的图像。
可选的，本发明的图像显示/像检测设备在具有所述结构的基础上还具有如下结构，即：所述第1区域信息包含在源代码中，该源代码规定包含显示在所述窗口上的所述载置区域在内的内容；所述窗口显示控制单元根据所述源代码，在将包含所述载置区域在内的内容配置在所述窗口中的状态下，将所述窗口显示在所述面状部件上。
根据所述结构，所述第1区域信息包含在源代码中，该源代码规定包含载置区域在内的内容，同时根据所述源代码，在将包含所述载置区域在内的内容配置在所述窗口中的状态下，将所述窗口显示在所述面状 部件上。
因此，可以用源代码来规定包含载置区域在内的内容在窗口中的配置，根据该规定的源代码，在窗口中显示载置区域。由此，可以用面状部件来读取根据源代码而显示的载置于载置区域上的对象物的图像。
因此起到以下效果，即内容的提供者(源代码的提供者)不用考虑面状部件上的读取区域的位置，而能够作成提供用于进行对象物读取的功能的内容。
而且，还能够起到以下效果，即用户能够享受内容的阅览服务和原稿等的读取服务融为一体的服务，同时能够在一个窗口上进行内容的阅览和原稿等的读取操作，因此提高用户的便利性以及操作性。
可选的，本发明的图像显示/像检测设备在所述结构的基础上，还具备源代码获取单元，该单元从第1外部设备获取所述源代码。
根据所述结构，还能够从第1外部设备获取源代码。
因此，用面状部件能够获取根据从第1外部设备获取的源代码所显示的载置于载置区域上的对象物的图像。
从而，起到内容的提供者能够用作为第1外部设备的服务器提供包含进行所述读取的功能的内容的效果。
即，内容的提供者能够用外部的服务器提供包含进行所述读取的功能的内容，因此能够将该内容构建成SaaS的应用程序。
可选的，在本发明的图像显示/像检测设备中，所述图像获取单元，使所述面状部件在整个所述面状部件上读取近旁的像，同时在该读取的像的图像中抽取所述第2区域信息中所特定的区域，以此获取所述读取图像。
根据所述结构，通过整个面状部件读取的像的图像中抽取由第2区域信息所特定的区域，可以获得读取图像。
从而，能够从整个面状部件所读取的图像中抽取出包含对象物的图像的，载置区域上的图像。即，能够从整个面状部件所读取的图像中，去除相当于载置区域的外侧区域的部分。
因此，起到能够获取确切地包含载置在载置区域上的对象物的图像且不包含载置区域的外侧区域的图像，即读取图像的效果。
可选的，在本发明的图像显示/像检测设备中，所述图像获取单元，将使所述面状部件在所述第2区域信息所特定的区域上读取的近旁的 像，作为所述读取图像来获取。
根据所述结构，能够将在第2区域信息所特定的区域上读取的近旁的像，作为读取图像来获取。
因此，作为读取图像能够从面状部件中获取包含对象物的图像的载置区域的图像。
从而，起到能够获取确切地包含载置在载置区域上的对象物的图像且不包含载置区域的外侧区域的图像的读取图像的效果。
可选的，本发明的图像显示/像检测设备在具有所述结构的基础上还具备图像存储单元，该单元用于将所述图像获取单元所获取的所述读取图像存储至自设备的存储部中。
根据所述结构，能够将读取图像存储到自设备的存储部中。
由此，能够将包含对象物的图像的载置区域上的图像存储到自设备的存储部。
从而，起到能够对面状部件所读取的对象物的图像实施图像解析处理或向外部传送的处理等各种处理的效果。
可选的，本发明的图像显示/像检测设备在具有所述结构的基础上还具备图像发送单元，该单元用于将所述图像获取单元所获取的所述读取图像，发送至第2外部设备中。
根据所述结构，能够将读取图像发送到第2外部设备。 
由此，能够将包含对象物的图像的载置区域上的图像发送到第2外部设备。
从而，起到能够在作为第2外部设备的服务器上，对面状部件所读取的对象物的图像进行图像解析处理等各种处理的效果。
例如，能够在服务器上进行对由面状部件所读取的名片图像的文字识别处理，以此识别包含在名片图像中的姓名、地址、邮件地址等文字，同时还进行将所识别出的文字的数据登录至地址录的表格中的处理等。
另外，所述图像显示/像检测设备可以由计算机来实现，此时，使计算机作为所述各单元而运行，由此，通过计算机实现的所述图像显示/像检测设备的控制程序，以及存储该控制程序的计算机可读的记录媒体，均包含在本发明的范畴内。
最后，数据显示/传感器设备100的主控制部800、数据处理部700、电路控制部600，可以由硬件逻辑所构成，可也以如以下所述，利用CPU 由软件实现。
即，数据显示/传感器设备100具备执行实现各个功能的控制程序的指令的CPU(Central Processing Unit)、存储所述程序的ROM(Read Only Memory)、用于扩展所述程序的RAM(Random Access Memory)、存储上述程序以及各种数据的存储器等存储设备(记录媒体)等。而且，将作为实现上述各个功能的软件即数据显示/传感器设备100的控制程序的程序编码(可执行程序，中间代码程序，源程序)以计算机可读形式存储到记录媒体中，并将该记录媒体提供给数据显示/传感器设备100，由计算机(或CPU、MPU)读取并执行存储在记录媒体中的程序编码，以此实现本发明的目的。
作为上述记录媒体可以利用：磁性磁带、卡式磁带等磁带系列；包含软盘(FLOPPY，注册商标)，硬盘等磁盘、CD-ROM/MO/MD/DVD/CD-R等光盘的盘系列；IC卡(包含存储卡)/光卡等的卡系列；或者，掩膜型只读存储器(mask ROM)/EPROM/EEPROM/闪存(flash ROM)等半导体存储器系列等。
而且，也可将数据显示/传感器设备100接入到通信网络，通过通信网络来提供所述程序编码。至于该通信网络，没有特别的限定，例如可以利用互联网(Internet)、内联网(Intranet)、外联网(Extranet)、LAN、ISDN、VAN、CATV通信网、虚拟专用网(Virtual Private Network)、电话网、移动通信网、卫星通信网等。而且，至于构成通信网络的传送介质，也没有特别的限定，例如可以利用IEEE1394、USB、电力线、有线电视线路、电话线、ADSL线路等有线，或者IrDA、红外线、蓝牙(Bluetooth)、802.11无线、HDR、移动电话网、卫星线路、地面波数字网等无线。而且，本发明中，上述程序编码也可以通过在电子传输中被具体化的、加载于载波上的计算机数据信号的形式来实现。
本发明并不限于所述各实施方式，可以根据权利要求所示的范围进行各种的变化，适当地组合不同实施方式记述的技术手段而得到的实施方式也包含于本发明的技术范围之内。
在此，上述具体的实施方式或实施例只不过是用于阐明本发明的技术内容的具体示例，本发明不应当仅限定于此种具体示例而狭义地解释，在本发明的精神和以下所述的技术方案的范围内，可以进行各种变更而实施。
(工业上的利用可能性)
本发明可适用于进行图像等的显示处理以及对象物的读取处理的设备。尤其是，可适用于能够用浏览器显示网页的PC等。

Claims (7)

1.一种具备显示图像数据的同时读取近旁的物体的像的面状部件的设备，该设备的特征在于，具备：
窗口显示控制单元，将包含载置对象物的载置区域的窗口，显示在所述面状部件上；
坐标转换单元，将表示以所述窗口上的规定位置为原点的第1坐标系中的所述载置区域的配置的第1区域信息，转换为表示以所述面状部件上的规定位置为原点的与所述第1坐标系不同的第2坐标系中的所述载置区域的配置的第2区域信息；
图像获取单元，获取读取图像，该读取图像是所述面状部件在根据所述第2区域信息所特定的区域上读取到的近旁的像的图像，
所述第1区域信息包含在源代码中，该源代码规定包含显示在所述窗口中的所述载置区域在内的内容，
所述窗口显示控制单元根据所述源代码，在将包含所述载置区域在内的内容配置在所述窗口中的状态下，将所述窗口显示在所述面状部件上。
2.根据权利要求1所述的设备，其特征在于：
还具备源代码获取单元，从第1外部设备获取所述源代码。
3.根据权利要求1或2所述的设备，其特征在于：
所述图像获取单元，使所述面状部件在整个所述面状部件上读取近旁的像的同时，在被读取的像的图像中抽取所述第2区域信息所特定的区域，以此获取所述读取图像。
4.根据权利要求1或2所述的设备，其特征在于：
所述图像获取单元，将使所述面状部件在所述第2区域信息所特定的区域上读取的近旁的像，作为所述读取图像来获取。
5.根据权利要求1或2所述的设备，其特征在于：
还具备图像存储单元，将所述图像获取单元所获取的所述读取图像，存储至自设备的存储部。
6.根据权利要求1或2所述的设备，其特征在于：
还具备图像发送单元，将所述图像获取单元所获取的所述读取图像，发送至第2外部设备。
7.一种具备显示图像数据的同时读取近旁的物体的像的面状部件的设备的控制方法，该方法的特征在于，包含：
窗口显示控制步骤，将包含载置对象物的载置区域的窗口，显示在所述面状部件上；
坐标转换步骤，将表示以所述窗口上的规定位置为原点的第1坐标系中的所述载置区域的配置的第1区域信息，转换为表示以所述面状部件上的规定位置为原点的与所述第1坐标系不同的第2坐标系中的所述载置区域的配置的第2区域信息；
图像获取步骤，获取读取图像，该读取图像是所述面状部件在根据所述第2区域信息所特定的区域上读取到的近旁的像的图像，
所述第1区域信息包含在源代码中，该源代码规定包含显示在所述窗口中的所述载置区域在内的内容，
所述窗口显示控制步骤根据所述源代码，在将包含所述载置区域在内的内容配置在所述窗口中的状态下，将所述窗口显示在所述面状部件上。
CN201080001437.7A 2009-03-09 2010-03-08 具备显示图像数据的同时读取近旁的物体的像的面状部件的设备及控制方法 Expired - Fee Related CN102017595B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2009055636A JP5236536B2 (ja) 2009-03-09 2009-03-09 画像表示／像検知装置、制御方法、制御プログラム、および該制御プログラムを記録したコンピュータ読み取り可能な記録媒体
JP2009-055636 2009-03-09
PCT/JP2010/001620 WO2010103791A1 (ja) 2009-03-09 2010-03-08 画像表示／像検知装置、制御方法、制御プログラム、および該制御プログラムを記録したコンピュータ読み取り可能な記録媒体

Publications (2)

Publication Number Publication Date
CN102017595A CN102017595A (zh) 2011-04-13
CN102017595B true CN102017595B (zh) 2015-07-15

Family

ID=42728087

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201080001437.7A Expired - Fee Related CN102017595B (zh) 2009-03-09 2010-03-08 具备显示图像数据的同时读取近旁的物体的像的面状部件的设备及控制方法

Country Status (5)

Country Link
US (1) US8698742B2 (zh)
EP (1) EP2408187A4 (zh)
JP (1) JP5236536B2 (zh)
CN (1) CN102017595B (zh)
WO (1) WO2010103791A1 (zh)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2014106809A (ja) * 2012-11-28 2014-06-09 Konica Minolta Inc データ処理装置、コンテンツ表示方法およびブラウジングプログラム
KR20170073068A (ko) * 2015-12-18 2017-06-28 엘지전자 주식회사 이동단말기 및 그 제어방법
JP6832765B2 (ja) * 2017-03-23 2021-02-24 シャープ株式会社 画像読取装置、画像形成装置、制御プログラムおよび制御方法
US20230222667A1 (en) * 2022-01-13 2023-07-13 Microsoft Technology Licensing, Llc Mask for satellite image data

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1386213A (zh) * 2000-05-31 2002-12-18 精工爱普生株式会社 投影机和投影显示系统及其方法以及记录媒体

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7382929B2 (en) * 1989-05-22 2008-06-03 Pixel Instruments Corporation Spatial scan replication circuit
JPH04195625A (ja) * 1990-11-28 1992-07-15 Toshiba Corp 情報処理装置
EP0464712A3 (en) 1990-06-28 1993-01-13 Kabushiki Kaisha Toshiba Display/input control system for software keyboard in information processing apparatus having integral display/input device
JP2000315118A (ja) * 1999-05-06 2000-11-14 Canon Inc 情報処理装置、情報処理装置制御方法、情報処理装置制御プログラムを格納した記憶媒体
JP2002132651A (ja) 2000-10-19 2002-05-10 Nec Corp ファクシミリ送信制御方法およびファクシミリ送信制御システムならびにファクシミリ装置
WO2003003720A1 (en) * 2001-06-28 2003-01-09 Omnivee Inc. Method and apparatus for control and processing of video images
JP3872322B2 (ja) 2001-09-17 2007-01-24 インターナショナル・ビジネス・マシーンズ・コーポレーション タッチパネルに対応した入力方法、入力システムおよびプログラム
JP2003122474A (ja) * 2001-09-27 2003-04-25 Internatl Business Mach Corp <Ibm> コンピュータ装置、画像表示方法、プログラム、記録媒体
JP4819311B2 (ja) 2003-11-18 2011-11-24 キヤノン株式会社 画像処理装置、その制御方法およびプログラム
JP4293959B2 (ja) 2004-09-16 2009-07-08 シャープ株式会社 画像処理装置、プログラム及び記録媒体
JP2006140918A (ja) * 2004-11-15 2006-06-01 Toshiba Corp 電子機器および画像読取方法
JP2006179977A (ja) * 2004-12-20 2006-07-06 Toshiba Corp スキャナ装置
JP2006184973A (ja) * 2004-12-24 2006-07-13 Toshiba Corp 電子機器、及び電子機器を用いた読み取り方法。
JP2008139981A (ja) * 2006-11-30 2008-06-19 Sharp Corp 制御装置、端末装置、表示システム、表示方法、プログラムおよびその記録媒体
EP2141578B1 (en) * 2007-04-24 2019-01-23 Sony Interactive Entertainment Inc. Image display device, image display method and information recording medium
US20090210491A1 (en) * 2008-02-20 2009-08-20 Microsoft Corporation Techniques to automatically identify participants for a multimedia conference event

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1386213A (zh) * 2000-05-31 2002-12-18 精工爱普生株式会社 投影机和投影显示系统及其方法以及记录媒体

Also Published As

Publication number Publication date
WO2010103791A1 (ja) 2010-09-16
US8698742B2 (en) 2014-04-15
EP2408187A1 (en) 2012-01-18
EP2408187A4 (en) 2013-05-15
CN102017595A (zh) 2011-04-13
JP5236536B2 (ja) 2013-07-17
US20110037692A1 (en) 2011-02-17
JP2010211414A (ja) 2010-09-24

Similar Documents

Publication Publication Date Title
CN102203702B (zh) 电子设备、菜单的选择方法、菜单的选择程序
US7190336B2 (en) Information processing apparatus and method, recording medium and program
RU2379747C2 (ru) Устройство сканирующего дисплея
WO2009104667A1 (ja) 光センサ付き表示装置
JP5367339B2 (ja) メニュー表示装置、メニュー表示装置の制御方法、およびメニュー表示プログラム
CN102017595B (zh) 具备显示图像数据的同时读取近旁的物体的像的面状部件的设备及控制方法
US20100245270A1 (en) Image input device and image input method
JP5095574B2 (ja) 画像表示／像検知装置、画像表示方法、画像表示プログラムおよび当該プログラムを記録した記録媒体
JP2010140300A (ja) 表示装置、制御方法、制御プログラムおよび記録媒体
JP5306780B2 (ja) 入力装置
JP5254753B2 (ja) 数値入力装置、数値入力方法、数値入力プログラム、およびコンピュータ読み取り可能な記録媒体
JP2010139475A (ja) ナビゲーション装置及びナビゲーション装置の制御方法。
JP2010146064A (ja) 購買システム、電子棚札、及び注文処理方法
JP2010118018A (ja) 位置特定装置、位置特定プログラム及びコンピュータ読み取り可能な記録媒体、並びに位置特定方法
JP2010108446A (ja) 情報処理装置、情報処理装置の制御方法、および、情報処理プログラム
JP2010117841A (ja) 像検知装置、入力位置の認識方法、およびプログラム
JP2010119064A (ja) 色検出装置、色検出プログラム及びコンピュータ読み取り可能な記録媒体、並びに色検出方法
JP2010146394A (ja) 像検知装置、制御方法、制御プログラム、および該制御プログラムを記録したコンピュータ読み取り可能な記録媒体
JP2010122444A (ja) 地図表示装置、地図表示装置の制御方法、地図表示装置制御プログラムおよびコンピュータ読み取り可能な記録媒体
JP2010092272A (ja) 画像表示／像検知装置、補助画像表示方法、およびプログラム
JP2010160689A (ja) 入力装置、及び入力装置の制御方法
JP5171572B2 (ja) 画像表示装置、画像表示装置の制御方法、プログラム、および記録媒体
JP5274987B2 (ja) 携帯型電子機器、指示入力装置、指示入力方法、指示入力処理プログラム及びコンピュータ読み取り可能な記録媒体
WO2010050559A1 (ja) 通信装置およびその制御方法
JP2010118017A (ja) 画像解析装置、画像解析方法、表示装置、画像解析プログラムおよび記録媒体

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20150715

Termination date: 20190308