CN104793734A - 位置检测装置、位置检测系统和位置检测装置的控制方法 - Google Patents

位置检测装置、位置检测系统和位置检测装置的控制方法 Download PDF

Info

Publication number
CN104793734A
CN104793734A CN201510020449.9A CN201510020449A CN104793734A CN 104793734 A CN104793734 A CN 104793734A CN 201510020449 A CN201510020449 A CN 201510020449A CN 104793734 A CN104793734 A CN 104793734A
Authority
CN
China
Prior art keywords
calibration
indication body
light
image
data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201510020449.9A
Other languages
English (en)
Other versions
CN104793734B (zh
Inventor
久保田真司
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Seiko Epson Corp
Original Assignee
Seiko Epson Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Seiko Epson Corp filed Critical Seiko Epson Corp
Publication of CN104793734A publication Critical patent/CN104793734A/zh
Application granted granted Critical
Publication of CN104793734B publication Critical patent/CN104793734B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/038Control and interface arrangements therefor, e.g. drivers or device-embedded control circuitry
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0354Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of 2D relative movements between the device, or an operating part thereof, and a plane or surface, e.g. 2D mice, trackballs, pens or pucks
    • G06F3/03542Light pens for emitting or receiving light
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0416Control or interface arrangements specially adapted for digitisers
    • G06F3/0418Control or interface arrangements specially adapted for digitisers for error correction or compensation, e.g. based on parallax, calibration or alignment
    • G06F3/04186Touch location disambiguation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/042Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means
    • G06F3/0425Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means using a single imaging device like a video camera for tracking the absolute position of a single or a plurality of objects with respect to an imaged reference surface, e.g. video camera imaging a display or a projection screen, a table or a wall surface, on which a computer generated image is displayed or projected

Abstract

位置检测装置、位置检测系统和位置检测装置的控制方法。本发明在进行位置检测的装置执行多个校准时可利用适当的方法进行校准。投影仪(10)具备位置检测部(50)以及校准控制部(39)。校准控制部(39)执行与操作屏幕(SC)的指示体(70)的操作位置相关的第1校准以及与操作屏幕(SC)的指示体(80)的操作位置相关的第2校准。并且,校准控制部(39)在第1校准被执行后,提供指示是否执行第2校准的用户界面。

Description

位置检测装置、位置检测系统和位置检测装置的控制方法
技术领域
本发明涉及位置检测装置、位置检测系统和位置检测装置的控制方法。
背景技术
以往,在进行了输入操作时检测操作位置的装置中,公知有为了正确地检测所操作的位置而进行校准的装置(例如参照专利文献1)。专利文献1记载的装置通过拍摄在操作面上显示的图像进行自动校准。另外,还可以使用户进行指示操作面的规定点的操作,检测其操作位置而进行校准。
专利文献1:日本特开2011-227600号公报
如上述现有技术那样,已知有各种校准的执行方法,但在各个方法中都具有优点和缺点。例如,自动校准虽然没有用户的负担,但容易受外光等的影响,难以达到高精度化。另外,例如在进行使用户实施指示操作的校准时,虽然操作比较烦杂,但能够高精度地进行校准。并且,优选的校准的方法根据装置的使用状况等而不同,所以不容易执行符合用户意愿的方法。
发明内容
本发明是鉴于上述情况而完成的,其目的是使得能够在进行位置检测的装置执行多个校准的情况下利用适当的方法进行校准。
为了实现上述目的,本发明的位置检测装置的特征是,该位置检测装置具备:检测部,其根据拍摄操作面而得到的拍摄图像,检测操作位置;和校准控制部,其执行与操作所述操作面的第1指示体的操作位置相关的第1校准以及与操作所述操作面的第2指示体的操作位置相关的第2校准,所述校准控制部在所述第1校准被执行后,提供指示是否执行所述第2校准的用户界面。
根据本发明,在与第1指示体的操作位置相关的校准之后,用户可选择是否进行与第2指示体的操作位置相关的校准。因此,用户既可以提高第2指示体的操作的精度,又可以缩短校准所需的时间。因此,可根据用户的要求适当执行多个校准。
另外,本发明在上述位置检测装置中的特征是,该位置检测装置具备在所述操作面上显示图像的显示部,所述校准控制部根据在所述显示部显示校准图像时所拍摄的所述拍摄图像,执行所述第1校准以及第2校准。
在本发明中,可根据显示校准图像的操作面的拍摄图像来执行校准。
另外,本发明在上述位置检测装置中的特征是,所述校准控制部在所述第1校准中,利用所述检测部从所述拍摄图像中检测所述校准图像,在所述第2校准中,利用所述检测部从所述拍摄图像中检测所述第2指示体的像。
根据本发明,在第1校准中从拍摄图像检测校准图像,由此不进行第1指示体的操作,就能够迅速执行校准。另外,在第2校准中可与校准图像对应地检测第2指示体进行的操作,进行高精度的校准。并且,当进行这些校准时,用户可选择是否执行第2校准,所以能够缩短校准的时间,还能够提高第2指示体的操作精度。
另外,本发明在上述位置检测装置中的特征是,所述校准控制部利用所述第1校准取得校准数据,该校准数据将从所述拍摄图像中检测出的操作位置变换为所述显示部显示的所述图像上的位置。
根据本发明,可取得第1指示体的操作所需的校准数据,然后,还能够选择是否花费时间执行第2校准。
另外,本发明在上述位置检测装置中的特征是,所述校准控制部通过所述第2校准取得校正数据,该校正数据对利用所述校准数据而求出的所述图像上的位置进行校正。
根据本发明,用户可选择是否取得校正数据来提高第2指示体的操作的精度。
另外,本发明在上述位置检测装置中的特征是,所述检测部从所述拍摄图像中检测所述第1指示体发出的光的像以及所述第2指示体反射检测光后的反射光的像。
根据本发明,可基于拍摄图像来检测发光的第1指示体的操作和反射光的第2指示体的操作,能够适当地执行与第1指示体以及第2指示体的操作相关的校准。
另外,本发明在上述位置检测装置中的特征是,该位置检测装置具备沿着所述操作面射出所述检测光的光射出部。
根据本发明,通过射出检测光,能够可靠地检测第2指示体的操作。
另外,为了实现上述目的,本发明的位置检测系统的特征是,该位置检测系统具备:位置检测装置,其检测对操作面进行操作的第1指示体以及第2指示体的操作位置;以及光射出装置,其沿着所述操作面射出检测光,所述位置检测装置具备:摄像部,其对所述操作面进行拍摄;检测部,其从所述摄像部的拍摄图像中检测所述第1指示体发出的光的像以及所述第2指示体反射所述光射出装置的检测光后的反射光的像,由此,检测操作位置;和校准控制部,其执行与所述第1指示体的操作位置相关的第1校准以及与所述第2指示体的操作位置相关的第2校准,所述校准控制部在所述第1校准被执行后,提供指示是否执行所述第2校准的用户界面。
根据本发明,在对发光的第1指示体以及反射光射出装置的检测光的第2指示体的操作进行检测的位置检测系统中,可执行与第1指示体的操作位置相关的校准。在该第1校准之后,用户可选择是否进行与第2指示体的操作位置相关的校准。因此,用户既能够提高第2指示体的操作的精度,又能够省略第2校准来缩短所用时间。因此,可根据用户的要求适当执行多个校准。
另外,为了实现上述目的,本发明的位置检测装置的控制方法的特征是,包括以下步骤:根据拍摄操作面而得到的拍摄图像,检测操作位置;执行与操作所述操作面的第1指示体的操作位置相关的第1校准以及与操作所述操作面的第2指示体的操作位置相关的第2校准;以及在执行所述第1校准之后,提供指示是否执行所述第2校准的用户界面。
根据本发明,在与第1指示体的操作位置相关的校准之后,用户可选择是否进行与第2指示体的操作位置相关的校准。因此,用户既能够提高第2指示体的操作的精度,又能够缩短校准所需的时间。因此,可根据用户的要求适当执行多个校准。
在本发明中,可根据用户的要求适当执行多个校准。
附图说明
图1是实施方式的投影系统的概要结构图。
图2是投影系统的功能框图。
图3是示出投影仪的动作的流程图。
图4是示出检测指示体的指示位置的状况的说明图。
图5是示出自动校准图像的一例的图。
图6是示出拍摄投射到屏幕上的自动校准图像的拍摄图像数据的一例的图。
图7是示出手动校准图像的一例的图。
图8是示出在执行校准时提供的用户界面的例子的图。
标号说明
1投影系统(位置检测系统);10投影仪(位置检测装置);20投射部(显示部);21光源部;22光调制装置;23投射光学系统;30控制部;31投射控制部;32检测控制部;33射出控制部;39校准控制部;40图像处理部;50位置检测部(检测部);60光射出装置(光射出部);70指示体(第1指示体);80指示体(第2指示体);110存储部;121自动校准图像;122手动校准图像;123自动校准数据(校准数据);124手动校准数据(校准数据);126手动校正数据(校正数据);SC屏幕(操作面)。
具体实施方式
以下,参照附图来说明本发明的实施方式。
图1是示出应用本发明的实施方式的投影系统1的结构的图。投影系统1具备设置在屏幕SC(投射面)的上方的投影仪10和设置在屏幕SC的上部的光射出装置60(光射出部)。
投影仪10设置在屏幕SC的正上方或斜上方,向斜下方的屏幕SC投射图像。另外,本实施方式例示的屏幕SC是固定在壁面上或者竖立设置在地板面上的平板或幕。本发明不限于此例,也可以使用壁面作为屏幕SC。在此情况下,在被用作屏幕SC的壁面的上部安装投影仪10以及光射出装置60即可。
投影仪10与PC(个人计算机)、视频再现装置、DVD再现装置等外部的图像供给装置连接,基于从该图像供给装置供给的模拟图像信号或数字图像数据,向屏幕SC投射图像。另外,投影仪10可构成为读出存储在内置的存储部110(图2)或外部连接的存储介质中的图像数据,基于该图像数据,在屏幕SC上显示图像。
光射出装置60具有由固体光源构成的光源部61(图2),使光源部61发出的光(在本实施方式中为红外光)沿着屏幕SC扩散地射出(照射)。在图1中用角度θ表示光射出装置60的射出范围。光射出装置60相对于屏幕SC的上端设置在上方,朝下方在角度θ的范围内射出光,该光形成沿着屏幕SC的光的层。在本实施方式中,角度θ几乎达到180度,在屏幕SC的大致整体上形成光的层。优选屏幕SC的表面与光的层接近,在本实施方式中,屏幕SC的表面与光的层的距离大概是1mm~10mm的范围。
在进行了对屏幕SC的指示操作时,投影系统1利用投影仪10检测指示位置。
用于指示操作的指示体可采用笔型的指示体70。指示体70的前端部71内置有在被按压的情况下进行工作的操作开关75(图2),所以,当进行了将前端部71按压到壁或屏幕SC的操作时,操作开关75接通。以用户用手拿棒状的轴部72使前端部71与屏幕SC接触的方式操作指示体70,还进行将前端部71按压到屏幕SC的操作。前端部71具备发出红外光的收发部74(图2)。投影仪10根据指示体70发出的红外光,检测前端部71的位置作为指示位置。
另外,在利用用户手指即指示体80进行位置指示操作时,用户使手指与屏幕SC接触。在此情况下,检测指示体80与屏幕SC接触的位置。
即,在指示体80的前端(例如指尖)与屏幕SC接触时,会遮住光射出装置60形成的光的层。此时,光射出装置60射出的光遇到指示体80而进行反射,反射光的一部分从指示体80向投影仪10前进。投影仪10具有利用后述的位置检测部50检测来自屏幕SC侧的光即来自下方的光的功能,所以,能够检测指示体80的反射光。投影仪10通过检测由指示体80反射的反射光,检测指示体80对屏幕SC的指示操作。另外,投影仪10检测利用指示体80进行指示的指示位置。
因为光射出装置60射出的光的层接近于屏幕SC,所以,光在指示体80上反射的位置可视为与屏幕SC最近的前端或者指示位置。因此,能够根据指示体80的反射光来确定指示位置。
投影系统1作为交互式白板系统发挥功能,检测用户利用指示体70、80进行的指示操作,将指示位置反映到投射图像上。
具体地说,投影系统1进行在指示位置上描绘图形或者配置文字或记号的处理、沿着指示位置的轨迹描绘图形的处理、删除已描绘的图形或已配置的文字或记号的处理等。另外,还可以将在屏幕SC上描绘的图形、配置的文字或记号保存为图像数据,可以输出至外部的装置。
此外,还可以通过检测指示位置来作为定位设备进行动作,输出投影仪10向屏幕SC投射图像的图像投射区域中的指示位置的坐标。另外,也可以利用该坐标来进行GUI(Graphical User Interface:图形用户界面)操作。
图2是构成投影系统1的各部的功能框图。
投影仪10具备I/F(接口)部11以及图像I/F(接口)部12,作为与外部装置连接的接口。I/F部11以及图像I/F部12可具备有线连接用的连接器,并具备与上述连接器对应的接口电路。另外,I/F部11以及图像I/F部12可具备无线通信接口。作为有线连接用的连接器以及接口电路,可列举以有线LAN、IEEE1394、USB等为基准的连接器以及接口电路。另外,作为无线通信接口,可列举以无线LAN或Bluetooth(注册商标)等为基准的通信接口。在图像I/F部12中还可以采用HDMI(注册商标)接口等图像数据用接口。图像I/F部12可具备输入声音数据的接口。
I/F部11是在与PC等外部装置之间收发各种数据的接口。I/F部11输入输出与图像投射相关的控制数据、设定投影仪10的动作的设定数据、投影仪10检测到的指示位置的坐标数据等。后述的控制部30具有经由I/F部11与外部装置收发数据的功能。
图像I/F部12是输入数字图像数据的接口。本实施方式的投影仪10根据经由图像I/F部12输入的数字图像数据来投射图像。投影仪10也可以具备根据模拟图像信号来投射图像的功能,在此情况下,图像I/F部12可具备模拟图像用的接口和将模拟图像信号转换为数字图像数据的A/D转换电路。
投影仪10具备形成光学图像的投射部20。投射部20具有光源部21、光调制装置22以及投射光学系统23。光源部21具备由氙气灯、超高压水银灯、LED(LightEmitting Diode:发光二极管)或者激光光源等构成的光源。另外,光源部21可具备将光源发出的光引导至光调制装置22的反射器(reflector)以及辅助反射器。还可以具备用于提高投射光的光学特性的透镜组(省略图示)、偏振光板或者使光源发出的光的光量在通往光调制装置22的路径上降低的调光元件等。
光调制装置22具备与例如RGB三原色对应的三片透过型液晶面板,调制透过该液晶面板的光而生成图像光。来自光源部21的光被分离为RGB这三色的色光,各色光输入到对应的各液晶面板。透过各液晶面板而被调制的色光由交叉分光棱镜等合成光学系统进行合成,射出至投射光学系统23。
投射光学系统23具备将由光调制装置22调制的图像光引导至屏幕SC方向并在屏幕SC上成像的透镜组。另外,投射光学系统23可具备进行屏幕SC的投射图像的放大缩小以及焦点调整的变焦机构、进行聚焦调整的聚焦调整机构。在投影仪10是短焦点型的情况下,在投射光学系统23中可具备向屏幕SC反射图像光的凹面镜。
投射部20与光源驱动部45以及光调制装置驱动部46连接,光源驱动部45根据控制部30的控制,使光源部21点亮,光调制装置驱动部46根据控制部30的控制,使光调制装置22进行动作。光源驱动部45也可具有进行光源部21的点亮/熄灭的切换而调整光源部21的光量的功能。
投影仪10具备对投射部20投射的图像进行处理的图像处理系统。该图像处理系统包含控制投影仪10的控制部30、存储部110、操作检测部17、图像处理部40、光源驱动部45以及光调制装置驱动部46。另外,图像处理部40与帧存储器44连接,控制部30与姿势传感器47、射出装置驱动部48以及位置检测部50连接。这些各个部也可包含在图像处理系统中。
控制部30通过执行规定的控制程序111来控制投影仪10的各部。存储部110非易失性地存储控制部30所执行的控制程序111以及控制部30所处理的数据。存储部110存储用于设定投影仪10的动作的画面的设定画面数据112以及表示利用设定画面数据112而设定的内容的设定数据113。
图像处理部40根据控制部30的控制,对经由图像I/F部12输入的图像数据进行处理,向光调制装置驱动部46输出图像信号。图像处理部40所执行的处理是3D(立体)图像和2D(平面)图像的判别处理、分辨率转换处理、帧率转换处理、失真校正处理、数字变焦处理、色调校正处理、亮度校正处理等。图像处理部40执行由控制部30指定的处理,根据需要,使用从控制部30输入的参数进行处理。另外,显然还可以组合执行上述处理中的多个处理。
图像处理部40与帧存储器44连接。图像处理部40在帧存储器44中展开从图像输入I/F 12输入的图像数据,对所展开的图像数据执行上述各种处理。图像处理部40从帧存储器44读出处理后的图像数据,生成与该图像数据对应的R、G、B的图像信号,输出至光调制装置驱动部46。
光调制装置驱动部46与光调制装置22的液晶面板连接。光调制装置驱动部46根据从图像处理部40输入的图像信号驱动液晶面板,在各液晶面板上描绘图像。
操作检测部17与作为输入设备发挥功能的遥控器受光部18以及操作面板19连接,检测经由遥控器受光部18以及操作面板19的操作。
遥控器受光部18接收投影仪10的用户所使用的遥控器(省略图示)响应于按钮操作而发送的红外线信号。遥控器受光部18对从上述遥控器接收的红外线信号进行解码,生成表示上述遥控器中的操作内容的操作数据,输出至控制部30。
操作面板19设置在投影仪10的外壳框体上,具有各种开关以及指示灯。操作检测部17根据控制部30的控制,与投影仪10的动作状态或设定状态对应地使操作面板19的指示灯适当地点亮、熄灭。当操作了该操作面板19的开关时,从操作检测部17向控制部30输出与所操作的开关对应的操作数据。
射出装置驱动部48经由连接部49与光射出装置60连接。连接部49例如是具有多个引脚的连接器,光射出装置60经由电缆60a与连接部49连接。射出装置驱动部48根据控制部30的控制,生成脉冲信号,经由连接部49输出至光射出装置60。另外,射出装置驱动部48经由连接部49对光射出装置60供给电源。
如图1所示,光射出装置60构成为在近似箱形的壳体中收容光源部61以及光学部件。本实施方式的光射出装置60在光源部61中具备发出红外光的固体光源62。固体光源62发出的红外光利用准直透镜以及鲍威尔棱镜进行扩散,形成沿着屏幕SC的面。另外,光源部61也可以具备多个固体光源,使这些多个固体光源发出的光分别扩散,由此,以覆盖屏幕SC的图像投射范围的方式形成光的层。另外,光射出装置60可具备调整光源部61发出的光的层与屏幕SC之间的距离或角度的调整机构。
光射出装置60利用从射出装置驱动部48供给的脉冲信号以及电源,使光源部61点亮。光源部61点亮以及熄灭的定时由射出装置驱动部48进行控制。控制部30控制射出装置驱动部48,使光源部61与后述的摄像部51进行拍摄的定时同步地点亮。
位置检测部50(检测部)检测指示体70、80对屏幕SC的操作。位置检测部50构成为具备摄像部51、发送部52、拍摄控制部53、指示体检测部54、以及坐标计算部55的各个部。
摄像部51具有摄像光学系统、摄像元件、接口电路等,对投射光学系统23的投射方向进行拍摄。摄像部51的摄像光学系统被配置为朝着与投射光学系统23大致相同的方向,具有覆盖投射光学系统23在屏幕SC上投射图像的范围的视场角。另外,摄像元件可列举接收红外区域以及可见光区域的光的CCD或CMOS。摄像部51可具备遮挡向摄像元件入射的一部分光的滤光器,例如,在接收红外光的情况下,可在摄像元件的前面配置主要透过红外区域的光的滤光器。另外,摄像部51的接口电路读出并输出摄像元件的检测值。
拍摄控制部53利用摄像部51执行拍摄,生成拍摄图像数据。当摄像元件进行可见光的拍摄时,对投射在屏幕SC上的图像进行拍摄。例如,在可见光下对后述的自动校准的图像等进行拍摄。另外,拍摄控制部53能够利用摄像部51对红外光进行拍摄,在该情况下的拍摄图像中,显现指示体70发出的红外光(红外线信号)或由指示体80反射的反射光。
指示体检测部54根据拍摄控制部53所拍摄的拍摄图像数据来检测指示体70、80的指示位置。指示体检测部54根据拍摄控制部53利用摄像部51执行红外光的拍摄时的拍摄图像数据,检测指示体70发出的红外光的像和/或由指示体80反射的反射光的像。而且,指示体检测部54可以判别检测到的像是指示体70发出的光的像、还是指示体80的反射光的像。
坐标计算部55根据指示体检测部54检测到的像的位置,计算拍摄图像数据中的指示体70、80的指示位置的坐标,输出至控制部30。坐标计算部55还可以计算投射部20投射的投射图像中的指示体70、80的指示位置的坐标,输出至控制部30。此外,坐标计算部55还可以计算图像处理部40在帧存储器44内描绘的图像数据中的指示体70、80的指示位置的坐标、或图像I/F部12的输入图像数据中的指示体70、80的指示位置的坐标。
发送部52根据指示体检测部54的控制,向指示体70发送红外线信号。发送部52具有红外LED等光源,使该光源根据指示体检测部54的控制而进行点亮、熄灭。
另外,指示体70具备控制部73、收发部74、操作开关75以及电源部76,在轴部72(图1)中收容这些各个部。控制部73与收发部74以及操作开关75连接,检测操作开关75的接通/关断状态。收发部74具备红外LED等光源和接收红外光的受光元件,根据控制部73的控制而使光源进行点亮、熄灭,并且将表示受光元件的受光状态的信号输出至控制部73。
电源部76具有干电池或二次电池作为电源,向控制部73、收发部74以及操作开关75的各个部供电。
指示体70可具备接通/关断来自电源部76的电源供给的电源开关。
这里,说明利用位置检测部50与指示体70的相互通信来根据摄像部51的拍摄图像数据确定指示体70的方法。
在检测指示体70的位置指示操作时,控制部30控制指示体检测部54,使发送部52发送同步用的信号。即,指示体检测部54根据控制部30的控制,使发送部52的光源以规定的周期进行点亮。发送部52周期性地发出的红外光作为使位置检测部50与指示体70进行同步的同步信号发挥功能。
另一方面,控制部73从电源部76开始电源的供给,进行规定的初始化动作,然后,利用收发部74接收投影仪10的发送部52发出的红外光。当收发部74接收到发送部52周期性地发出的红外光时,控制部73与该红外光的定时同步地按照预先设定的点亮模式,使收发部74的光源点亮(发光)。该点亮的模式使光源的点亮以及熄灭与数据的通断对应,表示指示体70固有的数据。控制部73根据已设定的模式的点亮时间以及熄灭时间,使光源进行点亮以及熄灭。控制部73在从电源部76被供给电源的期间,重复执行上述的模式。
即,位置检测部50向指示体70周期性地发送同步用的红外线信号,指示体70与位置检测部50发送的红外线信号同步地发送预先设定的红外线信号。
位置检测部50的拍摄控制部53进行使摄像部51的拍摄定时与指示体70点亮的定时一致的控制。根据指示体检测部54使发送部52点亮的定时来决定该拍摄定时。指示体检测部54可根据在摄像部51的拍摄图像数据中是否显现了指示体70的光的像,来确定指示体70点亮的模式。
指示体70点亮的模式可以设为指示体70的个体固有的模式、或者包含多个指示体70共用的模式和个体固有的模式的模式。在此情况下,在拍摄图像数据中包含多个指示体70发出的红外光的像的情况下,指示体检测部54可将各个像区分为不同的指示体70的像。
另外,控制部30控制射出装置驱动部48,使光源部61的点亮的定时与摄像部51的拍摄的定时同步。当光源部61与摄像部51的拍摄定时对应地进行脉冲点亮时,在指示体80在屏幕SC上进行指示的情况下,在摄像部51的拍摄图像中显现指示体80的反射光。如果使光源部61以能够与指示体70的点亮定时区分的模式进行点亮,则指示体检测部54可判定在拍摄图像数据中显现的像是指示体70还是指示体80。
例如考虑以下情况:使指示体70与摄像部51的所有拍摄定时同步地点亮,光源部61以“1010101010”(1表示点亮,0表示熄灭)的模式进行点亮。在此情况下,可判断为在光源部61没有点亮时拍摄的像是基于指示体70的像。
此外,指示体70具备的控制部73根据操作开关75的操作状态来切换使收发部74点亮的模式。因此,指示体检测部54可根据多个拍摄图像数据,判定指示体70的操作状态、即前端部71是否被按压到屏幕SC上。
姿势传感器47由加速度传感器或陀螺仪传感器等构成,向控制部30输出检测值。姿势传感器47以能够识别投影仪10的设置方向的方式固定在投影仪10的主体上。
如图1所示,除了从壁面或天花板面悬挂的悬挂设置方式之外,还可以在从屏幕SC的下方进行投射的设置状态、使用桌子的上表面等水平面作为屏幕SC的设置状态等下使用投影仪10。根据投影仪10的设置状态,有时不适合使用光射出装置60。例如,在从下方向屏幕SC进行投射的情况下,有时用户的身体遮挡光射出装置60的射出光,因而是不适合的。姿势传感器47以能够识别可设为投影仪10的设置状态的多个设置状态的方式设置在投影仪10的主体上。例如,利用2轴陀螺仪传感器、1轴陀螺仪传感器、加速度传感器等构成姿势传感器47。控制部30可根据姿势传感器47的输出值,自动地判定投影仪10的设置状态。在控制部30判定为不适合使用光射出装置60的情况下,例如,射出装置驱动部48停止电源电压或脉冲信号的输出。
控制部30通过读出并执行存储在存储部110中的控制程序111来实现投射控制部31、检测控制部32、射出控制部33以及校准控制部39的功能,控制投影仪10的各个部。
投射控制部31根据从操作检测部17输入的操作数据,取得用户进行的操作的内容。投射控制部31根据用户进行的操作,控制图像处理部40、光源驱动部45以及光调制装置驱动部46,使图像投射到屏幕SC上。投射控制部31控制图像处理部40,执行上述的3D(立体)图像和2D(平面)图像的判别处理、分辨率转换处理、帧率转换处理、失真校正处理、数字变焦处理、色调校正处理、亮度校正处理等。另外,投射控制部31与图像处理部40的处理对应地控制光源驱动部45,控制光源部21的光量。
检测控制部32控制位置检测部50,执行指示体70、80的操作位置的检测,取得操作位置的坐标。另外,检测控制部32取得操作位置的坐标、用于识别是指示体70的操作位置还是指示体80的操作位置的数据、以及表示操作开关75的操作状态的数据。检测控制部32根据所取得的坐标以及数据,执行预先设定的处理。例如,利用图像处理部40进行这样的处理:根据所取得的坐标来描绘图形,将描绘的图形与向图像I/F部12输入的输入图像重叠,进行投射。另外,检测控制部32也可以将已取得的坐标输出至与I/F部11连接的PC等外部装置。在此情况下,检测控制部32可以将所取得的坐标转换成在与I/F部11连接的外部装置的操作系统中被识别为坐标输入设备的输入的数据格式而进行输出。例如,当在Windows(注册商标)操作系统下进行动作的PC与I/F部11连接时,输出在操作系统中被作为HID(HumanInterface Device)的输入数据进行处理的数据。另外,检测控制部32可以将坐标的数据、用于识别是指示体70的操作位置还是指示体80的操作位置的数据、以及表示操作开关75的操作状态的数据一起输出。
另外,检测控制部32控制使用指示体80进行的位置检测。具体地说,检测控制部32根据有无光射出装置60的连接,判定是否能够使用光射出装置60。在不能使用光射出装置60的情况下,检测控制部32进行禁止使用光射出装置60的设定。这里,检测控制部32也可以报知不能使用光射出装置60的情况。
射出控制部33控制射出装置驱动部48,使其执行或停止向与连接部49连接的光射出装置60输出电源以及脉冲信号。射出控制部33根据检测控制部32的控制,在不能使用或不使用光射出装置60的情况下,使射出装置驱动部48停止电源以及脉冲信号的输出。另外,在使用光射出装置60的情况下,射出控制部33使射出装置驱动部48输出电源以及脉冲信号。
校准控制部39检测指示体70以及指示体80的指示位置,执行用于转换为图像I/F部12的输入图像中的坐标的校准。
参照图3所示的流程图以及各图,说明控制部30的处理步骤,尤其是校准控制部39的处理步骤。
在最初使用投影仪10时,作为初始设定之一而执行校准。校准例如是使在帧存储器44中描绘并由投射部20投射的图像中的位置与摄像部51拍摄的拍摄图像数据中的位置关联起来的处理。位置检测部50根据拍摄图像数据而检测的指示体70、80的指示位置是拍摄图像数据中的位置,例如由在拍摄图像上设定的坐标系中的坐标表示。用户确认投射到屏幕SC上的投射图像,利用指示体70、80进行指示。因此,投影仪10需要确定出针对屏幕SC上的投射图像的指示位置。通过校准,能够将利用拍摄图像数据检测的位置的坐标转换为投射图像数据上的坐标。将进行此关联的数据作为校准数据。校准数据是使拍摄控制部53所输出的拍摄图像数据上的坐标与投射图像上的坐标关联起来的数据。具体地说,可以是使拍摄图像数据上的坐标与投射图像上的坐标1对1地关联的表,或者可以是将拍摄图像数据上的坐标转换为投射图像上的坐标的函数。
校准控制部39根据指示体的种类执行校准。即,执行与指示体70的指示位置的检测相关的校准、和与指示体80的指示位置的检测相关的校准这两个校准。
图4是示出检测指示体70、80的指示位置的状况的说明图,图4的(A)示出检测指示体70的指示位置的状况,图4的(B)示出检测指示体80的指示位置的状况。
在图4的(A)中,用符号PA表示摄像部51对屏幕SC进行拍摄的拍摄方向。在进行指示体70的位置检测的情况下,收发部74从指示体70的前端的发光位置70a射出红外光。发光位置70a非常接近于指示体70与屏幕SC接触的接触点70b。因此,在根据从拍摄方向PA拍摄的拍摄图像数据来检测指示体70发出的光的像时,可将该像的位置视为接触点70b的位置。
与此相对,如图4的(B)所示,在检测指示体80的指示位置时,检测由指示体80反射检测光L而得到的反射光。即,根据从拍摄方向PA拍摄的拍摄图像数据,对检测光L的反射光的像进行检测。检测光L的射出方向与屏幕SC大致平行,检测光L与屏幕SC相距规定的距离(以下设为距离G1)。距离G1根据光射出装置60相对于屏幕SC的安装位置而变化,由于构造的原因,很难使距离G1成为零。因此,在从拍摄方向PA拍摄的拍摄图像数据中显现有在指示体80的前端的与屏幕SC相距距离G1的反射位置80a处反射的反射光的像。
如图4的(B)所示,反射位置80a在相对于拍摄方向PA倾斜的方向上分开。因此,在拍摄图像数据中显现的反射光的像的位置成为与在拍摄方向PA上由指示体70指示更远的位置时的像相同的位置。即,指示体80在接触点80b处与屏幕SC接触时的反射光和指示体70在接触点70b处与屏幕SC接触时的光在摄像部51的拍摄图像数据中显现在同一位置。因此,指示体80所指示的接触点80b被检测为在拍摄方向PA上与摄像部51分离的接触点70b,产生距离G2的偏移。
距离G2的偏移是由于摄像部51从与屏幕SC分离的位置倾斜地进行拍摄而引起的。例如,图4的(A)、(B)所示的拍摄方向PA与指示体70、80的位置关系不限于上下方向,在水平方向上也同样会发生。在本实施方式中,如图1所示,在位于屏幕SC上方的投影仪10的主体上设置的1个摄像部51俯瞰屏幕SC进行拍摄,所以,在上下以及水平的两个方向上产生距离G2的偏移。
因此,投影仪10在检测指示体80的指示位置时,与检测指示体70的指示位置时同样地检测指示位置,然后,校正检测到的位置。
具体地说,校准控制部39进行与指示体70的指示位置的检测相关的校准,由此生成校准数据。如果使用该校准数据,例如,如图4的(A)所示,在发光位置70a接近于与屏幕SC的接触点70b时,能够高精度地检测指示位置。
此外,投影仪10在检测指示体80的指示位置时,使用校正数据,该校正数据用于校正利用校准数据而求出的坐标。具体地说,校正数据是初始校正数据125以及手动校正数据126。
校正数据可设为规定图4的(B)的距离G1的数据。在此情况下,可设为按照拍摄图像数据上的坐标或投射图像上的坐标使表示距离G1的大小的数据关联起来的表形式或者映射数据。另外,可设为针对在拍摄图像数据上的坐标或投射图像上的坐标中预先设定的代表点使表示距离G1的大小的数据关联起来的表形式。在需要求出与代表点分离的坐标的距离G1的大小时,可利用如下方法:应用接近于校正对象的坐标的代表点的距离G1的方法、或利用插值运算根据代表点的距离G1求出校正对象的坐标的距离G1的方法。
另外,例如,校正数据可以是使在拍摄图像数据上检测到的坐标或根据校准数据获得的投射图像上的坐标移动的数据。具体地说,可以是规定坐标的移动量的数据,也可以是校正坐标的函数。另外,还可以将校正数据设为实现按照拍摄图像数据上的坐标或投射图像上的坐标而不同的移动量的数据。在此情况下,可以是使坐标的移动量与校正对象的坐标相关联的表。该表可以使移动量与从拍摄图像数据上的坐标或投射图像上的坐标中选择的代表点相关联。在校正代表点以外的坐标时,可利用以下的方法:应用接近于校正对象的坐标的代表点的移动量的方法、或利用插值运算根据代表点的移动量求出校正对象的坐标的移动量的方法。
校准控制部39可执行自动校准和手动校准,作为与指示体70的指示位置相关的校准。
自动校准是这样的处理:向屏幕SC投射自动校准用的图像,由摄像部51进行拍摄,使用拍摄图像数据生成校准数据。自动校准是投影仪10可自动执行的处理,不需要用户对指示体70、80的操作。自动校准不限于用户通过遥控器或操作面板19指示执行的情况,也可以在控制部30进行控制的定时执行。例如,可以在投影仪10的电源刚刚接通后等的动作开始时进行,也可以在后述的通常动作中进行。在自动校准中投射的自动校准图像121预先存储在存储部110内。
图5示出自动校准图像121的一例。在自动校准图像121中以规定的间隔配置有多个标记。
图6示出利用摄像部51拍摄投射在屏幕SC上的自动校准图像121而得到的拍摄图像数据的一例。由于在如图1所示那样悬挂设置投影仪10时从屏幕SC的斜上方进行拍摄,所以,摄像部51的拍摄图像数据成为失真的图像。在图5中例示了标记等间隔排列的矩形的自动校准图像121,但在图6的拍摄图像数据中显现有失真的形状的图像,在该图像内部排列的标记的间隔根据标记的位置而不同。
校准控制部39利用投射控制部31的功能,基于存储在存储部110中的自动校准图像121,使图像处理部40以及投射部20进行动作,使自动校准图像121投射至屏幕SC上。校准控制部39控制位置检测部50使摄像部51执行拍摄,取得拍摄图像数据。该拍摄图像数据从拍摄控制部53临时存储到未图示的存储器,输出至控制部30。校准控制部39根据拍摄图像数据来检测标记,取得各标记的重心位置作为标记的坐标值。校准控制部39使根据拍摄图像数据检测到的标记与在帧存储器44中描绘的投射图像即自动校准图像121的标记关联起来。
校准控制部39通过使拍摄图像中的标记的坐标值与投射图像中的标记的坐标值关联起来,生成表形式或函数形式的自动校准数据123。自动校准图像121的标记在投射图像中的坐标值预先与自动校准图像121一起存储在存储部110中,或者包含在自动校准图像121内而存储在存储部110中。在已经存储有自动校准数据123的情况下,校准控制部39更新该自动校准数据123。
校准控制部39执行1次校准,生成或更新1个自动校准数据123。校准控制部39也可以在1次的自动校准中使用多个自动校准图像121。例如,可适当地选择使用标记的数量、标记的尺寸、标记的形状、标记的位置等标记的配置状态不同的多个自动校准数据123。在此情况下,校准控制部39可利用多个自动校准数据123进行多次拍摄与坐标的关联,综合所获得的关联的结果,生成更高精度的自动校准数据123。
手动校准是这样的处理:向屏幕SC投射手动校准用的图像,检测与所投射的图像对应的指示体70的操作,生成手动校准数据。
图7示出手动校准图像122的一例。为了使用户利用指示体70进行指示,手动校准图像122包含表示指示位置的标记。图7的手动校准图像122配置有多个指示用的标记(○),用户利用指示体70指示标记的位置。
在手动校准图像122中包含多个标记,这些标记逐个被投射到屏幕SC上。因此,手动校准图像122具体地由标记数不同的多个图像的组合构成。
每当在屏幕SC上显示标记时,用户利用指示体70来指示新显示的标记。每当用户进行操作时,校准控制部39检测指示位置。然后,校准控制部39使在拍摄图像中检测到的指示位置与在帧存储器44中描绘的投射图像即手动校准图像122的标记关联起来。校准控制部39使在拍摄图像数据中检测到的指示位置的坐标值与投射图像上的标记的坐标值关联起来,由此,生成手动校准数据124。
手动校准数据124可以设为与自动校准数据123同样的数据形式,但也可以设为用于校正自动校准数据123的校正数据。自动校准数据123是将拍摄图像上的坐标转换为投射图像上的坐标的数据。与此相对,手动校准数据124是进一步校正使用自动校准数据123进行转换后的坐标的数据。
校准控制部39在进行与指示体70的指示位置的检测相关的校准时,可执行自动校准或手动校准。存储部110在存储有以前生成的自动校准数据123的情况下,可选择自动校准和手动校准来执行。这里,在执行了自动校准的情况下,校准控制部39更新存储部110的自动校准数据123。另外,在执行了手动校准的情况下,生成或更新手动校准数据124。另外,当在存储部110中没有存储自动校准数据123时,需要执行自动校准。这是因为在没有存储自动校准数据123的状态下无法使用手动校准数据124。
校准控制部39能够与指示体70的手动校准同样地执行与指示体80的指示位置的检测相关的校准。在此情况下,校准控制部39生成手动校正数据126。手动校正数据126在检测指示体80的指示位置时使用。
如参照图4的(B)所说明的那样,手动校正数据126是将检测为指示体70的指示位置的坐标校正为指示体80的指示位置的坐标的数据。当关于指示体80的指示位置的检测不进行手动校准时,校准控制部39选择初始校正数据125。初始校正数据125是使图4的(B)的距离G1成为初始值时的校正数据,预先存储到存储部110中。在设置光射出装置60时,屏幕SC与检测光L的距离G1被调整为例如1mm~10mm,实际在屏幕SC的面内变化。初始校正数据125是将距离G1的初始值例如假定为5mm时的校正数据,如果使用初始校正数据125,则即使不进行手动校准也能够检测指示体80的指示位置。如果使用通过手动校准而生成的手动校正数据126,则通过进行反映了距离G1在面内的差异的校正,能够更高精度地检测指示体80的指示位置。
即,当在位置检测部50的位置检测中检测指示体70的指示位置时,检测控制部32使用自动校准数据123求出指示位置的坐标。这里,当在存储部110中存储有手动校准数据124时,利用手动校准数据124校正通过自动校准数据123求出的坐标,求出指示位置的坐标。在检测指示体80的指示位置的情况下,检测控制部32在利用自动校准数据123或手动校准数据124求出坐标的处理中,利用初始校正数据125或手动校正数据126进行校正。换言之,初始校正数据125以及手动校正数据126是根据指示体70的指示位置求出指示体80的指示位置的差分数据。
图3是示出与校准相关的投影仪10的动作的流程图。在图3的流程图中,校准控制部39利用投射部20来投射选择是执行自动校准还是执行手动校准的用户界面(步骤S1)。校准控制部39检测遥控器或操作面板19的操作(步骤S2),在选择了自动校准的情况下转移至步骤S3,在选择了手动校准的情况下转移至步骤S7。此外,如上所述,当在存储部110中没有存储自动校准数据123时,在步骤S1中,也可以投射仅能选择自动校准的菜单画面。
在步骤S3中,校准控制部39选择自动校准图像121,接着,利用投射部20向屏幕SC投射所选择的自动校准图像121(步骤S4)。在将自动校准图像121投射到屏幕SC上的状态下,用户可利用遥控器或操作面板19的操作来调整显示尺寸或显示位置,以使自动校准图像121处于屏幕SC的显示区域内。
校准控制部39控制位置检测部50,利用摄像部51执行拍摄(步骤S5),取得摄像部51的拍摄图像数据,根据所取得的拍摄图像数据,生成自动校准数据123(步骤S6),转移至步骤S14。
另一方面,在选择了手动校准的情况下,校准控制部39转移至步骤S7。在步骤S7中,校准控制部39选择手动校准图像122,接着,利用投射部20向屏幕SC投射所选择的手动校准图像122(步骤S8)。在将手动校准图像122投射到屏幕SC上的状态下,用户可利用遥控器或操作面板19的操作来调整显示尺寸或显示位置,以使手动校准图像122处于屏幕SC的显示区域内。
这里,用户进行利用指示体70的操作(步骤S9)。校准控制部39控制位置检测部50,利用摄像部51执行拍摄,取得摄像部51的拍摄图像数据来检测指示体70的指示位置(步骤S10)。校准控制部39使拍摄图像数据中的指示位置的坐标与在步骤S8中投射的手动校准图像122的标记的位置关联地临时存储到存储部110内(步骤S11)。
校准控制部39判定是否针对手动校准图像122的全部标记检测到指示位置(步骤S12),在存在未处理的标记时返回至步骤S8。另外,在全部标记的指示位置的检测已完毕时,校准控制部39根据在步骤S11中临时存储的指示位置的坐标和标记的位置,生成手动校准数据124(步骤S13)。在存储部110中存储这里生成的手动校准数据124。然后,校准控制部39转移至步骤S14。
在步骤S14中,校准控制部39利用投射部20投射用于选择是否执行关于指示体80的指示位置检测的手动校准的用户界面。
校准控制部39检测遥控器或操作面板19的操作,判定是否执行手动校准(步骤S15)。
在不执行手动校准的情况下(步骤S15:否),校准控制部39选择初始校正数据125(步骤S16),转移至通常动作(步骤S17)。
通常动作是这样的动作:根据对图像I/F部12输入的输入图像,向屏幕SC投射图像并确定由指示体70、80指示的指示位置,进行与指示内容相应的处理。
在进行关于指示体80的操作的手动校准时(步骤S15:是),校准控制部39选择手动校准图像122(步骤S18)。接着,校准控制部39利用投射部20向屏幕SC投射所选择的手动校准图像122(步骤S19)。这里,用户进行利用指示体80的操作(步骤S20)。校准控制部39控制位置检测部50,利用摄像部51执行拍摄,取得摄像部51的拍摄图像数据,检测指示体80的指示位置(步骤S21)。校准控制部39使拍摄图像数据中的指示位置的坐标与在步骤S19中投射的手动校准图像122的标记的位置关联地临时存储到存储部110内(步骤S22)。
校准控制部39判定是否针对手动校准图像122的全部标记检测到指示位置(步骤S23),在存在未处理的标记时返回至步骤S19。另外,在全部标记的指示位置检测已完毕时,校准控制部39根据在步骤S22中临时存储的指示位置的坐标和标记的位置,生成手动校正数据126(步骤S24)。将这里生成的手动校正数据126存储到存储部110。然后,校准控制部39转移至步骤S17,开始通常动作。
此外,校准控制部39也可以利用指示体70的手动校准来生成包含与自动校准数据123同样的数据的手动校准数据124。在此情况下,校准控制部39通过图3的步骤S7~S13的处理,生成与自动校准数据123同样的手动校准数据124。另外,也可以是与自动校准数据123以及手动校准数据124相同的数据,在此情况下,利用在步骤S13中生成的数据来覆盖之前生成的自动校准数据123。
在此结构中,校准控制部39只要执行自动校准或手动校准的任意一个,就能够求出指示体70的指示位置的坐标。因此,在图3的动作中,在没有存储自动校准数据123的状态下,可在步骤S2中选择手动校准。
图8是示出利用图3的处理步骤执行校准时所提供的用户界面的例子的图。
图8的(A)示出选择画面201作为在图3的步骤S1中投射到屏幕SC上的用户界面的例子。在选择画面201上配置有指示自动校准的按钮202和指示手动校准的按钮203,可利用遥控器或操作面板19的操作来选择按钮202、203的任意一个。用户可选择并指示自动校准和手动校准作为指示体70的校准。在选择了按钮202的情况下,校准控制部39在图3的步骤S3~S6中执行自动校准。另外,在选择了按钮203的情况下,校准控制部39在图3的步骤S7~S13中执行手动校准。
图8的(B)示出选择画面210作为在图3的步骤S14中投射到屏幕SC上的用户界面的例子。在选择画面210上配置有指示执行指示体80的校准的按钮211和指示不执行指示体80的校准的按钮212。在选择画面210中,可利用遥控器或操作面板19的操作来选择按钮211、212的任意一个,用户可容易地选择并指示是否要执行指示体80的校准。在选择了按钮211的情况下,校准控制部39在图3的步骤S18~S24中执行与指示体80的操作相关的手动校准。另外,在选择了按钮212的情况下,校准控制部39不执行指示体80的手动校准,而在图3的步骤S16中选择初始校正数据125。
如上所述,应用了本发明的实施方式的投影仪10具备位置检测部50以及校准控制部39。位置检测部50根据拍摄屏幕SC而得到的拍摄图像来检测操作位置。校准控制部39执行与操作屏幕SC的指示体70的操作位置相关的第1校准以及与操作屏幕SC的指示体80的操作位置相关的第2校准。并且,校准控制部39在与指示体70的操作相关的校准被执行后,提供指示是否执行与指示体80的操作相关的校准的用户界面。具体地说,校准控制部39在与指示体70相关的自动校准或手动校准执行后,显示用于选择是否执行与指示体80相关的校准的选择画面210,受理选择操作。由此,在与指示体70的操作位置相关的校准之后,用户可选择是否进行与指示体80的操作位置相关的校准。因此,用户既能够提高指示体80的操作的精度,也能够缩短校准所需的时间。因此,可根据用户的要求适当地执行多个校准。
投影仪10具备在屏幕SC上显示图像的投射部20,校准控制部39根据在投射部20显示校准图像时所拍摄的拍摄图像,执行第1校准以及第2校准。因此,可根据显示校准图像的屏幕SC的拍摄图像来执行校准。
另外,校准控制部39在第1校准中利用位置检测部50根据拍摄图像来检测校准图像,在第2校准中,利用位置检测部50根据拍摄图像来检测指示体80的像。因此,可通过在第1校准中根据拍摄图像检测校准图像,迅速地执行校准,而不进行指示体70的操作。另外,在第2校准中可与校准图像对应地检测指示体80进行的操作,进行高精度的校准。而且,在进行这些校准时,用户可选择是否执行第2校准,所以能够缩短校准的时间,还能够提高指示体80的操作精度。
另外,校准控制部39利用第1校准来取得将根据拍摄图像检测的操作位置变换为投射部20所投射的投射图像上的位置的校准数据。投射图像上的位置是投射到屏幕SC的图像上的坐标。即,是用于供根据图像数据投射图像的投影仪10将指示体70的指示位置变换为投射图像上的坐标的数据。校准数据是自动校准数据123或手动校准数据124。
由此,投影仪10可在第1校准中取得指示体70的操作所需的校准数据,然后,进一步选择是否花费时间执行第2校准。
此外,可将投射图像上的位置例如设为在帧存储器44中描绘的图像上的坐标或者图像I/F部12的输入图像数据上的坐标。在此情况下,可根据自动校准数据123以及手动校准数据124,利用输入图像数据上的坐标求出指示体70、80的指示位置。
另外,校准控制部39利用第2校准来取得手动校正数据126,该手动校正数据126对利用校准数据而求出的图像上的位置进行校正。因此,用户可选择是否取得校正数据来提高指示体80的操作的精度。
另外,位置检测部50根据拍摄图像来检测指示体70发出的光的像以及指示体80反射检测光后的反射光的像。因此,可根据拍摄图像来检测发光的指示体70的操作和反射光的指示体80的操作,可适当地执行与指示体70以及指示体80的操作相关的校准。
另外,投影仪10具备沿着屏幕SC射出检测光的光射出装置60,所以能够通过射出检测光,来可靠地检测指示体80的操作。
此外,上述的实施方式只是应用本发明的具体方式的例子,并非限定本发明,还可以作为不同的方式应用本发明。在上述实施方式中,举例说明了利用指示体80作为第1指示体、利用发出红外光的指示体70作为第2指示体的情况,本发明并不限于此。例如,也可利用指示体80作为第1指示体、利用指示体70作为第2指示体。另外,指示体不限于笔型的指示体70或用户的手指即指示体80,也可利用激光指示器或指示棒等,其形状或尺寸没有限定。另外,自动校准图像、手动校准图像中的标记(符号)不限于图5~图7所示的图案或记号。标记只要是能够从拍摄图像数据中提取的由多个像素构成的图形即可。
另外,在上述实施方式中说明了利用发送部52发出的红外线信号从投影仪10向指示体70发送同步用的信号的结构,但同步用的信号不限于红外线信号。例如,也可以是利用电波通信或超声波无线通信来发送同步用信号的结构。通过在投影仪10上设置利用电波通信或超声波无线通信发送信号的发送部并在指示体70上设置同样的接收部,能够实现此结构。
另外,在上述实施方式中例示了光射出装置60构成为与投影仪10的主体分开并利用电缆60a进行连接的结构,但本发明不限于此。例如,也可以在投影仪10的主体上一体地安装光射出装置60,内置于投影仪10的主体。另外,光射出装置60可从外部接收电源的供给,利用无线通信线路与射出装置驱动部48连接。
另外,在上述实施方式中,虽然位置检测部50利用摄像部51对屏幕SC进行拍摄来确定指示体70的位置,但本发明不限于此。例如,摄像部51不限于设置在投影仪10的主体上对投射光学系统23的投射方向进行拍摄。也可以将摄像部51配置为与投影仪10主体分开,或者摄像部51可从屏幕SC的侧方或正面进行拍摄。还可以配置多个摄像部51,检测控制部32根据这些多个摄像部51的拍摄图像数据来检测指示体70、80的位置。
另外,在上述实施方式中,以利用与RGB的各色对应的三片透过型的液晶面板作为调制光源发出的光的光调制装置22的结构为例进行了说明,但本发明不限于此。例如,也可以是利用三片反射型液晶面板的结构,还可以是利用组合1片液晶面板和色轮的方式。或者,可通过利用三片数字镜器件(DMD)的方式、组合1片数字镜器件和色轮的DMD方式等构成。在利用1片液晶面板或DMD作为光调制装置的情况下,不需要相当于交叉分光棱镜等合成光学系统的部件。另外,除了液晶面板以及DMD以外,只要是能够调制光源发出的光的光调制装置,就可以利用。
在上述实施方式中说明了用户对前投影型的投影仪10投射(显示)图像的屏幕SC(投射面、显示面)进行指示体70、80的指示操作的方式,但也可以是用户对投影仪10以外的显示装置(显示部)显示图像的显示画面(显示面)进行指示操作的方式。在此情况下,光射出装置60或摄像部51可与显示装置构成为一体,或者构成为与显示装置分开的结构。作为投影仪10以外的显示装置,可利用背投(背面投射)型的投影仪、液晶显示器、有机EL(Electro Luminescence:电致发光)显示器、等离子显示器、CRT(阴极线管)显示器、SED(Surface-conduction Electron-emitterDisplay:表面传导电子发射显示器)等。
另外,图2所示的投影系统1的各功能部表示功能性的结构,对具体的安装方式没有特别限制。即,未必需要在各功能部上安装分别对应的硬件,显然可通过一个处理器执行程序来实现多个功能部的功能。另外,在上述实施方式中可利用硬件来实现由软件实现的一部分功能,或者可利用软件来实现由硬件实现的一部分功能。另外,关于投影系统1的其它各部的具体的细部结构,在不脱离本发明主旨的范围内也可以任意地变更。

Claims (9)

1.一种位置检测装置,其特征在于,该位置检测装置具备:
检测部,其根据拍摄操作面而得到的拍摄图像,检测操作位置;和
校准控制部,其执行与操作所述操作面的第1指示体的操作位置相关的第1校准以及与操作所述操作面的第2指示体的操作位置相关的第2校准,
所述校准控制部在所述第1校准被执行后,提供指示是否执行所述第2校准的用户界面。
2.根据权利要求1所述的位置检测装置,其特征在于,
该位置检测装置具备在所述操作面上显示图像的显示部,
所述校准控制部根据在所述显示部显示校准图像时所拍摄的所述拍摄图像,执行所述第1校准以及第2校准。
3.根据权利要求2所述的位置检测装置,其特征在于,
所述校准控制部在所述第1校准中,利用所述检测部从所述拍摄图像中检测所述校准图像,
在所述第2校准中,利用所述检测部从所述拍摄图像中检测所述第2指示体的像。
4.根据权利要求2或3所述的位置检测装置,其特征在于,
所述校准控制部利用所述第1校准取得校准数据,该校准数据将从所述拍摄图像中检测出的操作位置变换为所述显示部显示的所述图像上的位置。
5.根据权利要求2或3所述的位置检测装置,其特征在于,
所述校准控制部通过所述第2校准取得校正数据,该校正数据对利用所述校准数据而求出的所述图像上的位置进行校正。
6.根据权利要求1至5中的任意一项所述的位置检测装置,其特征在于,
所述检测部从所述拍摄图像中检测所述第1指示体发出的光的像以及所述第2指示体反射检测光后的反射光的像。
7.根据权利要求6所述的位置检测装置,其特征在于,
该位置检测装置具备沿着所述操作面射出所述检测光的光射出部。
8.一种位置检测系统,其特征在于,
该位置检测系统具备:位置检测装置,其检测对操作面进行操作的第1指示体以及第2指示体的操作位置;以及光射出装置,其沿着所述操作面射出检测光,
所述位置检测装置具备:
摄像部,其对所述操作面进行拍摄;
检测部,其从所述摄像部的拍摄图像中检测所述第1指示体发出的光的像以及所述第2指示体反射所述光射出装置的检测光后的反射光的像,由此,检测操作位置;和
校准控制部,其执行与所述第1指示体的操作位置相关的第1校准以及与所述第2指示体的操作位置相关的第2校准,
所述校准控制部在所述第1校准被执行后,提供指示是否执行所述第2校准的用户界面。
9.一种位置检测装置的控制方法,其特征在于,包括以下步骤:
根据拍摄操作面而得到的拍摄图像,检测操作位置;
执行与操作所述操作面的第1指示体的操作位置相关的第1校准以及与操作所述操作面的第2指示体的操作位置相关的第2校准;以及
在执行所述第1校准之后,提供指示是否执行所述第2校准的用户界面。
CN201510020449.9A 2014-01-21 2015-01-15 位置检测装置、位置检测系统和位置检测装置的控制方法 Active CN104793734B (zh)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
JP2014008633 2014-01-21
JP2014-008633 2014-01-21
JP2014062264A JP6349838B2 (ja) 2014-01-21 2014-03-25 位置検出装置、位置検出システム、及び、位置検出装置の制御方法
JP2014-062264 2014-03-25

Publications (2)

Publication Number Publication Date
CN104793734A true CN104793734A (zh) 2015-07-22
CN104793734B CN104793734B (zh) 2019-07-05

Family

ID=53544753

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510020449.9A Active CN104793734B (zh) 2014-01-21 2015-01-15 位置检测装置、位置检测系统和位置检测装置的控制方法

Country Status (3)

Country Link
US (1) US9753580B2 (zh)
JP (1) JP6349838B2 (zh)
CN (1) CN104793734B (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107037893A (zh) * 2016-02-03 2017-08-11 精工爱普生株式会社 位置检测装置、位置检测系统以及位置检测方法
CN113227719A (zh) * 2018-12-27 2021-08-06 株式会社堀场制作所 测定系统、测定装置、测定方法以及程序

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6413236B2 (ja) 2013-12-20 2018-10-31 セイコーエプソン株式会社 プロジェクター、プロジェクションシステム、及び、プロジェクターの制御方法
JP6398248B2 (ja) * 2014-01-21 2018-10-03 セイコーエプソン株式会社 位置検出システム、及び、位置検出システムの制御方法
JP6349838B2 (ja) * 2014-01-21 2018-07-04 セイコーエプソン株式会社 位置検出装置、位置検出システム、及び、位置検出装置の制御方法
JP6586891B2 (ja) * 2016-01-13 2019-10-09 セイコーエプソン株式会社 プロジェクター及びプロジェクターの制御方法
US20180059863A1 (en) * 2016-08-26 2018-03-01 Lenovo (Singapore) Pte. Ltd. Calibration of pen location to projected whiteboard
TR201718174A2 (tr) * 2017-11-17 2019-06-21 Arcelik As Bi̇r ev ci̇hazi
EP3735684A2 (en) 2018-01-06 2020-11-11 CareOS Smart mirror system and methods of use thereof
CN113993417A (zh) 2019-05-06 2022-01-28 凯尔Os公司 智能镜子系统和其使用方法
JP2022546053A (ja) 2019-08-27 2022-11-02 カレオス 仮想ミラーシステム及び方法

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20040174345A1 (en) * 2001-08-01 2004-09-09 Microsoft Corporation Correction of alignment and linearity errors in a stylus input system
US20090116742A1 (en) * 2007-11-01 2009-05-07 H Keith Nishihara Calibration of a Gesture Recognition Interface System
JP2011227600A (ja) * 2010-04-16 2011-11-10 Seiko Epson Corp 位置検出システム及びその制御方法、並びにプログラム
JP2011227580A (ja) * 2010-04-15 2011-11-10 Panasonic Corp 手書き入力装置、手書き入力方法、及び手書き入力プログラム
JP2012149987A (ja) * 2011-01-19 2012-08-09 Seiko Epson Corp 位置検出システム、表示システム及び情報処理システム
US20120274583A1 (en) * 2011-02-08 2012-11-01 Ammon Haggerty Multimodal Touchscreen Interaction Apparatuses, Methods and Systems
CN102834789A (zh) * 2010-04-16 2012-12-19 高通股份有限公司 用于使虚拟键盘尺寸与用户手指大小动态相关的设备和方法
JP2013156861A (ja) * 2012-01-30 2013-08-15 Sharp Corp 座標入力装置、座標入力装置の座標補正方法、及び座標入力システム
US20130241890A1 (en) * 2012-03-14 2013-09-19 Texas Instruments Incorporated Detecting and Tracking Touch on an Illuminated Surface Using a Machine Learning Classifier

Family Cites Families (38)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5956020A (en) * 1995-07-27 1999-09-21 Microtouch Systems, Inc. Touchscreen controller with pen and/or finger inputs
US20010032057A1 (en) * 1999-12-23 2001-10-18 Smith Randall G. Initial calibration of a location sensing whiteboard to a projected display
EP1316055A4 (en) * 2000-05-29 2006-10-04 Vkb Inc DEVICE FOR ENTERING VIRTUAL DATA AND METHOD FOR ENTERING ALPHANUMERIC AND OTHER DATA
JP3920067B2 (ja) * 2001-10-09 2007-05-30 株式会社イーアイティー 座標入力装置
US20050122308A1 (en) * 2002-05-28 2005-06-09 Matthew Bell Self-contained interactive video display system
US20030234346A1 (en) * 2002-06-21 2003-12-25 Chi-Lei Kao Touch panel apparatus with optical detection for location
US8508508B2 (en) * 2003-02-14 2013-08-13 Next Holdings Limited Touch screen signal processing with single-point calibration
US20050052427A1 (en) * 2003-09-10 2005-03-10 Wu Michael Chi Hung Hand gesture interaction with touch surface
US7460110B2 (en) * 2004-04-29 2008-12-02 Smart Technologies Ulc Dual mode touch system
US7593593B2 (en) * 2004-06-16 2009-09-22 Microsoft Corporation Method and system for reducing effects of undesired signals in an infrared imaging system
US7372456B2 (en) * 2004-07-07 2008-05-13 Smart Technologies Inc. Method and apparatus for calibrating an interactive touch system
US8160363B2 (en) * 2004-09-25 2012-04-17 Samsung Electronics Co., Ltd Device and method for inputting characters or drawings in a mobile terminal using a virtual screen
US20080094376A1 (en) * 2006-10-23 2008-04-24 Dietz Paul H Stylus calibration system and method
US8115753B2 (en) * 2007-04-11 2012-02-14 Next Holdings Limited Touch screen system with hover and click input methods
US20090278816A1 (en) * 2008-05-06 2009-11-12 Next Holdings Limited Systems and Methods For Resolving Multitouch Scenarios Using Software Filters
US8135561B2 (en) * 2008-10-10 2012-03-13 Pixart Imaging Inc. Sensing system
TWI402793B (zh) * 2008-10-01 2013-07-21 Quanta Comp Inc 影像處理裝置之校正裝置及校正方法
US8535133B2 (en) * 2009-11-16 2013-09-17 Broadcom Corporation Video game with controller sensing player inappropriate activity
US8842096B2 (en) * 2010-01-08 2014-09-23 Crayola Llc Interactive projection system
US20110241988A1 (en) * 2010-04-01 2011-10-06 Smart Technologies Ulc Interactive input system and information input method therefor
JP5703644B2 (ja) * 2010-09-13 2015-04-22 セイコーエプソン株式会社 光学式検出システム、電子機器
JP4897983B1 (ja) * 2011-05-18 2012-03-14 パナソニック株式会社 タッチパネル装置および指示物判別方法
GB201110159D0 (en) * 2011-06-16 2011-07-27 Light Blue Optics Ltd Touch sensitive display devices
BR112014002186B1 (pt) * 2011-07-29 2020-12-29 Hewlett-Packard Development Company, L.P sistema de projeção de captura, meio executável de processamento e método de colaboração em espaço de trabalho
US9521276B2 (en) * 2011-08-02 2016-12-13 Hewlett-Packard Development Company, L.P. Portable projection capture device
JP6028320B2 (ja) * 2011-10-12 2016-11-16 富士ゼロックス株式会社 接触検出装置、記録表示装置、及びプログラム
EP2587348B1 (en) * 2011-10-28 2020-12-02 Nintendo Co., Ltd. Information processing program, information processing system, and information processing method
JP6141596B2 (ja) * 2011-12-27 2017-06-07 セイコーエプソン株式会社 表示装置、表示システム及び表示装置のデータ供給方法
US20130342493A1 (en) * 2012-06-20 2013-12-26 Microsoft Corporation Touch Detection on a Compound Curve Surface
JP6202942B2 (ja) * 2013-08-26 2017-09-27 キヤノン株式会社 情報処理装置とその制御方法、コンピュータプログラム、記憶媒体
JP6398248B2 (ja) * 2014-01-21 2018-10-03 セイコーエプソン株式会社 位置検出システム、及び、位置検出システムの制御方法
JP6326895B2 (ja) * 2014-01-21 2018-05-23 セイコーエプソン株式会社 位置検出装置、位置検出システム、及び、位置検出装置の制御方法
JP6387644B2 (ja) * 2014-01-21 2018-09-12 セイコーエプソン株式会社 位置検出装置、位置検出システム、及び、位置検出方法
JP6375660B2 (ja) * 2014-01-21 2018-08-22 セイコーエプソン株式会社 位置検出装置、プロジェクター、位置検出システム、及び、位置検出装置の制御方法
JP6349838B2 (ja) * 2014-01-21 2018-07-04 セイコーエプソン株式会社 位置検出装置、位置検出システム、及び、位置検出装置の制御方法
US10452195B2 (en) * 2014-12-30 2019-10-22 Samsung Electronics Co., Ltd. Electronic system with gesture calibration mechanism and method of operation thereof
US9720446B2 (en) * 2015-04-21 2017-08-01 Dell Products L.P. Information handling system projected work space calibration
US11106314B2 (en) * 2015-04-21 2021-08-31 Dell Products L.P. Continuous calibration of an information handling system projected user interface

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20040174345A1 (en) * 2001-08-01 2004-09-09 Microsoft Corporation Correction of alignment and linearity errors in a stylus input system
US20090116742A1 (en) * 2007-11-01 2009-05-07 H Keith Nishihara Calibration of a Gesture Recognition Interface System
JP2011227580A (ja) * 2010-04-15 2011-11-10 Panasonic Corp 手書き入力装置、手書き入力方法、及び手書き入力プログラム
JP2011227600A (ja) * 2010-04-16 2011-11-10 Seiko Epson Corp 位置検出システム及びその制御方法、並びにプログラム
CN102834789A (zh) * 2010-04-16 2012-12-19 高通股份有限公司 用于使虚拟键盘尺寸与用户手指大小动态相关的设备和方法
JP2012149987A (ja) * 2011-01-19 2012-08-09 Seiko Epson Corp 位置検出システム、表示システム及び情報処理システム
US20120274583A1 (en) * 2011-02-08 2012-11-01 Ammon Haggerty Multimodal Touchscreen Interaction Apparatuses, Methods and Systems
JP2013156861A (ja) * 2012-01-30 2013-08-15 Sharp Corp 座標入力装置、座標入力装置の座標補正方法、及び座標入力システム
US20130241890A1 (en) * 2012-03-14 2013-09-19 Texas Instruments Incorporated Detecting and Tracking Touch on an Illuminated Surface Using a Machine Learning Classifier

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107037893A (zh) * 2016-02-03 2017-08-11 精工爱普生株式会社 位置检测装置、位置检测系统以及位置检测方法
CN113227719A (zh) * 2018-12-27 2021-08-06 株式会社堀场制作所 测定系统、测定装置、测定方法以及程序

Also Published As

Publication number Publication date
CN104793734B (zh) 2019-07-05
US9753580B2 (en) 2017-09-05
JP2015158889A (ja) 2015-09-03
US20150205376A1 (en) 2015-07-23
JP6349838B2 (ja) 2018-07-04

Similar Documents

Publication Publication Date Title
CN104793811A (zh) 位置检测系统以及位置检测系统的控制方法
CN104793734A (zh) 位置检测装置、位置检测系统和位置检测装置的控制方法
CN104793810A (zh) 位置检测装置、位置检测系统和位置检测装置的控制方法
CN105874414B (zh) 位置检测装置、位置检测系统以及位置检测方法
US9992466B2 (en) Projector with calibration using a plurality of images
CN104730827A (zh) 投影仪、投影系统以及投影仪的控制方法
US9766335B2 (en) Position detection apparatus, projector, position detection system, and control method of position detection apparatus
CN104898894B (zh) 位置检测装置以及位置检测方法
JP2018160265A (ja) 位置検出システム、及び、位置検出システムの制御方法
CN105988638B (zh) 位置检测装置及其控制方法和显示装置及其控制方法
JP6291911B2 (ja) 位置検出装置、及び、位置検出方法
JP6291912B2 (ja) 位置検出装置、及び、位置検出方法
JP6340860B2 (ja) 位置検出装置、プロジェクター、位置検出システム、及び、位置検出装置の制御方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant