CN109426360A - 显示控制装置、指针显示方法以及非暂时性记录介质 - Google Patents

显示控制装置、指针显示方法以及非暂时性记录介质 Download PDF

Info

Publication number
CN109426360A
CN109426360A CN201810984216.4A CN201810984216A CN109426360A CN 109426360 A CN109426360 A CN 109426360A CN 201810984216 A CN201810984216 A CN 201810984216A CN 109426360 A CN109426360 A CN 109426360A
Authority
CN
China
Prior art keywords
pointer
display control
operating device
display
sensor information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201810984216.4A
Other languages
English (en)
Other versions
CN109426360B (zh
Inventor
斋藤宙也
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sharp Corp
Original Assignee
Sharp Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sharp Corp filed Critical Sharp Corp
Publication of CN109426360A publication Critical patent/CN109426360A/zh
Application granted granted Critical
Publication of CN109426360B publication Critical patent/CN109426360B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0354Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of 2D relative movements between the device, or an operating part thereof, and a plane or surface, e.g. 2D mice, trackballs, pens or pucks
    • G06F3/03545Pens or stylus
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0346Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of the device orientation or free movement in a 3D space, e.g. 3D mice, 6-DOF [six degrees of freedom] pointers using gyroscopes, accelerometers or tilt-sensors
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/038Control and interface arrangements therefor, e.g. drivers or device-embedded control circuitry
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04842Selection of displayed objects or displayed text elements
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04845Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour

Abstract

本发明提供一种根据操作者的操作对指针的显示方式进行控制,对操作者而言使用便利性良好的显示控制装置等。一种显示控制装置,其可连接于具备将操作装置的移动作为姿态信息进行检测的传感器部和发送姿态信息的发送部的操作装置,所述显示控制装置具备:接收部,其从操作装置接收姿态信息;位置指针显示控制部,其基于姿态信息对操作装置的移动进行判断,并与判断出的操作装置的移动联动地对位置指针进行显示控制;及方向指针显示控制部,其基于传感器信息检测操作装置的旋转角度,根据检测到的旋转角度,以在位置指针的周围回转的方式对方向指针进行显示控制。

Description

显示控制装置、指针显示方法以及非暂时性记录介质
技术领域
本发明涉及一种可连接于具备将装置的位移作为传感器信息进行检测的传感器部和发送所述传感器信息的发送部的操作装置的显示控制装置等。
背景技术
一直以来,已知有能够控制显示一个或多个文本文件、图像文件的内容的显示装置。此外,在使用了这样的显示装置的演示的位置等,有时示出说明的部位等、显示的内容中的应该关注的部分。
在这样的情况下,为了强调内容,经常进行操作连接于显示装置的PC等设备的输入装置来显示指针或利用操作笔手写输入笔画的方法。此外,还进行使用激光指针等装置,将光照射在显示装置上来表示欲强调的位置的方法。
此外,提出了如下方法:在操作笔中存储线种类、线颜色,对作为输入对象的装置通知设定内容的方法(例如,参照专利文献1)、在操作笔中具有测色传感器,检测对象物的颜色信息,并能够向显示装置输出的方法(例如,参照专利文献2)。
现有技术文献
专利文献
专利文献1:日本特开2003-150304号公报
专利文献2:日本特开2013-250805号公报
发明内容
本发明所要解决的技术问题
不过,即使在欲强调的部分显示指针、即使已知由指针所示的位置,也难以传达作为细微的部分表示的是哪部分。
此外,即使使用鼠标指针、激光指针,为了提高目视确认性,也需要变更指针的形状等设定,未必可以说便利性高。
为了解决上述的问题,本发明提供一种根据操作者的操作对指针的显示方式进行控制,从而对操作者而言使用便利性良好的显示控制装置等。
解决问题的手段
鉴于上述的课题,本发明的显示控制装置可连接于操作装置,所述操作装置具备将操作装置的位移作为传感器信息进行检测的传感器部、和发送所述传感器信息的发送部,
所述显示控制装置具备:
接收部,其从所述操作装置接收所述传感器信息;
位置指针显示控制部,其基于所述传感器信息对所述操作装置的移动进行判断,并与判断出的所述操作装置的移动联动地对位置指针进行显示控制;及
方向指针显示控制部,其基于所述传感器信息对所述操作装置的旋转角度进行计算,根据计算出的旋转角度,以在所述位置指针的周围回转的方式对方向指针进行显示控制。
本发明的指针显示方法其为显示控制装置的指针显示方法,所述显示控制装置可连接于操作装置,所述操作装置具备将操作装置的位移作为传感器信息进行检测的传感器部、和发送所述传感器信息的发送部,所述指针显示方法的特征在于,
所述指针显示方法具有:
从所述操作装置接收所述传感器信息的步骤;及
基于所述传感器信息显示指针的步骤,
在所述显示指针的步骤中,
基于所述传感器信息对所述操作装置的移动进行判断,与判断出的所述操作装置的移动联动地显示位置指针,
基于所述传感器信息检测所述操作装置的旋转角度,根据检测到的旋转角度,以在所述位置指针的周围回转的方式显示方向指针。
本发明的非暂时性记录介质的特征在于,
其在显示控制装置中执行如下步骤的程序,所述显示控制装置可连接于操作装置,所述操作装置具备将操作装置的位移作为传感器信息进行检测的传感器部、和发送所述传感器信息的发送部,
从所述操作装置接收所述传感器信息的接收功能;
基于所述传感器信息对所述操作装置的移动进行判断,并与判断出的所述操作装置的移动联动地对位置指针进行显示控制的位置指针显示控制功能;及
基于所述传感器信息检测所述操作装置的旋转角度,根据检测到的旋转角度,以在所述位置指针的周围回转的方式对方向指针进行显示控制的方向指针显示控制功能。
发明效果
根据本发明的显示系统,显示装置能够与操作装置的移动联动地控制指针的显示。因而,操作者在保持拿着操作装置的状态下,通过使操作装置倾斜或旋转,能够利用方向指针将欲强调的部分适当表示在显示装置上。
附图说明
图1为用于说明第一实施方式的显示系统的外观以及系统概要的图。
图2为用于说明第一实施方式的显示装置、操作装置、通信装置的功能构成的图。
图3为用于说明第一实施方式的显示装置的主要的动作的图。
图4为用于说明第一实施方式的显示装置的主要的动作的图。
图5为用于说明第一实施方式的动作的图。
图6为用于说明第一实施方式的动作的图。
图7为用于说明第一实施方式的动作的图。
图8为用于说明第二实施方式的动作的图。
图9为用于说明第三实施方式的动作的图。
具体实施方式
以下,参照附图对用于实施本发明的一个实施方式进行说明。另外,为了便于说明,作为实施方式,以将本发明的显示控制装置用于与触摸面板成为一体的显示装置的情况为例进行说明,但如果是通过操作者的操作输入可描绘/配置对象的显示装置,当然能够应用任意的装置。
[1.第一实施方式]
[1.1整体结构]
首先,由显示装置10、显示控制装置15、应用了本发明的操作装置的操作笔20、接收装置30构成的显示系统1的外观如图1的(a)所示。
显示装置10例如为液晶显示面板这样的显示装置且构成为具有可触摸输入的触摸面板。作为触摸输入的检测方式,也可以是静电容量方式这样的触摸面板,也可以是感压式的触摸面板。即,只要是可适当接受触摸等操作者的操作输入的装置即可。
此外,作为触摸方法,也可以是操作者的手指,也可以是操作笔20。在此,操作笔20具有可供操作者操作的按钮、对操作笔20的移动、倾斜度进行检测的功能部。此外,将包含按钮的状态、操作笔20的移动、倾斜度的传感器信息向连接于显示装置10的接收装置30发送。
显示控制装置15为所谓的计算机,并与显示装置10连接。在此,为了显示对象、各种信息,例如利用HDMI(注册商标)、D-SUB、DVI等连接。此外,为了取得来自显示装置10的触摸坐标等信息,例如利用USB等连接。
另外,显示控制装置15也可以内置于显示装置10。即,显示装置10也可以包含显示控制装置15且构成为一体。以下,为了便于说明,对显示装置10内置有显示控制装置15的功能的情况进行说明。
接收装置30为接收从操作笔20发送的传感器信息,而且将传感器信息向显示装置10输出的装置。操作笔20接收到的传感器信息也可以在转换为显示装置10能够处理的信息之后向显示装置10输出,也可以将接收到的传感器信息直接向显示装置10输出。
操作笔20和接收装置30作为一个示例可无线通信即可,例如也可以利用Bluetooth(注册商标)、ZigBee(注册商标)、IrDA(Infrared Data Association)、无线USB等无线通信来连接。另外,对本实施方式的接收装置30和操作笔20利用省电且可通信的BLE(Bluetooth Low Energy)进行连接的情况进行说明。另外,在显示装置10具备能够与操作笔20通信的收发部的情况下,也可以不利用接收装置30而直接连接操作笔20和显示装置10。
在此,对本实施方式的操作笔20进行说明。图1的(b)为表示操作笔20的外观的图。操作笔20在笔尖B12设置导通性的部件的情况下,例如能够对静电容量方式的触摸面板进行操作输入。此外,通过在笔尖B12设置感压传感器,还能够对笔压等进行检测。
此外,操作笔20设置有表示状态的LED。LED能够表示状态,例如通知电池的状态、通信状态等。此外,例如也可以在对触摸笔能够描绘的颜色等进行显示之类的应用程序方面应用。
而且,操作笔20设置有一个或多个操作按钮B14。能够利用操作按钮B14执行各种操作。操作按钮B14分配的功能也可以预先分配,也可以由用户分配任意的功能。
并且,LED、操作按钮B14在操作笔的上侧排列在一条直线上。由此,操作者在操作时目视确认LED,还能够确认状态。
此外,也可以在设置有多个操作按钮B14时,描绘模式(例如,在画面中描绘线、图形、文字这样的对象或触摸选择对象的模式)时利用的操作键分配在笔尖侧、演示模式(例如,切换显示的滑动的页面或显示指针的模式)时利用的操作键分配在笔后端侧(笔末端侧)。
此外,在操作笔20作为动作检测部内置有6轴传感器(3轴加速度传感器+3轴陀螺仪传感器),能够对操作笔20的姿态、移动进行检测。具体而言,主要利用加速度传感器对操作笔20的姿态(倾斜度)进行检测。此外,主要利用陀螺仪传感器对操作笔20的移动进行检测。此外,通过利用从该两个传感器输出的值,能够进行操作笔20的上下左右的移动的检测、操作笔20的旋转(以操作笔20的中心轴为旋转轴的情况下的旋转角度)的检测。
另外,动作检测部对作为操作笔20的姿态的以配置有操作按钮B14的一侧为上侧进行检测。即,在操作按钮B14来到上侧时操作笔20的旋转角度为0度。并且,在操作按钮B14来到上侧位置之后右旋90度的情况下,检测到操作笔20旋转+90度,+90度为旋转角度。此外,在操作按钮B14来到上侧的位置之后左旋90度的情况下,检测到操作笔20旋转-90度,-90度(或+270度)为旋转角度。
接着,参照图1的(c)对本实施方式的显示系统的概要进行说明。在本实施方式中,通过操作者使操作笔20上下左右移动,与操作笔20的移动联动地移动显示显示装置10显示的指针(指针图像)。所谓的实现与演示等利用的指针同等的功能。
在本实施方式中,能够显示与操作笔20的移动联动地显示的指针(指针图像)和不与操作笔20的移动联动地在固定的位置显示的识别显示的图钉(图钉图像)。并且,通过由指针进行规定的操作,能够在图钉中切换显示。
首先,对指针进行说明。作为本实施方式的指针P10显示的指针图像为图1的(c)的(1)所示的图像。在此,指针P10构成为具有以指针的位置为主表示的位置指针P12和表示指针的方向的方向指针P14。
位置指针P12近似圆形且表示指针所处的位置。此外,沿着位置指针P12的周围设置有可移动(可回转)的方向指针P14。
方向指针P14例如为,当操作者扭转操作笔20(旋转)时,与该扭转联动地在位置指针P12的周围回转地进行移动显示。在本图中,设为近似三角形的形状。这是因为,优选在表示方向指针的方向具有顶点的图形。因而,除三角形以外,例如也可以是箭头、凸状的图形。此外,即使没有顶点如果可知晓方向即可。具体而言,也可以是山型的图形。
并且,如果操作者使操作笔20向左方向旋转,则方向指针P14在DL方向上移动显示。此外,如果操作者使操作笔20向右方向旋转,则方向指针P14在DR方向上移动显示。
如此,能够沿着位置指针P12的周围显示方向指针P14,所以能够以指针(图像)P10整体旋转显示的方式进行目视确认。由此,操作者能够进行适当表示如下位置的操作:欲由位置指针P12表示的位置(例如,欲关注的大的位置)、欲由方向指针P14更细微地表示的位置(例如,欲关注的细微的文字、数字等)。
另外,在本实施方式中,对不旋转地显示的位置指针P12和沿着位置指针P12的周围回转地显示的方向指针P14进行说明,但也可以一体显示指针P10。在该情况下,指针P10根据操作笔20的移动联动地移动显示,根据检测到的旋转角度联动地旋转显示。
此外,优选位置指针P12为大于方向指针P14的显示,但也可以是相同的大小,也可以方向指针P14大。此外,位置指针P12与方向指针P14也可以以相同的颜色显示,也可以以不同的颜色显示。
接着,对从指针切换作为图钉的一个识别显示的情况进行说明。如图1的(c)的(2)所示,操作者以使操作笔20朝下的方式在方向DL2上进行扭转的动作。于是,方向指针在P14的位置在位置指针P12的周围回转地移动显示。
在此,在方向指针P14的位置(即,方向指针指示的方向)成为下侧(旋转角度大致180度)时,指针图像如图1的(c)的(3)所示,图钉图像P20中显示被切换。此时,图钉图像表示还不是确定状态且利用下一个操作者的操作固定显示图钉图像。
即,在指针的操作者操作中(例如在按下操作按钮的过程中),与操作笔20的移动联动地显示,相对于此,在图钉显示状态时,通过操作者进行操作,在该位置固定显示图钉图像。
如此,根据本实施方式,与操作笔20的移动联动地指针图像、图钉图像联动地显示。此外,能够通过操作者的操作容易地切换指针和图钉。
另外,作为识别显示,在本实施方式中对“图钉”的形状进行说明,但当然除图钉以外例如也可以是星形、或颜色不同的圆、或文字和其他形状。另外,以下对识别显示为图钉的情况进行说明。
[1.2功能构成]
接着,参照图2对各装置的功能构成进行说明。图2为用于说明显示装置10(显示控制装置15)、操作笔20、接收装置30的功能构成的图。在本实施方式中,显示装置10与接收装置30通过显示装置10侧的USB连接部180和接收装置侧的USB连接部310连接。
[1.2.1显示装置的功能构成]
显示装置10构成为具备:控制部100、显示部110、操作检测部120、指针处理部130、笔识别部140、图像处理部150、通信部160、存储部170及USB连接部180。另外,在本实施方式中,对显示装置10内置有显示控制装置15进行说明,但也可以根据需要使显示控制装置15具有功能。
控制部100为用于控制显示装置10的整体的功能部。控制部100通过读出并执行存储部170存储的各种程序来实现各种功能,例如由CPU(Central Processing Unit)等构成。
显示部110为对操作者显示各种信息或显示对象的功能部。此外,在本实施方式中,一并显示后述的指针显示、图钉显示。显示部110例如由液晶显示面板(LCD:liquidcrystal display)、有机EL显示面板等构成。
此外,显示部110构成显示画面,在显示画面显示有对象。显示画面也可以由一个或多个区域构成。此外,作为对象也可以是文字、图形、照片(图像)这样的内容或文档、动态图像。
操作检测部120为用于检测来自操作者的操作的功能部。例如由与显示部110一体构成的触摸面板、硬件按钮等构成。作为触摸面板的操作的检测方式也可以是,静电容量方式或阻抗膜方式等感压式、红外线方式、电磁感应方式的任意的方法。
指针处理部130为基于从操作笔20接收到的传感器信息,对显示部110显示的指针的位置(指针位置)、指针的倾斜度的计算、指针显示的图像即指针图像进行管理的功能部。
笔识别部140为对操作笔20进行识别的功能部。作为识别操作笔20的方法,利用作为能够识别操作笔20的唯一的识别信息,例如序列号、MAC地址等识别操作笔。
图像处理部150为执行显示部110中显示的图像的处理的功能部。作为通常的图像处理,例如能够对图像数据进行锐化处理或颜色调节处理并输出。此外,在本实施方式中,执行在显示的图像(内容)中重叠显示指针图像(图钉图像)的图像处理。
通信部160为用于进行显示装置10与外部设备通信的功能部。例如通过由有线/无线LAN利用的NIC(Network Interface Card)、可连接于3G/LTE线路的通信模块来实现。
存储部170为存储有显示装置10的动作所需的各种程序、各种数据的功能部。存储部170例如由作为半导体存储器的SSD(Solid State Drive)、HDD(Hard Disk Drive)等构成。
USB连接部180为用于连接USB设备的连接接口。在本实施方式中,作为USB器件与接收装置30连接。接收装置30的功能将在下文中叙述。另外,作为USB连接部由USB2.0/3.0/3.1的接口构成。
[1.2.2操作笔的功能构成]
接着,对操作笔20的功能构成进行说明。操作笔20构成为具备:控制部200、操作部210、感压传感器220、动作检测部230及无线通信部240。
控制部200为用于控制操作笔20的整体的功能部。控制部200例如由CPU等构成。
操作部210为对操作者的操作进行检测的功能部。例如,在操作笔20设置一个或多个按钮,对该按钮的状态(哪个按钮被按下)进行检测。并且,检测到的按钮的状态包含于传感器信息并发送至显示装置10。另外,操作部210例如为图1的(b)所示的操作按钮B14。
感压传感器220为对操作笔20的笔尖的压入操作时的压入深度(压入量)进行检测的功能部。压入量的检测方法使用公知的技术即可。此外,在使用操作笔20进行对显示装置10描绘笔画的操作的情况下,也可以根据由感压传感器220检测到的压入量,改变笔画的粗度或改变笔画的透明度。另外,感压传感器220例如连接于图1的笔尖B12。
动作检测部230为用于检测操作笔20的动作的功能部并由各种传感器构成。在本实施方式中,构成为具备对操作笔20的移动进行检测的3轴陀螺仪传感器(角速度传感器)、对操作笔20的倾斜度进行检测的3轴加速度传感器。
对于3轴陀螺仪传感器而言,例如对偏转轴、俯仰轴、翻转轴的3轴的旋转角速度进行检测并输出。此外,3轴加速度传感器检测并输出X轴、Y轴、Z轴的加速度。并且,旋转角速度(旋转速度)和加速度的位移作为传感器信息被输出。
从动作检测部230输出的传感器信息经由无线通信部发送至接收装置30(显示装置10)。显示装置10基于接收到的传感器信息对作为操作笔20的姿态的朝向、扭转、位置等进行计算。即,能够对表示操作笔20的移动的移动信息和表示操作笔20的姿态的姿态信息进行计算。
另外,本实施方式的传感器信息例如还包含操作部210的操作状态(操作按钮的传感器的输出信息)。即,姿态信息为从操作笔20的传感器输出的信息且用于取得操作笔20的移动、旋转状态、位置、按钮是否被选择这样的操作笔20的状态的信息。
无线通信部240为利用能够与后述的接收装置30连接的近距离无线通信技术向接收装置30发送传感器信息的功能部。例如利用Bluetooth(注册商标)、BLE(Bluetooth LowEnergy)连接。
[1.2.3接收装置的功能构成]
接着,对接收装置30的功能构成进行说明。接收装置30作为电子狗连接于显示装置10且构成为具备RF(Radio Frequency)控制部300、USB连接部310、无线通信部320。
RF控制部300为进行将从操作笔20的无线通信部240发送的传感器信息转换为显示装置10能够处理的信息或将传感器信息从USB连接部310输出的控制的功能部。RF控制部300例如由CPU等构成。
USB连接部310为用于向显示装置10输出传感器信息的功能部。例如由USB2.0/3.0/3.1的接口构成。
无线通信部320是利用能够与操作笔20连接的无线通信技术来接收从操作笔20发送的传感器信息的功能部。例如利用Bluetooth(注册商标)、BLE连接。
[1.3处理的流程]
接着,使用图3以及图4对第一实施方式的处理的流程进行说明。图3以及图4为记载了第一实施方式的主要处理的动作流程。
在显示装置10与操作笔20连接的情况下,在从操作笔20输出(发送)传感器信息之后,接收该传感器信息(步骤S102)。另外,显示装置10与操作笔20的连接也可以是自动连接,也可以通过操作者任意的操作来连接。
接着,根据接收到的传感器信息,对操作笔20的操作按钮(操作开关)是否为选择状态进行判断(步骤S104)。在此,对于操作开关为选择状态而言,例如如果是操作按钮则是指操作按钮被按下的状态,如果仅是触摸开关则是指触摸的状态。即,能够操作输入的装置持续被选择即可。
并且,在操作开关被选择的情况下,对该选择状态是否持续恒定时间(指针显示时间)以上进行判断(步骤S104:Yes→步骤S106)。指针显示时间为直至显示画面上显示指针(图像)为止的时间,优选为1秒左右,但例如为0.5秒~2秒左右、5秒以下这样的规定的时间即可。此外,也可以是由操作者能够设定的时间,也可以没有该时间(也可以是0秒)。
在操作按钮的选择状态持续指针显示时间以上的情况下,显示指针(指针图像)。在此,首先作为显示位置,如果未显示有指针(图钉)图像,则作为显示指针的坐标的初始位置设定在显示画面的中央(步骤S110)。
在此,作为初始位置想到了各种方法。例如也可以不是显示画面的中央而是在上一次指针(图钉)结束的位置(删除的位置)。此外,也可以是显示的内容的中央或规定位置(例如左上等)。
此外,根据当前的指针坐标,基于姿态信息计算新的指针坐标(步骤S112)。
指针坐标是指显示显示装置10显示的指针或图钉的位置。指针坐标的计算例如通过以下的过程来进行。
(1)最初在执行步骤S112的处理时,将指针坐标设为显示装置10的显示部110的中央(步骤S110)。
(2)第二次以后的步骤S112的处理的执行为,基于指针坐标和接收到的传感器信息计算新的指针坐标。
在此,通过对指针坐标、上一次接收的传感器信息、当前接收到的传感器信息进行比较,能够计算出操作笔20的方向、角度的位移。并且,能够基于该位移计算指针位置。
在此,加速度传感器在操作笔20静止时,能够以高精度检测操作笔20的倾斜度,但当操作笔20移动时,在操作笔20接近垂直的情况下无法准确地检测倾斜度。此外,陀螺仪传感器对移动的精度高,但在作为基于移动的累积的相对值而对指针坐标进行计算的情况下,当长时间持续计算陀螺仪传感器的值时,误差会蓄积。
因此,也可以考虑角速度传感器检测到的值和加速度传感器检测到的值来计算指针坐标。
(1)在操作笔20静止的情况下由加速度传感器取得作为基准的值(基本姿态)。
(2)在移动操作笔20时和操作笔20接近垂直时,减弱加速度传感器的影响,主要进行陀螺仪传感器的相对计算。
(3)在操作笔20再次静止的情况下,由加速度传感器取得作为基准的值(基本姿态)。
在该情况下,基于与基本姿态的相对位置计算指针坐标,在操作笔20的静止时重新取得基本姿态,由此能够对精度的较高的指针坐标进行计算。
接着,对操作笔20的旋转角度是否成为图钉切换角度进行判断(步骤S114)。在此,图钉切换角度为从指针的显示切换为图钉的显示的角度,优选大致为180度。此外,该图钉切换角度也可以表示规定的范围。例如,也可以表示175度~185度。即优选从操作者侧观察时,成为下侧的角度。
因而,像工作台显示面板那样,在四个方向上存在操作者的情况下,各个操作者处于下方即可。例如,以操作者分别利用的操作笔20朝下的方式,作为朝向操作者侧的方向、即操作笔20的操作按钮朝下的角度的大致180度即可。
另外,操作笔20的角度能够按照每操作笔进行计算,但也可以使显示控制装置15分别对绝对的角度进行计算。具体而言,也可以分别设定:处于上侧的操作者为0度、处于右侧的操作者为90度、处于下侧的操作者为180度、处于左侧的操作者为270度。
换言之,该图钉切换角度为设置于操作笔20的操作按钮朝下的位置。因而,像本实施方式那样,在显示装置10直立的状态下,操作者处于跟前方向,因此成为显示装置的下方的角度且使装置上侧相对于基准(0度)成为大致180度。以下,对图钉切换角度大致为180度进行说明。
如果旋转角度不是大致180度,在指针坐标的位置显示指针(图像)(步骤S114:No→:步骤S116)。在旋转角度大致为180度的情况下,将指针的图像切换为图钉(图钉图像),在指针坐标的位置显示图钉(图钉图像)(步骤S114:Yes→步骤S118)。
由此,在显示画面显示的内容等上重叠显示指针图像或图钉图像。
接着,从操作笔20接收传感器信息,对操作按钮是否为选择状态进行判断(步骤S120→步骤S122)。在操作按钮为选择状态的情况下,返回步骤S108重复执行处理(步骤S122:Yes→步骤S108)。
即,在操作按钮被选择的状态持续的情况下,基于从操作笔20接收到的传感器信息,与操作笔20的动作联动地持续显示指针图像或图钉图像。
在图3的步骤S122中按钮不是选择状态的情况(选择状态被解除的情况)下,再次对操作笔20的操作按钮是否被选择进行判断(图3步骤S122:Yes→图4步骤S124)。
在操作按钮再次被选择的情况下,对是否显示有指针图像进行判断(步骤S124:Yes→步骤S126)。如果显示有指针图像,则在方向指针的顶端位置的坐标产生点击的中断(步骤S126:Yes→:步骤S128)。即,能够在指针图像的顶端位置选择项目、链接。
在显示有图钉图像的情况下,在显示有图钉图像的位置(图钉位置),固定图钉图像(步骤S126:No→步骤S130)。之后,删除指针(图钉)图像(步骤S132)。
此外,在操作笔20的按钮未被选择的情况下,对是否经过指针删除时间进行判断(步骤S124:No→步骤S134)。在经过指针删除时间的情况下删除指针(步骤S134:Yes→:步骤S132)。
在未经过指针删除时间的情况下,返回步骤S124(步骤S134:Yes→:步骤S124)。作为指针删除时间,优选为1~2秒左右,但也可以通过设定延长、缩短均可。即,优选在经过规定时间后消失,但也可以在操作按钮的选择被解除的时机删除,也可以不删除。
另外,在上述的实施方式中,在旋转角度大致为180度的情况(操作笔20为切换角度的情况)下,切换为图钉显示,除此以外对指针显示进行了说明,但在一次切换为图钉显示的情况下,也可以直接维持图钉显示的状态。即,当在图3的步骤S114中一次向Yes过渡并切换为图钉显示时,也可以此后保持图钉显示的状态直至图钉删除。
此外,在步骤S114中,对切换角度大致为180度和为一个的情况进行了说明,但也可以具有第一切换角度、第二切换角度的两个切换角度。例如,利用第一切换角度(大致180度)切换为图钉显示,在再次显示指针显示时对是否相当于第二切换角度(大致150~大致210度)进行判断。
由此,能够防止以短时间切换图钉显示和指针显示。
[1.4动作例]
参照图对本实施方式的动作例进行说明。图5为指针的显示例。图5的(a)所示的画面为例,在显示画面W100中显示由位置指针P100和方向指针P102构成的指针。在该状态下,当操作者向逆时针方向旋转操作笔20时,方向指针P102沿着位置指针P100的周围向P1方向回转移动。同样地,当向顺时针方向旋转操作笔20时,方向指针P102沿着位置指针P100的周围向P2方向回转移动。
如果使操作笔20在上下左右上移动,则伴随着该移动,指针也移动。此外,还能够将移动和旋转的操作组合起来进行操作。例如,如图5的(b)的显示画面W110所示,在某时刻指针显示于P110。其后,在使操作笔20从左下向右上移动而向逆时针方向旋转的情况下,指针P112以所示方式显示。即,通过移动的操作使指针向P3a方向移动,通过旋转的操作使方向指针向P3b方向移动。
图6为操作者使操作笔20向左旋转,使操作笔20向大致地板方向旋转的情况。
最初,如图6的(a)所示,在显示画面W120中,在点划线所示的位置显示有方向指针。通过从该状态操作者使操作笔20向左旋转,显示画面W120显示的方向指针向P3方向移动,移动至朝下显示的位置。
此时,操作笔20旋转至大致地板方向而从指针图像向图钉图像切换显示。因而,在图6的(b)的显示画面W130的指针位置,P130所示那样的图钉图像。如此,通过替代指针而显示图钉图像,能够使操作者目视确认变更为能够固定图钉的状态的情况。
图7为在显示画面W140中,将图钉固定在M140以及M142的位置并显示指针P140的画面的示例。在本实施方式中,能够通过图3以及图4所示的动作,使图钉固定在一个或多个图钉位置,在固定的位置图钉持续显示在显示画面中。
如上所述,操作者通过操作操作笔20,能够显示指针或固定图钉。指针与操作笔20的移动操作、旋转操作联动地显示位置指针和方向指针,因此能够直观地表示应该关注的部位。此外,通过固定图钉的操作来持续显示图钉,因此能够与指针的操作组合,对浏览者适当表示应该关注的点。
在本实施方式中,位置指针图像为圆形。圆形自身没有表示方向的要素,因此想到了作为表示位置的形状而易于接受。此外,对于位置指针,即使旋转操作笔20也不会改变显示且方向指针仅沿着位置指针的周围旋转,因此具有稳定感。
指针、图钉通过以某程度的大小进行显示,与使用鼠标指针、激光指针表示应该关注的部位的情况相比目视确认性良好。此外,能够由方向指针显示方向,因此能够在任意方向表示应该关注的部位。
另外,在作为本实施方式的画面例的图的图7中,利用相同的图像显示作为固定的图钉的图钉M140和M142,但为了知晓固定图钉的顺序,也可以将表示固定顺序的数字重叠显示于图钉图像。通过显示固定顺序,能够明确地表现以何顺序追加要关注的部位为好。
[2.第二实施方式]
对第二实施方式进行说明。第二实施方式为显示装置10接收多个操作笔20的传感器信息的实施方式。第二实施方式的显示装置10、显示控制装置15、操作笔20、接收装置30的功能构成和处理的流程与第一实施方式相同,因此省略其说明。
在此,在操作笔20发送传感器信息的情况下,传感器信息中包含操作笔20的识别信息。此外,通过笔识别部140来识别发送的传感器信息是由哪个操作笔20发送的。
此外,图3所示的处理的流程中的步骤S102以及步骤S120接收的传感器信息,按照每操作笔20来识别,按照每操作笔20来进行指针坐标的计算、指针的显示、点击的产生、图钉的显示、图钉的固定。
图8表示画面例。显示画面W200中显示有两个指针P200和P202。此外,在指针P200以及P202的位置指针的中央作为识别显示而显示按每操作笔分配的数字。如此,通过按每操作笔20改变指针的显示方法,操作者对识别显示(数字)进行辨别,操作者能够辨别自己操作的指针。
位置指针显示的编号也可以按每操作笔20为固有的数字,也可以是按显示指针的顺序赋予的数字。此外,指针的识别显示除上述的显示以外,也可以对位置指针显示特有的图片(图标、轮廓照片),也可以改变指针的配色。此外,识别显示显示于位置指针,但也可以显示于方向指针或在指针的附近进行识别显示。
此外,图钉图像也可以是按每操作笔20实施了固有的配色的图钉图像,也可以是形状不同的图钉图像。能够按每操作笔20改变图钉图像,操作者能够识别自己操作的图钉、自己固定的图钉。
如上所述,根据本实施方式,多个操作者能够进行指针的操作。因而,无需为了表示关注部位共有连接于显示装置10的鼠标等这样的操作装置且高效。此外,通过按多个操作笔20中的每一者改变指针的显示方法,多个操作者即使同时操作笔20,也能够期待降低操作混乱的操作效果。
[3.第三实施方式]
第三实施方式为作为指针仅显示方向指针的实施方式。即,省略第一实施方式以及第二实施方式中显示的位置指针的显示并通过方向指针来表现方向和位置的实施方式。
第三实施方式为显示装置10接收多个操作笔20的传感器信息的实施方式。第三实施方式的显示装置10、显示控制装置15、操作笔20、接收装置30的功能构成和处理的流程与第一实施方式相同,但在步骤S116的指针显示的处理中,在指针位置显示方向指针这一点不同于第一实施方式。
图9表示画面例。在显示画面W300中,在某时刻,在点划线所示的位置显示有方向指针P300。其后,在使操作笔20从左下向右上移动而向逆时针方向旋转的情况下,方向指针向P4方向移动,P302如所示方式显示。
在本实施方式中,与第一实施方式相比,能够减少指针所占的区域。特别是,在存在有显示较多的指针的可能性的情况下,通过仅显示方向指针,被指针隐藏的对象等的面积减少,因此是有效的。
[4.第四实施方式]
接着,对第四实施方式进行说明。第四实施方式为以与上述的实施方式不同的方法从指针切换图钉的实施方式。第四实施方式的显示装置10、显示控制装置15、操作笔20、接收装置30的功能构成和处理的流程与第一实施方式相同,因此省略其说明。
在上述的实施方式中,根据旋转角度切换指针显示和图钉显示,但例如也可以通过手势操作进行切换。
若对几个示例进行说明,则通过翻转操作笔20(例如,相反地切换笔尖和笔后端(笔末端)),对指针显示和图钉显示进行切换。此外,在将操作者旋转操作笔20的速度设为规定的阈值(即,比通常快的旋转)的情况下切换为图钉显示。此外,也可以通过摇动操作笔20来切换为图钉显示。
即,对于从指针的显示切换为图钉显示的切换动作,想到了各种动作。在第一实施方式等中将操作笔20朝下的动作作为切换动作,但像本实施方式那样,也可以是其他动作。
此外,指针和图钉也可以随时切换,在显示有图钉的情况下,也可以维持该状态。例如,在图3的步骤S114中,当实施一次图钉显示(步骤S118)时,此后维持图钉显示。即,持续显示图钉的状态,直至一次删除图钉显示(指针显示)。
[5.效果/变形例]
以上,参照附图对该发明的实施方式进行详细叙述,但具体的构成并不限于该实施方式,不脱离该发明的主旨的范围内的设计等也包含在保护范围内。
在使手持尺寸的器件移动并使用检测该移动的传感器能够操作画面上的指针的器件中,不仅能够检测画面上的位置还能够检测器件的扭转角度。并且,根据扭转旋转指针图像。由此,不仅能够指示画面上的任意的部位,还能够利用旋转的指针图像更具体地表现使用者欲指示的部位、细微差别。作为适于该目的的指针图像,提出了以圆为中心在其周围根据扭转在圆的周围旋转的三角计的设计的方案,从而能够期待以往没有的效果。
此外,实施方式中各装置动作的程序为,对CPU等进行控制,以实现上述的实施方式的功能的程序(使计算机发挥功能的程序)。并且,由这些装置处理的信息,在其处理时临时性地存储于临时存储装置(例如,RAM),之后,存储于各种ROM、HDD、SSD的存储装置,根据需要通过CPU读出并实施修正/写入。
此外,上述的实施方式中存在有为了便于说明而分别单独说明的部分,当然也可以在可能的范围内技术性地组合并执行。例如,也可以对第二实施方式和第三实施方式进行组合。具体而言,在发表演示的位置,发表者的操作笔20的光标显示位置指针和方向指针,浏览者的操作笔20的光标仅显示方向指针,从而变更各个方向指针的配色。如此通过发表者和浏览者改变光标的显示,能够显示发表者欲强调的点和浏览者关注的点。
另外,在上述的实施方式中,作为显示装置的一个示例,以能够检测操作输入的固定式的显示装置为例进行了说明,但当然如果是能够实现同样的检测的装置则也能够应用。例如,也可以使用投影仪对白板、壁面照射显示画面,利用该投影仪或分体的检测装置检测笔操作来实现。投影仪也可以是壁挂式,也可以是桌上式。即,显示装置也包含一并进行显示和操作检测的一体型的装置、分别进行显示和操作检测的不同的分体型的装置。
此外,在市场上流通的情况下,能够在可移动型的记录介质中存储程序进行流通或传送至经由互联网等网络连接的服务器计算机。在该情况下,当然服务器计算机的存储装置也包含于本发明。
附图标记说明
10:显示装置
100:控制部
110:显示部
120:操作检测部
130:指针处理部
140:笔识别部
150:图像处理部
160:通信部
170:存储部
180:USB连接部
15:显示控制装置
20:操作装置
200:控制部
210:操作部
220:感压传感器
230:动作检测部
240:无线通信部
30:接收装置
300:RF控制部
310:USB连接部
320:无线通信部

Claims (7)

1.一种显示控制装置,其可连接于操作装置,所述操作装置具备将操作装置的位移作为传感器信息进行检测的传感器部、和发送所述传感器信息的发送部,所述显示控制装置的特征在于,
所述显示控制装置具备:
接收部,其从所述操作装置接收所述传感器信息;
位置指针显示控制部,其基于所述传感器信息对所述操作装置的移动进行判断,并与判断出的所述操作装置的移动联动地对位置指针进行显示控制;及
方向指针显示控制部,其基于所述传感器信息对所述操作装置的旋转角度进行计算,根据计算出的旋转角度,以在所述位置指针的周围回转的方式对方向指针进行显示控制。
2.根据权利要求1所述的显示控制装置,其特征在于,
所述位置指针显示控制部将所述位置指针显示为近似圆形的图形,
所述方向指针显示控制部将所述方向指针显示为具有表示方向的顶点的图形。
3.根据权利要求1或2所述的显示控制装置,其特征在于,
所述位置指针显示为比所述方向指针大。
4.根据权利要求1至3中任一项所述的显示控制装置,其特征在于,
在所述传感器信息包含有表示在所述操作装置中操作部被选择的选择信号的情况下,所述位置指针以及所述方向指针被显示。
5.根据权利要求1至4中任一项所述的显示控制装置,其特征在于,
所述传感器信息包含从检测所述操作装置的移动的陀螺仪传感器输出的信息、和从检测所述操作装置的旋转的加速度传感器输出的信息。
6.一种指针显示方法,其为显示控制装置的指针显示方法,所述显示控制装置可连接于操作装置,所述操作装置具备将操作装置的位移作为传感器信息进行检测的传感器部、和发送所述传感器信息的发送部,所述指针显示方法的特征在于,
所述指针显示方法具有:
从所述操作装置接收所述传感器信息的步骤;及
基于所述传感器信息显示指针的步骤,
在所述显示指针的步骤中,
基于所述传感器信息对所述操作装置的移动进行判断,并与判断出的所述操作装置的移动联动地显示位置指针,
基于所述传感器信息检测所述操作装置的旋转角度,根据检测到的旋转角度,以在所述位置指针的周围回转的方式显示方向指针。
7.一种非暂时性记录介质,其特征在于,存储有用于使计算机执行如下步骤的程序,所述计算机搭载于显示控制装置,所述显示控制装置可连接于操作装置,所述操作装置具备将操作装置的位移作为传感器信息进行检测的传感器部、和发送所述传感器信息的发送部:
从所述操作装置接收所述传感器信息的接收步骤;
基于所述传感器信息对所述操作装置的移动进行判断,并与判断出的所述操作装置的移动联动地对位置指针进行显示控制的位置指针显示控制步骤;及
基于所述传感器信息检测所述操作装置的旋转角度,根据检测到的旋转角度,以在所述位置指针的周围回转的方式对方向指针进行显示控制的方向指针显示控制步骤。
CN201810984216.4A 2017-08-31 2018-08-28 显示控制装置、指针显示方法以及非暂时性记录介质 Active CN109426360B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2017167601A JP6934776B2 (ja) 2017-08-31 2017-08-31 表示制御装置、表示システム、ポインタ表示方法及びプログラム
JP2017-167601 2017-08-31

Publications (2)

Publication Number Publication Date
CN109426360A true CN109426360A (zh) 2019-03-05
CN109426360B CN109426360B (zh) 2021-08-03

Family

ID=65435127

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810984216.4A Active CN109426360B (zh) 2017-08-31 2018-08-28 显示控制装置、指针显示方法以及非暂时性记录介质

Country Status (3)

Country Link
US (1) US20190064947A1 (zh)
JP (1) JP6934776B2 (zh)
CN (1) CN109426360B (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112781535A (zh) * 2021-02-04 2021-05-11 浙江陀曼云计算有限公司 仪表盘的显示方法及装置
CN113163239A (zh) * 2020-01-22 2021-07-23 海信视像科技股份有限公司 显示设备和控制方法
CN113867580A (zh) * 2021-08-30 2021-12-31 荣耀终端有限公司 窗口内指针的显示控制方法及装置、设备、存储介质

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
IT202000006793A1 (it) * 2020-03-31 2021-10-01 Milano Politecnico Strumento di scrittura, sistema e metodo per il monitoraggio e l'analisi trasparente della scrittura

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6326956B1 (en) * 1998-08-24 2001-12-04 Intertactile Technologies Corporation Circuit control devices utilizing electronic display screen light
US20090015559A1 (en) * 2007-07-13 2009-01-15 Synaptics Incorporated Input device and method for virtual trackball operation
CN101807126A (zh) * 2010-04-06 2010-08-18 华为终端有限公司 触摸笔及实现触摸功能的方法
US8638320B2 (en) * 2011-06-22 2014-01-28 Apple Inc. Stylus orientation detection
WO2017018384A1 (ja) * 2015-07-28 2017-02-02 日本電信電話株式会社 タッチパネル型情報端末装置とその情報入力処理方法およびプログラム

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0667799A (ja) * 1992-08-19 1994-03-11 Seiko Instr Inc ペン型のコンピュータ入力装置
JP4343637B2 (ja) * 2003-09-30 2009-10-14 キヤノン株式会社 操作指示方法および装置
CN102591481A (zh) * 2011-01-13 2012-07-18 国立成功大学 数字绘图电子笔、数字绘图系统及其使用方法
WO2013094371A1 (ja) * 2011-12-22 2013-06-27 ソニー株式会社 表示制御装置、表示制御方法およびコンピュータプログラム

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6326956B1 (en) * 1998-08-24 2001-12-04 Intertactile Technologies Corporation Circuit control devices utilizing electronic display screen light
US20090015559A1 (en) * 2007-07-13 2009-01-15 Synaptics Incorporated Input device and method for virtual trackball operation
CN101807126A (zh) * 2010-04-06 2010-08-18 华为终端有限公司 触摸笔及实现触摸功能的方法
US8638320B2 (en) * 2011-06-22 2014-01-28 Apple Inc. Stylus orientation detection
WO2017018384A1 (ja) * 2015-07-28 2017-02-02 日本電信電話株式会社 タッチパネル型情報端末装置とその情報入力処理方法およびプログラム

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113163239A (zh) * 2020-01-22 2021-07-23 海信视像科技股份有限公司 显示设备和控制方法
CN113163239B (zh) * 2020-01-22 2022-12-23 海信视像科技股份有限公司 显示设备和控制方法
CN112781535A (zh) * 2021-02-04 2021-05-11 浙江陀曼云计算有限公司 仪表盘的显示方法及装置
CN113867580A (zh) * 2021-08-30 2021-12-31 荣耀终端有限公司 窗口内指针的显示控制方法及装置、设备、存储介质
CN113867580B (zh) * 2021-08-30 2022-07-12 荣耀终端有限公司 窗口内指针的显示控制方法及装置、设备、存储介质

Also Published As

Publication number Publication date
JP6934776B2 (ja) 2021-09-15
JP2019045637A (ja) 2019-03-22
US20190064947A1 (en) 2019-02-28
CN109426360B (zh) 2021-08-03

Similar Documents

Publication Publication Date Title
US11353969B2 (en) Dynamic visual indications for input devices
US7834893B2 (en) Mixed-reality presentation system and control method therefor
US20220129060A1 (en) Three-dimensional object tracking to augment display area
CN109426360A (zh) 显示控制装置、指针显示方法以及非暂时性记录介质
EP2307946B1 (en) Touch interaction with a curved display
JP6539816B2 (ja) 1つのシングル・センシング・システムを使用したマルチ・モーダル・ジェスチャー・ベースの対話型のシステム及び方法
US8988342B2 (en) Display apparatus, remote controlling apparatus and control method thereof
CN104423799B (zh) 接口装置和接口方法
US10599317B2 (en) Information processing apparatus
US20110227947A1 (en) Multi-Touch User Interface Interaction
US11209921B2 (en) Electronic blackboard, storage medium, and information display method
KR20100088239A (ko) 듀얼 터치 스크린을 구비한 휴대 단말기 및 그 사용자 인터페이스 표시 방법
JP6386897B2 (ja) 電子黒板、情報処理プログラムおよび情報処理方法
CN104049779A (zh) 在多个显示器之间实现鼠标指针快速切换
CN109460160A (zh) 显示控制装置、指针的显示方法以及非暂时性记录介质
WO2012001037A1 (en) Display with shared control panel for different input sources
US20140015750A1 (en) Multimode pointing device
US20200285325A1 (en) Detecting tilt of an input device to identify a plane for cursor movement
US20160139723A1 (en) User interface with touch sensor
JP2016181077A (ja) 情報処理装置、情報処理プログラムおよび情報処理方法
JP2015166995A (ja) アプリケーションプログラム

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant