CN108139825B - 电子黑板、存储介质和信息显示方法 - Google Patents

电子黑板、存储介质和信息显示方法 Download PDF

Info

Publication number
CN108139825B
CN108139825B CN201680055185.3A CN201680055185A CN108139825B CN 108139825 B CN108139825 B CN 108139825B CN 201680055185 A CN201680055185 A CN 201680055185A CN 108139825 B CN108139825 B CN 108139825B
Authority
CN
China
Prior art keywords
unit
mode
electronic blackboard
detected
coordinates
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201680055185.3A
Other languages
English (en)
Other versions
CN108139825A (zh
Inventor
河崎佑一
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Ricoh Co Ltd
Original Assignee
Ricoh Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Ricoh Co Ltd filed Critical Ricoh Co Ltd
Publication of CN108139825A publication Critical patent/CN108139825A/zh
Application granted granted Critical
Publication of CN108139825B publication Critical patent/CN108139825B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04845Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/041Indexing scheme relating to G06F3/041 - G06F3/045
    • G06F2203/04104Multi-touch detection in digitiser, i.e. details about the simultaneous detection of a plurality of touching locations, e.g. multiple fingers or pen and finger

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)
  • Drawing Aids And Blackboards (AREA)

Abstract

[问题]提供能够适当地确定操作模式的电子黑板。[技术方案]本发明具有:坐标检测装置,用于检测显示单元中的对象的坐标;数目检测装置,用于基于由坐标检测装置检测到的对象的坐标,检测显示单元中的对象的数目;时间测量装置,用于如果数目检测装置已经检测到第一对象,则开始规定时间的测量;和模式确定装置,如果即使时间测量装置测量了规定时间数目检测装置也未检测到第二个对象,则确定处于基于坐标显示可见信息的第一操作模式,和如果在时间测量单元测量了规定时间之前数目检测单元已经检测到第二个对象,则确定处于接受对于可见信息的操作的第二操作模式。

Description

电子黑板、存储介质和信息显示方法
技术领域
本发明涉及电子黑板、存储介质和信息显示方法。
背景技术
已知具有在大型平板显示器上安装的触摸面板的电子黑板。电子黑板显示扮演黑板的角色的屏幕,经由触摸面板捕获电子笔或者手指等的轨迹,并在屏幕上将轨迹绘制为手写内容。因此,用户可以像黑板那样使用屏幕。此外,通过可以连接到个人计算机的电子黑板,可以显示与个人计算机相同的屏幕,且可以在电子黑板的屏幕上叠加和绘制手写内容,或者可以根据从触摸面板输入到电子黑板的信息来操作个人计算机。
电子黑板具有绘制手写内容的模式(以下称为“手写模式”),以及用于放大或者缩小绘制内容的模式(以下称为“手势模式”)。用户例如可以通过操作菜单按钮在这两个模式之间适当地切换。但是,如果用户需要执行用于切换模式的明确操作,则存在可操作性恶化的危险。
因此,已经设计了用于切换模式而不需要用户的明确操作的技术(例如,参见,专利文献1)。专利文献1公开了当手写轨迹匹配预定图案时接受手势操作的显示装置。
发明内容
技术问题
但是,在现有的电子黑板中,存在的问题在于,存在错误地确定电子黑板的操作模式的风险。首先,在手势模式中,存在用户使用两个手指的操作,且当在屏幕上检测到两个对象(例如,两个手指)时电子黑板确定该模式是手势模式。但是,当存在以两个手指触碰触摸面板的定时之间的时滞时,当检测到第一手指时可能错误地确定该模式是手写模式,且可能绘制手写内容。相反地,当用户在手写模式下以一个手指绘制手写内容,且其他手指等触碰触摸面板时,可能确定电子黑板处于手势模式,且可能接受手势操作。
考虑以上问题,本发明的目的是提供能够适当地确定操作模式的电子黑板。
技术方案
考虑以上问题,本发明是包括配置为显示可见信息的显示单元的电子黑板,该电子黑板包括:坐标检测单元,配置为检测显示单元中对象的坐标;数目检测单元,配置为基于由坐标检测单元检测到的对象的坐标检测显示单元中对象的数目;时间测量单元,配置为响应于由数目检测单元检测到第一个对象开始测量预定时间;和模式确定单元,配置为响应于确定在由时间测量单元完成测量预定时间时未由数目检测单元检测到第二个对象,确定电子黑板处于基于坐标显示可见信息的手写模式,和响应于确定在由时间测量单元完成测量预定时间之前由数目检测单元检测到第二个目的,确定电子黑板处于接受相对于可见信息的操作的手势模式,其中,模式确定单元在确定电子黑板处于手写模式时使用用于手写的坐标,且模式确定单元在确定电子黑板处于手势模式时使用用于接受手势模式的操作的坐标。
技术效果
可以提供能够适当地确定操作模式的电子黑板。
附图说明
图1是图像处理系统的总体配置图;
图2是电子黑板的硬件配置图的示例;
图3是电子黑板的功能框图的示例;
图4是文件处理单元的功能框图的示例;
图5是服务器单元90和客户端单元的功能框图的示例;
图6是图像层的配置图的示例;
图7是图示电子黑板进行的处理的序列图的示例;
图8是图示电子黑板进行的处理的序列图的示例;
图9是用于描述由事件分配单元分配的事件的图的示例;
图10是以时间顺序图示由事件分配单元检测到的事件的示例的流程图;
图11A是图示当检测到触碰事件时由模式确定单元执行的处理的流程图的示例;
图11B是图示当检测到触碰事件时由模式确定单元执行的处理的流程图的另一示例;
图12是图示在超时时由模式确定单元执行的处理的流程图的示例;
图13A是图示当检测到触摸移动事件时由模式确定单元执行的处理的流程图的示例;
图13B是图示当检测到触摸移动事件时由模式确定单元执行的处理的流程图的另一示例;
图14是图示当检测到触摸抬起事件时由模式确定单元执行的处理的流程图的示例;
图15是图示当检测到触碰事件时由模式确定单元执行的处理的流程图的示例(第二实施例);
图16是当检测到触摸移动事件时由笔划处理单元执行的处理的流程图的示例(第二实施例);
图17A是示意性地图示在显示器上显示的菜单的图的示例,其中显示一键式输入按钮和橡皮擦按钮;
图17B是示意性地图示在显示器上显示的菜单的图的示例,其中显示当用户按下该一键式输入按钮时执行的操作;
图17C是示意性地图示在显示器上显示的菜单的图的示例,其中显示当用户按下橡皮擦按钮时执行的操作;
图18是图示当检测到触碰事件时由模式确定单元执行的处理的流程图的示例(第三实施例);
图19是图示在超时时由模式确定单元执行的处理的流程图的示例(第三实施例);
图20是图示当检测到触摸移动事件时由笔划处理单元执行的处理的流程图的示例(第三实施例);和
图21是图示当检测到触摸抬起事件时由模式确定单元执行的处理的流程图的示例(第三实施例);
具体实施方式
在下文中,将参考附图描述用于进行本发明的实施例。
根据本实施例的电子黑板在检测到触摸电子黑板的显示器的手指之后等待预定时间段而不执行处理,并根据在预定时间段内是否检测到第二手指来确定模式是手势模式还是手写模式。
·当在预定时间段内检测到第二组坐标时,确定模式是手势模式。
·当在预定时间段内未检测到第二组坐标时,确定模式是手写模式。
当用户以手势模式操作电子黑板时,认为第二手指将在从第一手指触摸显示器起的预定时间段内触摸电子黑板的显示器。因此,通过等待预定时间段而不执行处理,可以避免当用户意在执行手势操作时绘制手写内容的情形。此外,即使当用户以第一手指手写时第二手指触摸显示器,在经过预定时间段之后也不确定模式是手势模式,因此可以避免在手写模式期间错误地确定模式是手势模式的情形。
<系统概述>
图1是根据本实施例的图像处理系统的总体配置图。在图1中,为了简化描述,仅图示了两个电子黑板2a和2b以及分别与电子黑板相关联的两个电子笔4a和4b等;但是,可以使用三个或更多个电子黑板和电子笔等。如图1所示,图像处理系统1包括多个电子黑板2a和2b、多个电子笔4a和4b、通用串行总线(USB)存储器5a和5b、笔记本个人计算机(PC)6a和6b、TV(视频)会议终端7a和7b以及PC 8。此外,电子黑板2a和2b以及PC 8经由通信网络9可通信地连接。此外,多个电子黑板2a和2b分别提供有显示器3a和3b。
此外,电子黑板2a可以在显示器3a上显示根据由电子笔4a生成的事件(电子笔4a的笔尖端或者电子笔4a的笔底部触碰显示器3a)绘制的图像。注意到,电子黑板2a不仅可以基于由电子笔4a生成的事件,而且可以基于由用户的手Ha等生成的事件(比如放大、缩小和翻页等的手势),改变在显示器3a上显示的图像。
此外,USB存储器5a可以连接到电子黑板2a。电子黑板2a可以从USB存储器5a读取比如便携式文档格式(PDF)文件的电子文件,且电子黑板2a可以在USB存储器5a中记录电子文件。此外,笔记本PC 6a经由能够根据比如DisplayPort、数字视觉接口(DVI)、高清多媒体接口(HDMI)(注册商标)和视频图形阵列(VGA)之类的标准通信的线缆10a1连接到电子黑板2a。电子黑板2a生成根据触碰显示器3a的事件,并类似于来自比如鼠标或者键盘等的输入装置的事件,将指示生成的事件的事件信息发送到笔记本PC 6a。类似的,TV(视频)会议终端7a经由能够根据以上标准通信的线缆10a2连接到电子黑板2a。注意到,笔记本PC 6a和TV(视频)会议终端7a可以通过符合各种无线通信协议(比如蓝牙(注册商标))的无线通信与电子黑板2a通信。
另一方面,在安装电子黑板2b的另一地点,类似于上述,使用具有显示器3b、电子笔4b、USB存储器5b、笔记本PC 6b、TV(视频)会议终端7b、线缆10b1和线缆10b2的电子黑板2b。此外,也可以基于由用户的手Hb等生成的事件改变在显示器3b上显示的图像。
因此,在一个地点处的电子黑板2a的显示器3a上绘制的图像也显示在另一地点处的电子黑板2b的显示器3b上。相反地,在该另一地点处的电子黑板2b的另一显示器3b上绘制的图像也显示在一个地点处的电子黑板2a的显示器3a上。如上所述,图像处理系统1可以执行在远程位置处共享同一图像的远程共享处理,因此图像处理系统1在用于在远程位置处举行的会议等时是高度方便的。
注意到,在下面的描述中,当在多个电子黑板之中指示任何电子黑板时,电子黑板被称为“电子黑板2”。当在多个显示器之中指示任何显示器时,显示器被称为“显示器3”。当在多个电子笔之中指示任何电子笔时,电子笔被称为“电子笔4”。当在多个USB存储器之中指示任何USB存储器时,USB存储器被称为“USB存储器5”。当在多个笔记本PC之中指示任何笔记本PC时,笔记本PC被称为“笔记本PC 6”。当在多个TV(视频)会议终端之中指示任何TV(视频)会议终端时,TV(视频)会议终端被称为“TV(视频)会议终端7”。此外,当在多个用户的手之中指示任何手时,手被称为“手H”。当在多个线缆之中指示任何线缆时,线缆被称为“线缆10”。
此外,在本实施例中,将描述电子黑板作为图像处理设备的示例;但是,图像处理设备不限于此。图像处理设备的其他示例是电子布告板(数字招牌)、体育和天气预报等中使用的广告牌(telestrator)或者远程图像(视频)诊断装置等。此外,虽然将描述笔记本PC6作为信息处理终端的示例;但是,信息处理终端不限于此。信息处理终端的其他示例是能够提供图像帧的终端,比如台式PC、平板PC、个人数字助理(PDA)、数码摄像机、数码相机和游戏主机。此外,通信网络包括因特网、局域网(LAN)和移动电话通信网络等。此外,在本实施例中,虽然描述USB存储器作为记录介质的示例;但是,记录介质不限于此。记录介质的其他示例是各种记录介质,比如安全数字(SD)卡。
<电子黑板的硬件配置>
接下来,参考图2,将描述本实施例的电子黑板的硬件配置。注意到,图2是电子黑板的硬件配置图。
如图2所示,电子黑板2包括用于控制整个电子黑板2的操作的中央处理单元(CPU)101、存储比如初始程序装入程序(IPL)之类的用于驱动CPU 101的程序的只读存储器(ROM)102、用作CPU 101的工作区的随机存取存储器(RAM)103、用于存储比如用于电子黑板2的程序的各种数据的固态驱动器(SSD)104、用于控制与通信网络9的通信的网络控制器105和用于控制与USB存储器5的通信的外部存储控制器106。
此外,电子黑板2包括:捕获装置111,用于在笔记本PC 6的显示器上将视频信息显示为静止图像或者运动图像;图形处理单元(GPU)112,具体地用于图形;和显示控制器113,用于实现控制和管理屏幕显示以用于从GPU向显示器3和TV(视频)会议终端7输出输出图像。
电子黑板2进一步包括:传感器控制器114,用于控制接触传感器115的处理;以及接触传感器115,用于检测电子笔4或者用户的手H已经触摸了显示器3。接触传感器115执行坐标的输入和通过红外线阻挡方法执行坐标的检测。在输入坐标和检测坐标的方法中,在显示器3的两个上端部安装的两个光接收/发射装置发射平行于显示器3的多条红外线,红外线由在显示器3周围布置的反射部件反射,且接收元件接收沿着与已经发射的光的光路相同的光路返回的红外线。接触传感器115将由两个光发射/接收装置发射且由对象阻挡的红外线的标识(ID)输出到传感器控制器114,且传感器控制器114识别作为对象的接触位置的坐标位置。注意到,所有以下ID是标识信息的示例。对象的示例是手指和电子笔4;但是,对象可以是阻挡光的任意对象。此外,对象不限于不透明对象;对象可以由比如玻璃和塑料的透明或者半透明材料制成。此外,接触传感器115不限于红外线阻挡方法,而是可以是各种检测方式,比如通过检测静电容的改变来识别接触位置的电容类型触摸面板、通过两个相对的电阻膜的电压的改变来识别接触位置的电阻膜类型触摸面板和用于检测由接触对象与显示单元的接触引起的电磁感应以识别接触位置的电磁感应类型触摸面板。
此外,电子黑板2提供有电子笔控制器116。电子笔控制器116与电子笔4通信以确定电子笔4的笔尖端或者笔底部是否已经触碰显示器3。注意到,电子笔控制器116不仅可以确定电子笔4的笔尖端或者笔底部是否已经触碰显示器3,而且还可以确定由用户握住的电子笔4的部分或者电子笔的其他部分是否已经触碰显示器3。
此外,电子黑板2包括用于电气地连接CPU 101、ROM 102、RAM 103、SSD 104、网络控制器105、外部存储控制器106、捕获装置111、GPU 112、传感器控制器114和电子笔控制器116的比如地址总线和数据总线等的总线120,如图2所示。
注意到,用于电子黑板2的程序可以在记录在比如致密盘只读存储器(CD-ROM)的计算机可读记录介质中时分发。
<电子黑板的功能配置>
接下来,将参考图3到图6描述电子黑板的功能配置。注意到,首先,将参考图3描述电子黑板2的总体功能配置。图3是电子黑板的功能框图。
根据图2中图示的硬件配置和程序,电子黑板2具有图3中图示的功能配置。电子黑板2可以是用于最初开始远程共享处理的“主机装置”,且电子黑板2也可以是之后参与已经开始的远程共享处理的“参与装置”。此外,电子黑板2大致地由客户端单元20和服务器单元90两者形成。客户端单元20和服务器单元90是可以在电子黑板2的一个外壳中实现的功能。此外,当电子黑板2成为主机装置时,在该电子黑板2中实现客户端单元20和服务器单元90。当电子黑板2成为参与装置时,在该电子黑板2中实现客户端单元20;但是,不实现服务器单元90。也就是,在图1中,当电子黑板2a是主机装置且电子黑板2b是参与装置时,电子黑板2a的客户端单元20经由在同一电子黑板2a中实现的服务器单元90与另一电子黑板2b的客户端单元20通信。在另一侧,电子黑板2b的客户端单元20经由在另一电子黑板2a中实现的服务器单元90与另一电子黑板2a的客户端单元20通信。
[客户端单元20的功能配置]
接下来,将主要参考图3到图5描述客户端单元20的功能配置。客户端单元20包括视频获取单元21、坐标检测单元22、自动调节单元23、接触检测单元24、事件分配单元25、操作处理单元26、手势处理单元27、视频叠加单元28、图像处理单元30和通信控制单元60。
在这些元件之中,视频获取单元21获取连接到线缆10的视频输出装置的输出图像。在从视频输出装置接收图像信号时,视频获取单元21分析图像信号以导出作为由图像信号形成的视频输出装置的显示图像的图像帧的分辨率,和导出比如更新图像帧的频率的图像信息,并将该信息输出到图像获取单元31。
坐标检测单元22检测在显示器3上由用户引起的事件(比如用户的手H触碰显示器3的动作)的坐标位置。坐标检测单元22还检测触碰部分的面积。
当激活电子黑板2时激活自动调节单元23,且自动调节单元23调整当由通过光学传感器方法检测坐标的坐标检测单元22处理传感器相机的图像时使用的参数,以使得坐标检测单元22可以输出适当的值。
接触检测单元24检测由用户引起的事件(电子笔4的笔尖端或者电子笔4的笔底部按压在(触碰)显示器3上的动作)。
事件分配单元25将由坐标检测单元22检测到的事件的坐标位置和由接触检测单元24检测到的检测结果分配给包括笔划绘制、UI操作和手势操作的事件中的每一个。这里,"笔划绘制"是当在显示器3上显示将在后面描述和图6中图示的笔划图像(B)时用户在显示器3上按下电子笔4,在按压状态下移动电子笔4,并最终从显示器3释放电子笔4的事件。通过该笔划绘制,例如,在显示器3上绘制字母“S”和“T”等。注意到,该"笔划绘制"不仅包括绘制图像,而且包括擦除已经绘制的图像或者编辑绘制的图像的事件。
"UI操作"是当在显示器3上显示将在后面描述的和图6中图示的UI图像(A)时用户以电子笔4或者手H按压预定位置的事件。通过该UI操作,例如,设置该电子笔4绘制的线的颜色和宽度。
"手势操作"是当在显示器3上显示将在后面描述的和图6中图示的笔划图像(B)时,用户以手H触碰显示器3或者在显示器3上移动手H的事件。通过该手势操作,例如,可以通过在用户以手H触碰显示器3的同时移动手H,来放大(或者缩小)图像、改变显示区域或者切换页面等。
操作处理单元26根据已经发生由事件分配单元25确定为UI操作的事件之中的事件的UI的元件执行各种操作。UI的元件的示例包括按钮、列表、复选框和文本框。手势处理单元27执行与由事件分配单元25确定为手势操作的事件对应的操作。
视频叠加单元28在显示单元29上显示由之后描述的显示叠加单元36叠加的图像作为视频。显示单元29具有由显示器3实现的显示功能。此外,视频叠加单元28执行画中画操作,以在来自视频输出装置(笔记本PC 6等)的视频上叠加从另一视频输出装置(比如TV(视频)会议终端7)发送的视频。此外,视频叠加单元28执行切换操作,以使得在整个显示单元29上显示通过画中画操作获得且在显示单元29的一部分上显示的视频。
图像处理单元30执行叠加各个图像层等的处理,如图6所示。图像处理单元30包括图像获取单元31、笔划处理单元32、UI图像生成单元33、背景生成单元34、布局管理单元35、显示叠加单元36、页面处理单元37、文件处理单元40、页面数据存储单元300和远程许可管理表310。
在这些元件之中,图像获取单元31从由视频获取单元21获取的视频获取每个帧作为图像。图像获取单元31将该图像的数据输出到页面处理单元37。该图像对应于图6中图示的来自视频输出装置(笔记本PC 6等)的输出图像(C)。
笔划处理单元32基于与由事件分配单元25分配的笔划绘制有关的事件,绘制图像,擦除绘制的图像和编辑绘制的图像。由笔划绘制创建的图像对应于图6中图示的笔划图像(B)。此外,基于笔划绘制来绘制、擦除或者编辑图像的结果作为将在之后描述的操作数据存储在操作数据存储单元840中。
UI图像生成单元33生成在电子黑板2中预先设置的用户界面(UI)图像。该UI图像对应于图6中图示的UI图像(A)。
背景生成单元34从页面处理单元37接收由页面处理单元37从页面数据存储单元300读取的页面数据的媒体数据。背景生成单元34将所接收的媒体数据输出到显示叠加单元36。此外,基于该媒体数据的图像对应于图6中图示的背景图像(D)。背景图像(D)的图案是明文或者网格显示等。
布局管理单元35管理关于显示叠加单元36的、指示从图像获取单元31、笔划处理单元32和UI图像生成单元33(或者背景生成单元34)输出的每个图像的布局的布局信息。因此,布局管理单元35能够将关于在UI图像(A)和背景图像(D)中显示输出图像(C)和笔划图像(B)的位置或者不显示输出图像(C)或者笔划图像(B)的指令发送到显示叠加单元36。
基于从布局管理单元35输出的布局信息,显示叠加单元36布置从图像获取单元31、笔划处理单元32和UI图像生成单元33(背景生成单元34)输出的每个图像。
页面处理单元37将笔划图像(B)的数据和输出图像(C)的数据集成到单条页面数据中,并在页面数据存储单元300中存储页面数据。笔划图像(B)的数据形成页面数据的一部分,作为由图6中图示的笔划布置数据ID指示的笔划布置数据(多条笔划数据)。输出图像(C)的数据形成页面数据的一部分,作为由图6中图示的媒体数据ID指示的媒体数据。然后,当从页面数据存储单元300读取该媒体数据时,将媒体数据处理为背景图像(D)的数据。
此外,页面处理单元37将临时存储的页面数据的媒体数据经由背景生成单元34发送到显示叠加单元36。因此,视频叠加单元28可以在显示器3上重新显示背景图像(D)。此外,页面处理单元37可以将页面数据的笔划布置数据(多条笔划数据)返回到笔划处理单元32,以使得可以重新编辑笔划。此外,页面处理单元37可以擦除或者复制页面数据。
也就是,在当页面处理单元37在页面数据存储单元300中存储页面数据时的时间点在显示器3上显示的输出图像(C)的数据被临时地存储在页面数据存储单元300中,且随后,当从页面数据存储单元300读取时,读取该数据作为指示背景图像(D)的媒体数据。然后,页面处理单元37将指示从页面数据存储单元300读取的页面数据之中的笔划图像(B)的笔划布置数据输出到笔划处理单元32。此外,页面处理单元37将指示从页面数据存储单元300读取的页面数据之中的背景图像(D)的媒体数据输出到背景生成单元34。
显示叠加单元36根据由布局管理单元35指定的布局,叠加来自图像获取单元31的输出图像(C)、来自笔划处理单元32的笔划图像(B)、来自UI图像生成单元33的UI图像(A)和来自背景生成单元34的背景图像(D)。因此,如图6所示,即使图像彼此重叠,也可以以用户可以看到图像的次序叠加UI图像(A)、笔划图像(B)、输出图像(C)和背景图像(D)的各层。
此外,显示叠加单元36可以在要与图像(A)和图像(B)排他地重叠的图6中图示的图像(C)和图像(D)之间切换。例如,在最初显示图像(A)、图像(B)和图像(C)的同时拔出电子黑板2和视频输出装置(笔记本PC 6等)之间的线缆10的情况下,根据布局管理单元35的指定,可以从叠加目标中排除图像(C)且可以显示图像(D)。在该情况下,显示叠加单元36还执行放大显示、缩小显示和移动显示区域的处理。
页面数据存储单元300存储如在表1中指示的页面数据。
【表1】
Figure GDA0001604944090000111
表1概念地指示页面数据。页面数据是用于在显示器3上显示的一个页面(笔划布置数据(多条笔划数据)和媒体数据)的数据。注意到,存在页面数据中包括的许多类型的参数,因此,这里,将在表1到表4中分开地描述页面数据的内容。
如在表1中指示的,页面数据包括用于标识各页面中的任何一个页面的页面数据ID;指示已经开始页面的显示时的时间的开始时间;指示不再执行由笔划和手势等重写页面的内容时的时间的结束时间;用于标识由电子笔4或者用户的手H绘制的笔划生成的笔划布置数据的笔划布置数据ID;和用于标识彼此相关联地存储的媒体数据的媒体数据ID。笔划布置数据是用于在显示器3上显示图6中图示的笔划图像(B)的数据。媒体数据是用于在显示器3上显示图6中图示的背景图像(D)的数据。
根据这种页面数据,例如,当用户以电子笔4绘制字母“S”时,该字母由一个笔划所写,因此由一个笔划数据ID指示一个字母[S]。但是,当用户以电子笔4绘制字母“T”时,该字母由两笔划所写,因此由两个笔划数据ID指示一个字母“T”。
【表2】
Figure GDA0001604944090000121
此外,笔划布置数据指示如表2中指示的详细信息。表2概念地指示笔划布置数据。如表2中指示的,一条笔划布置数据由多条笔划数据表示。此外,一条笔划数据包括用于标识笔划数据的笔划数据ID、指示开始写一个笔划的时间的开始时间、指示结束写一个笔划的时间的结束时间、笔划的颜色、笔划的宽度和用于标识笔划的相交点布置的坐标布置数据ID。
【表3】
Figure GDA0001604944090000122
此外,坐标阵列数据指示如表3中指示的详细信息。表3概念地指示坐标布置数据。如表3中指示的,坐标布置数据指示包括在显示器3上的一个点(X坐标值和Y坐标值)的信息、从笔划的开始时间到通过该一点的时间的差值的时间(毫秒(ms)和在该一个点的电子笔4的笔压力。也就是,表3中指示的各点的集合由表2中指示的一条坐标布置数据指示。例如,当用户以电子笔4绘制字母“S”时,该字母由单个笔划所写,但是笔划在结束绘制字母“S”之前通过多个相交点,因此坐标阵列数据指示多个相交点的信息。
此外,在表1中指示的页面数据中的媒体数据指示如表4中指示的详细信息。
【表4】
Figure GDA0001604944090000131
表4概念地指示媒体数据。如在表4中指示的,在媒体数据中,在表1中指示的页面数据中的媒体数据ID、媒体数据的数据类型、当已经从页面处理单元37在页面数据存储单元300中存储页面数据时的记录时间、根据页面数据在显示器3上显示的图像的位置(X坐标值和Y坐标值)以及图像的大小(宽度和高度)和指示媒体数据的内容的数据彼此相关联。在该信息中,根据页面数据在显示器3上显示的图像的位置指示假定显示器3的左上端的坐标是(X坐标值,Y坐标值)=(0,0),根据页面数据显示的图像的左上端的位置。
此外,再次参考图3,将继续描述。远程许可管理表310管理执行远程共享处理所需的许可数据。在远程许可管理表310中,如表5指示的,彼此相关联地管理电子黑板2的产品ID、用于验证的许可ID和许可的到期日期。
【表5】
Figure GDA0001604944090000141
(文件处理单元40的功能配置)
接下来,参考图4,将描述图3中图示的文件处理单元40的功能配置。注意到,图4是文件处理单元的功能框图。文件处理单元40包括恢复处理单元41、文件输入单元42a、文件输出单元42b、文件转换单元43、文件发送单元44、地址簿输入单元45、备份处理单元46、备份输出单元47、设置管理单元48、设置文件输入单元49a、设置文件输出单元49b和连接目的地输入单元50。此外、文件处理单元40包括地址簿管理表410、备份数据存储单元420、设置文件存储单元430和连接目的地管理表440。
在这些元件之中,恢复处理单元41检测在电子黑板2异常地结束之后的异常终止,并恢复未保存的页面数据。例如,在正常终止的情况下,经由文件处理单元40将页面数据作为PDF文件记录在USB存储器5中。但是,在比如电源断电时的异常终止的情况下,页面数据保持记录在页面数据存储单元300中。因此,当再次接通电源时,恢复处理单元41通过从页面数据存储单元300读取页面数据来恢复页面数据。
文件输入单元42a从USB存储器5读取PDF文件,并在页面数据存储单元300中将每个页面存储为页面数据。文件转换单元43将页面数据存储单元300中存储的页面数据转换为PDF格式文件。
文件输出单元42b在USB存储器5中记录由文件转换单元43输出的PDF文件。
文件发送单元44将文件转换单元43生成的PDF文件附于电子邮件,并发送该电子邮件。通过使得显示叠加单元36在显示器3上显示地址簿管理表410的内容,和使得文件发送单元44接受当用户操作比如触摸面板的输入装置时做出的目的地的选择,来确定文件的传输目的地。在地址簿管理表410中,如表6中指示的,彼此相关联地管理目的地的名称和目的地的电子邮件地址。
【表6】
Figure GDA0001604944090000151
此外,当用户操作比如触摸面板的输入装置时,文件发送单元44可以接受作为目的地的邮件地址的输入。
地址簿输入单元45从USB存储器5读取电子邮件地址的列表文件,并在地址簿管理表410中管理该列表文件。
备份处理单元46通过在备份数据存储单元420中存储这些文件,来备份由文件输出单元42b输出的文件和由文件发送单元44发送的文件。如果用户不设置备份,则不执行备份处理。备份数据如表7中指示的以PDF格式存储。
【表7】
Figure GDA0001604944090000152
备份输出单元47在USB存储器5中存储备份文件。当存储文件时,通过比如触摸面板的输入装置的用户操作,为了安全性的目的输入密码。
设置管理单元48在设置文件存储单元430中存储和读取电子黑板2的各种设置信息以管理该信息。各种设置信息的示例包括网络设置、日期和时间设置、区域和语言设置、邮件服务器设置、地址簿设置、连接目的地列表设置和与备份有关的设置。注意到,网络设置例如是电子黑板2的IP地址的设置、网掩码的设置、缺省网关的设置和域名系统(DNS)的设置等。
设置文件输出单元49b在USB存储器5中记录电子黑板2的各种设置信息作为设置文件。注意到,由于安全性,设置文件的内容不能由用户查看。
设置文件输入单元49a读取USB存储器5中存储的设置文件,并将各种设置信息应用于电子黑板的各种设置。
连接目的地输入单元50从USB存储器5读取远程共享处理的连接目的地IP地址的列表文件,并在连接目的地管理表440中管理该列表文件。在表8中指示连接目的地管理表440的示例。
【表8】
Figure GDA0001604944090000161
预先管理连接目的地管理表440以减少当电子黑板2是参与远程共享处理的参与装置时,参与装置的用户不得不输入起主机装置的作用的电子黑板的IP地址的麻烦。在连接目的地管理表440中,彼此相关联地管理作为可以参与的主机装置的电子黑板2安装的地点的名称以及作为主机装置的电子黑板2的IP地址。
注意到,可以不包括连接目的地管理表440。但是,在该情况下,参与装置的用户需要通过使用比如触摸面板的输入装置来输入主机装置的IP地址,以开始与主机装置的远程请求处理。因此,参与装置的用户通过电话或者通过电子邮件等从主机装置的用户获取主机装置的IP地址。
(通信控制单元60的功能配置)
接下来,参考图5,将描述通信控制单元60的功能配置。图5是服务器单元90和客户端单元20的功能框图的示例。通信控制单元60实现经由通信网络9与另一个电子黑板2的通信的控制,和与服务器单元90中的之后描述的通信控制单元70的通信的控制。因此,通信控制单元60包括远程开始处理单元61、远程参与处理单元62、远程图像发送单元63、远程图像接收单元64、远程操作发送单元65、远程操作接收单元66和参与地点管理表610。
在这些元件之中,远程开始处理单元61将新开始远程共享处理的请求发送到同一电子黑板2的服务器单元90,并从该服务器单元90接收请求结果。在该情况下,远程开始处理单元61参考远程许可管理表310,且如果管理许可信息(产品ID、许可ID和到期日期),则远程开始处理单元61能够做出开始远程共享处理的请求。但是,当未管理许可信息时,远程开始处理单元61不能做出开始远程共享处理的请求。
参与地点管理表610是用于当电子黑板是主机装置时,管理作为当前参与远程共享处理的参与装置的电子黑板的表。在表9中指示参与地点管理表610的示例。
【表9】
Figure GDA0001604944090000181
在参与地点管理表610中,彼此相关联地管理安装参与电子黑板2的地点的名称以及参与电子黑板2的IP地址。
远程参与处理单元62经由通信网络9将参与远程共享处理的参与请求发送到作为已经开始远程共享处理的主机装置的电子黑板2的服务器单元90中的远程连接请求接收单元71。在该情况下,远程参与处理单元62也参考远程许可管理表310。此外,当远程参与处理单元62参与已经开始的远程共享处理时,远程参与处理单元62参考连接目的地管理表440并获取参与目的地的电子黑板2的IP地址。注意到,远程参与处理单元62可以不参考连接目的地管理表,且可以通过比如触摸面板的输入装置的用户操作来输入参与目的地的电子黑板2的IP地址。
远程图像发送单元63将经由图像获取单元31从视频获取单元21发送的输出图像(C)发送到服务器单元90。
远程图像接收单元64从服务器单元90接收从连接到另一电子黑板2的视频输出装置发送的图像数据,并将该图像数据输出到显示叠加单元36以使能远程共享处理。
远程操作发送单元65将远程共享处理所需的各种操作数据发送到服务器单元90。各种操作数据的示例包括笔划的添加、擦除笔划、笔划的编辑(放大、缩小和移动)、页面数据的存储、页面数据的创建、页面数据的复制、擦除页面数据和与切换所显示的页面有关的数据等。此外,远程操作接收单元66从服务器单元90接收在另一电子黑板2输入的操作数据,并输出操作数据到图像处理单元30,由此执行远程共享处理。
[服务器单元的功能配置]
接下来,将参考图5描述服务器单元90的功能配置。在每个电子黑板2中提供服务器单元90,且任意电子黑板2可以用作服务器单元。因此,服务器单元90包括通信控制单元70和数据管理单元80。
(通信控制单元70的功能配置)
接下来,将参考图5描述通信控制单元70的功能配置。
通信控制单元70控制同一电子黑板2中的客户端单元20中的通信控制单元70和另一电子黑板2中的客户端单元20中的通信控制单元70之间经由通信网络9的通信。数据管理单元80管理操作数据和图像数据等。
更具体地,通信控制单元70包括远程连接请求接收单元71、远程连接结果发送单元72、远程图像接收单元73、远程图像发送单元74、远程操作接收单元75和远程操作发送单元76。
在这些元件之中,远程连接请求接收单元71从远程开始处理单元61接收用于开始远程共享处理的开始请求,并从远程参与处理单元62接收用于参与远程共享处理的参与请求。远程连接结果发送单元72将远程共享处理的开始请求的结果发送到远程开始处理单元61,并将用于远程共享处理的参与请求的结果发送到远程参与处理单元62。
远程图像接收单元73从远程图像发送单元63接收图像数据(输出图像(C)的数据),并将该图像数据发送到将在后面描述的远程图像处理单元82。远程图像发送单元74从远程图像处理单元82接收图像数据,并将该图像数据发送到远程图像接收单元64。
远程操作接收单元75从远程操作发送单元65接收操作数据(比如笔划图像(B)的数据),并将操作数据发送到将在后面描述的远程操作处理单元83。远程操作发送单元76从远程操作处理单元83接收操作数据,并将操作数据发送到远程操作接收单元66。
(数据管理单元的功能配置)
接下来,参考图5,将描述数据管理单元80的功能配置。数据管理单元80包括远程连接处理单元81、远程图像处理单元82、远程操作处理单元83、操作组合处理单元84和页面处理单元85。此外,数据管理单元80包括密码管理单元810、参与地点管理表820、图像数据存储单元830、操作数据存储单元840和页面数据存储单元850。
在这些元件之中,远程连接处理单元81开始远程共享处理并结束远程共享处理。此外,基于由远程连接请求接收单元71从远程开始处理单元61与远程共享处理开始请求一起接收到的许可信息,或者由远程连接请求接收单元71从远程参与处理单元62与用于参与远程共享处理的参与请求一起接收到的许可信息,远程连接处理单元81确认是否存在许可和当前时间是否在许可时段内。此外,远程连接处理单元81确认来自作为客户端单元的其它电子黑板2的参与请求是否超过可以参与的参加者的预定数目。
此外,远程连接处理单元81确定当从另一电子黑板2做出用于参与远程共享处理的参与请求时发送的密码是否与由密码管理单元810管理的密码相同,如果密码相同,则远程连接处理单元81允许远程共享处理的参与。注意到,该密码在开始新远程共享处理时由远程连接处理单元81发出,且从用作主机装置的电子黑板2的用户向作为尝试参与远程共享处理的参与装置的电子黑板2的用户通过电话或者电子邮件等通知该密码。因此,通过以比如触摸面板的输入装置向参与装置输入密码以做出参与请求,将允许正在尝试参与远程共享处理的参与装置的用户参与。注意到,当用户的可用性优先于安全性时,可以省略密码的确认,且仅检查许可状态。
此外,当电子黑板2是主机装置时,远程连接处理单元81在服务器单元90中的参与地点管理表820中存储经由通信网络9从参与装置的远程参与处理单元62发送的参与请求中包括的参与地点信息。然后,远程连接处理单元81读取参与地点管理表820中存储的远程地点信息,并将该远程地点信息发送到远程连接结果发送单元72。远程连接结果发送单元72将远程地点信息发送到同一主机装置的客户端单元20中的远程开始处理单元61。远程开始处理单元61在参与地点管理表610中存储远程地点信息。因此,在主机装置中,客户端单元20和服务器单元90两者管理远程地点信息。
远程图像处理单元82从连接到参与远程共享处理的每个电子黑板的客户端单元(包括作为主机装置的自己的电子黑板2的客户端单元20)的视频输出装置(笔记本PC 6等)接收图像数据(输出图像(C)),并在图像数据存储单元830中存储图像数据。此外,远程图像处理单元82根据到达作为主机装置的自己的电子黑板2的服务器单元90的时间次序,确定显示要经历远程共享处理的图像数据的次序。此外,远程图像处理单元82参考参与地点管理表820,并以如上所述确定的次序经由通信控制单元70(远程图像发送单元74)将图像数据发送到参与远程共享处理的全部电子黑板2的客户端单元20(包括用作主机装置的自己的电子黑板的客户端单元)。
远程操作处理单元83接收在参与远程共享处理的每个电子黑板2的客户端单元(包括作为主机装置的自己的电子黑板的客户端单元)处绘制的比如笔划图像(笔划图像(B)等)等的各种操作数据,并以到达用作主机装置的自己的电子黑板2的服务器单元90的时间次序,确定将要经历远程共享处理的图像的显示顺序。注意到,各种操作数据与上述的各种操作数据相同。此外,远程操作处理单元83参考参与地点管理表820,并将操作数据发送到参与远程共享处理的全部电子黑板2的客户端单元20(包括作为主机装置的自己的电子黑板的客户端单元)。
操作组合处理单元84组合从远程操作处理单元83输出的各个电子黑板2的各条操作数据,并在操作数据存储单元840中存储作为该组合的结果的操作数据,且还将操作数据返回到远程操作处理单元83。该操作数据从远程操作发送单元76发送到作为主机装置的电子黑板的客户端单元和作为参与装置的各个电子黑板的客户端单元,以使得在每个电子黑板2上显示与相同操作数据有关的图像。在表10中指示操作数据的示例。
【表10】
Figure GDA0001604944090000221
如在表10中指示的,操作数据包括彼此相关联地管理的序列(SEQ)、操作数据的操作名称、作为操作数据的传输源的电子黑板2的客户端单元(服务器单元)的IP地址和端口号、作为操作数据的传输目的地的电子黑板2的客户端单元(服务器单元)的IP地址和端口号、操作数据的操作类型、操作数据的操作目标和指示操作数据的内容的数据。例如,SEQ 1指示当已经在用作主机装置的电子黑板(IP地址:192.0.0.1)的客户端单元(端口号:50001)处绘制笔划时,操作数据已经发送到作为同一主机装置的电子黑板2(IP地址:192.0.0.1)的服务器单元(端口号:50000)。在该情况下,操作类型是“笔划(STROKE)”,操作目标是页面数据ID“p005”,且指示操作数据的内容的数据是指示笔划的数据。此外,SEQ2指示操作数据已经从用作主机装置的电子黑板2(IP地址:192.0.0.1)的服务器单元(端口号:50000),发送到作为参与装置的另一电子黑板2(IP地址:192.0.0.1)的客户端单元(端口号:50001)。
注意到,操作组合处理单元84以操作数据输入到操作组合处理单元84的次序执行组合,因此如果通信网络9未阻塞,则以由各个电子黑板2的用户绘制笔划的次序,在参与远程共享处理的所有电子黑板2的显示器3上显示笔划图像(B)。
页面处理单元85具有与客户端单元20的图像处理单元30中的页面处理单元37的功能类似的功能,且在服务器单元30中,表1到表3中指示的页面数据也存储在页面数据存储单元850中。注意到,页面数据存储单元850具有与图像处理单元30中的页面数据存储单元300相同的内容,因此省略其描述。
<根据实施例的处理或者操作>
随后,参考图7和图8,将描述根据本实施例的处理或操作。注意到,图7和图8是图示每个电子黑板的处理的序列图。在图7和图8中图示的实施例中,给出电子黑板2a扮演主管远程共享处理的主机装置(服务器单元和客户端单元)的角色,且电子黑板2b和2c扮演参与远程共享处理的参与装置(客户端单元)的角色的情况的描述。此外,这里,显示器3a、3b和3c分别连接到电子黑板2a、2b和2c,且笔记本PC 6a、6b和6c也分别连接到电子黑板2a、2b和2c。此外,电子笔4a、4b和4c分别用在电子黑板2a、2b和2c。
(参与处理)
首先,将参考图7描述电子黑板2b和2c参与远程共享处理的处理。
当用户开启电子黑板2a的电源开关时,激活电子黑板2a的客户端单元20。然后,当用户以比如触摸面板的输入装置执行激活服务器单元90的操作时,客户端单元20的远程开始处理单元61将开始服务器单元90的处理的指令输出到同一电子黑板2a的服务器单元90的远程连接请求接收单元71。因此,在电子黑板2a中,不仅客户端单元20而且服务器单元90也可以开始各种处理(步骤S21)。
接下来,电子黑板2a的客户端单元20中的UI图像生成单元33生成用于建立与电子黑板2a的连接的连接信息,且视频叠加单元28在显示器3a上显示已经经由显示叠加单元36从UI图像生成单元33获得的连接信息(步骤S22)。
该连接信息包括主机装置的IP地址和对于本远程共享处理生成的密码。在该情况下,密码管理单元810中存储的密码由图5中图示的远程连接处理单元81读取,且被顺序地发送到远程连接结果发送单元72和远程开始处理单元61。此外,该密码从包括远程开始处理单元61的通信控制单元60发送到图5中图示的图像处理单元30,且最终输入到UI图像生成单元33。因此,连接信息将包括密码。然后,连接信息由电子黑板2a的用户通过电话或者电子邮件发送到电子黑板2b和2c的用户。注意到,当存在连接目的地管理表440时,即使连接信息不包括主机装置的IP地址,参与装置可以做出参与请求。
接下来,在电子黑板2b和2c中,当接受连接信息的输入时,根据比如触摸面板的输入装置的每个用户的操作,每个电子黑板2b和2c的客户端单元20中的远程参与处理单元62基于连接信息中的IP地址,通过经由通信网络9将密码发送到电子黑板2a的服务器单元90中的通信控制单元70来做出参与请求(步骤S23和S24)。因此,通信控制单元70的远程连接请求接收单元71从电子黑板2b和2c中的每一个接收参与请求(包括密码),并输出密码到远程连接处理单元81。
接下来,远程连接处理单元81通过使用由密码管理单元810管理的密码,验证从每个电子黑板2b和2c接收到的密码(步骤S25)。
然后,远程连接结果发送单元72将指示验证结果的报告发送到每个电子黑板2b和2c的客户端单元20(步骤S26和S27)。
当通过在步骤S25中的验证而确定电子黑板2b和2c中的每一个是合法的电子黑板时,在用作主机装置的电子黑板2a和用作参与装置的电子黑板2b和2c之间建立远程共享处理的通信,且每个电子黑板2b和2c的客户端单元20中的远程参与处理单元62使能与其它电子黑板的远程共享处理的开始(步骤S28和S29)。
(输出图像的显示)
接下来,将参考图7描述远程共享处理中显示输出图像(C)的处理。
首先,电子黑板2b在显示器3b上显示输出图像(C)(步骤S30)。具体地,电子黑板2b的图像获取单元31经由视频获取单元21从笔记本PC 6b接收在笔记本PC 6b上显示的输出图像(C)的数据,并将输出图像(C)的数据经由显示叠加单元36和视频叠加单元28发送到显示器3b,然后显示器3b显示输出图像(C)。
接下来,包括电子黑板2b的图像获取单元31的图像处理单元30将输出图像(C)的数据发送到远程图像发送单元63,以使得包括远程图像发送单元63的通信控制单元60将输出图像(C)的数据经由通信网络9发送到用作主机装置的电子黑板2a的通信控制单元70(步骤S31)。因此,电子黑板2a的远程图像接收单元73接收输出图像(C)的数据,并将该数据输出到远程图像处理单元82,以使得远程图像处理单元82在图像数据存储单元830中存储输出图像(C)的数据。
接下来,用作主机装置的电子黑板2a在显示器3a上显示输出图像(C)(步骤S32)。具体地,电子黑板2a的远程图像处理单元82将从远程图像接收单元73接收到的输出图像(C)的数据输出到远程图像发送单元74。远程图像发送单元74将输出图像(C)的数据输出到作为同一主机装置的电子黑板2a的客户端单元20中的远程图像接收单元64。远程图像接收单元64将输出图像(C)的数据输出到显示叠加单元36。显示叠加单元36将输出图像(C)的数据输出到视频叠加单元28。视频叠加单元28将输出图像(C)的数据输出到显示器3a。因此,显示器3a显示输出图像(C)。
接下来,用作主机装置的电子黑板2a的服务器单元90中的包括远程图像发送单元74的通信控制单元70将输出图像(C)的数据经由通信网络9发送到除了作为输出图像(C)的数据的传输源的电子黑板2b之外的电子黑板2c的通信控制单元60(步骤S33)。因此,作为参与装置的电子黑板2c的远程图像接收单元64接收输出图像(C)的数据。
接下来,电子黑板2c在显示器3c上显示输出图像(C)(步骤S34)。具体地,电子黑板2c的远程图像接收单元64将在步骤S33接收到的输出图像(C)的数据输出到电子黑板2c的显示叠加单元36。显示叠加单元36将输出图像(C)的数据输出到视频叠加单元28。视频叠加单元28将输出图像(C)的数据输出到显示器3c。因此,显示器3c显示输出图像(C)。
当UI图像(A)的数据和笔划图像(B)的数据以及输出图像(C)的数据输入到视频叠加单元28时,显示叠加单元36生成重叠图像(A,B,C),且视频叠加单元28将重叠图像(A,B,C)的数据输出到显示器3c。此外,当用于电视会议的视频(E)的数据已经从TV(视频)会议终端7发送到视频叠加单元28时,视频叠加单元28通过画中画操作在重叠图像(A,B,C)上叠加用于电视会议的视频(E)的数据,并将重叠图像输出到显示器3c。
(重叠图像的显示)
接下来,参考图8,将描述远程共享处理中显示重叠图像的处理。
首先,在电子黑板2b,用户通过使用电子笔4b在电子黑板2b上绘制笔划图像(B)(步骤S41)。
接下来,如图6所示,电子黑板2b的显示叠加单元36在UI图像(A)和输出图像(C)上叠加笔划图像(B),且视频叠加单元28在电子黑板2b的显示器3b上显示重叠图像(A,B,C)(步骤S42)。具体地,电子黑板2b的笔划处理单元32经由事件分配单元25从坐标检测单元22和接触检测单元24接收笔划图像(B)的数据作为操作数据,并将该数据发送到显示叠加单元36。因此,显示叠加单元36可以在UI图像(A)和输出图像(C)上叠加笔划图像(B),且视频叠加单元28可以在电子黑板2b的显示器3b上显示叠加图像(A、B、C)。
接下来,电子黑板2b的包括笔划处理单元32的图像处理单元30将笔划图像(B)的数据发送到远程操作发送单元65,电子黑板2b的远程操作发送单元65将笔划图像(B)的数据经由通信网络9发送到用作主机装置的电子黑板2a的通信控制单元70(步骤S43)。
因此,电子黑板2a的远程操作接收单元75接收笔划图像(B)的数据,并将该数据输出到远程操作处理单元83,以使得远程操作处理单元83将笔划图像(B)的数据输出到操作组合处理单元84。以该方式,每次执行绘制,在电子黑板2b绘制的笔划图像(B)的数据被顺序地发送到作为主机装置的电子黑板2a的远程操作处理单元83。该笔划图像(B)的数据是由在表1中指示的每个笔划数据ID指示的数据。因此,例如,如上所述,当用户以电子笔4绘制字母“T”时,由两笔划写该字母,以使得顺序地发送由两个笔划数据ID指示的笔划图像(B)的各条数据。
接下来,用作主机装置的电子黑板2a在显示器3a上显示包括从电子黑板2b发送的笔划图像(B)的数据的重叠图像(A,B,C)(步骤S44)。具体地,电子黑板2a的操作组合处理单元84组合经由远程操作处理单元83顺序地发送的多个笔划图像(B)的各条数据,并在操作数据存储单元840中存储组合的数据和将组合的数据返回到远程操作处理单元83。因此,远程操作处理单元83将从操作组合处理单元84接收到的组合之后的笔划图像(B)的数据输出到远程操作发送单元76。远程操作发送单元76将组合之后的笔划图像(B)的数据输出到作为同一主机装置的电子黑板2a的客户端单元20的远程操作接收单元66。远程操作接收单元66将组合之后的笔划图像(B)的数据输出到图像处理单元30中的显示叠加单元36。因此,显示叠加单元36在UI图像(A)和输出图像(C)上叠加组合之后的笔划图像(B)。最终,视频叠加单元28在显示器3a上显示由显示叠加单元36叠加的重叠图像(A、B、C)。
接下来,用作主机装置的电子黑板2a的服务器单元90中的包括远程操作发送单元76的通信控制单元70将组合之后的笔划图像(B)的数据经由通信网络9发送到除了作为笔划图像(B)的数据的传输源的电子黑板2b之外的电子黑板2c的通信控制单元60(步骤S45)。因此,作为参与装置的电子黑板2c的远程操作接收单元66接收组合之后的笔划图像(B)的数据。
接下来,电子黑板2c在显示器3c上显示重叠图像(A,B,C)(步骤S46)。具体地,电子黑板2c的远程操作接收单元66将在步骤S45接收到的组合之后的笔划图像(B)的数据输出到电子黑板2c的图像处理单元30。图像处理单元30的显示叠加单元36将UI图像(A)的数据和输出图像(C)的数据与组合之后的笔划图像(B)的数据叠加,并将重叠图像(A,B,C)的数据输出到视频叠加单元28。视频叠加单元28将重叠图像(A,B,C)的数据输出到显示器3c。因此,显示器3c显示重叠图像(A,B,C)。
注意到,在以上处理中,在显示器3上显示输出图像(C);但是,可以代替该输出图像(C)显示背景图像(D)。替代地,可以取消输出图像(C)和背景图像(D)之间的排它关系,且可以在显示器3上同时显示输出图像(C)和背景图像(D)两者。
(参与的结束)
接下来,参考图8,将描述参与设备终止远程共享处理的参与的处理。在图8中图示的实施例中,图示了电子黑板2c终止参与的处理。
首先,在电子黑板2c中,在接受通过用户操作比如触摸面板的输入装置而做出的终止参与的请求时,远程参与处理单元62将终止参与的请求发送到用作主机装置的电子黑板2a的服务器单元90中的通信控制单元70(步骤S47)。因此,通信控制单元70的远程连接请求接收单元71从电子黑板2c接收参与终止请求,并将参与终止请求与电子黑板2c的IP地址一起输出到远程连接处理单元81。然后,基于从远程连接请求接收单元71发送的IP地址,电子黑板2a的远程连接处理单元81从参与地点管理表820擦除已经做出参与终止请求的电子黑板2c的IP地址和安装电子黑板2c的地点的名称,并将电子黑板2c的IP地址和指示擦除的报告输出到远程连接结果发送单元72。
接下来,包括远程连接结果发送单元72的通信控制单元70经由通信网络9指示电子黑板2c的客户端单元20中的通信控制单元60终止参与(步骤S48)。因此,电子黑板2c中的通信控制单元60的远程参与处理单元62通过执行断开远程共享处理的通信的参与终止处理,来终止参与(步骤S49)。
<关于事件>
图9是用于描述由事件分配单元分配的事件的图的示例。如上所述,事件分配单元25将由坐标检测单元22和接触检测单元24检测到的事件分配为笔划绘制、UI操作和手势操作。在下文中,在其上执行笔划绘制的电子黑板2的操作模式被称为“手写模式”,且执行手势操作的操作模式被称为“手势模式”。
事件分配单元25包括事件确定单元251、模式确定单元252、超时标志253、手势进行中标志254和计时器255。通过使用由坐标检测单元22检测到的坐标,事件确定单元251检测以下事件。
·触碰事件:坐标检测单元22检测到坐标并将坐标输出到事件分配单元25;在从手H或者电子笔4的下笔(由接触传感器115检测到)到抬笔(不再由接触传感器115检测到)的时间期间,事件确定单元251分配一个标识号码(在下文中,“ID”)给手H或者电子笔4。该手H或者电子笔4的下笔是触碰事件。在下文中,手H或者电子笔4将被称为坐标输入单元。不同ID给予其他坐标输入单元。
·触摸移动事件:当检测到已经检测为触碰事件的坐标已经移动时,事件确定单元251确定已经发生触摸移动事件。坐标的移动指的是在时间tn检测到的坐标和在时间tn+1检测到的坐标在预定范围内(手H或者电子笔4可以在时间tn和时间tn+1之间移动的距离)。
·触摸抬起事件:当不再检测到确定为触碰事件或者触摸移动事件的坐标(坐标输入单元)时,事件确定单元251检测触摸抬起事件。事件确定单元251将事件的确定结果和坐标发送到模式确定单元252。模式确定单元252通过将在后面描述的根据每个事件的处理,确定用户正在手写内容(模式是否是手写模式)或者用户正在通过手势执行操作(模式是否是手势模式)。当模式确定单元252确定模式是手写模式时,坐标输出到笔划处理单元32,且当模式确定单元252确定模式是手势模式时,坐标输出到手势处理单元27。
注意到,在本实施例中,为描述的方便起见,手写模式将被描述为当已经检测到一组坐标时由事件分配单元25接受的操作模式。此外,手写模式是绘制笔划图像的模式。手势模式是当同时检测到两组或者更多组坐标时由事件分配单元25接受的操作模式。此外,手势模式是用户操作笔划图像(B)、输出图像(C)或者背景图像(D)的模式。例如,根据手势模式,可以以两个或更多手指执行捏(缩小)图像的操作,拉(放大)图像的操作等。也可以以三个或更多手指执行手势。如上所述,根据本实施例的电子黑板2不同时接受两个坐标输入单元的手写;但是,在确定模式不是手势模式之后,可以由两个坐标输入单元同时执行手写。
计时器255是用于测量预定时间的时间测量装置。当在计时器255测量预定时间之前检测到第二组坐标时,确定模式是手势模式。计时器255可以通过软件测量时间,或者可以通过用于测量时间的比如集成电路(IC)等的硬件测量时间。预定时间是当用户以两个手指触碰显示器3以执行手势操作时,从第一手指的触碰到第二手指的触碰的总体时间长度。例如,在计时器255中设置几十毫秒到数百毫秒的预定时间。但是,在计时器255中设置的时间可以不固定;事件确定单元251可以学习当用户执行手势操作时从第一手指的触碰到第二手指的触碰的时间,且可以设置计时器255中的学习的时间。此外,用户可以设置期望的预定时间。
当计时器255超时时,超时标志253设置为真。当确定手势在进行中时,手势进行中标志254设置为真。将假设置为超时标志253和手势进行中标志254两者的初始值。当激活电子黑板2时设置初始值。
<时间的检测示例>
图10是图示以时间顺序由事件分配单元25检测到的事件的示例的流程图。图10图示用户使得两个手指与显示器3接触以执行手势模式,且检测到两个坐标输入单元的情况。
步骤S1:事件确定单元251检测到触碰事件。为了标识已经导致触碰事件的坐标输入单元,事件确定单元251将ID=1分配给该坐标输入单元。以ID=1标识由坐标输入单元输入的一系列坐标。
步骤S2:接下来,事件确定单元251检测触摸移动事件。也就是,坐标输入单元已经移动。由触摸移动事件生成的坐标用于笔划绘制或者手势操作。
步骤S3:事件确定单元251继续检测ID=1的触摸移动事件。
步骤S4:接下来,事件确定单元251检测与步骤S1的不同的触碰事件,并将ID=2分配给该坐标输入单元。
步骤S5:事件确定单元251继续检测ID=1的触摸移动事件。
步骤S6:事件确定单元251检测到ID=2的触摸移动事件。注意到,虽然在步骤S5和S6中检测到更多的触摸移动事件,但是在图10中省略这种触摸移动事件。在本实施例中,仅一个坐标输入单元可以执行手写模式,因此由ID=2的触摸移动事件生成的坐标用于手势操作(或者被忽略)。
步骤S7:事件确定单元251检测到ID=1的触摸抬起事件。也就是,在距由坐标检测单元22最后检测到的ID=1的坐标预定距离内不再检测到坐标。
步骤S8:事件确定单元251检测到ID=2的触摸抬起事件。也就是,在距由坐标检测单元22最后检测到的ID=2的坐标预定距离内不再检测到坐标。
如上所述,事件确定单元251检测到坐标输入单元的每一个ID的触碰事件、触摸移动事件和触摸抬起事件。
[第一实施例]
在本实施例中,将描述在检测到触碰事件之后等待预定时间段而不执行处理,以检测模式是手势模式还是手写模式的电子黑板2。
<触碰事件>
图11A是图示当检测到触碰事件时由模式确定单元252执行的处理的流程图的示例。当检测到触碰事件时开始图11A的处理。
模式确定单元252确定当已经检测到触碰事件时分配的ID是否是1(步骤S10)。也就是,确定是否当前仅一个坐标输入单元正在触碰显示器3。可以确定由事件确定单元251分配和监视的ID的数目是否是1。
当在步骤S10的确定为“是”时,模式确定单元252开始计时器255(步骤S20)。由该计时器255测量预定时间。
当在步骤S10的确定为“否”时,模式确定单元252停止计时器255(步骤S30)。也就是,将触碰事件检测为第二坐标输入单元的事件,因此停止计时器255并确定直到该点的测量时间。注意到,当检测到第三触碰事件时,计时器255已经停止。
如上所述,当检测到的触碰事件是第一坐标输入单元的触碰事件时,模式确定单元252可以开始计时器255。
<超时>
图12是图示在超时时由模式确定单元252执行的处理的流程图的示例。当计时器255超时时开始图12中的处理。
当计时器255超时时,模式确定单元252停止计时器255(步骤S10)。当计时器255超时时,意味着预定时间段的测量已经结束。
接下来,模式确定单元252将超时标志253设置为真(步骤S20)。超时标志253设置为真的事实意味着计时器255已经超时。
如上所述,当计时器255超时时,模式确定单元252可以将超时标志253设置为真。
<触摸移动事件>
图13A是图示当检测到触摸移动事件时由模式确定单元252执行的处理的流程图的示例。当检测到触摸移动事件时开始图13A中的处理。
模式确定单元252确定ID号码是否是2或更大(步骤S10)。当在步骤S10的确定是“否”时,模式确定单元252确定是否已经发生超时(步骤S80)。也就是,模式确定单元252确定超时标志是否设置为真。仅存在一个坐标输入单元,因此模式确定单元252取决于是否已经发生超时,来确定是否已经经过预定时间。
当没有发生超时时(S80中的“否”),图13A中的处理结束,且模式确定单元252不输出任何坐标到笔划处理单元32。
当已经发生超时时(S80中的“是”),处理进行到步骤S50。
当在步骤S10中的确定是“是”时,模式确定单元252确定计时器255是否已经超时(步骤S20)。也就是,模式确定单元252确定超时标志是否设置为真。
当在步骤S20中的确定是“否”时,模式确定单元252将手势进行中标志254设置为真(步骤S30)。也就是,在已经由触碰事件开始的计时器255超时之前已经检测到第二坐标输入单元,因此模式确定单元252确定模式是手势模式。认为用户已经通过两个手指之间略微的时间差(在预定时间段内)以两个手指触碰显示器3。
此外,模式确定单元252停止计时器255(步骤S40)。也就是,确定模式是手势模式,因此由计时器255的时间测量变得不必要。
在步骤S50中,模式确定单元252确定手势进行中标志254是否设置为真(步骤S50)。首先,当在步骤S20确定为“是”时(当已经发生超时时),手势进行中标志254仍然设置为假(当在预定时间内未检测到第二坐标输入单元时,手势进行中标志254是假),因此在步骤S50确定为“否”,且模式确定单元252确定模式是手写模式,并将由第一坐标输入单元输入的坐标输出到笔划处理单元32(步骤S70)。记录由第二坐标输入单元输入的坐标,但是不用于笔划绘制。但是,明显地,由第二坐标输入单元输入的坐标可以用于笔划绘制。
当在步骤S20确定没有发生超时时,手势进行中标志254设置为真,因此在步骤S50确定为“是”,且模式确定单元252确定模式是手势模式(步骤S60)。也就是,当在从触碰事件起的预定时间内检测到第二组坐标时,模式确定单元252可以确定模式是手势模式。
当在步骤S80确定为“是”时,即使仅以一个坐标输入单元已经发生超时,手势进行中标志254也设置为假,因此模式确定单元252确定模式是手写模式(步骤S70)。
因此,根据图13A中图示的处理,即使用户在超时之后输入第二组坐标,也不能执行手势操作。因此,即使当用户正在以单个手指触摸显示器且用户的另一手指或者衣服袖子触摸显示器时,也可以避免做出电子黑板2处于手势模式的错误确定。
此外,电子黑板2不能确定模式是手写模式直到已经经过预定时间为止,因此可以避免当用户意在做出手势操作时第一手指触摸显示器时绘制手写线的情形。
<触摸抬起事件>
图14是图示当检测到触摸抬起事件时由模式确定单元252执行的处理的流程图的示例。当检测到触摸抬起事件时开始图14的处理。
模式确定单元252在检测到触摸抬起事件时停止计时器255(步骤S10)。这是由于不再需要测量时间。计时器255可以在触摸抬起事件之前停止。
接下来,模式确定单元252确定ID的数目是否是零(步骤S20)。
当ID的数目是零时(S20中的“是”),这意味着所有坐标输入单元已经与显示器3分开,所以模式确定单元252初始化手势进行中标志254和超时标志253(步骤S30和S40)。
注意到,当用户在手势期间已经从显示器3分离一个手指,且使得第二手指再次与显示器3接触时,已经发生超时且手势进行中标志设置为真,因此继续手势模式。
根据图14的处理,当检测到触摸抬起事件时,模式确定单元252可以初始化手势进行中标志254和超时标志253。
如上所述,根据本实施例的电子黑板当检测到第一触碰事件时等待预定时间段而不执行处理。然后,当在预定时间内检测到第二组坐标时,电子黑板确定做出手势。如果在预定时间内未检测到第二组坐标,则电子黑板确定执行手写。因此,模式确定单元252可以在没有用户的任何明确操作的情况下确定模式是手写模式还是手势模式。此外,可以避免虽然电子黑板2未处于手势模式但是错误地确定电子黑板2处于手势模式的情形,或者虽然电子黑板2未处于手写模式但是错误地确定电子黑板2处于手写模式的情形。
<修改的示例>
注意到,可以在模式确定为是手写模式之后,以预先保存的坐标执行笔划绘制。在该情况下,如图11B所示,在步骤S20之后,在RAM 103中存储坐标(步骤S22)。然后,如图13B所示,也在触摸移动事件期间在RAM103中存储坐标(步骤S82)。当在图13B的步骤S50中确定模式不是手势模式时,笔划处理单元32在显示器3上显示RAM 103中的坐标(步骤S52)。在该情况下,不显示笔划直到经过预定时间为止,但是当经过预定时间时,电子黑板2可以显示由用户在过去手写的内容。
[第二实施例]
在第一实施例中,不执行笔划绘制直到计时器255超时为止,因此存在用户可能察觉手写的开始延迟的风险。因此,在本实施例中,将描述即使当检测到触碰事件时计时器255还没有超时,在超时之前也继续笔划绘制的电子黑板2。电子黑板2在超时之前继续笔划绘制,因此电子黑板2可以在用户触摸显示器3之后立即执行笔划绘制。
注意到,在本实施例中,在超时时的处理和当检测到触摸抬起事件时的处理与第一实施例中相同。
<触碰事件>
图15是图示当检测到触碰事件时由模式确定单元252执行的处理的流程图的示例。注意到,在图15中,将主要描述与图11A的差异。
当在步骤S20开始计时器255时,模式确定单元252输出坐标到笔划处理单元32,并使得笔划处理单元32开始笔划绘制(步骤S40)。也就是,临时地确定模式是手写模式。在经过预定时间之前开始笔划绘制,因此电子黑板2可以在用户触摸显示器3之后立即执行笔划绘制。
<触摸移动事件>
图16是当检测到触摸移动事件时由笔划处理单元32执行的处理的流程图的示例。注意到,在图16中,将主要描述与图13A的差异。在图16中,步骤S80的处理变得不必要,且添加步骤S90。
如参考图15描述的那样,当检测到触碰事件时,笔划处理单元32在发生超时之前执行笔划绘制。因此,如果在超时之前检测到第二坐标输入单元,则需要擦除已经绘制的笔划。
因此,当在步骤S20中的确定是“否”时,模式确定单元252确定擦除笔划(步骤S90)。具体地,模式确定单元252使得笔划处理单元32擦除页面数据存储单元300中存储的且与ID=1相关联的坐标,且也从显示器3擦除这些坐标。也就是,当确定电子黑板2处于手势模式时,可以擦除已经绘制的笔划。
另一方面,当在超时之后检测到第二组坐标时(在步骤S20中的“是”),不擦除笔划,因此已经由用户有意地手写的笔划不消失。
因此,按照根据本实施例的电子黑板2,除第一实施例的效果之外,电子黑板2在超时之前继续笔划绘制,因此可以在用户触摸显示器3之后立即执行笔划绘制。此外,当确定电子黑板2处于手势模式时,可以擦除绘制的笔划。
[第三实施例]
电子黑板2可以包括除手势模式和手写模式之外的另一模式。该另一模式是由用户明确地选择的模式;即使在选择该另一模式的状态下,用户也可以以手势执行操作。因此,在由用户选择该另一模式的状态下,需要确定电子黑板2是要基于该另一模式还是手势模式执行处理。
首先,将参考图17A、图17B和图17C描述另一模式。图17A、图17B和图17C是示意性地图示在显示器3上显示的菜单的图。在图17A中,显示一键式输入按钮501和橡皮擦按钮502。实际上,可以显示更多按钮;但是,在图17A、图17B和图17C中省略这种按钮。注意到,事件分配单元25基于坐标而检测到已经按压该一键式输入按钮501或者橡皮擦按钮502,且操作处理单元26通知笔划处理单元32模式是另一模式。因此,激活与该一键式输入按钮501或者橡皮擦按钮502对应的功能。
图17B图示当用户以坐标输入单元按压该一键式输入按钮501时电子黑板2的操作。当用户按压该一键式输入按钮501时,显示多个设计字符。用户通过坐标输入单元选择任意设计字符并指定要显示设计字符的位置。已经向笔划处理单元32通知已经按压该一键式输入按钮501,因此笔划处理单元32使得在由用户指定的坐标处显示设计字符。在图17B中,显示字符“DONE(完成)”由圆形围绕的设计字符503。注意到,作为设计字符503,存在基于各种符号设计的许多类型的字符,比如“CONFIDENTIAL(机密)”、三角形、星形、数字和字母等。
图17C图示当用户以坐标输入单元按压橡皮擦按钮502时电子黑板2的操作。当用户按压橡皮擦按钮502时,用户可以擦除已经绘制的笔划504。假定在已经绘制图17C的笔划504的状态下,用户已经按压橡皮擦按钮502。用户通过坐标输入单元跟踪已经绘制的笔划504。已经向笔划处理单元32通知已经按压橡皮擦按钮502,因此笔划处理单元32擦除基于坐标的笔划504。也就是,笔划处理单元32对于具有与由坐标检测单元22检测到的坐标接近的坐标的笔划504搜索页面数据存储单元300,且从页面数据存储单元300擦除笔划504。此外,从显示器3擦除基于擦除的坐标的笔划504。注意到,橡皮擦按钮502具有由用户以坐标输入单元触摸笔划504上或者附近的一点而擦除整个笔划504的功能。
如上所述,即使在按压该一键式输入按钮501或者橡皮擦按钮502之后,电子黑板2也不得不确定用户是否将要执行手势操作、一键输入或者橡皮擦操作。考虑当按压该一键式输入按钮501时,电子黑板2如在第二实施例的手写模式中那样在触碰事件之后立即显示设计字符503,且随后,当确定模式是手势模式时,擦除设计字符的情况。在该情况下,从用户的观点设计字符503仅显示片刻,因此存在用户可能感到奇怪的感觉的风险。另一方面,即使在触碰之后经过预定时间段之后显示设计字符503,与笔划504不同,不太存在用户感到显示很慢的风险。
此外,考虑当按压橡皮擦按钮502时,电子黑板2如在第二实施例的手写模式中那样在触碰事件之后立即擦除笔划504,且随后,确定模式是手势模式的情况。在该情况下,变得难以恢复曾经从页面数据存储单元300擦除的坐标。
由于上面描述的原因,当按压该一键式输入按钮501或者橡皮擦按钮502时,优选地电子黑板2在确认模式不是手势模式(在超时之后)显示设计字符503或者擦除笔划504。这种处理将在下面描述。注意到,在下面的描述中,按压一键式输入按钮501或者橡皮擦按钮502的状态的操作模式被称为“印章模式”
<触碰事件>
图18是图示当检测到触碰事件时由模式确定单元252执行的处理的流程图的示例。注意到,在图18中,将主要描述与根据第二实施例的图15的差异。
当在步骤S20开始计时器255时,模式确定单元252确定模式是否是印章模式(步骤S35)。也就是,模式确定单元252确定是否已经按压该一键式输入按钮501或者橡皮擦按钮502。
当模式不是印章模式时(在步骤S35的“否”),模式确定单元252如在第二实施例中那样将坐标发送到笔划处理单元32(步骤S40)。因此,笔划处理单元32可以执行笔划绘制。在经过预定时间之前开始笔划绘制,因此电子黑板2可以在用户触碰显示器3之后立即执行笔划绘制。
当模式是印章模式时(S35中的“是”),模式确定单元252在RAM 103等中存储坐标(步骤S50)。通过存储坐标,笔划处理单元32可以在经过预定时间之后在由坐标指示的位置处显示设计字符503或者擦除笔划504。
<超时处理>
图19是图示在超时时由模式确定单元252执行的处理的流程图的示例。在图19中,将主要描述与图12的差异。
在步骤S20,当模式确定单元252将超时标志253设置为真时,模式确定单元252确定模式是否是印章模式(步骤S30)。
当模式不是印章模式时(S30中的“否”),图19的处理结束。也就是,坐标绘制为笔划,因此模式确定单元252在超时时什么也不做。
当模式是印章模式时(S30中的“是”),模式确定单元252将RAM 103中存储的坐标发送到笔划处理单元32,并请求与印章模式对应的处理(步骤S40)。因此,笔划处理单元32在RAM 103中最后存储的坐标处显示设计字符503,或者在RAM 103中存储的坐标处擦除笔划。也就是,紧接在计时器255超时之后,根据印章模式的处理变得可能。
然后,RAM 103中存储的坐标变得不必要,因此模式确定单元252擦除在RAM 103中存储的坐标(步骤S50)。因此,可以避免数据对RAM 103过载的情形。
因此,紧接在超时之后,笔划处理单元32可以基于RAM 103中存储的坐标执行根据印章模式的处理。
<触摸移动事件>
图20是图示当检测到触摸移动事件时由笔划处理单元32执行的处理的流程图的示例。注意到,在图20中,将主要描述与根据第二实施例的图16的差异。
当在步骤S50,模式确定单元252确定模式不是手势模式时,模式确定单元252确定模式是否是印章模式(步骤S55)。
当模式不是印章模式时(S55中的“否”),已经确定模式不是手势模式,因此模式确定单元252确定模式是手写模式(步骤S70)。
当模式是印章模式时(S55中的“是”),模式确定单元252确定是否已经发生超时(步骤S110)。这是由于直到超时为止不确定模式是否是手势模式。
当在步骤S110的确定是“是”时,计时器255已经超时,因此笔划处理单元32在由坐标检测单元22检测到的坐标处显示设计字符503,或者在由坐标检测单元22检测到的坐标处擦除笔划(步骤S120)。也就是,图20是触摸移动事件的处理,因此这意味着坐标已经改变,且笔划处理单元32根据坐标来改变已经显示的设计字符503的位置。替代地,笔划处理单元32根据坐标擦除笔划。因此,电子黑板2可以根据紧接在超时之后立即执行的印章模式继续处理。
当在步骤S110中的确定是“否”时,计时器255还没有超时,因此模式确定单元252在RAM 103中存储坐标(步骤S130)。因此,当电子黑板2超时时,可以基于RAM 103中存储的坐标来执行根据印章模式的处理。
如上所述,在触摸移动事件中,也可以取决于是否已经发生超时而根据印章模式执行适当的处理。
<触摸抬起事件>
图21是图示当检测到触摸抬起事件时由模式确定单元252执行的处理的流程图的示例。在图21中,将主要描述与图14的差异。
当在步骤S10停止计时器255时,模式确定单元252确定模式是否是印章模式(步骤S12)。
当模式不是印章模式时(S12中的“否”),处理以与第一实施例同样的方式进行到步骤S20。
当模式是印章模式时(在步骤S12中的“是”),模式确定单元252确定超时标志253是否设置为真(步骤S14)。
当超时标志253设置为真时,执行根据印章模式在超时时的处理,所以处理进行到步骤S20。
当超时标志253设置为假时,还未执行根据印章模式的处理,因此模式确定单元252确定擦除在RAM 103中存储的坐标(步骤S16)。该处理与图16中的步骤S90相同。因此,即使在时间到之前检测到触摸抬起事件,电子黑板2也可以执行根据印章模式的处理。
然后,RAM 103中存储的坐标变得不必要,因此模式确定单元252擦除在RAM 103中存储的坐标(步骤S18)。
如上所述,除第一和第二实施例的效果之外,根据本实施例的电子黑板2具有当存在除手写模式和手势模式之外的另一模式时,可以以用户不感到奇怪的感觉的方式执行根据该另一模式的处理的效果。
<其它应用示例>
上面已经通过实施例描述了用于进行本发明的优选实施例;但是,本发明不限于在这里描述的特定实施例,且可以在不背离本发明的精神和保护范围的情况下做出变化和替换。
例如,虽然已经在本实施例中描述了电子黑板2的输入模式,本发明也可广泛地应用于包括触摸面板和可以在手写模式和手势模式之间切换的比如平板终端、智能电话、个人数字助理(PDA)、个人计算机(PC)、数字签名和游戏主机等的信息处理设备。
此外,电子黑板2可以被称为任何东西,比如电子信息板或者电子白板。
此外,在本实施例中,已经描述了用户主要以两个手指执行手势操作的示例;但是,可以以可以执行手势操作的人造对象,比如假手或者机器人的手指执行手势操作。可以以两个电子笔4执行手势操作。
此外,一个手指用于操作的操作模式不是必须为手写模式,且两个或更多手指用于操作的操作模式不是必须为手势模式。例如,以一个手指卷动笔划图像的操作模式和以两个手指绘制粗线的操作模式是可想到的。
此外,根据主功能划分图3到图5的配置示例以促进电子黑板2的处理的理解。本发明不由怎样划分处理单元或者处理单元的名称限制。电子黑板2的处理可以进一步根据处理内容划分为许多处理单元。此外,可以划分处理单元以使得单个处理单元进一步包括许多处理。
注意到,笔划图像(B)是可见信息的示例,手写模式是第一操作模式的示例,且手势模式是第二操作模式的示例。坐标检测单元22是坐标检测单元的示例,事件分配单元25是数目检测单元的示例,计时器255是时间测量单元的示例,且模式确定单元252是模式确定单元的示例。笔划处理单元32是信息显示单元的示例。操作处理单元26是模式接受单元的示例。印章模式是第三操作模式的示例。手H或者电子笔4是对象的示例。由计时器255测量的时间是预定时间的示例。由根据本实施例的电子黑板2执行的处理是信息显示方法的示例。RAM 103是存储单元的示例。
本国际专利申请要求于2015年9月30日提交的日本优先权专利申请No.2015-194991的优先权的权益,因此在这里完全包括日本优先权专利申请No.2015-194991的全部内容。
[附图标记列表]
1 图像处理系统
2 电子黑板
4 电子笔
20 客户端单元
22 坐标检测单元
25 事件分配单元
26 操作处理单元
27 手势处理单元
32 笔划处理单元
251 事件确定单元
252 模式确定单元
253 超时标志
254 手势进行中标志
255 计时器
引文列表
专利文献
PTL 1
日本未审查专利申请公开No.2013-012134

Claims (15)

1.一种电子黑板,包括配置为显示可见信息的显示单元,所述电子黑板包括:
坐标检测单元,配置为检测所述显示单元中多个对象的坐标;
数目检测单元,配置为基于由所述坐标检测单元检测到的多个对象的坐标,检测所述显示单元中多个对象的数目;
时间测量单元,配置为响应于由所述数目检测单元检测到多个对象的第一个对象而开始测量预定时间;和
模式确定单元,配置为
响应于确定在第一个对象被检测到时由所述时间测量单元完成测量预定时间时没有由所述数目检测单元检测到多个对象的第二个对象,确定电子黑板处于基于检测到的坐标显示可见信息的手写模式,和
响应于确定在第一个对象被检测到时由所述时间测量单元完成测量预定时间之前由所述数目检测单元检测到第二个对象,确定电子黑板处于接受关于可见信息的操作的手势模式,
其中,所述模式确定单元在确定电子黑板处于手写模式时使用用于手写的坐标,且所述模式确定单元在确定电子黑板处于手势模式时使用用于接受手势模式的操作的检测到的坐标。
2.如权利要求1所述的电子黑板,其中,
所述模式确定单元响应于由所述数目检测单元检测到第一个对象,临时地确定电子黑板处于手写模式,其中,所述电子黑板进一步包括:
信息显示单元,配置为在由所述时间测量单元完成测量预定时间之前,基于由所述坐标检测单元检测到的第一个对象的坐标,在所述显示单元上显示可见信息。
3.如权利要求2所述的电子黑板,其中,在响应于确定在由所述时间测量单元完成测量预定时间之前由所述数目检测单元检测到第二个对象,在由所述时间测量单元完成测量预定时间之前擦除由所述信息显示单元在所述显示单元上显示的可见信息。
4.如权利要求1所述的电子黑板,其中
响应于由所述数目检测单元检测到第一个对象,在存储单元中存储由所述坐标检测单元检测到的第一个对象的坐标,其中,所述电子黑板进一步包括:
信息显示单元,配置为响应于确定在由所述时间测量单元完成测量预定时间时没有由所述数目检测单元检测到第二个对象,基于在所述存储单元中存储的坐标在所述显示单元上显示可见信息。
5.如权利要求2所述的电子黑板,进一步包括:
模式接受单元,配置为接受预定操作模式的操作,在所述预定操作模式中,执行基于第一个对象的坐标的处理,其中,
响应于确定在由所述模式接受单元接受预定操作模式的操作的状态下由所述数目检测单元检测到第一个对象,所述模式确定单元在存储单元中存储由所述坐标检测单元检测到的第一个对象的坐标,但是所述信息显示单元不执行基于所述存储单元中存储的坐标的处理,直到由所述时间测量单元完成测量预定时间为止,和
响应于确定在未由所述模式接受单元接受预定操作模式的操作的状态下由所述数目检测单元检测到第一个对象,所述信息显示单元基于由所述坐标检测单元检测到的第一个对象的坐标而在所述显示单元上显示可见信息。
6.如权利要求5所述的电子黑板,其中,
响应于确定在由所述时间测量单元完成测量预定时间之前未由所述数目检测单元检测到第二个对象,在由所述模式接受单元接受预定操作模式的操作的状态下,
所述模式确定单元继续在所述存储单元中存储由所述坐标检测单元检测到的第一个对象的坐标,直到由所述时间测量单元完成测量预定时间为止。
7.如权利要求6所述的电子黑板,其中,
响应于由所述时间测量单元完成测量预定时间,在由所述模式接受单元接受预定操作模式的操作的状态下,
所述信息显示单元
关于所述存储单元中存储的第一个对象的坐标执行预定操作模式的处理,和
擦除所述存储单元中存储的第一个对象的坐标。
8.如权利要求7所述的电子黑板,其中,
响应于确定在由所述时间测量单元完成测量预定时间之前未由所述数目检测单元检测到第二个对象,在由所述模式接受单元接受预定操作模式的操作的状态下,
所述信息显示单元在由所述时间测量单元完成测量预定时间时,关于由所述坐标检测单元检测到的第一个对象的坐标继续执行预定操作模式的处理。
9.如权利要求5所述的电子黑板,其中,所述预定操作模式的处理包括
由所述信息显示单元在第一个对象的坐标处显示由所述模式接受单元接受的符号的处理,或者
从所述显示单元擦除在所述显示单元上显示的可见信息的处理。
10.如权利要求3所述的电子黑板,进一步包括:
模式接受单元,配置为接受预定操作模式的操作,在所述预定操作模式中,执行基于第一个对象的坐标的处理,其中,
响应于确定在由所述模式接受单元接受预定操作模式的操作的状态下由所述数目检测单元检测到第一个对象,所述模式确定单元在存储单元中存储由所述坐标检测单元检测到的第一个对象的坐标,但是所述信息显示单元不执行基于所述存储单元中存储的坐标的处理,直到由所述时间测量单元完成测量预定时间为止,和
响应于确定在未由所述模式接受单元接受预定操作模式的操作的状态下由所述数目检测单元检测到第一个对象,所述信息显示单元基于由所述坐标检测单元检测到的第一个对象的坐标在所述显示单元上显示可见信息。
11.如权利要求10所述的电子黑板,其中,
响应于确定在由所述时间测量单元完成测量预定时间之前未由所述数目检测单元检测到第二个对象,在由所述模式接受单元接受预定操作模式的操作的状态下,
所述模式确定单元继续在所述存储单元中存储由所述坐标检测单元检测到的第一个对象的坐标,直到由所述时间测量单元完成测量预定时间为止。
12.如权利要求11所述的电子黑板,其中,
响应于由所述时间测量单元完成测量预定时间,在由所述模式接受单元接受预定操作模式的操作的状态下,
所述信息显示单元
关于所述存储单元中存储的第一个对象的坐标,执行预定操作模式的处理,和
擦除所述存储单元中存储的第一个对象的坐标。
13.如权利要求12所述的电子黑板,其中,
响应于确定在由所述时间测量单元完成测量预定时间之前未由所述数目检测单元检测到第二个对象,在由所述模式接受单元接受预定操作模式的操作的状态下,
所述信息显示单元在由所述时间测量单元完成测量预定时间时,关于由所述坐标检测单元检测到的第一个对象的坐标,继续执行预定操作模式的处理。
14.一种计算机可读记录介质,存储使得包括配置为显示可见信息的显示单元的电子黑板用作以下单元的程序:
坐标检测单元,配置为检测所述显示单元中多个对象的坐标;
数目检测单元,配置为基于由所述坐标检测单元检测到的多个对象的坐标,检测所述显示单元中多个对象的数目;
时间测量单元,配置为响应于由所述数目检测单元检测到多个对象的第一个对象而开始测量预定时间;和
模式确定单元,配置为
响应于确定在第一个对象被检测到时由所述时间测量单元完成测量预定时间时没有由所述数目检测单元检测到多个对象的第二个对象,确定电子黑板处于基于检测到的坐标而显示可见信息的手写模式,和
响应于确定在第一个对象被检测到时由所述时间测量单元完成测量预定时间之前由所述数目检测单元检测到第二个对象,确定电子黑板处于接受关于可见信息的操作的手势模式,
其中,所述模式确定单元在确定电子黑板处于手写模式时使用用于手写的坐标,且所述模式确定单元在确定电子黑板处于手势模式时使用用于接受手势模式的操作的检测到的坐标。
15.一种信息显示方法,由包括配置为显示可见信息的显示单元的电子黑板执行,所述信息显示方法包括:
由坐标检测单元检测所述显示单元中的多个对象的坐标的步骤;
由数目检测单元基于由所述坐标检测单元检测到的多个对象的坐标,检测所述显示单元中的多个对象的数目的步骤;
响应于由所述数目检测单元检测到多个对象的第一个对象而由时间测量单元开始测量预定时间的步骤;和
响应于确定在第一个对象被检测到时由所述时间测量单元完成测量预定时间时未由所述数目检测单元检测到多个对象的第二个对象,而由模式确定单元确定电子黑板处于基于检测到的坐标显示可见信息的手写模式,和响应于确定在第一个对象被检测到时由所述时间测量单元完成测量预定时间之前由所述数目检测单元检测到第二个对象,而由模式确定单元确定电子黑板处于接受相对于可见信息的操作的手势模式的步骤;和
在确定电子黑板处于手写模式时使用用于手写的坐标,且在确定电子黑板处于手势模式时使用用于接受手势模式的操作的检测到的坐标的步骤。
CN201680055185.3A 2015-09-30 2016-09-29 电子黑板、存储介质和信息显示方法 Active CN108139825B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2015-194991 2015-09-30
JP2015194991 2015-09-30
PCT/JP2016/078915 WO2017057629A1 (ja) 2015-09-30 2016-09-29 電子黒板、記憶媒体、及び情報表示方法

Publications (2)

Publication Number Publication Date
CN108139825A CN108139825A (zh) 2018-06-08
CN108139825B true CN108139825B (zh) 2021-10-15

Family

ID=58423968

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201680055185.3A Active CN108139825B (zh) 2015-09-30 2016-09-29 电子黑板、存储介质和信息显示方法

Country Status (5)

Country Link
US (1) US11209921B2 (zh)
EP (1) EP3358449A4 (zh)
JP (1) JP6493546B2 (zh)
CN (1) CN108139825B (zh)
WO (1) WO2017057629A1 (zh)

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6546455B2 (ja) * 2015-06-12 2019-07-17 シャープ株式会社 イレーサ装置および指示入力システム
CN106055237B (zh) * 2016-05-31 2017-11-17 广东欧珀移动通信有限公司 一种滑动加速响应方法、及设备
JP6995605B2 (ja) * 2017-12-18 2022-01-14 キヤノン株式会社 電子機器、電子機器の制御方法、プログラム及び記憶媒体
KR102469722B1 (ko) * 2018-09-21 2022-11-22 삼성전자주식회사 디스플레이 장치 및 그 제어 방법
JP7549492B2 (ja) 2020-09-08 2024-09-11 元路 小下 情報処理装置、情報処理方法及びプログラム
CN113469148B (zh) * 2021-09-02 2021-11-12 北京世纪好未来教育科技有限公司 一种文本擦除方法及模型的训练方法、装置、存储介质
CN113934323B (zh) * 2021-10-19 2023-12-29 河北师达教育科技有限公司 基于智能黑板的多点显示方法、装置和终端设备
EP4432055A1 (en) 2022-05-25 2024-09-18 Samsung Electronics Co., Ltd. Electronic device for receiving application screen from external device and displaying same, and method of controlling same
WO2023229156A1 (ko) * 2022-05-25 2023-11-30 삼성전자주식회사 외부 장치로부터 어플리케이션 화면을 수신하여 표시하는 전자 장치 및 그 제어 방법

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103294375A (zh) * 2012-02-24 2013-09-11 宇龙计算机通信科技(深圳)有限公司 终端和触屏操作处理方法
CN103513865A (zh) * 2013-04-27 2014-01-15 展讯通信(上海)有限公司 一种触控设备及控制其配置操作模式的方法、装置
CN103577086A (zh) * 2012-08-08 2014-02-12 杨丽 一种在触控板上实现快捷键模式的方法

Family Cites Families (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH08314619A (ja) * 1995-05-23 1996-11-29 Canon Inc ペン入力型電子装置及びその制御方法
JP2003196028A (ja) * 2001-12-21 2003-07-11 Ricoh Co Ltd 座標入力機能付表示装置を用いた描画方法、その方法によったプログラム、およびそのプログラムを記憶した記憶媒体
JP2003248551A (ja) * 2002-02-25 2003-09-05 Ricoh Co Ltd タッチパネル付きディスプレイ装置およびタッチパネル付きディスプレイ装置の表示制御方法
JP2011022964A (ja) * 2009-07-21 2011-02-03 Panasonic Corp タッチパネル及び入力表示システム
JP5664147B2 (ja) * 2010-09-06 2015-02-04 ソニー株式会社 情報処理装置、情報処理方法、及びプログラム
US20120218203A1 (en) * 2011-02-10 2012-08-30 Kanki Noriyoshi Touch drawing display apparatus and operation method thereof, image display apparatus allowing touch-input, and controller for the display apparatus
JP5536690B2 (ja) * 2011-02-10 2014-07-02 シャープ株式会社 タッチ描画表示装置及びその操作方法
JP5589909B2 (ja) 2011-03-14 2014-09-17 株式会社リコー 表示装置、表示装置のイベント切替え制御方法及びプログラム
JP5723697B2 (ja) 2011-06-30 2015-05-27 シャープ株式会社 手書き入力機能付表示装置
US8860675B2 (en) * 2011-07-12 2014-10-14 Autodesk, Inc. Drawing aid system for multi-touch devices
KR101885132B1 (ko) * 2011-11-23 2018-09-11 삼성전자주식회사 사용자 단말에서 터치 입력 장치 및 방법
US20130179844A1 (en) 2012-01-06 2013-07-11 Mirko Mandic Input Pointer Delay
JP5700020B2 (ja) 2012-10-10 2015-04-15 コニカミノルタ株式会社 画像処理装置、プログラム及び操作イベント判別方法
JP5480357B1 (ja) * 2012-11-28 2014-04-23 株式会社東芝 電子機器および方法
JP2014134968A (ja) * 2013-01-10 2014-07-24 Denso Corp 感圧式タッチパネル装置
JP5835240B2 (ja) * 2013-01-28 2015-12-24 カシオ計算機株式会社 情報処理装置、情報処理方法及びプログラム
KR101553119B1 (ko) * 2013-07-17 2015-09-15 한국과학기술원 연속적인 터치를 이용한 사용자 인터페이스 방법 및 장치
JP6094550B2 (ja) * 2013-09-17 2017-03-15 株式会社リコー 情報処理装置、プログラム
JP5928490B2 (ja) * 2014-01-14 2016-06-01 コニカミノルタ株式会社 情報処理装置、情報処理プログラム及び情報処理方法

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103294375A (zh) * 2012-02-24 2013-09-11 宇龙计算机通信科技(深圳)有限公司 终端和触屏操作处理方法
CN103577086A (zh) * 2012-08-08 2014-02-12 杨丽 一种在触控板上实现快捷键模式的方法
CN103513865A (zh) * 2013-04-27 2014-01-15 展讯通信(上海)有限公司 一种触控设备及控制其配置操作模式的方法、装置

Also Published As

Publication number Publication date
JP6493546B2 (ja) 2019-04-10
CN108139825A (zh) 2018-06-08
WO2017057629A1 (ja) 2017-04-06
JPWO2017057629A1 (ja) 2018-07-05
US11209921B2 (en) 2021-12-28
EP3358449A4 (en) 2018-09-12
US20180203566A1 (en) 2018-07-19
EP3358449A1 (en) 2018-08-08

Similar Documents

Publication Publication Date Title
CN108139825B (zh) 电子黑板、存储介质和信息显示方法
JP6094550B2 (ja) 情報処理装置、プログラム
WO2016121401A1 (en) Information processing apparatus and program
JP2016134014A (ja) 電子情報ボード装置、情報処理方法およびプログラム
US10649754B2 (en) Image processing device and electronic whiteboard
US11294495B2 (en) Electronic whiteboard, method for image processing in electronic whiteboard, and recording medium containing computer program of electronic whiteboard
JP5846270B2 (ja) 画像処理システム、情報処理装置
US10725653B2 (en) Image processing device, image processing system, and image processing method
WO2017138223A1 (ja) 画像処理装置、画像処理システム及び画像処理方法
EP3416361B1 (en) Image processing device, image processing system and image processing method
JP2016075976A (ja) 画像処理装置、画像処理方法、画像通信システム、及びプログラム
JP2022087633A (ja) 表示装置、消去方法切替方法、プログラム
US20200301645A1 (en) Display apparatus and display method
WO2015186453A1 (ja) 座標検知装置、画像処理装置、及び座標検知方法
WO2016121403A1 (en) Information processing apparatus, image processing system, and program
JP7484568B2 (ja) 表示装置、表示方法、プログラム
JP7383959B2 (ja) 表示装置、使用方法提供方法、プログラム、画像処理システム
JP7363064B2 (ja) 画像処理装置、方法、およびプログラム
JP2016076775A (ja) 画像処理装置、画像処理システム、画像処理方法、及びプログラム

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant