CN107431840A - 信息处理设备以及图像显示方法 - Google Patents

信息处理设备以及图像显示方法 Download PDF

Info

Publication number
CN107431840A
CN107431840A CN201680021709.7A CN201680021709A CN107431840A CN 107431840 A CN107431840 A CN 107431840A CN 201680021709 A CN201680021709 A CN 201680021709A CN 107431840 A CN107431840 A CN 107431840A
Authority
CN
China
Prior art keywords
image
display
unit
display pattern
electronic whiteboard
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201680021709.7A
Other languages
English (en)
Inventor
兼松尚郎
兼松尚一郎
河崎佑
河崎佑一
笠谷洁
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Ricoh Co Ltd
Original Assignee
Ricoh Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Ricoh Co Ltd filed Critical Ricoh Co Ltd
Publication of CN107431840A publication Critical patent/CN107431840A/zh
Pending legal-status Critical Current

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0354Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of 2D relative movements between the device, or an operating part thereof, and a plane or surface, e.g. 2D mice, trackballs, pens or pucks
    • G06F3/03545Pens or stylus
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0412Digitisers structurally integrated in a display
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/042Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1454Digital output to display device ; Cooperation and interconnection of the display device with other functional units involving copying of the display data of a local workstation or window to a remote workstation or window so that an actual copy of the data is displayed simultaneously on two or more displays, e.g. teledisplay
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/14Display of multiple viewports
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/36Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory
    • G09G5/37Details of the operation on graphic patterns
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/36Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory
    • G09G5/37Details of the operation on graphic patterns
    • G09G5/377Details of the operation on graphic patterns for mixing or overlaying two or more graphic patterns
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment
    • H04N5/262Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/272Means for inserting a foreground image in a background image, i.e. inlay, outlay
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/14Systems for two-way working
    • H04N7/141Systems for two-way working between two video terminals, e.g. videophone
    • H04N7/147Communication arrangements, e.g. identifying the communication as a video-communication, intermediate storage of the signals
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00Aspects of display data processing
    • G09G2340/06Colour space transformation
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2370/00Aspects of data communication
    • G09G2370/02Networking aspects

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Computer Hardware Design (AREA)
  • User Interface Of Digital Computer (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Digital Computer Display Output (AREA)
  • Information Transfer Between Computers (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

信息处理设备用于在显示设备上显示第一图像。信息处理设备包括:配置来检测到显示设备的用于显示与第一图像不同的第二图像的显示请求的显示请求检测单元;配置来获取来自外部的第二图像的图像信号的图像获取单元;配置来在其中显示请求检测单元检测显示请求的情况下,在第一图像上重叠并显示通过使用图像信号形成的第二图像的重叠显示单元;以及配置来在其中第二图像被重叠并显示在第一图像上的情况下,改变第一图像的至少一种显示模式的显示模式改变单元。

Description

信息处理设备以及图像显示方法
技术领域
本公开总地涉及信息处理设备以及图像显示方法。
背景技术
在相关领域中已知具有用于获取(take in)在显示器的表面上手写的手写信息的功能以及用于显示该手写信息的功能的电子白板。通过用户的手在电子白板的显示表面上手写的内容被累积为坐标数据,并且电子白板在显示器上将该内容作为其中坐标被连接的笔画来绘制。因此,类似于传统的白板,用户可以绘制字母、图形等。此外,用户可以存储手写信息并且经由网络发送手写信息到另一电子白板。
另外,类似于典型的显示器,用户可以调整电子白板中包括的显示器中的视频设置(诸如对比度以及色温)以便显示器上的图像变得易于观察。然而,例如,用户设置的诸如对比度之类的视频设置并不一定适当。PTL 1公开了一种其中显示器预先存储视频设置的初始值,并且视频设置按照用户操作返回到该初始值以便防止经由用户的不适当调整的技术。PTL 1公开了用于在其中检测到长按操作的情况下将对比度的设置返回到初始值的对比度调整设备。
【引用列表】
【专利文献】
【PTL 1】日本未经审查的专利申请公开No.2008-287198
发明内容
【技术问题】
然而,在PTL 1中公开的对比度调整设备不能应对用户非计划中的可视性的变化。下文中将描述该情况。
首先,存在其中电子白板包括用于输入图像的接口的情况。电子白板在显示器上显示从连接到电子白板的图像输入设备向电子白板输入的视频。然而,由于图像输入设备的视频存储于电子白板的存储器中,存储容量被压制(使之处于压力(stress)下)。在该情况下,电子白板改变显示器的色彩空间以便用有限的存储容量显示手写信息以及通过图像输入设备输入的视频。例如,通过将色彩空间从YUV444改变到YUV422,可以减少用于绘制一个像素所需的数据,并且可以用有限的存储容量显示手写信息以及经由图像输入设备输入的视频。
然而,当色彩空间变化时,即使用户没有改变视频设置,当从用户角度来观察时在显示器上发生犹如改变对比度(最大亮度/最小亮度)的设置的变化。结果,可能发生用户非计划的问题,其中用浅色和/或小点绘制的网格线变得难以观察。
鉴于上述问题,本发明的目的是提供当图像从外部输入时能防止显示器的可视性降低的信息处理设备以及图像显示方法。
【问题的解决方案】
实施例是用于在显示设备上显示第一图像的信息处理设备。信息处理设备包括:配置来检测至显示设备的用于显示与第一图像不同的第二图像的显示请求的显示请求检测单元;配置来获取来自外部的第二图像的图像信号的图像获取单元;配置来在其中显示请求检测单元检测显示请求的情况下,在第一图像上重叠并显示通过使用图像信号形成的第二图像的重叠显示单元;以及配置来在其中第二图像被重叠并显示在第一图像上的情况下,改变第一图像的至少一种显示模式的显示模式改变单元。
【发明的有利影响】
可以提供当图像从外部输入时能防止显示器的可视性降低的信息处理设备以及图像显示方法。
附图说明
图1是图解根据实施例的图像处理系统的总体配置的示例的示意图;
图2是图解电子白板的硬件配置的示例的框图;
图3是图解电子白板的功能性配置的示例的框图;
图4是图解文件处理单元的功能性配置的示例的框图;
图5是图解客户端单元以及服务器单元的功能性配置的框图;
图6是图解页面数据的数据配置的示例的表格;
图7是图解笔画布置数据的数据配置的示例的表格;
图8是图解坐标布置数据的数据配置的示例的表格;
图9是图解媒体数据的数据配置的示例的表格;
图10是图解远程许可管理表格的示例的表格;
图11是图解地址簿管理表格的示例的表格;
图12是备份数据的数据配置的示例;
图13是图解连接目的地管理表格的示例的表格;
图14是图解参与位置管理表格的示例的表格;
图15是图解操作数据的数据配置的示例的表格;
图16是图解图像层间的重叠关系的图示;
图17是图解电子白板的处理的示例的序列图;
图18是图解电子白板的处理的示例的序列图;
图19A是图解在显示器上显示的子窗口的示例的图示;
图19B是图解布置在显示器的侧面上的监视器按钮的示例的图示;
图20是图解通过远程会议终端显示的图像的示例的图示;
图21是图解用于切换对比度值的过程的示例的流程图;
图22是图解根据实施例的第二示例的电子白板的功能性配置的框图;以及
图23是用于切换密度值的过程的示例的流程图。
具体实施方式
在下文中,将参照附图描述本发明的实施例。
〈系统配置〉
图1是图解根据实施例的图像处理系统1的总体配置的示意图。注意在图1中,为简化描述,仅示出了两个电子白板2a和2b以及随附的电子笔4a和4b。然而,图像处理系统1可以包括三个或更多的电子白板和电子笔。
如图1所示,图像处理系统1包括:多个电子白板2a和2b、多个电子笔4a和4b、USB存储器5a和5b、笔记本电脑(个人电脑)6a和6b、远程会议(视频会议)终端7a和7b以及个人电脑8。此外,电子白板2a和2b以及个人电脑8经由通信网络9以通信方式连接。此外,显示器(诸如液晶、有机电致发光、投影仪以及等离子电视)3a和3b被分别布置在电子白板2a以及2b上。
此外,电子白板2a能够在显示器3a上显示通过电子笔4a生成的事件绘制的图像(例如,电子笔4a的笔尖或笔末端接触显示器3a)。注意除了电子笔4a以外,电子白板2a能够基于用户的手Ha生成的事件改变在显示器3a上显示的图像(例如,诸如放大/缩小图像以及翻页的手势)。
此外,USB存储器5a可以连接到电子白板2a,并且电子白板2a可以从USB存储器5a读取诸如PDF文件之类的电子文件并且在USB存储器5a中记录电子文件。此外,笔记本电脑6a经由线缆10a1连接到电子白板2a,所述线缆10a1能够根据诸如显示端口、DVI(数字可视接口)、HDMI(高清晰度多媒体接口;注册商标)以及VGA(视频图形阵列)的标准进行通信。随后,电子白板2a基于对显示器3a的触摸生成事件,并且以与来自诸如键盘以及鼠标之类的输入设备的事件类似的方式向笔记本电脑6a发送与该事件有关的事件信息。远程会议(视频会议)终端7a类似地经由能够根据上述标准进行通信的线缆10a2连接到电子白板2a。注意,笔记本电脑6a以及远程会议终端7a可以根据基于诸如蓝牙(注册商标)之类的各种无线通信协议的无线通信来与电子白板2a通信。
另一方面,在与布置电子白板2b的位置不同的位置处,类似地以上述方式使用包括显示器3b的电子白板2b、电子笔4b、USB存储器5b、笔记本电脑6b、远程会议终端7b、线缆10b1以及线缆10b2。此外,例如,可以基于用户的手Hb生成的事件改变在显示器3b上显示的图像。
以这种方式,在第一位置处的电子白板2a的显示器3a上绘制的图像还可以在第二位置处的电子白板2b的显示器3b上显示。此外,在第二位置处的电子白板2b的显示器3b上绘制的图像还可以在第一位置处的电子白板2a的显示器3a上显示。如上所述,在图像处理系统1中,可以执行用于在远程位置处共享相同的图像的远程共享处理。因此,可以方便地使用图像处理系统1在远程位置处举行会议。
注意在下面的描述中,多个电子白板中的任意电子白板可以被称为“电子白板2”。多个显示器中的任意显示器可以被称为“显示器3”。多个电子笔中的任意电子笔可以被称为“电子笔4”。多个USB存储器中的任意存储器可以被称为“USB存储器5”。多个笔记本电脑中的任意笔记本电脑可以被称为“笔记本电脑6”。多个远程会议终端中的任意远程会议终端可以被称为“远程会议终端7”。此外,用户们的多个手中的任意手可以被称为“手H”。多个线缆中的任意线缆可以被称为“线缆10”。
此外,在实施例中,将电子白板描述为信息处理设备的示例。然而,本发明的信息处理设备并不限于此。作为信息处理设备的另一示例,可以使用电子招牌(数字标牌)、体育、天气广播等中的Telestrator(视频制作者)以及远程图像(视频)诊断设备。此外,尽管将笔记本电脑6描述为信息处理终端的示例,但本发明并不限于此。作为信息处理终端的另一示例,可以使用台式电脑、平板电脑、PDA(个人数字助理)、数码摄像机,数码相机、游戏机或能够提供图像帧的其他类型的终端。同时,通信网络9可以包括互联网、LAN(局域网)、移动电话通信网等。此外,在实施例中,将USB存储器5描述为记录介质的示例。然而,本发明并不限于此。作为记录介质的另一示例,可以使用诸如SD卡之类的各种记录介质。
〈电子白板2的硬件配置〉
在下文中,将参照图2描述根据实施例的电子白板2的硬件配置。图2是图解电子白板2的硬件配置的框图。
如图2所示,电子白板2包括:控制电子白板2的总体操作的CPU 101、存储诸如用于启动CPU 101的IPL(初始程序加载器)之类的程序的ROM 102、用作CPU 101的工作区域的RAM 103、存储各种数据和诸如用于电子白板2的程序之类的各种程序的SSD(固态硬盘)104、控制与通信网络9的通信的网络控制器105、以及控制与USB存储器5的通信的外部存储控制器106。因此,电子白板2充当信息处理设备。
电子白板2还包括:在笔记本电脑6的显示器上将视频信息显示为静态图像或运动图像(视频)的捕获设备111,专门处理图形的GPU(图形处理单元)112,以及控制和管理用于将来自GPU的输出图像输出(显示)到显示器3和/或远程会议终端7的屏幕显示操作的显示控制器113。
电子白板2进一步包括:控制接触传感器115的处理操作的传感器控制器114,以及检测诸如电子笔4和用户的手H之类的对象与显示器3的显示表面的接触的接触传感器115。接触传感器115基于红外线切断方法输入坐标并且检测坐标。在输入坐标和检测坐标的方法中,布置在显示器3的两个上侧边缘的两个光线发射/接收设备在平行于显示器3的方向上发射多束红外线。由于通过布置在显示器3周围的反射部件反射的红外线经由与出射光相同的光路返回,光线接收元件接收所反射的红外线。接触传感器115向传感器控制器114输出由两个光线发射/接收设备发射的、被对象遮挡的红外线的ID(标识),并且传感器控制器114确定作为该对象的接触位置的坐标位置。注意,下述的各个ID是标识信息的示例。
此外,接触传感器115并不限于上述的红外传感器。例如,诸如通过检测电容的变化确定接触位置的电容式触摸面板,通过检测两个相对的电阻薄膜的电压变化检测接触位置的电阻式触摸面板,以及通过检测经由触摸到显示单元的触摸对象生成的电磁感应确定触摸位置的电磁感应触摸面板的各种其他类型的检测单元。
此外,电子白板2包括电子笔控制器116。电子笔控制器116与电子笔4通信从而确定电子笔4的笔尖或笔末端是否正在触摸显示器3。注意在一些实施例中,除了检测在电子笔4的笔尖或笔末端处的触摸以外,电子笔控制器116可以检测诸如由用户抓握的握持部之类的电子笔4的其它部分是否与显示器3接触。
此外,如图2所示,电子白板2包括诸如地址总线以及数据总线之类的总线120,其用于电连接CPU 101、ROM 102、RAM 103、SSD 104、网络控制器105、外部存储控制器106、捕获设备111、GPU 112、传感器控制器114以及电子笔控制器116。
注意在一些实施例中,用于电子白板2的程序可以被记录在诸如
CD-ROM之类的计算机可读记录介质中并且作为程序产品分发。
〈电子白板2的功能性配置〉
在下文中,将参照图3到16描述根据实施例的电子白板2的功能性配置。首先,将参照图3描述电子白板2的总体功能性配置。图3是图解电子白板2的功能性配置的框图。
注意,图3所示的电子白板2的功能性元件可以通过图2所示的硬件元件以及相关的程序来实现。电子白板2可以作为首先启动远程共享处理的“主机设备”,并且还能作为加入已经被启动的远程共享处理的“参与设备”。此外,电子白板2包括作为其主要功能性单元的客户端单元20和服务器单元90。即,客户端单元20和服务器单元90的功能在电子白板2的外壳(housing)内实现。在其中电子白板2作为主机设备的情况下,客户端单元20以及服务器单元90的功能在该电子白板2中实现。此外,在其中电子白板2作为参与设备的情况下,客户端单元20的功能在该电子白板2中实现,但服务器单元90的功能并非在该电子白板2中实现。即,在图1中,在其中电子白板2a作为主机设备以及电子白板2b作为参与设备的情况下,电子白板2a的客户端单元20经由在电子白板2a中实现的服务器单元90与其它电子白板2b的客户端单元20通信。另一方面,电子白板2b的客户端单元20经由在其他电子白板2a中实现的服务器单元90与其它电子白板2a的客户端单元20通信。
〈客户端单元20的功能性配置〉
在下文中,将参照图3到5描述客户端单元20的功能性配置。如图3所示,客户端单元20包括:视频获取单元21、坐标检测单元22、自动调整单元23、接触检测单元24、事件分类单元25、操作处理单元26、手势处理单元27、视频重叠单元28、图像处理单元30以及通信控制单元60。
视频获取单元21从连接到线缆10的诸如笔记本电脑6之类的视频输出设备获取输出视频。响应于接收来自视频输出设备的图像信号,视频获取单元21分析所接收到的图像信号,提取诸如与要由图像信号形成的视频输出设备的显示图像对应的图像帧的分辨率以及图像帧的更新频率之类的图像信息,并且向图像获取单元31输出图像信息。
坐标检测单元22检测在显示器3上由用户生成的事件(诸如用户的手H触摸显示器3的操作)的坐标(坐标位置)。坐标检测单元22还检测触摸区的区域。
当启用电子白板2时启用自动调整单元23并且调整接触传感器115的光学传感器相机的图像处理的参数以便接触传感器115能向坐标检测单元22输出适当的值。
接触检测单元24检测经由用户操作电子笔4生成的事件(诸如电子笔4的笔尖或笔末端在显示器3上的按压(触摸)的操作)。
事件分类单元25将坐标检测单元22所检测的事件的坐标以及接触检测单元24做出的检测的检测结果分类为包括笔画绘制、UI(用户界面)操作以及手势操作的各种事件。
在此,“笔画绘制”是在其中如图16(稍后描述)所示的笔画图像(B)显示在显示器3上的情况下,当用户在显示器3上按压电子笔4,在按压状态下移动电子笔4,并且最终将电子笔4从显示器3上移开时发生的事件。例如,诸如“S”以及“T”之类的字母表的字母可以通过笔画绘制在显示器3上绘制。注意,笔画绘制并不限于绘制图像,其也包括诸如删除绘制的图像和编辑绘制的图像之类的其他各种事件。
“UI操作”是在其中如图16(稍后描述)所示的UI图像(A)显示在显示器3上的情况下,当用户用电子笔4或手H按压预定位置时发生的事件。例如,可以通过UI操作设置通过电子笔4绘制的线条的宽度或色彩。
“手势操作”是在其中如图16(稍后描述)所示的笔画图像(B)显示在显示器3上的情况下,当用户用手H触摸显示器3或在显示器3上移动手H时发生的事件。例如,通过其中用户用手H触摸显示器3的同时在显示器3上移动手H的手势操作可以放大(或缩小)图像,可以改变显示区域,或者可以翻页。
在由事件分类单元25确定为UI操作的UI元素中,操作处理单元26根据与所生成的事件相关联的UI元素执行各种操作。例如,UI元素可以是按钮、列表、复选框或者文本框。
手势处理单元27执行与通过事件分类单元25确定的手势操作相对应的操作。
视频重叠单元28在视频输出设备(例如显示器3)上将通过显示重叠单元36(稍后描述)重叠的图像作为视频显示。此外,视频重叠单元28通过将来自视频输出设备(例如笔记本电脑6)的视频与从另一视频输出设备(例如远程会议终端7)发送的视频组合来创建画中画(picture-in-picture)重叠图像。此外,视频重叠单元28执行用于将显示器3的部分中显示的画中画视频显示在整个显示器3上的切换操作。
图像处理单元30执行诸如图16所示的图象层的重叠处理的各种图像处理。图像处理单元30包括图像获取单元31、笔画处理单元32、UI图像生成单元33、背景生成单元34、布局管理单元35、显示重叠单元36、页面处理单元37、文件处理单元40、页面数据存储单元300以及远程许可管理表格310。
图像获取单元31获取通过视频获取单元21获取的视频的每个帧作为图像。图像获取单元31输出所获取的图像的数据到页面处理单元37。该图像对应于图16所示的来自视频输出设备(诸如笔记本电脑6)的输出图像(C)。
笔画处理单元32基于经由事件分类单元25已分类为笔画绘制事件的事件,通过连接手H或电子笔4的接触位置绘制图像,删除所绘制的图像,或编辑所绘制的图像。通过笔画绘制生成的图像对应于图16所示的笔画图像(B)。此外,将基于笔画绘制的绘制、删除以及编辑图像的结果作为稍后描述的操作数据存储于操作数据存储单元840中。
UI图像生成单元33生成预先在电子白板2中设置的UI(用户界面)图像。UI图像对应于图16所示的UI图像(A)。
背景生成单元34从页面处理单元37接收通过页面处理单元37从页面数据存储单元300读取的页面数据中的媒体数据。背景生成单元34向显示重叠单元36输出所接收到的媒体数据。此外,通过媒体数据表示的图像对应于图16所示的背景图像(D)。背景图像(D)的模式可以是纯色或者网格显示。
布局管理单元35管理用于显示重叠单元36的布局信息。布局信息表示从图像获取单元31、笔画处理单元32以及UI图像生成单元33(或背景生成单元34)输出的图像的布局。这样,布局管理单元35可以向显示重叠单元36提供关于输出图像(C)和笔画图像(B)在UI图像(A)以及背景图像(D)中的显示位置的指引,以及关于是否显示/隐藏这些图像的指引。
显示重叠单元36基于从布局管理单元35输出的布局信息,布局(布置)从图像获取单元31、笔画处理单元32、UI图像生成单元33以及背景生成单元34输出的图像。
页面处理单元37将笔画图像(B)的数据以及输出图像(C)的数据组合为一组页面数据从而在页面数据存储单元300中存储页面数据。笔画图像(B)的数据可以形成页面数据的一部分,该页面数据的一部分作为由图6所示的笔画布置数据标识表示的笔画布置数据(各个笔画数据)。输出图像(C)的数据可以形成页面数据的一部分,该页面数据的一部分作为由图6所示的页面数据的媒体数据标识表示的媒体数据。随后,当从页面数据存储单元300读取页面数据的媒体数据时,将媒体数据作为背景图像(D)的数据来处理。
此外,页面处理单元37经由背景生成单元34向显示重叠单元36发送曾经存储的页面数据的媒体数据以便视频重叠单元28可以在显示器3上重新显示背景图像(D)。此外,页面处理单元37向笔画处理单元32返回页面数据的笔画布置数据(每个笔画数据)以便使能笔画的重新编辑。此外,页面处理单元37能删除或复制页面数据。
即,当页面处理单元37在页面数据存储单元300中存储页面数据时显示器3上正在显示的输出图像(C)的数据曾经存储在页面数据存储单元300中。随后当从页面数据存储单元300中读取所存储的数据时,所存储的数据被读取为表示背景图像(D)的媒体数据。随后,页面处理单元37向笔画处理单元32输出从页面数据存储单元300读取的表示页面数据的笔画图像(B)的笔画布置数据。此外,页面处理单元37向背景生成单元34输出从页面数据存储单元300读取的表示页面数据的背景图像(D)的媒体数据。
显示重叠单元36根据经由布局管理单元35指定的布局重叠来自图像获取单元31的输出图像(C)、来自笔画处理单元32的笔画图像(B)、来自UI图像生成单元33的UI图像(A)以及来自背景生成单元34的背景图像(D)。这样,如图16所示,UI图像(A)、笔画图像(B)、输出图像(C)以及背景图像(D)可以以适当的次序分层以便即使当图像叠加时用户也能观察该图像内容。
此外,显示重叠单元36可以通过在输出图像(C)以及背景图像(D)间切换从而在UI图像(A)以及笔画图像(B)上重叠如图16所示的输出图像(C)或背景图像(D)。例如,在其中电子白板2以及视频输出设备(诸如笔记本电脑6)间的线缆10在其中初始显示图像(A)、图像(B)以及图像(C)的状态下被拔掉的情况下,显示重叠单元36能基于布局管理单元35的指定从重叠目标中排除图像(C)并且显示图像(D)。在该情况下,显示重叠单元36还可以执行诸如显示的扩展、显示的缩小以及移动显示区域的操作。
远程许可管理表格310管理用于执行远程共享处理所需的许可数据。如图10所示,远程许可管理表格310存储彼此相互关联的电子白板2的产品标识、用于认证的许可标识以及许可到期日期。
〈〈页面数据〉〉
页面数据存储单元300存储如图6所示的页面数据。图6是图解页面数据的数据配置的表格。页面数据是要在显示器3上显示的页面的数据(笔画布置数据(每个笔画数据)以及媒体数据)。注意由于页面数据包括各种各样的参数,将参照图6到9分别描述页面数据的内容。
如图6所示,页面数据包括彼此关联存储的各项信息,诸如用于识别页面的页面数据标识、指明已经开始显示页面的时刻的开始时间、指明根据笔画绘制和/或手势操作重写页面已经结束的时刻的结束时间、用于识别经由电子笔4或手H的笔画生成的笔画布置数据的笔画布置数据标识以及用于识别媒体数据的媒体数据标识。注意,以文件单元管理页面数据。如以下详述,笔画布置数据是用于在显示器3上显示图16所示的笔画图像(B)的数据。如以下详述,媒体数据是用于在显示器3(D)上显示图16所示的背景图像(D)的媒体数据。
例如,在其中通过用户使用电子笔4绘制字母表的字母“S”的情况下,由于字母“S”能用一笔写成,可以通过一个笔画标识表示单个字母“S”。另一方面,在其中通过用户使用电子笔4绘制字母表的字母“T”的情况下,由于字母“T”用两笔写成,通过两个笔画标识表示单个字母“T”。
此外,笔画布置管理数据包括如图7所示的详细信息。图7是图解笔画布置数据的数据配置的表格。如图7所示,一组笔画布置数据可以包括多组笔画数据。一组笔画数据包括用于识别笔画数据的笔画标识、指明书写笔画已经开始的时刻的开始时间、指明书写笔画已经结束的时刻的结束时间、笔画颜色、笔画宽度以及用于识别笔画的经过点的布置的坐标布置数据标识。
此外,例如,坐标布置数据可以包括如图8所示的详细信息。图8是图解坐标布置数据的数据配置的表格。如图8所示,坐标布置数据包括在显示器3上的点的信息(X坐标以及Y坐标)、在笔画的开始时间以及笔画经过该点的时刻之间的时间差(ms)以及电子笔4在该点处的书写压力。即,图7所示的一项坐标布置数据表示图8所示的点的集合。例如,在其中用户使用电子笔4绘制字母表“S”的情况下,字母表“S”可以在一个笔画中绘制成,然而从绘制开始该笔画到结束,该笔画经过多个点。因此,该笔画的坐标布置数据包括这些点的信息。
此外,图6所示的页面数据的媒体数据包括如图9所示的详细信息。图9是图解媒体数据的数据配置的表格。如图9所示,媒体数据包括彼此关联存储的各项信息,诸如对应于图6所示的页面数据中的媒体数据标识的媒体数据标识、媒体数据的数据类型、通过页面处理单元37将页面数据存储于页面数据存储单元300时的记录时间、通过页面数据要在显示器3上显示的图像的图像位置(X坐标以及Y坐标)和图像尺寸(宽度以及高度)以及指明媒体数据的内容的数据。通过页面数据要在显示器3上显示的图像的位置表示通过页面数据要显示的图像的左上边缘位置,假设显示器3的左上边缘的坐标(X坐标,Y坐标)是(X,Y)=(0,0)。
〈文件处理单元40的功能性配置〉
在下文中,将参考图4描述图3所示的文件处理单元40的功能性配置。图4是图解文件处理单元40的功能性配置的框图。文件处理单元40包括:恢复处理单元41、文件输入单元42a、文件输出单位42b、文件转换单元43、文件发送单元44、地址簿输入单元45、备份处理单元46、备份输出单元47、设置管理单元48、设置文件输入单元49a以及设置文件输出单元49b。文件处理单元40进一步包括:地址簿管理表格410、备份数据存储单元420、设置文件存储单元430以及连接目的地管理表格440。
在电子白板2异常终止后,恢复处理单元41检测该异常终止,并且恢复未经存储的页面数据。例如,在其中电子白板2正常终止的情况下,页面数据经由文件处理单元40在USB存储器5中被存储为PDF文件。然而,在其中电子白板2由于电源故障等异常终止的情况下,页面数据被存储在页面数据存储单元300中而不是USB存储器5中。因此,当再次接通电源时,恢复处理单元41通过从页面数据存储单元300检索页面数据从而恢复页面数据。
文件输入单元42a从USB存储器5读取PDF文件并且在页面数据存储单元300中存储该PDF文件的各个页面的页面数据。
文件转换单元43将存储在页面数据存储单元300中的页面数据转换为PDF文件。
文件输出单元42b将通过文件转换单元43输出的PDF文件记录(存储)在USB存储器5中。
文件发送单元44将通过文件转换单元43生成的PDF文件附加到电子邮件并且发送该电子邮件。通过显示重叠单元36在显示器3上显示地址簿管理表格410的内容,以及文件发送单元44基于诸如触摸面板之类的输入单元的用户操作接受目的地的选择来确定该文件的目的地。如图11所示,地址簿管理表格410管理(存储)彼此互相关联的目的地的名称以及电子邮件地址。此外,文件发送单元44基于诸如触摸面板之类的输入单元的用户输入接收目的地电子邮件地址的输入。
地址簿输入单元45从USB存储器5读取电子邮件地址的列表文件并且在地址簿管理表格410中管理所读取的列表文件。
备份处理单元46通过在备份数据存储单元420中存储作为备份数据的、经由文件输出单元42b输出的文件或经由文件发送单元44发送的文件来执行备份处理。注意,在其中用户没有执行备份设置的情况下不执行备份处理。如图12所示以PDF格式存储备份数据。
备份输出单元47在USB存储器5中存储备份文件。当存储备份文件时,基于诸如触摸面板之类的输入单元的操作输入用于安全目的的密码。
设置管理单元48通过在设置文件存储单元430中存储设置信息/读取来自设置文件存储单元430的设置信息来管理电子白板2的各种设置信息。例如,各种设置信息可以包括:网络设置、时间/日期设置、区域/语言设置、电子邮件服务器设置、地址簿设置、连接目的地列表设置和/或与备份有关的设置。注意,网络设置可以包括:例如,电子白板2的IP地址设置、网络掩码设置、默认网关设置和\或DNS(域名系统)设置。
设置文件输出单元49b在USB存储器5中记录(存储)作为设置文件的电子白板2的各种设置信息。注意由于安全原因,用户无法看到设置文件的内容。
设置文件输入单元49a读取存储于USB存储器5中的设置文件并且将各种设置信息应用于电子白板2的各种设置上。
地址簿输入单元50从USB存储器5读取远程共享处理的连接目的地的IP地址的列表文件并且在连接目的地管理表格440中管理所读取的列表文件。如图13所示,连接目的地管理表格440是用于预先管理连接目的地的IP地址的表格。当电子白板2作为试图参与(加入)远程共享处理的参与设备时使用连接目的地管理表格440。通过使用连接目的地管理表格440,参与设备的用户可以免除必须手动输入(键入)作为远程共享处理的主机设备的电子白板2的IP地址的麻烦。目的地管理表格440管理布置电子白板2处的位置的名称以及该电子白板2的IP地址,其中该电子白板2可以作为参与设备能够参与的远程共享处理的主机设备。
注意,可以省略连接目的地管理表格440。然而,在该情况下,参与设备的用户必须通过操作诸如触摸面板之类的输入设备手动输入主机设备的IP地址以便启动与主机设备的远程共享处理。因此,参与设备的用户可以通过电话、电子邮件等从主机设备的用户处获取主机设备的IP地址。
〈通信控制单元60的功能性配置〉
在下文中,将参考图5描述通信控制单元60的功能性配置。图5是图解客户端单元20以及服务器单元90的功能性配置的框图。通信控制单元60经由通信网络9控制与另一电子白板2的通信以及与服务器单元90(下文描述)中的通信控制单元70的通信。因此,通信控制单元60包括:远程启动处理单元61、远程参与处理单元62、远程图像发送单元63、远程图像接收单元64、远程操作发送单元65、远程操作接收单元66以及参与位置管理表格610。
远程启动处理单元61请求在同一电子白板2中的服务器单元90启动新的远程共享处理并且从服务器单元90接收请求的结果。在该情况下,远程启动处理单元61参照远程许可管理表格310。在其中在远程许可证管理表格310中管理许可信息(例如产品ID、许可证ID以及到期日期)的情况下,远程启动处理单元61可以做出启动远程共享处理的请求。然而,在其中不在远程许可管理表格310中管理许可信息的情况下,不能做出启动远程共享处理的请求。
在其中电子白板2作为远程共享处理的主机设备的情况下,参与位置管理表格610管理当前作为参与设备参与远程共享处理的一个或多个其他电子白板2。如图14所示,参与位置管理表格610管理彼此相互关联的、其中安装有参与远程共享处理的电子白板2的位置的名称以及该电子白板2的IP地址。
远程参与处理单元62经由通信网络9向已经启动远程共享处理的、作为主机设备的电子白板2的服务器单元90中的远程连接请求接收单元71发送用于参与远程共享处理的参与请求。在该情况下,远程参与处理单元62参照远程许可管理表格310。此外,在参与已经被启动的远程共享处理的情况下,远程参与处理单元62参照连接目的地管理表格440来获取参与目的地的电子白板2的IP地址。注意在一些实施例中,远程参与处理单元62可以不参照连接目的地管理表格440,并且可以通过用户操作诸如触摸面板之类的输入单元输入对应于参与目的地的电子白板2的IP地址。
远程图像发送单元63向服务器单元90发送经由图像获取单元31从视频获取单元21发送的输出图像(C)。
远程图像接收单元64从服务器单元90接收来自连接到另一电子白板2的视频输出设备的图像数据并且向显示重叠单元36输出所接收的图像数据来使能远程共享处理。
远程操作发送单元65向服务器单元90发送用于远程共享处理所需的各种操作数据。操作数据可以包括,例如,与诸如添加笔画、删除笔画、编辑笔画(例如放大、缩小、移动)、存储页面数据、创建页面数据、复制页面数据、删除页面数据以及切换正在显示的页面的操作有关的数据。此外,远程控制接收单元66从服务器单元90接收在另一电子白板2中输入的操作数据,并且向图像处理单元30输出所接收的操作数据来执行远程共享处理。
〈服务器单元90的功能性配置〉
在下文中,将参考图5描述服务器单元90的功能性配置。在每个电子白板2中包括服务器单元90以便每个电子白板2能够作为服务器单元(主机设备)90。因此,服务器单元90包括通信控制单元70以及数据管理单元80。
〈通信控制单元70的功能性配置〉
在下文中,将参考图5描述通信控制单元70的功能性配置。
通信控制单元70控制与在同一电子白板2中的客户端单元20的通信控制单元60的通信以及经由通信网络9与另一电子白板2的通信控制单元70的通信。数据管理单元80管理诸如操作数据以及图像数据之类的各种数据。
更具体地说,通信控制单元70包括远程连接请求接收单元71、远程连接结果发送单元72、远程图像接收单元73、远程图像发送单元74、远程操作接收单元75以及远程操作发送单元76。
远程连接请求接收单元71经由通信网络9从远程启动处理单元61接收用于启动远程共享处理的启动请求,并且接收来自其他电子白板2的远程参与处理单元62的用于参与远程共享处理的参与请求。远程连接结果发送单元72经由通信网络9向远程启动处理单元61发送用于启动远程共享处理的启动请求的结果,并且向其他电子白板2的远程参与处理单元62发送用于参与远程共享处理的参与请求的结果。
远程图像接收单元73从远程图像发送单元63接收图像数据(例如输出图像(C)的数据)并且向远程图像处理单元82发送所接收的图像数据,其将稍后被描述。远程图像发送单元74从远程图像处理单元82接收图像数据并且向远程图像接收单元64发送所接收的图像数据。
远程操作接收单元75从远程操作发送单元65接收操作数据(例如笔画图像(B)的数据)并且向远程操作处理单元83发送所接收的操作数据,其将稍后被描述。远程操作发送单元76从远程操作处理单元83接收操作数据并且向远程操作接收单元66发送所接收的操作数据。
〈数据管理单元80的功能性配置〉
在下文中,将参照图5描述数据管理单元80的功能性配置。
数据管理单元80包括远程连接处理单元81、远程图像处理单元82、远程操作处理单元83、操作合成处理单元84以及页面处理单元85。服务器单元90进一步包括密码管理单元810、参与位置管理表格820、图像数据管理单元830、操作数据存储单元840以及页面数据存储单元850.
远程连接处理单元81启动远程共享处理并且终止远程共享处理。远程连接处理单元81还基于通过远程连接请求接收单元71从远程启动处理单元61接收的许可信息(与用于启动远程共享处理的启动请求一同接收),或通过远程连接请求接收单元71从远程参与处理单元62接收的许可信息(与用于参与远程共享处理的参与请求一同接收),确认许可是否存在以及许可是否在有效期内。此外,远程连接处理单元81确认从作为客户端单元20的其他电子白板2所接收的参与请求的数量是否超过被允许参与远程共享处理的参与设备的预定数量。
此外,远程连接处理单元81确认与用于参与远程共享处理的参与请求一同从另一电子白板2接收的密码是否与密码管理单元810中所管理的密码相同。在其中确认密码相同的情况下,远程连接处理单元81允许请求的电子白板2参与远程共享处理。应当注意的是,例如,当启动新的远程共享处理时,远程连接处理单元81发布密码,并且该密码可以经由电话或电子邮件从作为主机设备的电子白板2的用户通信到作为参与设备的、打算参与远程共享处理的另一电子白板2的用户。随后,作为参与设备的、打算参与远程共享处理的其他电子白板2的用户可以经由诸如触摸面板之类的输入单元向该其他电子白板2输入密码,并且发送参与请求。这样,其他电子白板2可以被允许参与远程共享处理。注意在一些实施例中,当与安全性相比,向用户便利性给出更高优先级时可以省略密码的确认,并且可以仅通过许可的确认允许参与远程共享处理。
此外,在其中电子白板2作为主机设备的情况下,远程连接处理单元81在服务器单元90的参与位置管理表格820中存储参与位置信息,该参与位置信息被包括在经由通信网络9从作为参与设备的其他电子白板2的远程参与处理单元62发送的参与请求中。远程连接处理单元81随后读取存储于参与位置管理表格820的远程位置信息并且向远程连接结果发送单元72发送远程位置信息。远程连接结果发送单元72向同一主机设备的客户端单元20中的远程启动处理单元61发送远程位置信息。远程启动处理单元61在参与位置管理表格610中存储远程位置信息。这样,在主机设备中,可以在客户端单元20以及服务器单元90二者处管理远程位置信息。
远程图像处理单元82从连接到参与远程共享处理的每个电子白板2的客户端单元20(包括作为主机设备的自己的电子白板2的客户端单元20)的视频输出设备(诸如笔记本电脑6)接收图像数据(输出图像(C))并且在图像数据存储单元830中存储所接收的图像数据。此外,远程图像处理单元82基于其中在作为主机设备的自己的电子白板2的服务器单元90处接收图像数据的次序,确定显示要在远程共享处理中共享的图像数据的次序。此外,远程图像处理单元82参照参与位置管理表格820,并且根据如上述所确定的显示次序经由通信控制单元70(远程图像发送单元74)向参与远程共享处理的每个电子白板2的客户端单元20(包括作为主机设备的自己的电子白板2的客户端单元20)发送图像数据.
远程操作处理单元83在参与远程共享处理的每个电子白板2的客户端单元20(包括作为主机设备的自己的电子白板2的客户端单元20)处接收与绘制的笔画有关的各种操作数据(诸如笔画图像(B)),并且基于其中在作为主机设备的自己的电子白板2的服务器单元90处接收操作数据的次序,确定显示要在远程共享处理中共享的图像的次序。应当注意的是,各种操作数据可以与上述的各种操作数据相同。此外,远程操作处理单元83参照参与位置管理表格820并且向参与远程共享处理的每个电子白板2的客户端单元20(包括作为主机设备的自己的电子白板2的客户端单元20)发送操作数据。
操作合成处理单元84合成从远程操作处理单元83输出的每个电子白板2的操作数据,将从合成处理中生成的操作数据存储在操作数据存储单元840中,并且向远程操作处理单元83返回操作数据。随后从远程操作发送单元76将操作数据发送到作为主机设备的电子白板2的客户端单元20以及作为参与设备的每个电子白板2的客户端单元20。这样,与相同操作数据有关的图像可以在每个电子白板2处显示。图15是图解操作数据的配置的示例的表格。如图15所示,操作数据具有彼此相互关联的各项数据,包括:序列号(SEQ)、操作数据的操作名称、与操作数据的发送源相对应的电子白板2的IP地址和客户端单元20(服务器单元90)的端口号、与操作数据的目的地相对应的电子白板2的IP地址和客户端单元20(服务器单元90)的端口号、操作数据的操作对象以及操作数据的数据内容。例如,具有序列号(SEQ)1的操作数据指明在作为主机设备的电子白板2(IP地址:192.0.0.1)的客户端单元20(端口号:50001)处已绘制笔画,并且已经向作为同一主机设备的电子白板2(IP地址:192.0.0.1)的服务器单元90(端口号:50000)发送操作数据(与笔画绘制有关)。在该操作数据中,操作类型是“STROKE”,操作对象是页面数据ID“p005”,并且表示操作数据的内容的数据是表示笔画的数据。此外,具有序列号(SQE)2的操作数据指明操作数据已经从作为主机设备的电子白板2(IP地址:192.0.0.1)的服务器单元90(端口号:50000)发送到作为参与设备的另一电子白板2(IP地址:192.0.0.2)的客户端单元20(端口号:50001)。
注意,操作合成处理单元84根据其中操作数据被输入到操作合成处理单元84的次序合成操作数据。相应地,如果通信网络9不拥挤,可以根据其中通过电子白板2的用户绘制笔画的次序在参与远程共享处理的每个电子白板2的显示器3处显示笔画图像(B)。
页面处理单元85具有与在客户端单元20中的图像处理单元30的页面处理单元37相同的功能。因此,在服务器单元90中,页面处理单元85在页面数据存储单元850中存储图6到8所示的页面数据。注意,由于页面数据存储单元850可以具有与在图像处理单元30中的页面数据存储单元300的配置实质相同的配置,省略页面数据存储单元850的描述。
〈实施例的处理以及操作〉
在下文中,将参照图17和图18描述实施例的处理以及操作。图17以及图18是图解电子白板2a-2c的处理的时序图。
在图17以及图18所示的实施例中,将描述其中电子白板2a充当主机设备(服务器单元以及客户端单元),以及电子白板2b和2c充当参与远程共享处理的参与设备(客户端单元)的情况。并且,注意显示器3a、3b和3c分别连接到电子白板2a、2b和2c上。此外,笔记本电脑6a、6b和6c分别连接到电子白板2a、2b和2c上。此外,在电子白板2a、2b和2c处分别使用电子笔4a、4b和4c。
(参与处理)
首先,将参考图17描述用于使能电子白板2b以及2c参与远程共享处理的处理。
当用户接通电子白板2a的电源时,启用电子白板2a的客户端单元20。随后,当用户通过操作诸如触摸面板之类的输入单元执行用于启用电子白板2a的服务器单元90的操作时,电子白板2a的客户端单元20的远程启动处理单元61向在同一电子白板2a的服务器单元90中的远程连接请求接收单元71输出启动服务器单元90的处理的指令。这样,在电子白板2a中,在客户端单元20和服务器单元90二者处可以启动各种处理(步骤S21)。
接着,在电子白板2a的客户端单元20中的UI图像生成单元33生成用于建立与电子白板2a的连接的连接信息,并且视频重叠单元28经由显示重叠单元36在显示器3a上显示从UI图像生成单元33获取的连接信息(步骤S22)。
连接信息包括主机设备的IP地址以及所生成的用于当前远程共享处理的密码。在该情况下,通过图5所示的远程连接处理单元81检索(读取)存储在密码管理单元810的密码并且顺序地发送给远程连接结果发送单元72以及远程启动处理单元61。此外,从包括远程启动处理单元61的通信控制单元60将密码发送给图3所示的图像处理单元30并且最终输出给UI图像生成单元33。这样,密码被包含在连接信息中。随后,电子白板2a的用户经由电话或者电子邮件将连接信息通信给电子白板2b和2c的用户。应当注意的是,如果向参与设备(电子白板2b和2c)提供连接目的地管理表格440,即使连接信息中不包括主机设备的IP地址,参与设备也能够做出参与远程共享处理的参与请求。
随后,在每个电子白板2b和2c处,当用户通过操作诸如触摸面板之类的输入单元输入连接信息时,每个电子白板2b和2c的客户端单元20的远程参与处理单元62接收连接信息,并且基于包括在连接信息中的IP地址,通过经由通信网络9向电子白板2a的服务器单元90的远程连接请求接收单元71发送密码来做出参与请求(步骤S23、S24)。这样,通信控制单元70的远程连接请求接收单元71接收分别来自电子白板2b和2c的参与请求(包括密码)并且向远程连接处理单元81输出所接收的密码。
随后,远程连接处理单元81使用存储于密码管理单元810中的密码认证从每个电子白板2b和2c接收的客户端单元20的密码(步骤S25)。随后,远程连接结果发送单元72向每个电子白板2b和2c通知认证结果(步骤S26、S27)。在其中电子白板2b和2c分别在步骤S25的认证处理中成功认证的情况下,可以在作为主机设备的电子白板2a和作为参与设备的电子白板2b和2c之间建立用于远程共享处理的通信,并且每个电子白板2b和2c的客户端单元20的远程参与处理单元62使能与其他电子白板的远程共享处理的起动(步骤S28、S29)。
(输出图像显示)
在下文中,将参照图17描述用于在远程共享处理中显示输出图像(C)的处理。
首先,电子白板2b在显示器3b上显示输出图像(C)(步骤S30)。具体地,电子白板2b的图像获取单元31经由视频获取单元21从笔记本电脑6b接收在笔记本电脑6b处显示的输出图像(C)的数据,并且经由显示重叠单元36以及视频重叠单元28将所接收的图像数据发送给显示器3b。这样,可以在显示器3b上显示输出图像(C)。
接着,电子白板2b的包括图像获取单元31的图像处理单元30向远程图像发送单元63发送输出图像(C)的数据,并且包括远程图像发送单元63的通信控制单元60经由通信网络9向作为主机设备的电子白板2a的通信控制单元70发送输出图像(C)的数据(步骤S31)。这样,电子白板2a的远程图像接收单元73接收输出图像(C)的数据并且向远程图像处理单元82输出所接收的图像数据,并且远程图像处理单元82在图像数据存储单元830中存储输出图像(C)的数据。
随后,作为主机设备的电子白板2a在显示器3a上显示输出图像(C)(步骤S32)。具体地,电子白板2a的远程图像处理单元82向远程图像发送单元74输出从远程图像接收单元73接收的输出图像(C)的数据。远程图像发送单元74向作为主机设备的同一电子白板2a的客户端单元20的远程图像接收单元64输出输出图像(C)的数据。远程图像接收单元64向显示重叠单元36输出输出图像(C)的数据。显示重叠单元36向图像重叠单元28输出输出图像(C)的数据。图像重叠单元28向显示器3a输出输出图像(C)的数据。这样,显示器3a显示输出图像(C)。
接着,作为主机设备的电子白板2a的服务器单元90的包括远程图像发送单元74的通信控制单元70经由通信网络9向除了作为输出图像(C)的数据的发送源的电子白板2b以外的其他电子白板2c的通信控制单元60发送输出图像(C)的数据(步骤S33)。这样,作为参与设备的电子白板2c的远程图像接收单元64接收输出图像(C)的数据。
接着,电子白板2c在显示器3c上显示输出图像(C)(步骤S34)。具体地,电子白板2c的远程图像接收单元64向电子白板2c的显示重叠单元36输出在步骤S33中接收的输出图像(C)的数据。显示重叠单元36向图像重叠单元28输出输出图像(C)的数据。图像重叠单元28向显示器3c输出输出图像(C)的数据。这样,显示器3c显示输出图像(C)。
应当注意的是,在其中向图像重叠单元28输入除了输出图像(C)的数据以外的UI图像(A)以及笔画图像(B)的数据的情况下,显示重叠单元36生成重叠图像(A、B、C),并且视频重叠单元28向显示器3c输出重叠图像(A、B、C)。此外,在其中远程会议视频(E)的数据从远程会议终端7被发送到视频重叠单元28的情况下,视频重叠单元28通过在重叠图像(A、B、C)上重叠远程会议视频(E)的数据生成画中画(picture-in-picture)重叠图像并且向显示器3c输出所生成的画中画重叠图像。
(重叠图像显示)
在下文中,将参照图18描述在远程共享处理中显示重叠图像的处理。
首先,用户使用电子笔4b在电子白板2b上绘制笔画图像(B)(步骤S41)。
随后,如图16所示,电子白板2b的显示重叠单元36在UI图像(A)以及输出图像(C)上重叠笔画图像(B),并且视频显示单元28在电子白板2b的显示器3b上显示重叠图像(A、B、C)(步骤S42)。具体地,电子白板2b的笔画处理单元32经由事件分类单元25从坐标检测单元22以及接触检测单元24接收作为操作数据的笔画图像(B)的数据,并且向显示重叠单元36发送所接收的数据。这样,显示重叠单元36能在UI图像(A)以及输出图像(C)上重叠笔画图像(B),并且视频重叠单元28能在电子白板2b的显示器3b上显示重叠图像(A、B、C)。
随后,电子白板2b的包括笔画处理单元32的图像处理单元30向远程操作发送单元65发送笔画图像(B)的数据,并且相应地,电子白板2b的远程操作发送单元65经由通信网络9向作为主机设备的电子白板2a的通信控制单元70发送笔画图像(B)的数据(步骤S43)。相应地,电子白板2a的远程操作接收单元75接收笔画图像(B)的数据并且向远程操作处理单元83输出所接收的图像数据,并且远程操作处理单元83向操作合成处理单元84输出笔画图像(B)的数据。这样,每次在电子白板2b上绘制笔画时,在电子白板2b上绘制的笔画图像(B)的数据顺序地被发送给作为主机设备的电子白板2a的远程操作处理单元83。笔画图像(B)的数据是通过图7所示的每个笔画数据ID表示的数据。因此,例如,如上所述,由于当用户使用电子笔4b绘制字母(字母表)“T”时在电子白板2b上绘制两个笔画,顺序地发送分别通过两个笔画数据ID表示的笔画图像(B)的两份数据。
随后,作为主机设备的电子白板2a在显示器3a上显示包括从电子白板2b发送的笔画图像(B)的重叠图像(A、B、C)(步骤S44)。具体地,电子白板2a的操作合成处理单元84合成经由远程操作处理单元83顺序地发送的笔画图像(B)的多份数据,在操作数据存储单元840中存储笔画图像(B)的合成数据,并且向远程操作处理单元83返回笔画图像(B)的合成数据。这样,远程操作处理单元83向远程操作发送单元76输出从操作合成处理单元84接收的笔画图像(B)的合成数据。远程操作发送单元76向作为同一主机设备的电子白板2a的客户端单元20的远程操作接收单元66输出笔画图像(B)的合成数据。远程操作接收单元66向图像处理单元30的显示重叠单元36输出笔画图像(B)的合成数据。随后,显示重叠单元36在UI图像(A)以及输出图像(C)上重叠笔画图像(B)的合成数据。最终,视频重叠单元28在显示器3a上显示通过显示重叠单元36生成的重叠图像(A、B、C)。
随后,作为主机设备的电子白板2a的服务器单元90的包括远程操作发送单元76的通信控制单元70经由通信网络9向除了作为笔画图像(B)的数据的发送源的电子白板2b以外的其他电子白板2c的通信控制单元60发送笔画图像(B)的合成数据(步骤S45)。这样,作为参与设备的电子白板2c的远程操作接收单元66接收笔画图像(B)的合成数据。
随后,电子白板2c在显示器3c上显示重叠图像(A、B、C)(步骤S46)。具体地,电子白板2c的远程操作接收单元66向电子白板2c的图像处理单元30输出在步骤45中接收的笔画图像(B)的合成数据。图像处理单元30的显示重叠单元36在UI图像(A)以及输出图像(C)的数据上重叠笔画图像(B)的合成数据,并且向视频重叠单元28输出重叠图像(A、B、C)的数据。视频重叠单元28向显示器3c输出重叠图像(A、B、C)的数据。这样,显示器3c显示重叠图像(A、B、C)。
注意在上述处理中,在显示器3上显示输出图像(C)。然而,可以显示背景图像(D)而不是显示输出图像(C)。此外,例如,在显示器3上可以同时显示输出图像(C)和背景图像(D)两者而不是只显示输出图像(C)或背景图像(D)。
(参与终止)
在下文中,参照图18,将描述用于使能参与设备在远程共享处理中终止参与的处理。在图18所示的实施例中示出了其中电子白板2c终止参与的处理。
首先,当电子白板2c通过诸如触摸面板之类的输入设备的用户操作在远程共享处理中接收用于终止参与的参与终止请求时,电子白板2c的远程参与处理单元62向作为主机设备的电子白板2a的服务器单元90的远程连接请求接收单元71发送参与终止请求(步骤S47)。这样,电子白板2a的通信控制单元70的远程连接请求接收单元71接收来自电子白板2c的参与终止请求,并且随电子白板2c的IP地址一起向远程连接处理单元81输出参与终止请求。随后,基于从远程连接请求接收单元71发送的电子白板2c的IP地址,电子白板2a的远程连接处理单元81从参与位置管理表格820删除做出参与终止请求的电子白板2c的IP地址以及其中安装电子白板2c的位置的名称。随后,远程连接处理单元81向远程连接结果发送单元72输出电子白板2c的IP地址以及删除的通知。
随后,包括远程连接结果发送单元72的通信控制单元70经由通信网络9向电子白板2c的客户端单元20的通信控制单元60发送终止参与的参与终止指令(步骤S48)。相应地,电子白板2c的通信控制单元60的远程参与处理单元62断开远程共享处理的通信来执行用于终止参与的终止处理,并且这样,能终止在远程共享处理中的参与(步骤S49)。
(第一示例)
〈子窗口显示〉
在下文中,将参照图19A和19B描述子窗口(第二图像的示例)401。图19A和19B是图解显示器3上显示的子窗口401的示例的图示。图19A显示连接到显示器3的远程会议终端7。图19B显示在显示器3的侧面403上布置的监视器按钮402。监视器按钮402是操作接收单元。用户使用监视器按钮402通知电子白板2用于显示子窗口401的显示请求。应当注意的是,可以在电子白板2上布置诸如监视器按钮402之类的基于用户操作检测用于显示子窗口401的显示请求的操作接收单元。
响应于其中按下图19B所示的监视器按钮402的事件,视频重叠单元28获取要由远程会议终端7显示的图像的图像信号,并且在显示器3的子窗口401处显示该图像。换句话说,在显示器3正在显示的图像(第一图像)上重叠并且显示通过使用图像信号形成的子窗口401。当用户再次按下监视器按钮402时,隐藏子窗口401。应当注意的是,例如,即使用户不按下监视器按钮402,当视频重叠单元28检测线缆10a2的连接时在显示器3上可以显示子窗口401。在该情况下,检测图像信号作为显示请求。
参照图20,将描述通过远程会议终端7显示的图像的示例。在图20中,经由通信管理系统500连接远程会议终端7a以及远程会议终端7b。通信管理系统500是执行用于远程会议终端7a和7b的呼叫控制的呼叫控制服务器。通信管理系统500在远程会议终端7a和远程会议终端7b间执行通信连接。显示器130aa连接到远程会议终端7a处并且显示器130db连接到远程会议终端7b处。
远程会议终端7b拍摄(film)在远程会议终端7b周围的包括诸如用户db的区域,并且向远程会议终端7a发送所拍摄的图像数据。类似地,远程会议终端7a拍摄在远程会议终端7a周围的包括诸如用户aa的区域,并且向远程会议终端7b发送所拍摄的图像数据。此外,远程会议终端7a合成由远程会议终端7a自身拍摄的图像以及从远程会议终端7b接收的图像来创建单一图像,并且在显示器130aa上显示该单一图像。远程会议终端7b类似地创建并且显示单一图像。尽管该图像大部分是视频,该图像也可以静态图像。此外,可以在远程会议终端7a和远程会议终端7b间发送和接收声音(声音数据)。
这样,在互相确认通信伙伴之间的情况的同时,用户aa以及当前处于远离用户aa当前所处的区域的区域的用户bb能执行远程会议。注意在下文中,当显示器130aa以及130db没有被区分时,其被称为“显示器130”,并且当远程会议终端7a以及远程会议终端7b没有被区分时,其被称为“远程会议终端7”。
在显示器130上显示的图像是在电子白板2的子窗口401上显示的图像。在其中远程会议终端7被连接到电子白板2的情况下,视频重叠单元28在子窗口401上显示由远程会议终端7在显示器130上正在显示的图像。用户能通过观察显示器3确认当前处于远程区域的会议伙伴的情况。应当注意的是,用户是否能同时连接远程会议终端7到显示器130以及电子白板2二者取决于远程会议终端的规格(配置)。然而,即使当远程会议终端7被连接到显示器130以及电子白板2二者,相比于观察显示器130,用户能通过观察显示器3用更少的视线活动(眼睛的活动)确认处于远程区域的会议伙伴的情况。
应当注意的是,经由线缆10a2连接到电子白板2的设备不限于远程会议终端7。例如,可以连接诸如笔记本电脑6的之类用于显示图像的外部设备。如果经由线缆10a2连接输出图像(图像数据)的设备,电子白板2能在子窗口401上显示该图像。
〈〈显示子窗口时的不便〉〉
然而,在其中电子白板2在显示器3上显示子窗口401的情况下,需要显示控制器113在显示控制器的存储器11中保存(存储)从包括在GPU 112中的视频存储器读取的图像数据以及从远程会议终端7接收的图像数据。当从CPU 101等报告监视器按钮被按下时,显示控制器113分配用于远程会议终端7的预定存储区域。结果,用于存储其中UI图像(A)、笔画图像(B)以及输出图像(C)被重叠的图像数据(或其中UI图像(A)、笔画图像(B)以及背景图像(D)被重叠的图像数据)的存储区域变小。为了以小存储区域在显示器3上显示图像数据,显示控制器113自动将色彩空间从YUV444改变到YUV422。
在此,YUV的“Y”表示亮度,并且“U”和“V”表示色差。YUV444表示一个像素的YUV具有24位(各自的8位的总和)。另一方面,YUV422表示一个像素的Y具有8位,并且表示两个像素的U以及V分别具有8位(所需的用于显示一个像素的平均位数是16位)。因此,YUV422能够显示的层次少于YUV444能够显示的层次,并且对于用户的眼睛来说似乎对比度下降。当对比度下降时,用浅色绘制的基准线、网格线、短线、小点等变得难以观察(在显示内容中发生信息的缺失)。
应当注意的是,基准线以及网格线是作为用于用户手写字母等的水平方向以及垂直方向的标示的线(用于掌握手写位置的线)。在下文中,可以将基准线、网格线、短线以及小点等变得难以观察称为可视性的降低。
此外,尽管在实施例中描述了其中用浅色绘制的基准线、网格线、短线或小点对于用户变得难以观察的示例,其中可视性降低的内容(手写对象)不限于此。
〈〈显示子窗口时的处理〉〉
因此,在实施例的第一示例中,在其中显示器3的色彩空间变化的情况下,通过改变对比度防止可视性的降低如下。换句话说,当子窗口401被重叠并且显示在显示器3正在显示的图像上时,显示模式被改变到用于防止经由色彩空间的变化导致的信息的缺失的显示模式。改变对比度是显示模式(用于显示图像的模式)变化的示例。
首先,如图3所示,背景生成单元34包括对比度值存储单元34a。对比度值存储单元34a存储以下的对比度表格。
【表.1】
子窗口不存在 对比度值A
子窗口存在 对比度值B
在对比度表格中,与子窗口401存在或不存在相关联地登记对比度值A以及B。对应于子窗口401不存在的对比度值A是用于在YUV444的色彩空间中清楚地显示显示器3的图像的对比度值。换句话说,当子窗口401不存在时使用对比度A。对比度值(第一对比度值)A可以是当电子白板2发货(shipped)时已设置的初始值(换句话说,已预先设置初始值)或者通过用户确定其适当而设置的值。
对应于子窗口401存在的对比度值(第二对比度值)B是用于在YUV422的色彩空间中清楚地显示用浅色绘制的基准线、网格线、短线、小点等的对比度值。换句话说,当子窗口401存在时(子窗口401被重叠并且显示在显示器3正在显示的图像上),使用不同于对比度值A的第二对比度值B。当电子白板2发货时,已设置对比度值B。换句话说,已预先设置对比度值B。然而,在电子白板2发货后对比度值B对用户或者服务人员是可调的。
对比度值越大,最大亮度/最小亮度的比值就越大。这表明当对比度值大时屏幕看起来亮。然而,当对比度值高时,由于具有低浓度(density)的像素被环境光线擦除(影响),屏幕变得难以观察。因此,为了使具有低浓度的像素易于观察,需要降低对比度。由于该原因,在许多情况下,对比度值B小于对比度值A。然而,由于用户可以将对比度值A设置得更小并且对比度值B是可调的值,“对比度值B小于对比度值A”并不一定正确。换句话说,在一些情况下对比度值B可以大于对比度值A。
在其中子窗口401被显示在电子白板2上(在具有低层次的色彩空间中显示)的情况下,通过经由背景生成单元34将对比度值切换为对比度值B,即使显示子窗口401也可以防止可视性的降低。
〈用于切换对比度值的操作过程〉
图21是图解用于切换对比度值的过程的示例的流程图。图21所示的过程响应于其中按下监视器按钮402或启动电子白板2的事件开始。
首先,将描述在图21中用于控制的变量。通常,用户可设置的用于显示器3的对比度值的范围是有限的。例如,存在其中对比度值可以在0到100的范围内、-100到+100的范围内或-50到+50的范围内设置的情况。在第一示例中,在用于控制对比度值的变量中设置能通过对比度值取得的值或不能通过对比度值取得的值。该变量(在下文中,称为控制值)指明当监视器按钮402被按下时是否正在显示子窗口401的状态。基于通过该变量保存的值,用于显示器3的对比度值在对比度值A以及对比度值B间切换。
接着,例如,在第一示例的显示器3中,可以在“0到100”的范围内设置对比度值。即,用于显示器3的对比度值不会变为负值。此外,当启动电子白板2时,初始化控制值。例如,控制值被设置为-1。然而,本次设置的控制值只要其为负值则并不限于-1。其用于使用与子窗口401不存在相对应的对比度值A显示图像,即使当在其中显示子窗口401的状态下重启电子白板2时(参照图21稍后描述)。此外,当正在启动时,在显示控制器113中设置对比度值A。
将描述图21所示的过程。在下文中,生成诸如背景图像(D)的网格的背景生成单元34执行控制。然而,显示器30的任一单元或视频重叠单元28可以执行该控制。
在步骤S10中,背景生成单元34确定控制值是否大于或等于0。首先,将描述假设控制值为-1的情况。当控制值为-1时,当前在显示器3上并未显示子窗口401。
在其中背景生成单元34确定控制值并不大于或等于0的情况下(步骤S10中的否),在步骤S20中背景生成单元34确定监视器按钮402是否被打开(按下)或未被打开。
在其中背景生成单元34确定监视器按钮未被打开的情况下(步骤S20中的否),由于并未显示子窗口401,处理返回步骤S10。
在其中背景生成单元34确定监视器按钮402被打开的情况下(步骤S20中的是),由于用户执行用于显示子窗口401的操作,背景生成单元34在步骤S30中从显示控制器113获取当前的对比度值。随后,背景生成单元34在对比度表格中存储所获取的对比度值作为对比度值A。应当注意的是,本次存储的对比度值将被用于下次对比度值被切换到对比度值A时。
接着,在步骤S40中背景生成单元34从对比度表格读取对比度值B,并且在显示控制器113中设置所读取的对比度值B。这样,即使在显示器3上显示子窗口401也可以防止可视性的降低。
此外,背景生成单元34设置在步骤30中获取的对比度值作为步骤S50中的控制值用于控制。在第一示例中,在步骤S50中设置的控制值一定是正值。相应地,只要控制值是正值,在步骤50中设置的控制值并不限于在步骤S30中获取的对比度值。由于处理返回步骤S10,再次从步骤S10描述处理。当正值被设置为控制值,背景生成单元34确定该控制值大于或等于0(步骤S10中的是)。
接着,在步骤S60中背景生成单元34确定监视器按钮402是否被关闭或未被关闭。
在其中背景生成单元34确定监视器按钮402未被关闭(步骤S60中的否)的情况下,在正在显示子窗口401的同时处理返回步骤S10。即,不断地用对比度值B显示子窗口401。
在其中背景生成单元34确定监视器按钮402被关闭(步骤S60中的是)的情况下,由于用户执行用于隐藏子窗口401的操作,背景生成单元34在步骤S70中读取来自对比度表格的对比度值A,并且在显示控制器113中设置所读取的对比度值A。这样,用通过用户设置的对比度值A显示显示器3。
接着,在步骤S80中背景生成单元34设置-1为控制值。此后,处理返回步骤S10,随后,由于控制值是负值(-1),执行步骤S10到S50。此后,重复执行处理。
如上所述,根据第一示例电子白板2基于是否显示子窗口401切换(改变)对比度值,以便防止基准线、网格线、短线、小点等变得难以观察。
应当注意的是,在实施例的第一示例中尽管之前已在对比度表格中设置对比度值B,但是本发明并不限于此。背景生成单元34可以计算对比度值B。例如,对比度值B能被设置为小于对比度值A的值。此外,背景生成单元34可以通过计算作为对比度值A的M%的值来减小对比度。例如,M可以为80到90。可以适当地设置M。可选地,背景生成单元34可以基于亮度值改变M。亮度值越高,当显示子窗口401时越难观察网格线等。相应地,亮度值越高,背景生成单元34用于计算对比度值B所使用的M越小。
应当注意的是,在第一示例中主要描述背景图像(D)的可视性。然而,由于当色彩空间变化时,显示器3的对比度变化,还能防止UI图像(A)、笔画图像(B)以及输出图像(C)的可视性降低。相应地,即使在UI图像(A)、笔画图像(B)以及输出图像(C)上显示基准线、网格线、短线、小点等,可以在对用户易于观察的状态下显示图像。
(第二示例)
在实施例的第二示例中,电子白板2使背景图像(D)的浓度更高以便当显示子窗口401时防止可视性减低。使线和/或点的浓度更高是显示模式的变化的示例。
图22是图解根据实施例的第二示例的电子白板2的功能性配置的框图。注意,具有与第一示例的元件相同附图标记的第二示例的元件作用类似。因此,可以适当地省略其描述。
在第二示例的电子白板2中,背景生成单元34包括浓度值存储单元34b。浓度值存储单元34b存储以下浓度表格。
【表格.2】
子窗口不存在 浓度值A
子窗口存在 浓度值B
在浓度表格中,与子窗口401存在或不存在相关联地登记浓度值A以及B。对应于子窗口401不存在的浓度值A是用于在YUV444的色彩空间中显示背景图像(D)的浓度值(第一设置值的示例)。对应于子窗口401存在的密度值B是用于在YUV422的色彩空间中显示背景图像(D)的浓度值(第二设置值的示例)。浓度值A和B是当电子白板2已发货时预先设置的初始值或者通过用户确定其适当而设置的值。
浓度值B是用于在易于观察的状态下在YUV422的色彩空间中显示用浅色绘制的网格线或小点的浓度值。例如,描述其中背景图像(D)的网格线是灰色的情况。当浓度值A的RGB值是(128,128,128)时,浓度值B的RGB值是(100,100,100)。即,当使用浓度值B时,采用同样的灰色的背景图像(D)的网格线被深色地显示。
在实施例的第二示例中,在其中子窗口401在电子白板2上显示(在YUV422的色彩空间中显示)的情况下,通过经由背景生成单元34将浓度值切换到浓度值B,即使显示子窗口401也可以防止可视性降低。
〈用于切换密度值的操作过程〉
图23是图解用于切换密度值的过程的示例的流程图。在图23中,将主要描述与图21所示的步骤不同的步骤。在第二示例中,控制值被用于变量。类似于第一示例,设置控制值为-1或正值。
首先,在步骤S10中,背景生成单元34确定控制值是否大于或等于0。将描述假设控制值为-1的情况。当控制值为-1时,当前在显示器3上并未显示子窗口401。
在其中背景生成单元34确定控制值并不大于或等于0的情况下(步骤S10中的否),在步骤S20中背景生成单元34确定监视器按钮402是否被打开(按下)或未被打开。
在其中背景生成单元34确定监视器按钮被打开的情况下(步骤S20中的是),背景生成单元34在步骤S40’中从浓度值表格中获取浓度值B。这样,甚至在显示器3上显示子窗口401,用浅色绘制的网格线以及小点也能深色地显示。
此外,背景生成单元34在步骤S50’中设置正值为控制值用于控制。背景生成单元34可以设置浓度值A。
由于处理返回步骤S10,再次从步骤S10描述处理。当正值被设置为控制值时,背景生成单元34确定控制值大于或等于0(步骤S10中的是)。
接着,在步骤S60中背景生成单元34确定监视器按钮402是否被关闭或未被关闭。
在其中背景生成单元34确定监视器按钮402未被关闭(步骤S60中的否)的情况下,当正在显示子窗口401时处理返回步骤S10。即,持续地用浓度值B绘制背景图像(D)并且显示子窗口401。
在其中背景生成单元34确定监视器按钮402被关闭(步骤S60中的是)的情况下,背景生成单元34在步骤S70’中读取来自浓度值表格的浓度值A来生成背景图像(D)。
接着,在步骤S80中背景生成单元34设置-1为控制值用于控制。此后,处理返回步骤S10,随后,由于控制值是负值(-1),执行步骤S10到S50’。此后,重复执行该处理。
如上所述,根据第二示例的电子白板2基于是否显示子窗口401切换(改变)背景图像(D)的浓度值,以便防止基准线、网格线、短线、小点等变得难以观察。
应当注意的是,尽管在实施例的第二示例中描述了背景图像(D)的可视性,关于通过UI图像生成单元33生成的UI图像(A),用浅色绘制的菜单可以深色地显示。关于笔画图像(B),由于笔画是用具有充分可视性的粗线和深色绘制的,当显示子窗口401时可视性降低的可能性低。即使可视性减低,笔画处理单元32能使笔画的色彩的浓度更高。关于输出图像(C),由于笔记本PC6发送输出图像(C),因此向笔记本电脑做出用于使浓度更高的请求(或可以发出用于降低对比度的请求)。这样,即使在输出图像(C)上显示基准线、网格线、短线、小点等,该图像在易于观察的状态下显示。
此外,尽管在第二示例中在其中要显示子窗口401的情况下使具有同样的灰色的浓度更高,背景生成单元34可以改变背景图像(D)的色彩。例如,在其中在背景图像(D)中的白色背景中正在绘制灰色网格线等的情况下,通过使R(红)的值和/或B(蓝)的值更大,网格线等变得易于观察。相应地,通过改变RGB的比值改变色彩是有效的。可以类似地处理(显示)UI图像(A)、笔画图像(B)以及输出图像(C)。
此外,背景生成单元34可以使在背景图像(D)中绘制的线等更粗。通过使线更粗,即使当使用相同的色彩或相同的浓度时,网格线等变得易于观察。可以类似地处理(显示)UI图像(A)、笔画图像(B)以及输出图像(C)。
此外,当要显示子窗口401时,可以改变背景图像(D)的浓度(稠度)、色彩以及粗度中的至少一个。此外,结合在第一示例中描述的对比度的变化,可以改变浓度(稠度)、色彩以及粗度中的至少一个。换句话说,在实施例中,基于是否在显示器3上正在显示的图像(第一图像)上重叠以及显示子窗口401,可以改变与对比度值、图像的图像浓度、图像的色彩以及图像的粗度中的至少一个有关的设置值。
〈另一示例〉
此外,本发明并不限于这些实施例,可以在不偏离本发明的范围内做出各种变动和修改。
在实施例中,描述了色彩空间由于显示控制器113的存储容量的减小而发生变化。然而,该实施例可以应用于其中由于除了显示控制器113以外的单元的存储容量的减小从而色彩空间变化的情况。此外,显示控制器113可以称为LCD控制器,并且其名称不受限制。
此外,尽管在实施例中将YUV444以及YUV422描述为显示器3的色彩空间的示例,用于显示器3的色彩空间并不限于此。例如,一些实施例可以将YUV444变为YUV420或YUV411。此外,一些实施例可以将YUV422变为YUV420或YUV411。
即,实施例能应用于色彩空间YUV444、色彩空间YUV422、色彩空间YUV420以及色彩空间YUV411中的两个,以防止在图像中相对地导致的信息的缺失。
此外,可以使用YCbCr而不是YUV作为显示器3的色彩空间。此外,在其中视频重叠单元28未将RGB转换为YUV而向显示器3发送RGB信号的情况下,可以使用RGB系统的色彩空间。
本申请基于于2015年4月27日向日本专利局提交的申请号为2015-090237的日本在先申请,并且要求该在先申请的优先权,其全部内容通过引用合并在此。
【附图标记列表】
1 图像处理系统
2 电子白板
3 显示器
4 电子笔
6 笔记本电脑
7 远程会议终端
9 通信网络
28 视频重叠单元
30 图像处理单元
32 笔画处理单元
33 UI图像生成单元
34 背景生成单元
34a 对比度值存储单元
34b 浓度值存储单元
401 子窗口
402 监视器按钮

Claims (11)

1.一种用于在显示设备上显示第一图像的信息处理设备,所述信息处理设备包括:
显示请求检测单元,配置来检测至所述显示设备的、用于显示与所述第一图像不同的第二图像的显示请求;
图像获取单元,配置来从外部获取所述第二图像的图像信号;
重叠显示单元,配置来在其中所述显示请求检测单元检测所述显示请求的情况下,在所述第一图像上重叠以及显示通过使用所述图像信号形成的所述第二图像;以及
显示模式改变单元,配置来在其中所述第二图像被重叠以及显示在所述第一图像上的情况下,改变所述第一图像的至少一种显示模式。
2.如权利要求1所述的信息处理设备,
其中所述显示模式改变单元被配置来在其中所述第二图像被重叠以及显示在所述第一图像上的情况下,将显示模式改变为用于防止通过在所述第一图像上重叠以及显示所述第二图像从而在所述第一图像中导致的信息缺失的显示模式,以及
其中所述重叠显示单元被配置来用通过所述显示模式改变单元改变的、用于防止信息缺失的所述显示模式显示所述第一图像。
3.如权利要求2所述的信息处理设备,
其中所述显示模式改变单元被配置来在其中所述第二图像被重叠以及显示在所述第一图像上的情况下,将显示模式改变为用于防止通过所述显示设备的色彩空间的变化导致的信息缺失的显示模式,以及
其中所述重叠显示单元被配置来用所述显示模式显示所述第一图像,所述显示模式为通过所述显示模式改变单元改变的、用于防止通过所述显示设备的色彩空间的变化导致的信息缺失的所述显示模式。
4.如权利要求1到3中的任何一项所述的信息处理设备,
其中所述显示模式改变单元被配置来在其中所述第二图像被重叠以及显示在所述第一图像上的情况下,在所述显示设备中设置第二对比度值,所述第二对比度值与在其中所述显示设备上只显示所述第一图像的情况下使用的第一对比度值不同,并且其中所述重叠显示单元被配置来在其中设置所述第二对比度值的所述显示设备中的所述第一图像上重叠以及显示所述第二图像。
5.如权利要求1到4中的任何一项所述的信息处理设备,
其中所述显示模式改变单元被配置来在其中所述第二图像被重叠以及显示在所述第一图像上的情况下,设置与所述第一图像的图像浓度、所述第一图像的粗度以及所述第一图像的色彩中的至少一个有关的第二设置值,所述第二设置值与其中在所述显示设备上只显示所述第一图像的情况下使用的、与所述第一图像的图像浓度、所述第一图像的粗度以及所述第一图像的色彩中的至少一个有关的第一设置值不同,以及
其中所述重叠显示单元被配置为在所述显示设备上、在用所述第二设置值生成的第一图像上重叠以及显示所述第二图像。
6.如权利要求1到5中的任何一项所述的信息处理设备,其中所述显示模式改变单元被配置为基于通过变量保存的值,在其中所述显示设备上只显示所述第一图像的第一显示模式以及其中所述第二图像被重叠以及显示在所述第一图像上的第二显示模式间切换显示模式。
7.如权利要求6所述的信息处理设备,
其中所述显示模式改变单元被配置为在其中显示模式从所述第一显示模式切换到所述第二显示模式的情况下存储所述第一显示模式,
其中,在其中显示模式从所述第二显示模式切换到所述第一显示模式的情况下,所述显示模式改变单元被配置为获取通过所述显示模式改变单元存储的所述第一显示模式,以及
其中所述重叠显示单元被配置为在所述显示设备上用通过所述显示模式改变单元获取的所述第一显示模式显示所述第一图像。
8.如权利要求1到7中的任何一项所述的信息处理设备,其中所述显示请求检测单元被配置为基于对所述信息处理设备上布置的操作接收单元的操作,检测至所述显示设备的、用于显示所述第二图像的所述显示请求。
9.如权利要求1到8中的任何一项所述的信息处理设备进一步包括:
笔画图像生成单元,配置来检测在所述显示设备的显示表面上的手写位置从而通过连接所述手写位置生成笔画图像;
其中在所述第一图像中绘制作为手写位置的标示的线或点,以及
其中所述显示模式改变单元被配置为在其中所述第二图像被重叠以及显示在所述第一图像上的情况下,将显示模式改变为用于防止所述线或点的可视性降低的显示模式。
10.如权利要求4所述的信息处理设备,其中所述第二对比度值比所述第一对比度值小。
11.一种通过信息处理设备执行的用于在显示设备上显示第一图像的图像显示方法,所述图像显示方法包括:
显示请求检测步骤,检测至所述显示设备的、用于显示与所述第一图像不同的第二图像的显示请求;
图像获取步骤,从外部获取所述第二图像的图像信号;
重叠显示步骤,在其中所述显示请求检测步骤中检测所述显示请求的情况下,在所述第一图像上重叠以及显示通过使用所述图像信号形成的所述第二图像;以及
显示模式改变步骤,在其中在所述第一图像上重叠以及显示所述第二图像的情况下改变所述第一图像的至少一种显示模式。
CN201680021709.7A 2015-04-27 2016-04-15 信息处理设备以及图像显示方法 Pending CN107431840A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2015090237A JP2016208394A (ja) 2015-04-27 2015-04-27 情報処理装置、画像表示方法
JP2015-090237 2015-04-27
PCT/JP2016/002066 WO2016174845A1 (en) 2015-04-27 2016-04-15 Information processing apparatus, and image displaying method

Publications (1)

Publication Number Publication Date
CN107431840A true CN107431840A (zh) 2017-12-01

Family

ID=57199147

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201680021709.7A Pending CN107431840A (zh) 2015-04-27 2016-04-15 信息处理设备以及图像显示方法

Country Status (5)

Country Link
US (1) US10397638B2 (zh)
EP (1) EP3289769A4 (zh)
JP (1) JP2016208394A (zh)
CN (1) CN107431840A (zh)
WO (1) WO2016174845A1 (zh)

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10834231B2 (en) * 2016-10-11 2020-11-10 Synergex Group Methods, systems, and media for pairing devices to complete a task using an application request
CN117311543A (zh) * 2017-09-01 2023-12-29 平蛙实验室股份公司 触摸感测设备
CN107610243A (zh) * 2017-09-29 2018-01-19 广州视睿电子科技有限公司 立体图形的调节控制器生成、调节控制方法及相应装置
US11061641B2 (en) * 2019-02-28 2021-07-13 Ricoh Company, Ltd. Screen sharing system, and information processing apparatus
US11551480B2 (en) 2019-04-11 2023-01-10 Ricoh Company, Ltd. Handwriting input apparatus, handwriting input method, program, and input system
US11132122B2 (en) 2019-04-11 2021-09-28 Ricoh Company, Ltd. Handwriting input apparatus, handwriting input method, and non-transitory recording medium
CN110471607B (zh) * 2019-08-02 2020-06-09 掌阅科技股份有限公司 手写笔迹显示方法、手写阅读设备及计算机存储介质
US11733830B2 (en) 2019-11-20 2023-08-22 Ricoh Company, Ltd. Display apparatus for displaying handwritten data with displayed operation menu
CN115039063A (zh) 2020-02-10 2022-09-09 平蛙实验室股份公司 改进的触摸感测设备

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH10214075A (ja) * 1997-01-29 1998-08-11 Hitachi Ltd 画像表示装置及び画像表示方法
CN1809863A (zh) * 2003-05-16 2006-07-26 纯深有限公司 显示控制系统
EP2071551A2 (en) * 1999-05-10 2009-06-17 Panasonic Corporation Image display apparatus and image display method
US20150009278A1 (en) * 2013-07-08 2015-01-08 Avaya, Inc System and method for whiteboard collaboration

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4036059B2 (ja) 2002-08-28 2008-01-23 セイコーエプソン株式会社 Dvdプレーヤを内蔵した表示装置
JP2006154064A (ja) * 2004-11-26 2006-06-15 Matsushita Electric Ind Co Ltd 表示方法及び表示装置
WO2007147081A1 (en) * 2006-06-14 2007-12-21 Nik Software, Inc. Graphical user interface and related method
JP2008287198A (ja) 2007-05-15 2008-11-27 Tadano Ltd デイスプレイのコントラスト調整装置
JP2011090038A (ja) 2009-10-20 2011-05-06 Sanyo Electric Co Ltd 投写型映像表示装置
JP5796380B2 (ja) * 2011-07-11 2015-10-21 セイコーエプソン株式会社 画像処理方法、画像処理装置及び画像表示システム
JP6036621B2 (ja) 2013-09-17 2016-11-30 株式会社リコー システム、情報処理装置

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH10214075A (ja) * 1997-01-29 1998-08-11 Hitachi Ltd 画像表示装置及び画像表示方法
EP2071551A2 (en) * 1999-05-10 2009-06-17 Panasonic Corporation Image display apparatus and image display method
CN1809863A (zh) * 2003-05-16 2006-07-26 纯深有限公司 显示控制系统
US20150009278A1 (en) * 2013-07-08 2015-01-08 Avaya, Inc System and method for whiteboard collaboration

Also Published As

Publication number Publication date
WO2016174845A1 (en) 2016-11-03
EP3289769A4 (en) 2018-05-02
US20180131991A1 (en) 2018-05-10
US10397638B2 (en) 2019-08-27
JP2016208394A (ja) 2016-12-08
EP3289769A1 (en) 2018-03-07

Similar Documents

Publication Publication Date Title
CN107431840A (zh) 信息处理设备以及图像显示方法
CN108476267B (zh) 电子白板、记录介质和信息处理方法
CN108475160A (zh) 图像处理装置、图像显示方法和程序
EP3251055B1 (en) Information processing apparatus and program
US20150091940A1 (en) Image processing apparatus
CN107209633A (zh) 电子信息板设备和方法
US20170177190A1 (en) Electronic whiteboard, method for displaying data, and image processing system
JP6885416B2 (ja) 電子黒板、電子黒板の画像処理方法、及びプログラム
CN107615230A (zh) 信息处理装置、图像显示方法和程序
CN107037939B (zh) 电子黑板和图像处理方法
US11610560B2 (en) Output apparatus, output system, and method of changing format information
CN108139825A (zh) 电子黑板、存储介质和信息显示方法
JP6631643B2 (ja) 画像処理装置、画像処理システム及び画像処理方法
JP2017091559A (ja) 装置及び方法
JP6036621B2 (ja) システム、情報処理装置
JP7298224B2 (ja) 表示装置、及び表示方法
WO2016121403A1 (en) Information processing apparatus, image processing system, and program
JP2013232124A (ja) 電子会議システム
JP2020149634A (ja) 画像処理装置、方法、およびプログラム

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20171201

WD01 Invention patent application deemed withdrawn after publication