CN105378624B - 在交互出现于白板上时显示交互 - Google Patents

在交互出现于白板上时显示交互 Download PDF

Info

Publication number
CN105378624B
CN105378624B CN201480036147.4A CN201480036147A CN105378624B CN 105378624 B CN105378624 B CN 105378624B CN 201480036147 A CN201480036147 A CN 201480036147A CN 105378624 B CN105378624 B CN 105378624B
Authority
CN
China
Prior art keywords
blank
terminal server
interaction
server client
client
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201480036147.4A
Other languages
English (en)
Other versions
CN105378624A (zh
Inventor
J·C·科普伦
D·兰迪斯
K·塔尔伯特
G·卡尔德维尔
N·菲什
S·福尔克纳
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Microsoft Technology Licensing LLC
Original Assignee
Microsoft Technology Licensing LLC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Microsoft Technology Licensing LLC filed Critical Microsoft Technology Licensing LLC
Publication of CN105378624A publication Critical patent/CN105378624A/zh
Application granted granted Critical
Publication of CN105378624B publication Critical patent/CN105378624B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1454—Digital output to display device ; Cooperation and interconnection of the display device with other functional units involving copying of the display data of a local workstation or window to a remote workstation or window so that an actual copy of the data is displayed simultaneously on two or more displays, e.g. teledisplay
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04847—Interaction techniques to control parameter settings, e.g. interaction with sliders or dials
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L51/00—User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail
    • H04L51/04—Real-time or near real-time messaging, e.g. instant messaging [IM]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L51/00—User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail
    • H04L51/07—User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail characterised by the inclusion of specific contents
    • H04L51/10—Multimedia information
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/40—Support for services or applications
    • H04L65/403—Arrangements for multi-party communication, e.g. for conferences
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0354—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of 2D relative movements between the device, or an operating part thereof, and a plane or surface, e.g. 2D mice, trackballs, pens or pucks
    • G06F3/03545—Pens or stylus

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

客户机在白板上作出的实时交互被显示在当前正在查看该白板的远程客户端上。显示在远程客户端上的实时交互可以包括各种不同的交互。例如，可以查看远程客户端正在触摸该白板或者用触笔与该白板交互的位置。远程用户的当前墨迹笔划在出现时也可以被查看。白板上的交互可以取决于执行该交互的远程用户而被不同地显示。白板也可以在该白板上显示每一个远程用户当前正在查看的位置。用户还可以跟踪另一用户的动作。当变化被提交给该白板时，远程客户端更新显示以反映所提交的状态。

Description

在交互出现于白板上时显示交互
背景
诸如笔记本应用和白板应用之类的不同计算机应用允许用户查看和保存各种不同的内容。这些应用一般用于自由形态的信息收集。例如，应用可允许用户将笔记、链接、网页、图片、文档等包括在画布上。不同的用户可能能够共享画布。例如，不同的用户可被允许读取画布、编辑画布上的内容等等。
概述
提供该概述以便以简化形式介绍概念的选集，所述概念在以下详细描述中被进一步描述。该概述不意图标识所要求保护的主题的关键特征或基本特征，也不意图被用来帮助确定所要求保护的主题的范围。
客户端在白板上作出的实时交互被显示在当前正在查看该白板的远程客户端上。显示在远程客户端上的实时交互可以包括各种不同的交互。例如，可以查看远程客户端正在触摸该白板或者用触笔与该白板交互的位置。远程用户的当前墨迹笔划在出现时也可以被查看。例如，触笔的位置可以在墨迹被识别之前被发送至远程客户端。白板上的交互可以取决于执行该交互的远程用户而被不同地显示。例如，每个不同远程用户的交互可以在白板上以不同色彩显示。白板也可以在该白板上显示每一个远程用户当前正在查看的位置。用户还可以跟踪另一用户的动作。例如，当用户正在跟踪另一用户的动作时，白板的视图在远程用户改变其视图时变化。当变化被提交给该白板时，远程客户端更新显示以反映所提交的状态。例如，当接收到墨水变化通知时，可能需要更新实时墨水信息来反映所提交的结果。实时信息还可以包括用户何时进入白板以及用户何时离开白板。
附图简述
图1显示了在交互出现于白板上时显示交互的系统；
图2显示了白板上其他远程用户正在查看的位置；
图3图示显示了在尺寸改变操作出现于白板上时该尺寸改变操作的触摸交互；
图4显示了不同的远程用户位置和它们在白板上的交互；
图5显示了用户进入白板和离开白板；
图6显示了使用实时通信信道和持久信道在白板上显示交互的系统；
图7图示在交互出现于白板上时显示交互；
图8图示在与白板相关联的交互出现时显示所述交互的示例性在线系统；
图9是图示计算设备的示例物理组件的框图；
图10A图示一移动计算环境；
图10B是图示移动计算设备的组件的框图；以及
图11图示一示例性的系统体系结构。
详细描述
现在参照附图将描述各种实施例，其中相同数字表示相同元件。
图1显示了在交互出现于白板上时显示交互的系统。
如图所示，系统100包括应用110、远程客户端120、存储器130、白板管理器26、服务105、平板计算设备140、和计算设备150。
白板管理器26被配置成执行与将用户在白板上作出的实时交互显示给也在查看该白板的远程客户端有关的操作。
平板140显示用户160正在触摸白板175。响应于检测到该触摸交互，白板管理器26将实时交互信息发送至正在与白板175交互的其他远程客户端120。在当前示例中，计算设备150显示正在和与用户160相同的白板交互的远程客户端的视图。白板管理器26将包括来自用户160的触摸交互在内的实时交互信息发送至计算设备150，以使用户160作出的触摸交互162被显示在白板的显示上。
用户170正在白板175上执行墨迹操作。与用户170的当前墨迹笔划有关的信息被白板管理器26所接收并且被传递至其他远程客户端120。如图所示，“C”被显示在白板175上，白板175被显示在平板140上。根据一实施例，尽管与一动作相关联的交互尚未被白板提交，但是交互与所提交的状态不同地显示。例如，在从白板管理器26接收到墨迹提交之前，“C”以较亮的色彩被显示在远程设备上。可以使用其他显示方法(例如，同一色彩、突出显示、不同色彩等等)。墨迹156的当前位置在墨迹154的前一位置被显示的同时被显示。
当变化被白板管理器26提交给白板175时，远程客户端更新显示以反映所提交的状态。在变化被提交之后，每一个所显示的白板都包括所提交的项目的同一显示画面。例如，当接收到墨水变化通知时，更新实时墨水信息来反映所提交的结果。
显示在远程客户端上的实时交互可以包括各种不同的交互。例如，可以查看远程客户端正在触摸白板或者用设备(例如，鼠标、触笔、指示器、...)与该白板交互的位置。例如，触笔的位置可以在墨迹被识别之前被发送至远程客户端。不同用户在白板上接收到的交互可由白板管理器26不同地显示。例如，每个不同用户的交互可以在白板上以不同色彩显示。白板管理器26也可以显示每一个远程用户当前正在查看的位置。用户还可以跟踪另一用户的动作。例如，当用户正在跟踪另一用户的动作时，白板管理器26在被跟踪的远程用户改变其视图时改变白板的视图。实时信息还可以包括用户何时进入白板以及用户何时离开白板。
为了促进与白板管理器26的通信，可以实现一个或多个回调例程。应用110可以是各种应用，诸如白板应用、企业生产力应用、娱乐应用、音乐应用、旅行应用、视频应用等等。一般而言，应用110可以是使用白板的任何应用。应用110可以被配置成接收不同类型的输入(例如，语音输入、触摸输入、键盘输入(例如，实体键盘和/或软件输入面板(SIP)))和/或其他类型的输入。存储器130存储与白板有关的内容。服务105是被配置成提供白板服务的服务。尽管白板管理器25被显示在服务105内，但是白板管理器26的功能可以处在不同位置。例如，功能的全部/部分可以在一客户端计算设备上或者在其他计算设备间被分割。
图示的系统100包括一个或多个触摸屏输入设备，诸如平板计算设备140和计算设备150，所述触摸屏输入设备在已接收到触摸输入(例如，手指触摸或接近触摸该触摸屏)时检测。可以使用检测用户的触摸输入的任何类型的触摸屏。以下提供了更多细节。
图2显示了白板上其他远程用户正在查看的位置。
如图所示，显示画面210包括白板205的正由用户1查看的显示画面。诸如白板205这样的白板可以存储许多不同类型的内容。例如，白板可以包括、但不限于：键入的和手写的笔记、文档、链接、网页、共享显示画面、表格和图表、素描、视频和其他媒体等等。如图所示，用户1对白板205的当前视图显示了墨水212、内容对象220和触摸交互272。触摸交互272显示了白板上用户2当前正在触摸的位置270。视图指示符240显示了白板205上用户2当前正在查看的位置。在当前示例中，指示符240显示了用户2当前不能看到内容对象220或墨水212。根据一实施例，可以显示每个远程用户在白板上的位置。用户可以有选择地打开或关闭移除视图指示符的全部或一部分的显示画面。
显示画面250包括白板205的正由用户2查看的显示画面。如图所示，用户2对白板205的当前视图显示了用户2正在触摸白板。白板205也显示了视图指示符260，所述视图指示符260显示了用户1在白板205上的当前位置。视图指示符260显示了指示符262，指示符262表明用户1的视图延伸至用户2的当前显示画面的左边。显示画面252显示了白板的用户1正在查看但不能被用户2看见的部分，该部分包括墨水212和内容对象220。
图3图示显示了在尺寸改变操作出现于白板上时该尺寸改变操作的触摸交互。
显示画面310显示了包括白板对象320的白板305。白板对象320可以是任何白板对象(例如，图片、文档、视频、…)。在当前示例中，用户360正在执行尺寸改变操作以便将白板对象320收缩至尺寸322。例如，用户360可以执行捏手势(可能触摸或可能不触摸显示画面)以改变白板对象320的尺寸。用户也可以执行伸展手势以增加对象的尺寸。
显示350显示出白板305正在被远程用户查看。响应于用户360与白板305交互，实时交互信息被传递至查看白板305的远程用户。当前实时交互信息显示出远程用户的触摸(触摸374)的第一状态以及远程用户的触摸的第二状态。如图所示，最当前的触摸输入(触摸372)与关于当前交互的较旧触摸位置(触摸372)不同地图示。根据一实施例，白板对象320的尺寸改变也可以在白板显示画面上为远程用户示出。
白板工具条315包括关于白板的不同选项。例如，用户可以选择白板工具条315以打开或关闭各种选项。用户可以设置是否要看触摸交互、显示与示出用户位置相关联的偏好、要显示什么类型的交互、等等。
图4显示了不同的远程用户位置和它们在白板上的交互。
在当前示例中，白板400正在被五个用户交互，包括本地用户1、远程用户2、远程用户3、远程用户4和远程用户5。用户1对白板400的视图(图示的视图)包括手写笔记412、文档420、表格430和日程440。白板400也包括白板上不同远程用户位置的视图。在当前示例中，用户5和用户3与白板400以及用户2和用户4的相同或类似位置相关联例如，用户3可以正在跟踪用户5的视图。
根据一实施例，当远程用户与白板400交互时，该交互被显示在本地用户对白板的视图上，以使本地用户可以容易地确定哪个远程用户在作出交互。例如，交互406显示出用户2所作的触摸交互。交互426显示出用户3所作的触摸交互。尽管显示不同模式以区分不同的远程用户交互，但也可以使用其他显示方法(例如，不同色彩)。
图5显示了用户进入白板和离开白板。
显示510显示出包括墨水内容512和内容520的白板505。存在指示符522响应于远程用户加入白板505被显示。在当前示例中，存在指示符522显示出用户3已加入白板505。
显示画面550显示出包括墨水内容512的白板505。例如，内容520可能已经从用户3加入白板之时开始从白板被移除。存在指示符526响应于远程用户离开白板505被显示。在当前示例中，存在指示符522显示出用户3已离开白板505。
图6显示了使用实时通信信道和持久信道在白板上显示交互的系统。
如图所示，系统600显示出客户端1、中继器620、白板管理器26、数据存储660和远程客户端1-N。
系统600显示出实时通信信道610和用户通信信道650的使用。实时通信信道610用于将实时交互信息发射至远程客户端。客户端1可以将实时交互信息(RTI 615)直接发射至远程客户端(例如，远程客户端1-N)。或者，客户端1可以使用一个或多个中继器(诸如中继器620)将实时交互信息(RTI 615)发射至远程客户端(例如，远程客户端1-N)。
根据一实施例，持久信道650用于向白板发送已被提交至白板的变化。使用持久信道650发射的通信信息一般不如使用实时通信信道610发射的通信信道那样时间敏感。当客户端1对白板作出变化时(例如，在添加墨水笔划时)，变化被提交给白板管理器26用于处理。然后，白板管理器26尝试将变化信息持久地存储到数据存储器660。在白板管理器26已经将变化信息成功地提交至数据存储器660之后，变化信息被传递至当前正在访问白板的每一个远程客户端。根据一实施例，变化通知包括白板对象的已被改变的标识符、白板对象的版本号、变化出现的时间戳以及变化的类型(例如，被添加、被更新、被删除)。
在远程客户端(例如，远程客户端1-N的任一者)已接收到变化通知之后，远程客户端请求在变化通知中标识的白板对象。响应于该请求，白板管理器26将白板对象发送至远程客户端。然后，远程客户端随后合并所请求的白板对象元素的已变化属性。根据一实施例，可以使用或实时信道610或持久信道650来广播不被认为时间敏感的状态变化事件，诸如远程客户端进入白板或者远程客户端离开白板。
图7图示在交互出现于白板上时显示交互。在阅读此处提出的例程的讨论之后，应当理解，本发明各个实施例的逻辑操作被实现为：(1)在计算系统上运行的计算机实现的动作或程序模块的序列，以及/或者(2)计算系统内的互连的机器逻辑电路或电路模块。实现方式是取决于实现本发明的计算系统的性能要求选择的。因此，图示的且构成此处描述的各实施例的逻辑操作被各自称为操作、结构设备、动作或模块。这些操作、结构设备、动作和模块可以用软件、用固件、用专用数字逻辑以及它们的任意组合来实现。尽管操作以特定次序示出，但是取决于实现方式，操作的次序可以改变、被并行执行。
在开始操作之后，过程移至操作710，在此访问白板。白板可以用不同类型的计算设备来访问，诸如台式计算设备、膝上型计算设备、平板、智能手机等等。根据一实施例，白板使用基于云的在线服务来访问。
可以使用不同类型的访问和验证机制来访问白板。一般而言，设置许可以允许一个或多个用户访问同一白板。例如，可以设置许可以允许访问第一组用户而同时对该组外部的用户限制访问。用户也可以被邀请访问用户所创建的白板。根据一实施例，当用户过去已访问过该白板时，他们将来也被允许访问该白板，除非许可改变。
验证的范围可以从弱验证到强验证。例如，可以不使用验证机制，可以使用用户名和密码，可以使用标识符，可以使用视网膜等等。验证可以包括允许设备和应用访问白板。例如，可以允许用户的智能电话上的应用来用作显示白板的计算设备的虚拟键盘。计算设备可以使用网络连接来配对，所述网络连接诸如蓝牙、Wi-Fi、以太网等等。连接可以使用诸如以下方法来发起：手动配对、近场通信(NFC)触发、以及扫描条形码以标识连接信息等等。
转至操作720，显示白板。白板可以被显示在一个或多个显示画面上。例如，用户可以在一个显示画面上显示白板的一部分，而在第二显示画面上显示白板的另一部分。所显示的白板可以存储和显示许多不同类型的内容。例如，白板可以包括、但不限于：键入的和手写的笔记、文档、链接、网页、共享显示画面、表格和图表、速写、视频和其他媒体等等。
流程至操作730，接收与当前正在使用白板并且与白板交互的远程用户相关联的实时交互信息。实时交互信息可以从远程客户端被直接接收、以及/或者通过一个或多个中间位置(例如，云服务)被接收。实时交互信息可以使用与发送对白板的已提交变化相同的通信信道被发送、以及/或者使用一个不同的通信信道被发送。实时交互信息包括与对白板的实时变化以及当前正在使用白板的用户有关的信息。例如，实时交互信息可以包括关于以下的信息：远程用户正在触摸白板的位置；触笔靠近白板(例如，用作指示器)的位置；触笔与白板接触(墨迹)的位置；与远程用户正在交互(例如，触摸、对其执行动作等)的对象有关的信息；对远程用户的白板查看区的变化(例如，用户改变了他们正在看的白板的哪部分)；当远程用户进入和离开白板时等等。
转至操作740，自动更新白板的显示画面以反映实时交互信息。对白板的更新是在变化被提交至白板之前动作由远程用户执行的近似。可以更新白板以显示与远程用户何时进入/离开白板有关的信息。例如，当远程用户加入白板时，可以暂时显示指示远程用户已进入或退出白板的通知元素。远程用户正在触摸的触摸位置可以被显示在白板上。例如，当远程用户正在触摸/接近触摸白板显示画面时，远程用户的手指位置可以被示出于显示画面上。
可以更新白板以示出与对象的当前交互。例如，可以更新白板以显示远程用户调整对象尺寸、在白板上移动该对象等等。用户可以在变化由用户执行时看到变化发生，而不是白板对象突然变化至新位置或被不同地显示。
当前墨迹信息可以被示出于显示画面上。例如，在远程用户正在用墨水书写时，可以在墨迹发生时使用接收到的墨迹位置来显示墨迹的近似。根据一实施例，显示墨迹，以使它看上去在屏幕上是“湿的”，当墨迹被提交时，它改变为“干的”外观。例如，湿墨水看上去比干墨水更深。也可以示出墨迹触笔的当前位置。
也可以示出远程用户对白板查看区作出的变化。例如，可以在白板上显示图形用户元素，所述图形用户元素指示远程用户被定位于(例如，查看)白板上的当前位置。
白板也可以反映哪些用户正在跟踪另一用户的视图。例如，一些用户可能正在跟踪远程用户的动作。也可以在白板上显示哪些用户正在跟踪另一用户的指示。例如，表示正在跟踪另一用户的用户的图形元素可以在白板上彼此接近地显示。
用户的白板的当前视图可以在他们正在跟踪远程用户时被自动调整。例如，当远程用户改变他们在白板中的当前位置时，从远程用户接收到实时交互，并且更新用户对白板的视图以反映新位置。
前进至操作750，接收到变化通知。变化通知指示一变化已被提交至白板。根据一实施例，在变化已被提交至数据存储器之后从白板接收到变化通知。变化通知可以使用与实时用户通知相同的信道被发送、以及/或者使用一不同的通信信道被发送。
转至操作760，更新显示画面以反映所提交的变化。例如，墨迹的近似用被提交至数据存储器的墨迹来替换。
过程流至结束操作并且返回以处理其他动作。
图8图示在与白板相关联的交互出现时显示所述交互的示例性在线系统。如图所示，系统1000包括服务1010、数据存储器1045、触摸屏输入设备1050(例如，平板/板)、智能电话1030和显示设备1080。
如图所示，服务1010是基于云的和/或基于企业的服务，该服务可以被配置成提供服务，诸如与各种应用或生产性服务有关的白板服务(例如，电子表格、文档、演示、图表、消息等)。服务可以使用不同类型的输入/输出来交互。例如，用户可以使用语音输入、触摸输入、基于硬件的输入等等。服务可以提供结合了预先记录的语音与合成的语音的语音输出。服务1010所提供的服务/应用中的一个或多个的功能也可以被配置为基于客户端/服务器的应用。
如图所示，服务1010是向任何数量的承租人(例如，承租人1－N)提供资源1015和服务的多承租人服务。多承租人服务1010是基于云的服务，该基于云的服务向预订该服务的承租人提供资源/服务1015并且保持每个承租人的数据与其他承租人数据独立并且受保护。
图示的系统1000包括检测何时已接收触摸输入(例如，手指触摸或接近触摸了触摸屏)的触摸屏输入设备1050(例如，板/平板设备)和智能电话1030。可以使用检测用户的触摸输入的任何类型的触摸屏。例如，触摸屏可以包括一层或多层检测触摸输入的电容材料。除了电容材料以外或者代替电容材料，可以使用其他传感器。例如，可以使用红外(IR)传感器。根据一实施例，触摸屏被配置成检测与可触摸表面接触或在该可触摸表面上方的对象。尽管在该描述中使用了术语“上方”，但应当理解，触摸面板系统的方向是无关紧要的。术语“上方”意图可应用于所有这样的方向。触摸屏可以被配置成确定在什么位置接收到触摸输入(例如，起始点、中间点和结束点)。可触摸表面和对象之间的实际接触可以通过任何合适的机制来检测，例如，通过耦合于触摸面板的振动传感器或话筒。用于检测接触的传感器的非穷尽性示例列表包括基于压力的机制、微机械加工的加速度仪、压电设备、电容性传感器、电阻性传感器、电感性传感器、激光测振仪、以及LED测振仪。
根据一实施例，智能电话1030、触摸屏输入设备1050和设备1080被配置有多方式输入/输出，且每个输入/输出包括在与白板交互时使用的应用(1031、1051、1081)。
如图所示，触摸屏输入设备1050、智能电话1030和显示设备1080示出示例性显示画面1052/1032/1082，所述示例性显示画面1052/1032/1082示出诸如白板应用这样的应用的使用。数据可以被存储在设备(例如，智能电话1030、板1050)上以及/或者被存储于某一其他位置(例如，网络数据存储器1045)。数据存储器1045或某一其他存储器可用于存储白板内容和信息以及其他数据。设备所使用的应用可以是基于客户端的应用、基于服务器的应用、基于云的应用以及/或者某一组合。根据一实施例，显示设备1080是诸如与显示器耦合的微软XBOX这样的设备。
白板管理器26被配置成如此处描述地在交互出现在白板上时执行与所述交互有关的操作。尽管管理器26被示出于服务1010内，但管理器的功能可以被包括在其他位置中(例如，在智能电话1030和/或板设备1050和/或设备1080上)。
此处描述的实施例和功能可以经由大量计算系统来操作，所述计算系统包括、但不限于：台式计算机系统、有线和无线计算系统、移动计算系统(例如，移动电话、上网本、平板或板型电脑、笔记本电脑以及膝上型电脑)、手持设备、微处理器系统、基于微处理器的或可编程的消费者电子设备、微型计算机以及大型计算机。
此外，此处描述的各实施例和功能可以跨多个分布式系统(例如，基于云的计算系统)而操作，其中应用功能、存储器、数据存储以及检索和各种处理功能可以通过分布式计算网络(诸如互联网或内联网)彼此远程地操作。各种类型的用户界面和信息可经由机载计算设备显示器或经由与一个或多个计算设备相关联的远程显示单元来显示。例如，各种类型的用户界面和信息可以在墙壁表面上被显示和交互，所述各种类型的用户界面和信息被投射到所述墙壁表面上。与可实现本发明各实施例的大量计算系统的交互包括：按键输入、触摸屏输入、语音或其他音频输入、手势输入等等，在手势输入中，相关的计算设备配备有用于捕捉和解释用户控制计算设备的功能的手势的检测(例如，照相机)功能。
图9－11及相关联的描述提供了其中可实现本发明各实施例的各种操作环境的讨论。然而，参照图9－11说明和讨论的设备和系统是为示例和说明目的，而不是可用于实现此处描述的本发明各实施例的大量计算设备配置的限制。
图9是图示可实现本发明各实施例的计算设备1100的物理组件(即，硬件)的框图。以下描述的计算设备组件可适合于上述的计算设备。在一基本配置中，计算设备1100可以包括至少一个处理单元1102和系统存储器1104。取决于计算设备的配置和类型，系统存储器1104可以包括但不限于：易失性存储(例如，随机存取存储器)、非易失性存储(例如，只读存储器)、闪存、或者这种存储器的任意组合。系统存储器1104可以包括适合于运行软件应用1120(诸如白板管理器26)的操作系统1105以及一个或多个程序模块1106。操作系统1105例如可适合于控制计算设备1100的操作。而且，本发明的各实施例可以结合图形库、其他操作系统或任何其他应用程序来实现，并且不限于任何特定的应用或系统。该基本配置在图9中用虚线1108内的那些组件示出。计算设备1100可具有附加的特征或功能。例如，计算设备1100也可以包括附加的数据存储设备(可移动和/或不可移动)，诸如磁盘、光盘或带。这种附加存储器在图9中用可移动存储设备1109和不可移动存储设备1110示出。
如上所述，多个程序模块和数据文件可以被存储于系统存储器1104中。在处理单元1102上执行时，程序模块1106(例如，演示应用26)可以执行包括但不限于以下的处理：各图中图示的方法和过程的各阶段的一个或多个阶段。可按照本发明各实施例使用的其他程序模块可以包括电子邮件和联系人应用、字处理应用、电子表格应用、数据库应用、幻灯片演示应用、绘画或计算机辅助应用程序等等。
而且，本发明各实施例可以在电子电路中实现，所述电子电路包括离散电子元件、包含逻辑门的封装或集成电子芯片、使用微处理器的电路、或者在包含电子元件或微处理器的单芯片上实现。例如，本发明各实施例可以经由片上系统(SOC)实现，图9所示的每一个或许多组件可以被集成到单个集成电路上。这一SOC设备可以包括一个或多个处理单元、图形单元、通信单元、系统虚拟化单元以及可以作为单个集成电路被集成(或“烧”)到芯片基板上的各种应用功能。在经由SOC操作时，此处关于白板管理器26描述的功能可以经由与单个集成电路(芯片)上的计算设备1100的其他组件集成的专用逻辑来操作。也可以使用能执行逻辑运算的其他技术来实现本发明各实施例，逻辑运算诸如例如与(AND)、或(OR)和非(NOT)，所述其他技术包括但不限于机械的、光学的、流体的和量子的技术。此外，本发明各实施例可以在通用计算机或在任何其他电路或系统内实现。
计算设备1100也可具有一个或多个输入设备1112，诸如键盘、鼠标、笔、声音输入设备、触摸输入设备等等。也可以包括输出设备1114，诸如显示器、扬声器、打印机等等。上述设备是示例，可以使用其他设备。计算设备1100可以包括允许与其他计算设备1118通信的一个或多个通信连接1116。合适的通信连接1116的示例包括但不限于：RF发射机、接收机和/或收发机电路；通用串行总线(USB)、并行和/或串行端口。
此处使用的术语计算机可读介质可以包括计算机存储介质。计算机存储介质可以包括以用于存储信息的任何方法或技术实现的易失性和非易失性、可移动和不可移动介质，该信息诸如计算机可读指令、数据结构或程序模块。系统存储器1104、可移动存储设备1109以及不可移动存储设备1110全都是计算机存储介质(即，存储器存储)的示例。计算机存储介质可以包括：RAM、ROM、电可擦除只读存储器(EEPROM)、闪存或其他存储器技术、CD-ROM、数字化视频盘(DVD)或其他光学存储器、磁性盒带、磁带、磁盘存储器或其他磁性存储设备、或者可用于存储信息且可由计算设备1100存取的任何其他制品。任何这样的计算机存储介质可以是计算设备1100的一部分。计算机存储介质不包括载波或其他已传播或已调数据信号。
通信介质可由计算机可读指令、数据结构、程序模块或其他数据体现于已调数据信号中，诸如载波或其他传输机制中，并且包括任何信息传递介质。术语“已调数据信号”可以描述具有以对信号中的信息编码的方式被设置或改变的一个或多个特征的信号。通过示例但非限制，通信介质可以包括诸如有线网络或直线连接这样的有线介质、以及诸如声学、射频(RF)、红外及其他无线介质等无线介质。
图10A和10B图示可实现本发明各实施例的移动计算设备1200，例如，移动电话、智能电话、平板个人计算机、膝上型计算机等。参照图10A，图示用于实现各实施例的移动计算设备1200的一个实施例。在一基本配置中，移动计算设备1200是具有输入元件和输出元件两者的手持计算机。移动计算设备1200一般包括显示器1205以及允许用户将信息输入移动计算设备1200的一个或多个输入按钮1210。移动计算设备1200的显示器1205也可用作输入设备(例如，触摸屏显示器)。如果包括任选的侧输入元件1215，该侧输入元件允许进一步的用户输入。侧输入元件1215可以是旋转开关、按钮或者任何其他类型的手动输入元件。在替代实施例中，移动计算设备1200可以结合更多或更少的输入元件。例如，在一些实施例中，显示器1205可能不是触摸屏。在还有另一替代实施例中，移动计算设备1200是便携式电话系统，例如蜂窝电话。移动计算设备1200也可以包括任选的键区1235。任选的键区1235可以是物理键区或是触摸屏显示器上生成的“软”键区。在各种实施例中，输出元件包括显示器1205，所述显示器1205用于示出图形用户界面(GUI)、视觉指示符1220(例如，发光二极管)和/或音频换能器1225(例如，扬声器)。在一些实施例中，移动计算设备1200结合用于向用户提供触觉反馈的振动换能器。在还有另一实施例中，移动计算设备1200结合输入和/或输出端口，诸如音频输入(例如，话筒插孔)、音频输出(例如，耳机插孔)、以及用于向外部设备发送信号或者从外部设备接收信号的视频输出(例如，HDMI端口)。
图10B是图示移动计算设备的一个实施例的体系结构的框图。也就是说，移动计算设备1200可以结合系统1202(即，体系结构)以实现一些实施例。在一实施例中，系统1202被实现为能够运行一个或多个应用(例如，浏览器、电子邮件、日历、联系人管理器、消息传送客户端以及媒体客户端/播放器)的“智能手机”。在一些实施例中，系统1202被集成为计算设备，诸如集成的个人数字助理(PDA)和无线电话。
一个或多个应用1266可以被加载到存储器1262中，并且在操作系统1264上运行或与操作系统1264关联地运行。应用程序的示例包括电话拨号程序、电子邮件程序、个人信息管理(PIM)程序、字处理程序、电子表格程序、互联网浏览器程序、消息传送程序等等。系统1202也包括存储器1262内的非易失性存储区域1268。非易失性存储区域1268可用于存储若系统1202被断电也不应丢失的持久信息。应用程序1266可以使用和存储非易失性存储区域1268中的信息，诸如电子邮件应用所使用的电子邮件或其他消息、等等。同步应用(未示出)也驻留在系统1202上并且被编程以与主机计算机上驻留的相应同步应用交互，以便使非易失性存储区域1268中存储的信息与主机计算机处存储的相应信息同步。应当理解，其他应用也可以被加载到存储器1262中并且在移动计算设备1200上运行，包括此处描述的白板管理器26。
系统1202具有电源1270，电源1270可以被实现为一个或多个电池。电源1270还可能包括外部电源，诸如对电池进行补充或充电的AC适配器或加电的对接支架。
系统1202也可以包括无线电1272，无线电1272执行发射和接收射频通信的功能。无线电1272便于经由通信载波或服务提供者在系统1202和“外部世界”之间的无线连接。去往和来自无线电1272的传输在操作系统1264的控制下实施。换言之，无线电1272接收到的通信可以经由操作系统1264被散布至应用程序1266，反之亦然。
视觉指示符1220可用于提供视觉通知，以及/或者音频接口1274可用于经由音频换能器1225产生可听通知。在所示实施例中，视觉指示符1220是发光二极管(LED)，音频换能器1225是扬声器。这些设备可以被直接耦合至电源1270，使得在被激活时，即使处理器1260及其他组件可能为节约电池电力而关闭，这些设备也保持开启达一段时期，该时期由通知机制规定。LED可以被编程以保持无限期开启，直到用户采取行动以指示设备的开启状态。音频接口1274用于向用户提供可听信号以及从用户接收可听信号。例如，除了与音频换能器1225耦合以外，音频接口1274也可以耦合至话筒以接收可听输入，诸如便于电话通话。按照本发明各实施例，话筒也可用作音频传感器以促进通知的控制，以下将描述。系统1202还可以包括视频接口1276，视频接口1276启用机载照相机的操作以记录静止图像、视频流等等。
实现系统1202的移动计算系统1200可具有附加的特征或功能。例如，移动计算设备1200也可以包括附加的数据存储设备(可移动和/或不可移动)，诸如磁盘、光盘或带。这种附加存储器在图10B中由非易失性存储区域1268图示。移动计算设备1200也可以包括外设端口1230。
由移动计算设备1200生成或捕捉并且经由系统1202存储的数据/信息可以被本地存储于移动计算设备1200上，如上所述，或者该数据可以被存储于可由设备经无线电1272或经由移动计算设备1200和与移动计算设备1200相关的分开计算设备间的有线连接存取的任何数量的存储介质上，该分开计算设备例如诸如互联网这样的分布式计算网络中的服务器计算机。应当理解，这种数据/信息可由移动计算设备1200经由无线电1272或经由分布式计算网络来存取。类似地，这种数据/信息可以根据公知的数据/信息传输和存储手段在用于存储和使用的计算设备之间容易地传输，所述公知的数据/信息传输和存储手段包括电子邮件和合作性的数据/信息共享系统。
图11图示上述示例性系统的体系结构的实施例。白板管理器26开发的、与白板管理器26交互的、或者与白板管理器26关联编辑的内容可以被存储于不同的通信信道或其他存储器类型中。例如，各种文档可以使用目录服务1322、web门户1324、邮箱服务1326、即时消息传递存储器1328或社交网络站点1330来存储。白板管理器26可以使用这些类型的系统等中的任一种来启用数据利用，如此处所述。服务器1320可以向客户端提供白板管理器26。举一个例子，服务器1320可以是通过web提供白板管理器26的web服务器。服务器1320可以通过网络1315在web上向客户端提供白板管理器26。例如，客户端计算设备可以被实现为计算设备1100并且体现于个人计算机、平板计算设备1310和/或移动计算设备1200(例如，智能电话)中。客户端计算设备1100、1310、1200的这些实施例的任一个可以从存储器1316获得内容。
例如，以上参照根据本发明各实施例的方法、系统和计算机程序产品的框图和/或操作图示来描述本发明各实施例。方框中注明的功能/动作可以以与任一流程图中示出的次序不同的次序发生。例如，连续示出的两个方框可能实际上被同时执行，或者多个方框有时以逆序执行，这取决于所涉及的功能/动作。
该申请中提供的一个或多个实施例的描述和说明不意图以任何方式限制或约束所要求保护的本发明的范围。本申请中提供的各实施例、示例和细节被认为足以传达其内容并使其他人能制作和使用所要求保护的发明的最佳模式。所要求保护的发明不应被视为受限于本申请中提供的任何实施例、示例或细节。无论是组合还是分开地示出和描述，各种特征(包括结构和方法)意图被选择性地包括或省略以得到具有一组特定特征的实施例。在了解本申请的描述和说明之后，本领域技术人员可以构想落在本申请中包含的一般发明概念的较宽方面的精神内的各变体、修改和替代实施例，所述变体、修改和替代实施例不背离所要求保护的发明的较宽范围。

Claims (10)

1.一种用于在白板上示出交互的方法，包括：
显示白板，所述白板可共享在多个远程客户端上并且被配置成在所述白板上显示不同类型的内容；
响应于当前发生在第一远程客户端的白板上的交互，经由直接位于第一远程客户端与第二远程客户端之间的实时通信信道来更新所述白板在所述第二远程客户端上的显示以显示由所述第一远程客户端所作的当前发生的与所述白板的交互的近似；
响应于将所述第二远程客户端上的白板的显示更新成所述近似，在所述第二远程客户端的白板上显示所述近似，所述近似与所述交互发生时显示在所述第一远程客户端的白板上的交互不同；以及
通过向服务器提交与对所述白板作出的交互相关联的改变并将所述改变提交到数据库，以及响应于将所述改变提交到数据库而改变所述第二远程客户端上的近似的显示以显示所述交互，经由持久通信信道来在所述第二远程客户端的白板上更新经由所述实时通信信道被接收的近似的显示，其中所述交互随后在所述第一远程客户端和所述第二远程客户端上相同地显示。
2.如权利要求1所述的方法，其特征在于，还包括用于在墨迹出现时显示作出所述墨迹所使用的输入设备的当前位置。
3.如权利要求1所述的方法，其特征在于，还包括在所述白板上显示视觉指示符，所述视觉指示符标识当前正被查看的所述白板的一部分。
4.如权利要求1所述的方法，其特征在于，还包括在所述交互出现时接收实时交互信息、以及响应于被提交给所述白板的变化而接收变化通知。
5.如权利要求1所述的方法，其特征在于，更新所述白板的显示画面以显示当前发生的与所述白板的交互包括以和用于显示所提交的墨迹笔划的色彩不同的色彩来显示当前正在出现的墨迹笔划。
6.如权利要求1所述的方法，其特征在于，所述当前正在出现的交互包括：在所述白板上检测到所述远程客户端之一的触摸的位置；所述远程客户端之一用触笔在所述白板上所指的位置；对白板查看区的变化；以及所述白板上被触摸的对象的标识符。
7.一种用于在白板上示出交互的系统，包括：
用于显示白板的装置，所述白板可共享在多个远程客户端上并且被配置成在所述白板上显示不同类型的内容；
用于响应于当前发生在第一远程客户端的白板上的交互，经由直接位于第一远程客户端与第二远程客户端之间的实时通信信道来更新所述白板在所述第二远程客户端上的显示以显示由所述第一远程客户端所作的当前发生的与所述白板的交互的近似的装置；
用于响应于将所述第二远程客户端上的白板的显示更新成所述近似，在所述第二远程客户端的白板上显示所述近似的装置，所述近似与所述交互发生时显示在所述第一远程客户端的白板上的交互不同；以及
用于通过向服务器提交与对所述白板作出的交互相关联的改变并将所述改变提交到数据库，以及响应于将所述改变提交到数据库而改变所述第二远程客户端上的近似的显示以显示所述交互，经由持久通信信道来在所述第二远程客户端的白板上更新经由所述实时通信信道被接收的近似的显示的装置，其中所述交互随后在所述第一远程客户端和所述第二远程客户端上相同地显示。
8.一种用于在白板上示出交互的系统，包括：
处理器和存储器；以及
使用所述处理器执行的操作环境；
在被配置成在所述白板上显示不同类型的内容的多个远程客户端间共享的白板；以及
被配置成执行以下动作的白板管理器，所述动作包括：
在所述远程客户端上显示所述白板；
显示白板，所述白板可共享在多个远程客户端上并且被配置成在所述白板上显示不同类型的内容；
响应于当前发生在第一远程客户端的白板上的交互，经由直接位于第一远程客户端与第二远程客户端之间的实时通信信道来更新所述白板在所述第二远程客户端上的显示以显示由所述第一远程客户端所作的当前发生的与所述白板的交互的近似；
响应于将所述第二远程客户端上的白板的显示更新成所述近似，在所述第二远程客户端的白板上显示所述近似，所述近似与所述交互发生时显示在所述第一远程客户端的白板上的交互不同；以及
通过向服务器提交与对所述白板作出的交互相关联的改变并将所述改变提交到数据库，以及响应于将所述改变提交到数据库而改变所述第二远程客户端上的近似的显示以显示所述交互，经由持久通信信道来在所述第二远程客户端的白板上更新经由所述实时通信信道被接收的近似的显示，其中所述交互随后在所述第一远程客户端和所述第二远程客户端上相同地显示。
9.如权利要求8所述的系统，其特征在于，在所述远程客户端的其他远程客户端上更新所述白板的显示画面以显示所述交互包括显示与所述白板的触摸交互的位置。
10.如权利要求8所述的系统，其特征在于，在所述远程客户端的其他远程客户端上更新所述白板的显示画面以显示所述交互包括以和用于显示所提交的墨迹笔划的色彩不同的色彩显示当前出现的墨迹笔划。
CN201480036147.4A 2013-06-24 2014-06-05 在交互出现于白板上时显示交互 Active CN105378624B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US13/925,545 2013-06-24
US13/925,545 US9489114B2 (en) 2013-06-24 2013-06-24 Showing interactions as they occur on a whiteboard
PCT/US2014/041032 WO2014209563A1 (en) 2013-06-24 2014-06-05 Showing interactions as they occur on a whiteboard

Publications (2)

Publication Number Publication Date
CN105378624A CN105378624A (zh) 2016-03-02
CN105378624B true CN105378624B (zh) 2019-06-04

Family

ID=51168357

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201480036147.4A Active CN105378624B (zh) 2013-06-24 2014-06-05 在交互出现于白板上时显示交互

Country Status (4)

Country Link
US (2) US9489114B2 (zh)
EP (1) EP3014408B1 (zh)
CN (1) CN105378624B (zh)
WO (1) WO2014209563A1 (zh)

Families Citing this family (43)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8605048B2 (en) * 2010-11-05 2013-12-10 Bluespace Corporation Method and apparatus for controlling multimedia contents in realtime fashion
JP5924035B2 (ja) * 2012-03-08 2016-05-25 富士ゼロックス株式会社 情報処理装置及び情報処理プログラム
US10304037B2 (en) * 2013-02-04 2019-05-28 Haworth, Inc. Collaboration system including a spatial event map
US11861561B2 (en) 2013-02-04 2024-01-02 Haworth, Inc. Collaboration system including a spatial event map
US10126927B1 (en) * 2013-03-15 2018-11-13 Study Social, Inc. Collaborative, social online education and whiteboard techniques
KR20150003560A (ko) * 2013-07-01 2015-01-09 삼성전자주식회사 사용자의 모션 정보에 기초하여 사용자 인터페이스(ｕｉ)를 변경시키는 방법 및 장치
JP2015069284A (ja) * 2013-09-27 2015-04-13 株式会社リコー 画像処理装置
JP6079695B2 (ja) * 2014-05-09 2017-02-15 コニカミノルタ株式会社 画像表示撮影システム、撮影装置、表示装置、画像の表示および撮影の方法、およびコンピュータープログラム
TWI540494B (zh) * 2014-08-08 2016-07-01 晨星半導體股份有限公司 虛擬桌面用戶端、虛擬桌面用戶端之控制晶片以及伺服裝置之控制方法
US9673662B2 (en) * 2015-01-23 2017-06-06 Motorola Mobility Llc Battery disconnect safeguard
JP2016180942A (ja) * 2015-03-25 2016-10-13 セイコーエプソン株式会社 表示装置、表示システム、表示装置の制御方法、及び、プログラム
US10802783B2 (en) * 2015-05-06 2020-10-13 Haworth, Inc. Virtual workspace viewport following in collaboration systems
US9898841B2 (en) 2015-06-29 2018-02-20 Microsoft Technology Licensing, Llc Synchronizing digital ink stroke rendering
US10678326B2 (en) 2015-09-25 2020-06-09 Microsoft Technology Licensing, Llc Combining mobile devices with people tracking for large display interactions
JP2017076207A (ja) * 2015-10-14 2017-04-20 株式会社リコー 画像処理装置及び画像処理システム
EP3373135A4 (en) * 2015-11-02 2019-05-22 Ricoh Company, Ltd. INFORMATION PROCESSING DEVICE, COMMUNICATION SYSTEM AND INFORMATION PROCESSING METHOD
US10255023B2 (en) 2016-02-12 2019-04-09 Haworth, Inc. Collaborative electronic whiteboard publication process
CN107220017A (zh) * 2016-03-22 2017-09-29 知识体科技股份有限公司 远程互动方法与系统
JP6747025B2 (ja) * 2016-04-13 2020-08-26 セイコーエプソン株式会社 表示システム、表示装置、及び、表示システムの制御方法
EP3337132A1 (en) * 2016-12-15 2018-06-20 Awingu Nv Intermediate broker with multi-session recording
KR102649009B1 (ko) * 2016-12-20 2024-03-20 삼성전자주식회사 디스플레이 장치 및 그 제어 방법
EP3458946B1 (en) 2017-02-06 2020-10-21 FlatFrog Laboratories AB Optical coupling in touch-sensing systems
US10416939B2 (en) * 2017-03-31 2019-09-17 Ricoh Company, Ltd. Communication terminal, communication system, communication control method, and non-transitory computer-readable medium
US10552529B2 (en) * 2017-05-03 2020-02-04 International Business Machines Corporation Data change alerts in a collaborative environment
US10057748B1 (en) * 2017-10-03 2018-08-21 Bank Of America Corporation Technology application restructuring and deployment for home receiver integration
US11934637B2 (en) 2017-10-23 2024-03-19 Haworth, Inc. Collaboration system including markers identifying multiple canvases in multiple shared virtual workspaces
US11126325B2 (en) 2017-10-23 2021-09-21 Haworth, Inc. Virtual workspace including shared viewport markers in a collaboration system
KR101886010B1 (ko) * 2017-12-28 2018-09-10 주식회사 네오랩컨버전스 전자기기 및 전자기기의 구동방법
CN108459836B (zh) * 2018-01-19 2019-05-31 广州视源电子科技股份有限公司 批注显示方法、装置、设备及存储介质
US20190312917A1 (en) * 2018-04-05 2019-10-10 Microsoft Technology Licensing, Llc Resource collaboration with co-presence indicators
KR20210013614A (ko) * 2018-05-25 2021-02-04 리 마고 엘티디 데이터의 실시간 디지털 동기화를 위한 방법, 장치 및 컴퓨터 판독 가능 매체
US11314408B2 (en) * 2018-08-25 2022-04-26 Microsoft Technology Licensing, Llc Computationally efficient human-computer interface for collaborative modification of content
US11943563B2 (en) 2019-01-25 2024-03-26 FlatFrog Laboratories, AB Videoconferencing terminal and method of operating the same
US11573694B2 (en) 2019-02-25 2023-02-07 Haworth, Inc. Gesture based workflows in a collaboration system
US10929088B2 (en) 2019-03-19 2021-02-23 Cisco Technology, Inc. Active area of interest tracking in a multiuser digital whiteboard session
CN110413242A (zh) * 2019-07-01 2019-11-05 广州视源电子科技股份有限公司 一种电子白板同步方法、装置、终端设备和存储介质
CN110716680B (zh) * 2019-10-09 2021-05-07 广州视源电子科技股份有限公司 智能交互平板的控制方法和装置
WO2021158164A1 (en) * 2020-02-08 2021-08-12 Flatfrog Laboratories Ab Touch apparatus with low latency interactions
CN115039063A (zh) 2020-02-10 2022-09-09 平蛙实验室股份公司 改进的触摸感测设备
US11750672B2 (en) 2020-05-07 2023-09-05 Haworth, Inc. Digital workspace sharing over one or more display clients in proximity of a main client
KR20230074246A (ko) * 2020-10-05 2023-05-26 루씨드 소프트웨어 인코포레이티드 온라인 협업 플랫폼
US11720244B2 (en) * 2021-04-22 2023-08-08 Cisco Technology, Inc. Online conference tools for meeting-assisted content editing and posting content on a meeting board
US11641404B1 (en) 2022-07-29 2023-05-02 Box, Inc. Content management system integrations with web meetings

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5025314A (en) * 1990-07-30 1991-06-18 Xerox Corporation Apparatus allowing remote interactive use of a plurality of writing surfaces
CN102866819A (zh) * 2011-05-06 2013-01-09 株式会社理光 使用会消失的书写介质的交互式白板

Family Cites Families (48)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5920694A (en) * 1993-03-19 1999-07-06 Ncr Corporation Annotation of computer video displays
EP0657833A2 (en) * 1993-12-13 1995-06-14 International Business Machines Corporation Workstation conference pointer-user association mechanism
US5583993A (en) * 1994-01-31 1996-12-10 Apple Computer, Inc. Method and apparatus for synchronously sharing data among computer
US6728784B1 (en) * 1996-08-21 2004-04-27 Netspeak Corporation Collaborative multimedia architecture for packet-switched data networks
US5966512A (en) * 1997-06-05 1999-10-12 International Business Machines Corporation Groupware save operation
EP1038396B1 (en) * 1997-12-09 2003-01-29 BRITISH TELECOMMUNICATIONS public limited company Conference facility
US8024661B2 (en) * 2001-10-18 2011-09-20 Autodesk, Inc. Collaboration framework
US7010752B2 (en) * 2002-05-03 2006-03-07 Enactex, Inc. Method for graphical collaboration with unstructured data
US7224847B2 (en) * 2003-02-24 2007-05-29 Microsoft Corp. System and method for real-time whiteboard streaming
US7966368B2 (en) * 2003-05-02 2011-06-21 Microsoft Corporation Communicating messages over transient connections in a peer-to-peer network
US7373590B2 (en) * 2003-05-19 2008-05-13 Microsoft Corporation Shared electronic ink annotation method and system
US7496229B2 (en) * 2004-02-17 2009-02-24 Microsoft Corp. System and method for visual echo cancellation in a projector-camera-whiteboard system
US7948448B2 (en) * 2004-04-01 2011-05-24 Polyvision Corporation Portable presentation system and methods for use therewith
US7508354B1 (en) * 2004-12-20 2009-03-24 Dynamic Knowledge Transfer, Llc Multi-board presentation system
US7499058B2 (en) * 2005-04-22 2009-03-03 Microsoft Corporation Programmatical access to handwritten electronic ink in a tree-based rendering environment
US8464164B2 (en) * 2006-01-24 2013-06-11 Simulat, Inc. System and method to create a collaborative web-based multimedia contextual dialogue
US7774703B2 (en) * 2006-02-09 2010-08-10 Microsoft Corporation Virtual shadow awareness for multi-user editors
US8560946B2 (en) * 2006-03-22 2013-10-15 Vistracks, Inc. Timeline visualizations linked with other visualizations of data in a thin client
US8125510B2 (en) * 2007-01-30 2012-02-28 Ankur Agarwal Remote workspace sharing
US7747688B2 (en) 2007-02-07 2010-06-29 International Business Machines Corporation System and method for managing group interaction session states
US9300912B2 (en) * 2008-03-28 2016-03-29 Microsoft Technology Licensing, Llc Software based whiteboard capture solution for conference room meetings
US8402391B1 (en) 2008-09-25 2013-03-19 Apple, Inc. Collaboration system
US8390718B2 (en) * 2009-01-28 2013-03-05 Hewlett-Packard Development Company, L.P. Methods and systems for performing visual collaboration between remotely situated participants
US9396279B1 (en) * 2009-02-17 2016-07-19 Jpmorgan Chase Bank, Na Collaborative virtual markup
US20100216508A1 (en) * 2009-02-23 2010-08-26 Augusta Technology, Inc. Systems and Methods for Driving an External Display Device Using a Mobile Phone Device
US20100257457A1 (en) * 2009-04-07 2010-10-07 De Goes John A Real-time content collaboration
US20120016960A1 (en) * 2009-04-16 2012-01-19 Gelb Daniel G Managing shared content in virtual collaboration systems
US20110161821A1 (en) * 2009-06-26 2011-06-30 Louis Stewart Method, system and apparatus for managing and interacting with multimedia presentations
US20120231441A1 (en) * 2009-09-03 2012-09-13 Coaxis Services Inc. System and method for virtual content collaboration
US20130047095A1 (en) 2010-02-08 2013-02-21 Oscar Divorra Escoda Cloud desktop system with multi-touch capabilities
US20110246875A1 (en) 2010-04-02 2011-10-06 Symantec Corporation Digital whiteboard implementation
CA2796299A1 (en) * 2010-04-12 2011-10-20 Google Inc. Collaborative cursors in a hosted word processor
US9189147B2 (en) * 2010-06-22 2015-11-17 Microsoft Technology Licensing, Llc Ink lag compensation techniques
US8713454B2 (en) 2010-06-25 2014-04-29 Verizon Patent And Licensing Inc. Method and apparatus for sharing virtual workspaces
US20120221960A1 (en) * 2011-02-28 2012-08-30 Robinson Ian N Collaborative workspace viewing for portable electronic devices
US9086798B2 (en) 2011-03-07 2015-07-21 Ricoh Company, Ltd. Associating information on a whiteboard with a user
US8881231B2 (en) 2011-03-07 2014-11-04 Ricoh Company, Ltd. Automatically performing an action upon a login
US9471192B2 (en) * 2011-05-23 2016-10-18 Haworth, Inc. Region dynamics for digital whiteboard
WO2012162411A1 (en) 2011-05-23 2012-11-29 Haworth, Inc. Digital whiteboard collaboration apparatuses, methods and systems
US8094941B1 (en) * 2011-06-13 2012-01-10 Google Inc. Character recognition for overlapping textual user input
CA2844105A1 (en) 2011-08-31 2013-03-07 Smart Technologies Ulc Detecting pointing gestures in a three-dimensional graphical user interface
US9535595B2 (en) * 2011-10-28 2017-01-03 Qualcomm Incorporated Accessed location of user interface
GB2511465A (en) 2011-12-06 2014-09-03 Agreeya Mobility Seamless collaboration and communication
US9357005B2 (en) * 2012-05-18 2016-05-31 Andrew Milburn Method and system for synchronized distributed display over multiple client devices
US9529785B2 (en) * 2012-11-27 2016-12-27 Google Inc. Detecting relationships between edits and acting on a subset of edits
US9575712B2 (en) * 2012-11-28 2017-02-21 Microsoft Technology Licensing, Llc Interactive whiteboard sharing
US9954908B2 (en) * 2013-01-22 2018-04-24 General Electric Company Systems and methods for collaborating in a non-destructive testing system
US10133720B2 (en) * 2013-06-15 2018-11-20 Microsoft Technology Licensing, Llc Showing presence of multiple authors in a spreadsheet

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5025314A (en) * 1990-07-30 1991-06-18 Xerox Corporation Apparatus allowing remote interactive use of a plurality of writing surfaces
CN102866819A (zh) * 2011-05-06 2013-01-09 株式会社理光 使用会消失的书写介质的交互式白板

Also Published As

Publication number Publication date
EP3014408A1 (en) 2016-05-04
US10705783B2 (en) 2020-07-07
US9489114B2 (en) 2016-11-08
US20170039022A1 (en) 2017-02-09
WO2014209563A1 (en) 2014-12-31
US20140380193A1 (en) 2014-12-25
CN105378624A (zh) 2016-03-02
EP3014408B1 (en) 2019-07-24

Similar Documents

Publication Publication Date Title
CN105378624B (zh) 在交互出现于白板上时显示交互
AU2019208255B2 (en) Environmentally aware dialog policies and response generation
CN105493481B (zh) 自动改变图形用户界面的显示的方法及系统
CN105009062B (zh) 浏览被显示为瓦块的电子消息
CN105378817B (zh) 将外部动态内容合并到白板中
CN105940411B (zh) 在个人设备上显示隐私信息
US20130339831A1 (en) Dynamic reports connected to project data
CN109219824A (zh) 利用用户访问权限来自动共享文档
CN105144069A (zh) 对于显示内容的基于语义缩放的导航
CN104428749A (zh) 由用户动作触发的可视ui向导
CN105264516A (zh) 文档协作和对改变的通知
CN106133826A (zh) 用于语言模型自定义的灵活模式
CN106778117B (zh) 权限开启方法、装置及系统
KR20150107754A (ko) 사용자 생성 지식을 통한 협력 학습 기법
CN105027077A (zh) 将机会匹配于上下文
CN104583909B (zh) 经由输入设备的反馈以及涂写识别
CN105229632A (zh) 在提交文档中建议改变之前查看该改变的效果
CN104737112A (zh) 文档中基于缩略图和文档图的导航
CN105518604A (zh) 对套索选择的反馈
CN110083424A (zh) 用于电子墨水投影的方法和系统
CN108885739A (zh) 智能个人助理作为联系人
CN109891407A (zh) 基于网络的通信和文件共享系统
CN109923834A (zh) 用于协作工作空间环境的上下文对话
CN104704486A (zh) 用于内容选择和扩大内容选择的用户界面元素
CN109891828A (zh) 用于协作工作空间环境的上下文画布

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant