WO2016024329A1 - System and method for sharing handwriting information - Google Patents

System and method for sharing handwriting information Download PDF

Info

Publication number
WO2016024329A1
WO2016024329A1 PCT/JP2014/071303 JP2014071303W WO2016024329A1 WO 2016024329 A1 WO2016024329 A1 WO 2016024329A1 JP 2014071303 W JP2014071303 W JP 2014071303W WO 2016024329 A1 WO2016024329 A1 WO 2016024329A1
Authority
WO
WIPO (PCT)
Prior art keywords
electronic device
point data
time
handwriting
input
Prior art date
Application number
PCT/JP2014/071303
Other languages
French (fr)
Japanese (ja)
Inventor
山口 達夫
俊之 山上
池田 彰吾
友樹 神戸
Original Assignee
株式会社 東芝
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 株式会社 東芝 filed Critical 株式会社 東芝
Priority to JP2016542462A priority Critical patent/JP6235723B2/en
Priority to PCT/JP2014/071303 priority patent/WO2016024329A1/en
Publication of WO2016024329A1 publication Critical patent/WO2016024329A1/en

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F13/00Interconnection of, or transfer of information or other signals between, memories, input/output devices or central processing units

Definitions

  • Embodiment described here is related with the technique for sharing handwritten information.
  • the technology for sharing handwritten information is useful for business scenes such as meetings.
  • An object of one aspect of the present invention is to provide a system and method that can present handwritten information to a user without a sense of incongruity.
  • the system includes a receiving unit, a processing unit, and a transmitting unit.
  • the receiving means receives, from the first electronic device, a plurality of point data corresponding to strokes input by handwriting in the first electronic device logged into a service that can share handwritten information.
  • the plurality of point data are sequentially transmitted from the first electronic device in chronological order while the stroke is input by handwriting.
  • the processing means executes processing for storing the plurality of point data in a storage medium together with a time stamp indicating the input time or reception time of the plurality of point data.
  • the transmission means sequentially transmits the plurality of point data in time series order to a second electronic device logged in to the service.
  • the processing means stores a plurality of first point data stored in the storage medium before the third electronic device logs in the plurality of first items. Processing for sequentially transmitting to the third electronic device in chronological order is executed at a timing based on a time stamp corresponding to each point data.
  • FIG. 1 is an exemplary perspective view showing an appearance of an electronic apparatus according to the embodiment.
  • FIG. 2 is an exemplary diagram illustrating a connection between electronic devices using the handwriting sharing service.
  • FIG. 3 is an exemplary diagram for explaining an outline of a data flow between the electronic device (handwriting collaboration server system) of FIG. 1 and other electronic devices.
  • FIG. 4 is an exemplary diagram showing a screen (canvas) for sharing handwritten information among a plurality of electronic devices.
  • FIG. 5 is an exemplary diagram illustrating a handwritten document handwritten on the touch screen display of the electronic apparatus of FIG. 1.
  • FIG. 6 is an exemplary diagram for explaining a process to be executed when another user joins the handwriting sharing service from the middle.
  • FIG. 1 is an exemplary perspective view showing an appearance of an electronic apparatus according to the embodiment.
  • FIG. 2 is an exemplary diagram illustrating a connection between electronic devices using the handwriting sharing service.
  • FIG. 3 is an exemplary diagram for explaining an outline of a data flow between the electronic device (hand
  • FIG. 7 is an exemplary diagram for explaining the flow of handwritten data between the electronic device of FIG. 1 and other electronic devices.
  • FIG. 8 is an exemplary diagram showing a state in which a plurality of point data is transmitted one by one during stroke handwriting input.
  • FIG. 9 is an exemplary diagram showing an example of handwritten data drawn on a canvas.
  • 10 is an exemplary diagram showing handwritten data stored in the database of the electronic device of FIG.
  • FIG. 11 is an exemplary diagram showing a data structure of a database of the electronic device of FIG.
  • FIG. 12 is an exemplary diagram showing a state in which a plurality of point data stored in the database is replayed at double speed.
  • FIG. 13 is an exemplary diagram showing a process for determining the magnification of the transmission rate with respect to the reception rate.
  • FIG. 14 is an exemplary block diagram showing a configuration of the electronic apparatus of FIG.
  • FIG. 15 is an exemplary block diagram showing a configuration of a handwriting sharing application program executed by the electronic device of FIG.
  • FIG. 16 is an exemplary flowchart showing a procedure of handwritten data distribution processing executed by the electronic apparatus of FIG.
  • FIG. 17 is an exemplary flowchart showing a procedure of point data storage processing executed by the electronic apparatus of FIG.
  • FIG. 18 is an exemplary flowchart showing a replay processing procedure executed by the electronic apparatus of FIG.
  • FIG. 19 is an exemplary flowchart showing a procedure of point data transmission processing for replay, which is executed by the electronic apparatus of FIG.
  • FIG. 20 is an exemplary flowchart showing a procedure of processing executed by each participant's device.
  • FIG. 21 is an exemplary diagram for explaining a menu displayed on the canvas.
  • FIG. 22 is an exemplary diagram for explaining a timeline displayed on the canvas.
  • FIG. 23 is an exemplary diagram for explaining the rooke
  • FIG. 1 is a perspective view illustrating an external appearance of an electronic apparatus according to an embodiment.
  • This electronic device is, for example, a pen-based portable electronic device that can execute handwriting input using a pen (stylus) or a finger.
  • This electronic device can be realized as a tablet computer, a notebook personal computer, a smartphone, a PDA, or the like.
  • the tablet computer 10 is a portable electronic device that is also called a tablet or a slate computer.
  • the tablet computer 10 includes a main body 11 and a touch screen display 17.
  • the touch screen display 17 is attached to be superposed on the upper surface of the main body 11.
  • the main body 11 has a thin box-shaped housing.
  • the touch screen display 17 incorporates a flat panel display and a sensor.
  • the sensor detects the position (contact position) on the screen of the flat panel display that is in contact with the pen or finger.
  • the flat panel display may be, for example, a liquid crystal display (LCD).
  • As the sensor for example, a capacitive touch panel, an electromagnetic induction digitizer, or the like can be used. In the following, it is assumed that two types of sensors, a digitizer and a touch panel, are incorporated in the touch screen display 17.
  • the touch screen display 17 can detect the position on the screen in contact with the finger, and can also detect the position on the screen in contact with the pen.
  • the pen 100 may be, for example, an electromagnetic induction pen (digitizer pen).
  • the user can write characters on the screen of the touch screen display 17 using the pen 100.
  • the locus of movement of the pen 100 on the screen that is, the stroke input by handwriting is drawn on the screen in real time.
  • the locus of movement of the pen 100 while the pen 100 is in contact with the screen corresponds to one stroke.
  • a set of many strokes corresponding to handwritten characters or figures constitutes a handwritten document.
  • a single stroke is represented by a set of a plurality of point data corresponding to each of a plurality of points on this stroke.
  • Each point data indicates the coordinates (X coordinate, Y coordinate) of the corresponding point.
  • the tablet computer 10 has a handwriting collaboration function.
  • This handwriting collaboration function executes a handwriting sharing service capable of sharing handwritten information among a plurality of electronic devices.
  • the handwriting sharing service enables users of each electronic device to browse shared handwritten information and edit handwritten information through collaborative work with users of other electronic devices.
  • This handwriting sharing service distributes handwritten data input by handwriting on an electronic device participating (logged in) to the other electronic devices participating (logged in) in real time. Thereby, the contents of the handwritten document displayed on the display screens of these electronic devices can be synchronized. Strokes handwritten by different users may be displayed in different forms (eg, different colors, different pen types, etc.).
  • the handwriting sharing service is used by a group of multiple people.
  • the group of a plurality of people who use the handwriting sharing service may include one group owner (organizer) and one or more participants.
  • FIG. 2 shows a connection example between electronic devices using the handwriting sharing service.
  • the electronic device 10A is a tablet computer used by the user A.
  • the electronic device 10B is a tablet computer used by the user B.
  • the electronic device 10 ⁇ / b> C is a tablet computer used by the user C.
  • Each of these electronic devices 10A, 10B, and 10C has a handwriting collaboration function equivalent to that of the tablet computer 10 of the present embodiment.
  • the electronic devices 10A, 10B, and 10C are connected to each other via a wired network or a wireless network.
  • a wireless network In the following, it is assumed that the electronic devices 10A, 10B, and 10C are connected to each other via a wireless network.
  • any wireless connection standard capable of wirelessly connecting a plurality of devices to each other can be used.
  • Bluetooth registered trademark
  • Wi-Fi Direct registered trademark
  • Any one of the electronic devices 10A, 10B, and 10C can function as a server (handwriting collaboration server system) configured to manage the handwriting sharing service.
  • the electronic device of the group owner may serve as a server (handwriting collaboration server system).
  • the group owner is equivalent to the organizer of the handwriting sharing service.
  • each electronic device requesting participation in the handwriting sharing service participates in the handwriting sharing service (group), that is, logs in to the handwriting collaboration server system (handwriting sharing service). , It may be determined whether or not to allow. Only a device that has received permission for participation (login) from the handwriting collaboration server system may be permitted to log in to the handwriting sharing service, that is, to participate in this group.
  • a method of logging in to the handwriting sharing service using the ID (account) of the device itself may be used.
  • a handwriting sharing screen for viewing shared handwritten information is displayed.
  • the handwriting sharing screen is used as a display area common to the electronic devices 10A, 10B, and 10C.
  • This handwritten sharing screen (canvas) enables visual communication between the electronic devices 10A, 10B, and 10C. Visual communication allows handwritten information and various other electronic documents to be exchanged between devices.
  • Handwritten data input by each of the users A, B, and C in his / her electronic device is not only displayed on the handwriting sharing screen (canvas) of his / her electronic device, but also handwritten and shared by the electronic devices of other users. It is also reflected on the screen (canvas) in real time. As a result, information (handwritten characters, handwritten figures, etc.) input by handwriting by each of the users A, B, and C can be exchanged and shared between the users A, B, and C.
  • the electronic devices 10A, 10B, and 10C can display the same content such as conference materials on the canvas.
  • handwritten data input by handwriting in each electronic device is displayed on this content.
  • Users A, B, and C can exchange and share handwritten characters, handwritten figures, and the like handwritten on the content among the users A, B, and C while viewing the same content.
  • FIG. 3 shows a data flow between the handwritten collaboration server system and each electronic device.
  • the electronic device 10A operates as a handwriting collaboration server system. That is, the user A of the electronic device 10A is a group owner, the user B of the electronic device 10B is a participant (participant 1), and the user C of the electronic device 10C is another participant (participant 2).
  • the handwriting collaboration server system receives handwritten data input by handwriting in the electronic device 10B from the electronic device 10B.
  • the handwriting collaboration server system receives handwritten data input by handwriting in the electronic device 10C from the electronic device 10C.
  • the handwriting collaboration server system (electronic device 10A) transmits handwritten data input by handwriting in the electronic device 10A and handwritten data received from the electronic device 10C to the electronic device 10B. Furthermore, the handwriting collaboration server system (electronic device 10A) transmits handwritten data input by handwriting in the electronic device 10A and handwritten data received from the electronic device 10B to the electronic device 10C.
  • the electronic device 10 ⁇ / b> A stores handwritten data input by handwriting in each electronic device in the database 12.
  • This database 12 is used to manage handwritten information created and edited by collaborative work.
  • FIG. 4 shows an example of a handwriting sharing screen (canvas).
  • a transparent layer (handwriting layer) 30B capable of handwriting input is set in the canvas 30A of each electronic device.
  • the handwritten data of each user is displayed on the handwriting layer 30B.
  • handwritten data 40 input by the participant 1 using the pen 100B on the canvas 30A is displayed. Furthermore, on the canvas 30A, handwritten data input by handwriting in other electronic devices is displayed.
  • the handwritten data input by handwriting in each of the other electronic devices includes handwritten data 42 input by handwriting in the electronic device 10C of the participant 2 and handwritten data 44 input by handwriting in the electronic device 10A of the group owner. .
  • the handwritten character “A” is expressed by two strokes (“ ⁇ ” shape trajectory, “ ⁇ ” shape trajectory) handwritten using the pen 100 or the like.
  • a plurality of point data (a plurality of coordinate data) PD11, PD12,... PD1m corresponding to the plurality of points on the trajectory of the “ ⁇ ” -shaped pen 100 are obtained one after another.
  • point data indicating a new position may be obtained each time the position of the pen 100 on the screen moves by a predetermined amount.
  • the density of the point data is drawn roughly for the sake of simplicity, but actually, a plurality of point data can be obtained at a higher density.
  • These point data PD11, PD12,... PD1m are used to draw the trajectory of the “ ⁇ ” -shaped pen 100 on the screen.
  • the locus of the “ ⁇ ” -shaped pen 100 is drawn on the screen in real time so as to follow the movement of the pen 100.
  • the trajectory of the “-” shaped pen 100 is also sampled in real time while the pen 100 is moving.
  • a plurality of point data (a plurality of coordinate data) PD21, PD22,... PD2n corresponding to a plurality of points on the trajectory of the “ ⁇ ” shaped pen 100 are obtained one after another.
  • the handwritten character “B” is expressed by two strokes handwritten using the pen 100 or the like.
  • the handwritten character “C” is expressed by one stroke handwritten using the pen 100 or the like.
  • FIG. 6 it is assumed that a group of three persons, a group owner (electronic device 10A), a participant 1 (electronic device 10B), and a participant 2 (electronic device 10C) hold discussion.
  • the group owner, participant 1, and participant 2 may gather in the conference room with their own electronic devices 10A, 10B, 10C. Then, the group owner, the participant 1, and the participant 2 can discuss while looking at the canvas of their own electronic devices or while handwriting on the canvas.
  • the handwritten data input by handwriting on the canvas of the electronic device 10C by the participant 2 is also transmitted to the electronic device 10A and further transferred to the electronic device 10B by the electronic device 10A. Therefore, the handwritten data of the participant 2 is displayed on the respective canvases of the electronic device 10B, the electronic device 10A, and the electronic device 10C.
  • handwritten data input by handwriting on the canvas of the electronic device 10A by the group owner is transmitted to the electronic device 10B and the electronic device 10C. Therefore, the handwritten information of the group owner is also displayed on each canvas of the electronic device 10A, the electronic device 10B, and the electronic device 10C.
  • the electronic device 10D of another user may request participation (login) to the handwritten information sharing service. Absent. Such a situation may occur, for example, when the participant 3 arrives at the conference room later and joins an already started discussion.
  • the group owner (electronic device 10A) that has received the request for participation (login) can permit the participant 3 to participate (login) to the group of the handwritten information sharing service.
  • the electronic device 10A may transmit the content of the current handwritten information (the content of the discussion so far) to the electronic device 10D.
  • the electronic device 10D can draw the contents of the current handwritten information on the canvas of the electronic device 10D.
  • Participant 3 may not be able to grasp the progress of the discussion so far, that is, how the current handwritten information has been constructed. There is.
  • the handwriting collaboration function of the present embodiment has a new function for presenting in an easy-to-understand manner how the current handwritten information has been constructed to participants who have joined the handwritten information sharing service midway. I have.
  • a method for transmitting handwritten data input by handwriting in a certain electronic device to another electronic device a method of transmitting the entire stroke data (stroke data) at a time every time one stroke is input by handwriting Can be used.
  • the stroke data is not transmitted until the stroke handwriting input is completed, that is, until the contact between the pen and the screen is released by lifting the pen from the screen. Therefore, for example, when three strokes are sequentially handwritten input in a certain electronic device, first, after completing the first stroke handwriting input, the shape of the entire first stroke is on the canvas of another electronic device. Are displayed at once. Then, after the handwriting input of the second stroke is completed, the shape of the entire second stroke is displayed at once on the canvas of another electronic device. After the handwriting input of the third stroke is completed, the shape of the entire third stroke is displayed at once on the canvas of another electronic device.
  • the handwritten data in order to be able to reproduce the state in which the stroke is written in any electronic device on any canvas in any electronic device, the handwritten data is in stroke units. No, it is transmitted in point data units.
  • the handwriting collaboration server system receives, from the electronic device 10B, a plurality of point data corresponding to strokes input by handwriting in the electronic device (for example, the electronic device 10B) logged in to the handwritten information sharing service. .
  • the plurality of point data are sequentially transmitted from the electronic device 10B to the handwriting collaboration server system (electronic device 10A) in chronological order while the stroke is input by handwriting. That is, the plurality of point data is transferred from the electronic device 10B to the handwriting collaboration server system (electronic device 10A) one by one in the order in which the plurality of point data corresponding to the stroke is input.
  • the handwriting collaboration server system executes processing for storing the plurality of point data in the database 12 together with time stamps indicating the reception times of the plurality of point data.
  • the time stamp corresponding to each point data may indicate the input time of the point data.
  • the electronic device 10B may transmit each point data to the handwriting collaboration server system (electronic device 10A) together with time information indicating an input time when the point data is input.
  • the handwriting collaboration server system (electronic device 10A) sequentially transmits the plurality of point data in time series order to another electronic device (for example, electronic device 10C) logged in to the handwritten information sharing service.
  • the handwriting collaboration server system (electronic device 10A) may execute a process of transmitting the received point data to the electronic device 10C each time one piece of point data is received from the electronic device 10A. .
  • the electronic device 10C can sequentially receive a plurality of point data from the electronic device 10A in the same manner as when handwritten input is performed on the screen of the electronic device 10C.
  • the electronic device 10C can draw a trajectory corresponding to the stroke input by handwriting in the electronic device 10A in real time on the canvas of the electronic device 10C based on the received plurality of point data. For this reason, it is possible to reproduce a state in which a stroke input by handwriting in the electronic device 10A is written (a state in which a line extends) on the canvas of the electronic device 10C.
  • the handwritten collaboration server system (electronic device 10A) stores all the point data (a plurality of first point data) stored in the database 12 before the electronic device 10D logs in. ) Is sequentially transmitted to the electronic device 10D in time series order at timings based on time stamps corresponding to the plurality of first point data, respectively.
  • the electronic device 10D can sequentially receive a plurality of point data corresponding to this stroke in the same manner as when handwritten input is performed on the screen of the electronic device 10D.
  • the electronic device 10D can draw a trajectory corresponding to the stroke input by handwriting in the electronic device 10A in real time on the canvas of the electronic device 10D based on the plurality of received point data. Therefore, it is possible to reproduce a state in which each stroke is written (a state in which a line extends).
  • a plurality of point data corresponding to each stroke is sequentially transmitted to the electronic device 10D at a transmission timing corresponding to the timing at which the point data is written. For this reason, the speed of the written stroke (line) can also be reproduced.
  • FIG. 7 shows the flow of handwritten data between electronic devices.
  • a stroke is input by handwriting in the electronic device 10B of the participant 1. This stroke is displayed in real time on the canvas of the electronic apparatus 10B. That is, the stroke (line) is drawn so as to follow the movement of the pen on the canvas of the electronic device 10B.
  • the stroke is expressed as a set of a plurality of point data (a plurality of coordinates) from the start point to the end point.
  • the stroke data (stroke data) is transmitted to the group owner (electronic device 10A) in units of point data. This is shown in FIG. As shown in FIG. 8, in the electronic device 10B, while a stroke is handwritten by the pen 100B, a plurality of point data PD1, PD2,..., PD8 corresponding to this stroke are obtained one after another. . These point data PD1, PD2,..., PD8 are transmitted one by one to the group owner (electronic device 10A). That is, the point data PD1, PD2,..., PD8 are sequentially transmitted to the group owner (electronic device 10A) in time series order.
  • a drawing process based on the point data PD1 is executed by the electronic device 10B, and a process for transmitting the point data PD1 to the group owner (electronic device 10A) is also executed by the electronic device 10B.
  • a drawing process based on the point data PD2 is executed by the electronic device 10B, and a process of transmitting the point data PD2 to the group owner (electronic device 10A) is also executed by the electronic device 10B. Is done.
  • the stroke ID is information that can identify a stroke input by handwriting.
  • Each electronic device may generate a unique ID having a plurality of digits using a random number or the like, and use the value of the unique ID as a stroke ID for identifying a stroke input by handwriting first. For strokes handwritten after the second, a value obtained by incrementing the unique ID may be used as the corresponding stroke ID. The same stroke ID is given to each point data corresponding to the same stroke.
  • the group owner (electronic device 10A) receives a plurality of point data sequentially transmitted from the electronic device 10B in chronological order. Then, the group owner (electronic device 10A) stores the plurality of point data in the database 12 together with a time stamp indicating the reception time (reception timing) or the input time (input timing) of the plurality of point data.
  • Each time stamp may indicate the time when the corresponding point data is received by the group owner (electronic device 10A), or the corresponding point data is received from the time when the first point data in the same stroke is received. The relative time until the point in time may be indicated.
  • each time stamp may indicate the time when the corresponding point data is input, or the relative time from the time when the first point data in the same stroke is input to the time when the corresponding point data is input. Time may be indicated.
  • the group owner (electronic device 10A) transmits a plurality of point data received from the electronic device 10B to the electronic device 10C.
  • the plurality of point data may be sequentially transmitted to the electronic device 10C in time-series order at a timing based on a time stamp corresponding to the plurality of point data. Accordingly, the plurality of point data can be transmitted to the electronic device 10C at the same interval as the interval at which the plurality of point data is received.
  • the stroke ID, user ID (or device ID), point type (start point / middle point / end point), pen attributes (pen type, color, etc.) are added to each point data to be transmitted.
  • the group owner may immediately transmit the point data to the electronic device 10C.
  • the group owner may draw a locus corresponding to the stroke input by handwriting on the electronic device 10A in real time on the group owner's canvas based on a plurality of point data from the electronic device 10B. it can.
  • the group owner (electronic device 10A) transmits all point data stored so far in the database 12 to the electronic device 10D.
  • all the point data are sequentially transmitted to the electronic device 10D in time series order at timings based on the time stamps corresponding to all the data.
  • Each point data to be transmitted includes a stroke ID, a user ID (or device ID), a point type (start point / middle point / end point), a pen attribute (pen type, color, etc.), and the like.
  • These point data may be transmitted to the electronic device 10D at a rate (speed) faster than the rate (speed) at which these point data are received.
  • the rate (speed) at which the point data is received can be obtained by a time stamp corresponding to the point data.
  • the reception rate in a dense period with a large number of point data received per reference time is high, and the reception rate in a coarse period with a small number of point data received per reference time is low.
  • a method for transmitting a plurality of point data at a transmission rate faster than the reception rate a method of transmitting a plurality of point data at a transmission interval shorter than a reception interval between the plurality of point data is used. May be.
  • the reception interval between the plurality of point data can be easily obtained by the time stamp corresponding to the point data.
  • these point data are transmitted to the electronic apparatus 10D at a transmission rate that is twice the reception rate of these point data. can do.
  • a plurality of point data corresponding to the stroke is transmitted to the group owner (electronic device 10A) in units of point data. That is, while the stroke is input by handwriting, the plurality of point data are sequentially transmitted to the group owner (electronic device 10A) in time series order.
  • the plurality of point data are stored in the database 12 together with a time stamp.
  • the plurality of point data are transmitted to the electronic device 10B in point data units.
  • a stroke is input by handwriting in the group owner (electronic device 10A)
  • a plurality of point data corresponding to the stroke is stored in the database 12 together with a time stamp, and further, the plurality of point data is electronically stored in units of point data. It is transmitted to the device 10B and the electronic device 10C.
  • FIG. 9 shows an example of handwritten information displayed on the canvas of the electronic device 10B.
  • the stroke 50, the stroke 52, and the stroke 53 are shared by a group of three people, the group owner, the participant 1, and the participant 2.
  • the stroke 50 is a stroke input by the participant 1 by handwriting on the electronic device 10B.
  • the stroke 52 is a stroke input by handwriting on the electronic device 10 ⁇ / b> C by the participant 2.
  • the stroke 54 is a stroke input by handwriting on the electronic apparatus 10A by the group owner.
  • FIG. 10 shows an example of handwritten data stored in the database 12.
  • each point data corresponding to the stroke 50 is stored together with a time stamp.
  • Each point data corresponding to the stroke 52 is also stored together with the time stamp, and each point data corresponding to the stroke 54 is also stored together with the time stamp.
  • FIG. 11 shows the data structure of the database 12.
  • a stroke management table 121 and a point management table 122 are constructed.
  • the stroke management table 121 includes a plurality of rows (records) corresponding to a plurality of strokes.
  • a “stroke ID” field, a “start time” field, a “user ID” field, a “pen type” field, a “color” field, and the like are defined.
  • the point management table 122 includes a plurality of rows (records) corresponding to a plurality of point data.
  • a “stroke ID” field, a “time” field, a “point type” field, a “coordinate x” field, a “coordinate y” field, and the like are defined.
  • the electronic device 10A When the electronic device 10A receives the point data corresponding to the start point of a certain stroke, the electronic device 10A adds one record to the stroke management table 121, and adds the value indicating the stroke ID and the start point time to the added record. A value indicating the user ID, a value indicating the pen type, and a value indicating the color are stored. As described above, additional information indicating the stroke ID, user ID, pen type, and color is added to the received point data. Therefore, the electronic device 10A can store a value indicating the stroke ID, a value indicating the user ID, a value indicating the pen type, and a value indicating the color in the record using this additional information.
  • the value indicating the start point time is a time stamp indicating the reception time (reception timing) of the point data corresponding to the start point of the stroke.
  • this time stamp any value that can identify the timing at which the point data is received can be used.
  • the time stamp may be an absolute time or a relative time with respect to a certain reference time.
  • the value indicating the start point time may be a time stamp indicating the input time of the point data corresponding to the start point of the stroke.
  • this time stamp any value that can identify the timing at which point data is input can be used.
  • the electronic device 10A When the electronic device 10A receives point data corresponding to the start point of a certain stroke, the electronic device 10A further adds one record to the point management table 122, and the value and time indicating the stroke ID in the added record.
  • a value indicating (input time or reception time), a value indicating point type, a value indicating coordinate x, and a value indicating coordinate y are stored.
  • the point data includes not only information indicating the coordinates x and coordinates y but also additional information indicating the stroke ID and the point type. Therefore, the electronic apparatus 10A can store a value indicating the stroke ID and a value indicating the point type in the record using this additional information.
  • the value indicating the time is a time stamp indicating the input time or the reception time of the point data.
  • the electronic device 10A When the electronic device 10A receives point data after the second of a certain stroke, the electronic device 10A adds one record to the point management table 122, and the value and time indicating the stroke ID in the added record.
  • a process of storing a value indicating (input time or reception time), a value indicating the point type, a value indicating the coordinate x, and a value indicating the coordinate y is executed.
  • the database 12 in FIG. 11 may be shared data that can be referred to from all electronic devices logged into the handwriting sharing service. In this case, each electronic device can roll back the current handwritten information displayed on the canvas to the handwritten information at an arbitrary time point based on the contents of the database 12.
  • the contents of the database 12 in FIG. 11 may be copied to the local storage of each participant's electronic device. Even in this case, the above-described rollback can be realized.
  • FIG. 12 shows how a plurality of point data stored in the database 12 are replayed at double speed.
  • the plurality of point data corresponding to the stroke 50 is transmitted from the electronic device 10A to the electronic device 10D at a time interval that is 1 ⁇ 2 of the reception interval between the plurality of point data.
  • the reception interval between the first point data and the second point data is T1
  • the reception interval between the second point data and the third point data is T2.
  • the second point data is transmitted to the electronic device 10D when the time interval of T1 / 2 has elapsed since the first point data was transmitted to the electronic device 10D.
  • the third point data is transmitted to the electronic device 10D when the time interval of T2 / 2 has elapsed since the second point data was transmitted to the electronic device 10D.
  • the stroke 50 is replayed at double speed on the canvas of the electronic device 10D.
  • a plurality of point data corresponding to the stroke 52 are also transmitted from the electronic device 10A to the electronic device 10D at a time interval that is 1 ⁇ 2 of the reception interval of the plurality of point data.
  • the stroke 52 is replayed at double speed on the canvas of the electronic apparatus 10D. Therefore, the participant 3 who has logged in to the service from the middle can grasp the progress of the discussion so far, that is, how the current handwritten information has been constructed through a short time.
  • the magnification of the transmission rate (replay speed) with respect to the reception rate is not limited to 2 times, and can be variably set to any magnification such as 1 times, 1.5 times, 3 times, 4 times,. is there.
  • a user interface that can increase or decrease the replay speed according to the user's operation may be used.
  • the ratio of the transmission rate to the reception rate may be changed between a dense period where a lot of point data exists and a coarse period where the number of point data is small.
  • the magnification of the transmission rate relative to the reception rate may be set to a low magnification close to 1 in the coarse period, and the magnification of the transmission rate relative to the reception rate may be set to a magnification higher than 1 in the dense period.
  • the magnification of the transmission rate (replay speed) with respect to the reception rate is determined based on the length of the period (delay period) from the time when the handwriting sharing service is started to the time when the electronic device 10D (halfway participant) logs in. May be.
  • FIG. 13 shows a process for determining the magnification of the transmission rate with respect to the reception rate.
  • t0 represents a point in time when the handwriting sharing service is started
  • t1 represents a point in time when the electronic device 10D (participant on the way) logs in.
  • the replay time Rt is fixed.
  • the replay time Rt is a time interval for replaying all the point data accumulated in the database 12 during the delay period Dt.
  • the replay time Rt may be set to 30 seconds or 1 minute, for example.
  • N Dt / Rt Given by.
  • the replay time Rt is not necessarily fixed. In this case, for example, if the delay period Dt is less than the threshold time, the replay may be executed at a predetermined first double speed (for example, double speed). On the other hand, if the delay period Dt is equal to or longer than the threshold time, the replay may be executed at a predetermined second speed (for example, 10 times speed). If the time interval from the reception time (or input time) of the previous point data to the reception time (or input time) of the next point data exceeds a certain reference time, this time interval is waited. Instead, the next point data may be transmitted immediately after the previous point data is transmitted.
  • a predetermined first double speed for example, double speed
  • the replay may be executed at a predetermined second speed (for example, 10 times speed). If the time interval from the reception time (or input time) of the previous point data to the reception time (or input time) of the next point data exceeds a certain reference time, this time interval is waited. Instead, the next point data may be transmitted immediately after the previous
  • FIG. 14 shows a system configuration of the tablet computer 10.
  • the tablet computer 10 includes a CPU 101, a system controller 102, a main memory 103, a graphics processing unit (GPU) 104, a BIOS-ROM 105, a nonvolatile memory 106, a wireless communication device 107, an embedded controller (EC). 108 and the like.
  • the CPU 101 is a processor that controls the operation of various components in the tablet computer 10.
  • the CPU 101 executes various programs loaded from the nonvolatile memory 106 that is a storage device to the main memory 103. These programs include an operating system (OS) 201 and various application programs.
  • the application program includes a handwriting sharing application program 202.
  • the handwriting sharing application program 202 can execute the above-described handwriting collaboration function for sharing handwritten information among a plurality of electronic devices.
  • the CPU 101 also executes a basic input / output system (BIOS) stored in the BIOS-ROM 105.
  • BIOS is a program for hardware control.
  • the system controller 102 is a device that connects between the local bus of the CPU 101 and various components.
  • the system controller 102 also includes a memory controller that controls access to the main memory 103.
  • the system controller 102 also has a function of executing communication with a graphics processing unit (GPU) 104 via a PCI EXPRESS serial bus or the like.
  • GPU graphics processing unit
  • the GPU 104 is a display processor that controls the LCD 17 ⁇ / b> A used as a display monitor of the tablet computer 10.
  • a display signal generated by the GPU 104 is sent to the LCD 17A.
  • the LCD 17A displays a screen image based on the display signal.
  • a touch panel 17B is disposed on the upper surface side of the LCD 17A.
  • a digitizer 17C is disposed on the lower surface side of the LCD 17A.
  • the touch panel 17B is a capacitance-type pointing device for inputting on the screen of the LCD 17A.
  • the touch position on the screen where the finger is touched and the movement of the touch position are detected by the touch panel 17B.
  • the digitizer 17C is an electromagnetic induction type pointing device for inputting on the screen of the LCD 17A.
  • the digitizer 17C detects the contact position on the screen where the pen 100 is touched, the movement of the contact position, and the like.
  • the wireless communication device 107 is a device configured to execute wireless communication.
  • the EC 108 is a one-chip microcomputer including an embedded controller for power management.
  • the EC 108 has a function of turning on or off the tablet computer 10 in accordance with the operation of the power button by the user.
  • the handwriting sharing application program 202 includes a handwriting input interface 300, a display processing unit 301, a processing unit 302, a transmission control unit 303, a reception control unit 304, and the like as function execution modules for sharing handwritten information.
  • the handwriting sharing application program 202 creates, displays, and edits handwritten page data by using stroke data that is input using the touch screen display 17.
  • the digitizer 17C of the touch screen display 17 is configured to detect occurrence of events such as “touch”, “move (slide)”, “release” and the like. “Touch” is an event indicating that the pen has touched the screen. “Move (slide)” is an event indicating that the contact position has been moved while the pen is in contact with the screen. “Release” is an event indicating that the pen is released from the screen.
  • the handwriting input interface 300 is an interface configured to perform handwriting input in cooperation with the digitizer 17C of the touch screen display 17.
  • the handwriting input interface 300 receives a “touch” or “move (slide)” event from the digitizer 17 ⁇ / b> C of the touch screen display 17, thereby detecting a handwriting input operation.
  • the “touch” event includes the coordinates of the contact position.
  • the “movement (slide)” event also includes the coordinates of the contact position of the movement destination. Therefore, the handwriting input interface 300 can receive a coordinate sequence (a plurality of point data) corresponding to the movement locus of the contact position from the touch screen display 17.
  • the display processing unit 301 displays, on the screen of the LCD 17 ⁇ / b> A, each stroke input by handwriting input operation using the pen 100 based on the coordinate sequence from the handwriting input interface 300. Further, the display processing unit 301 displays each stroke on the screen of the LCD 17A based on the coordinate sequence received from another electronic device under the control of the processing unit 302.
  • the transmission control unit 303 executes processing for sequentially transmitting a plurality of point data to other electronic devices in time series using the wireless communication device 107 under the control of the processing unit 302. Under the control of the processing unit 302, the reception control unit 304 uses the wireless communication device 107 to execute processing for sequentially receiving a plurality of point data from other electronic devices in chronological order.
  • the processing unit 302 executes processing for sharing handwritten information among a plurality of electronic devices.
  • the processing unit 302 includes a member management unit 311, a storage processing unit 312, a replay processing unit 313, and the like.
  • the member management unit 311 manages each member (electronic device) logged into the handwriting sharing service.
  • the member management unit 311 can determine whether or not to permit login to an electronic device requesting login to the handwriting sharing service.
  • the electronic device that has received permission from the member management unit 311 is permitted to log in to the handwriting sharing service, and is thereby connected to other electronic devices that are logged in to the handwriting sharing service.
  • the function of the member management unit 311 may be executed only in an electronic device (group owner electronic device) operating as a handwriting collaboration server system.
  • the storage processing unit 312 executes processing for storing each point data received from another electronic device in the database 12 together with a time stamp.
  • the replay processing unit 313 executes the above-described processing for replay. That is, when a certain electronic device logs in to the handwriting sharing service from the middle, the replay processing unit 313 uses a plurality of point data stored in the database 12 before the login of the electronic device as time stamps corresponding to these point data, respectively.
  • processing for sequentially transmitting to the electronic device in chronological order is executed. In this case, transmission of these point data can be executed at N times speed (N is 1 or more).
  • the replay processing unit 313 executes a process of displaying the point data while receiving the point data sequentially transmitted from the group owner electronic device in time series.
  • FIG. 16 shows the procedure of handwritten data distribution processing of the present embodiment.
  • the processing unit 302 of the handwriting collaboration server system receives, from this electronic device, a plurality of point data corresponding to strokes input by handwriting in any of a plurality of participant electronic devices that are logged in. (Block B11). As described above, the plurality of point data are sequentially transmitted from the electronic device to the handwriting collaboration server system (electronic device 10A) in time series.
  • the processing unit 302 executes a point data storage process for storing each received point data in the database 12 together with a time stamp indicating the input time or the reception time of the point data (block B12).
  • the processing unit 302 transmits the received plurality of point data to the electronic devices of other participants (block B13).
  • the plurality of point data are sequentially transmitted to the electronic devices of the other participants in chronological order.
  • FIG. 17 shows the procedure of the point data storage process performed in block B12 of FIG.
  • the processing unit 302 determines whether the point data is point data at the start point of the stroke based on the point type added to the point data. Is determined (block B22).
  • this point data is point data of the start point of the stroke (YES in block B22)
  • the processing unit 302 adds one record to the stroke management table 121, and a value indicating the stroke ID in the added record, A value indicating the start point time, a value indicating the user ID, a value indicating the pen type, and a value indicating the color are stored (block B23). Then, the processing unit 302 adds one record to the point management table 122, and adds a value indicating the stroke ID, a value indicating the time, a value indicating the point type, a value indicating the coordinate x, and a coordinate y to the added record. Is stored (block B24). Then, the processing unit 302 transmits the received point data to the electronic devices of other participants (block B25).
  • the processing unit 302 skips the processing of block B23 and executes only the processing of block B24 and block B25. To do.
  • FIG. 18 is a flowchart showing the replay processing procedure.
  • the processing unit 302 stores all the point data stored in the database 12 before the new participant joins.
  • a point data transmission process for transmitting to the electronic device of the new participant is executed (block B32). In block B32, all these point data are sequentially transmitted to the new participant's electronic devices in time-series order at the timing specified by the corresponding time stamp.
  • the point data transmission process is repeatedly executed until it is determined in block B33 that transmission of all point data has been completed.
  • the flowchart of FIG. 19 shows the procedure of the point data transmission process.
  • replay is executed at N times speed based on the length of the delay period Dt.
  • the processing unit 302 determines how many times the original speed should be replayed (block B41).
  • the processing unit 302 calculates the magnification N of the transmission rate with respect to the reception rate (original speed) based on the length of the delay period Dt.
  • the processing unit 302 transmits the first point data to the electronic device of the new participant (block B42). Next, the processing unit 302 determines the next interval based on the time interval between the reception time (or input time) of the first point data and the reception time (or input time) of the next point data and the magnification N. The transmission timing at which point data is to be transmitted is determined (block B43). The processing unit 302 determines whether or not the next point data transmission timing has arrived (block B44). If the next point data transmission timing has arrived (YES in block B44), the processing unit 302 transmits the first point data to the electronic device of the new participant (block B45). Then, the processing unit 302 determines whether transmission of all point data has been completed (block B46).
  • the flowchart of FIG. 20 shows a procedure of processing executed by the participant's electronic device.
  • the processing unit 302 of the participant's electronic device transmits a login request (participation request) to the handwriting collaboration server system and logs in to the handwriting sharing service (step B51). If there is point data already stored in the database 12 (YES in block B52), the processing unit 302 transitions to the replay processing mode.
  • the processing unit 302 prohibits handwriting input of strokes in the participant's electronic device.
  • the processing unit 302 receives point data transmitted from the handwriting collaboration server system.
  • the processing unit 302 executes the drawing process based on the received point data (block B54). Until the reception and drawing of all the already accumulated point data are completed (NO in block B54), the processes in blocks B53 and B54 are repeated.
  • the processing unit 302 exits the replay processing mode and transitions to the handwriting sharing mode.
  • the processing unit 302 permits handwriting input of strokes in the participant's electronic device.
  • the processing unit 302 performs processing for drawing a stroke based on a plurality of point data corresponding to the stroke. (Block B57), and further, a process of sequentially transmitting a plurality of point data to the handwriting collaboration server system in chronological order (block B58).
  • the processing unit 302 executes drawing processing based on the received point data (block B60).
  • handwritten data 401 As shown in FIG. 21, the contents of the current handwritten information being shared are displayed on the canvas.
  • handwritten data 401, handwritten data 402, handwritten data 403, and handwritten data 404 are displayed on the canvas.
  • Each of these handwritten data is composed of one or more strokes input by handwriting in any electronic device logged into the handwriting sharing service.
  • the user can also display a menu on the canvas.
  • This menu includes a “Timeline” button.
  • the “timeline” button is a software button for starting rollback processing.
  • a timeline 501 When the “timeline” button is tapped by the user, as shown in FIG. 22, a timeline 501, a slider 502 that can be moved on the timeline 501, a playback button 504, and the like are displayed on the canvas.
  • the left end of the timeline 501 corresponds to the time when the handwriting sharing service is started.
  • the right end of the timeline 501 corresponds to the current time.
  • the default position of the slider 502 is the right end of the timeline 501.
  • the content of the handwritten information on the canvas is updated to the handwritten information at the time corresponding to the center position.
  • the handwriting collaboration server system includes one or more servers other than these electronic devices. It may be realized by.
  • handwritten data is transmitted not in units of stroke data but in units of point data. Therefore, regardless of the electronic device in which the stroke is input by handwriting, the state in which the stroke is written can be reproduced on the canvas of all other electronic devices. Therefore, handwritten information can be shared in real time.
  • the handwriting collaboration server system (electronic device 10A) stores all the point data (a plurality of first data items) stored in the database 12 before the electronic device 10D logs in. Point data) is sequentially transmitted to the electronic device 10D in time-series order at timings based on time stamps respectively corresponding to the plurality of first point data.
  • the conference may be held over several days.
  • the database 12 storing handwritten information until the end of the previous day's meeting may be used to replay the process in which the handwritten information was constructed in the previous day's meeting.
  • the contents of the database 12 may be stored in the local storage of each electronic device at the end of the conference.
  • the function of the handwriting collaboration server system (electronic device 10A) of this embodiment is realizable by one or more processors.
  • the function of the handwriting collaboration server system (electronic device 10A) of this embodiment can be realized by a computer program
  • the computer program is installed in the computer through a computer-readable storage medium storing the computer program.
  • the effect similar to this embodiment can be easily realized only by executing.

Abstract

A system in an embodiment receives, from a first electronic device, a plurality of point data that correspond to handwriting strokes inputted to said first electronic device. As said handwriting strokes are being inputted, the point data are sequentially transmitted from the first electronic device in chronological order. The system stores the point data, together with timestamps, on a storage medium. If a third electronic device logs into a service midway through, the system sequentially transmits the first point data stored on the storage medium to the third electronic device in chronological order using timing based on the timestamps corresponding to the respective first point data.

Description

手書き情報を共有するためのシステムおよび方法System and method for sharing handwritten information
 ここに記載される実施形態は、手書き情報を共有するための技術に関する。 Embodiment described here is related with the technique for sharing handwritten information.
 近年、タブレット、PDA、スマートフォンといった種々の電子機器が開発されている。この種の電子機器の多くは、ユーザによる入力操作を容易にするために、タッチスクリーンディスプレイを備えている。 In recent years, various electronic devices such as tablets, PDAs, and smartphones have been developed. Many electronic devices of this type are equipped with a touch screen display to facilitate an input operation by a user.
 また最近では、手書き情報を共有するための技術も開発されている。手書き情報を共有する技術は、会議のようなビジネスシーンでの利用に有用である。 Recently, technology for sharing handwritten information has also been developed. The technology for sharing handwritten information is useful for business scenes such as meetings.
特開2014-44471号公報JP 2014-44471 A
 しかし、従来では、別の電子機器からの手書き情報を違和感なくユーザに提示するための技術については考慮されていないのが現状である。 However, in the past, no technology has been considered for presenting handwritten information from another electronic device to the user without a sense of incongruity.
 本発明の一形態の目的は、手書き情報を違和感なくユーザに提示することができるシステムおよび方法を提供することである。 An object of one aspect of the present invention is to provide a system and method that can present handwritten information to a user without a sense of incongruity.
 実施形態によれば、システムは、受信手段と、処理手段と、送信手段とを具備する。前記受信手段は、手書き情報を共有可能なサービスにログインしている第1の電子機器において手書き入力されるストロークに対応する複数の点データを前記第1の電子機器から受信する。前記複数の点データは、前記ストロークが手書き入力されている間に、前記第1の電子機器から時系列順に順次送信される。前記処理手段は、前記複数の点データを、前記複数の点データの入力時刻または受信時刻をそれぞれ示すタイムスタンプと共に、記憶媒体に格納するための処理を実行する。前記送信手段は、前記サービスにログインしている第2の電子機器に前記複数の点データを時系列順に順次送信する。第3の電子機器が前記サービスに途中からログインした場合、前記処理手段は、前記第3の電子機器のログイン前に前記記憶媒体に格納された複数の第1点データを、前記複数の第1点データにそれぞれ対応するタイムスタンプに基づくタイミングで、前記第3の電子機器に時系列順に順次送信するための処理を実行する。 According to the embodiment, the system includes a receiving unit, a processing unit, and a transmitting unit. The receiving means receives, from the first electronic device, a plurality of point data corresponding to strokes input by handwriting in the first electronic device logged into a service that can share handwritten information. The plurality of point data are sequentially transmitted from the first electronic device in chronological order while the stroke is input by handwriting. The processing means executes processing for storing the plurality of point data in a storage medium together with a time stamp indicating the input time or reception time of the plurality of point data. The transmission means sequentially transmits the plurality of point data in time series order to a second electronic device logged in to the service. When a third electronic device logs in to the service from the middle, the processing means stores a plurality of first point data stored in the storage medium before the third electronic device logs in the plurality of first items. Processing for sequentially transmitting to the third electronic device in chronological order is executed at a timing based on a time stamp corresponding to each point data.
図1は実施形態に係る電子機器の外観を示す例示的な斜視図である。FIG. 1 is an exemplary perspective view showing an appearance of an electronic apparatus according to the embodiment. 図2は手書き共有サービスを利用する電子機器間の接続を示す例示的な図である。FIG. 2 is an exemplary diagram illustrating a connection between electronic devices using the handwriting sharing service. 図3は図1の電子機器(手書きコラボレーションサーバシステム)と他の各電子機器との間のデータの流れの概要を説明するための例示的な図である。FIG. 3 is an exemplary diagram for explaining an outline of a data flow between the electronic device (handwriting collaboration server system) of FIG. 1 and other electronic devices. 図4は複数の電子機器間で手書き情報を共有する画面(カンバス)を示す例示的な図である。FIG. 4 is an exemplary diagram showing a screen (canvas) for sharing handwritten information among a plurality of electronic devices. 図5は図1の電子機器のタッチスクリーンディスプレイ上に手書きされる手書き文書を示す例示的な図である。FIG. 5 is an exemplary diagram illustrating a handwritten document handwritten on the touch screen display of the electronic apparatus of FIG. 1. 図6は手書き共有サービスに別のユーザが途中から参加した時に実行されるべき処理を説明するための例示的な図である。FIG. 6 is an exemplary diagram for explaining a process to be executed when another user joins the handwriting sharing service from the middle. 図7は図1の電子機器と他の各電子機器との間の手書きデータの流れを説明するための例示的な図である。FIG. 7 is an exemplary diagram for explaining the flow of handwritten data between the electronic device of FIG. 1 and other electronic devices. 図8はストロークの手書き入力中に複数の点データが一ずつ送信される様子を示す例示的な図である。FIG. 8 is an exemplary diagram showing a state in which a plurality of point data is transmitted one by one during stroke handwriting input. 図9はカンバス上に描画される手書きデータの例を示す例示的な図である。FIG. 9 is an exemplary diagram showing an example of handwritten data drawn on a canvas. 図10は図1の電子機器のデータベースに格納される手書きデータを示す例示的な図である。10 is an exemplary diagram showing handwritten data stored in the database of the electronic device of FIG. 図11は図1の電子機器のデータベースのデータ構造を示す例示的な図である。FIG. 11 is an exemplary diagram showing a data structure of a database of the electronic device of FIG. 図12はデータベースに格納された複数の点データが2倍速でリプレイされる様子を示す例示的な図である。FIG. 12 is an exemplary diagram showing a state in which a plurality of point data stored in the database is replayed at double speed. 図13は受信レートに対する送信レートの倍率を決定する処理を示す例示的な図である。FIG. 13 is an exemplary diagram showing a process for determining the magnification of the transmission rate with respect to the reception rate. 図14は図1の電子機器の構成を示す例示的なブロック図である。FIG. 14 is an exemplary block diagram showing a configuration of the electronic apparatus of FIG. 図15は図1の電子機器によって実行される手書き共有アプリケーションプログラムの構成を示す例示的なブロック図である。FIG. 15 is an exemplary block diagram showing a configuration of a handwriting sharing application program executed by the electronic device of FIG. 図16は図1の電子機器によって実行される手書きデータ配信処理の手順を示す例示的なフローチャートである。FIG. 16 is an exemplary flowchart showing a procedure of handwritten data distribution processing executed by the electronic apparatus of FIG. 図17は図1の電子機器によって実行される点データ保存処理の手順を示す例示的なフローチャートである。FIG. 17 is an exemplary flowchart showing a procedure of point data storage processing executed by the electronic apparatus of FIG. 図18は図1の電子機器によって実行されるリプレイ処理の手順を示す例示的なフローチャートである。FIG. 18 is an exemplary flowchart showing a replay processing procedure executed by the electronic apparatus of FIG. 図19は図1の電子機器によって実行される、リプレイのための点データ送信処理の手順を示す例示的なフローチャートである。FIG. 19 is an exemplary flowchart showing a procedure of point data transmission processing for replay, which is executed by the electronic apparatus of FIG. 図20は各参加者の機器によって実行される処理の手順を示す例示的なフローチャートである。FIG. 20 is an exemplary flowchart showing a procedure of processing executed by each participant's device. 図21はカンバス上に表示されるメニューを説明するための例示的な図である。FIG. 21 is an exemplary diagram for explaining a menu displayed on the canvas. 図22はカンバス上に表示されるタイムラインを説明するための例示的な図である。FIG. 22 is an exemplary diagram for explaining a timeline displayed on the canvas. 図23はロークバック処理を説明するための例示的な図である。FIG. 23 is an exemplary diagram for explaining the rookeback process.
 以下、実施の形態について図面を参照して説明する。 
 図1は、一実施形態に係る電子機器の外観を示す斜視図である。この電子機器は、例えば、ペン(スタイラス)または指を使用した手書き入力を実行することが可能なペン・ベースの携帯型電子機器である。この電子機器は、タブレットコンピュータ、ノートブック型パーソナルコンピュータ、スマートフォン、PDA等として実現され得る。以下では、この電子機器がタブレットコンピュータ10として実現されている場合を想定する。タブレットコンピュータ10は、タブレットまたはスレートコンピュータとも称される携帯型電子機器である。タブレットコンピュータ10は、図1に示すように、本体11とタッチスクリーンディスプレイ17とを備える。タッチスクリーンディスプレイ17は、本体11の上面に重ね合わされるように取り付けられている。
Hereinafter, embodiments will be described with reference to the drawings.
FIG. 1 is a perspective view illustrating an external appearance of an electronic apparatus according to an embodiment. This electronic device is, for example, a pen-based portable electronic device that can execute handwriting input using a pen (stylus) or a finger. This electronic device can be realized as a tablet computer, a notebook personal computer, a smartphone, a PDA, or the like. Below, the case where this electronic device is implement | achieved as the tablet computer 10 is assumed. The tablet computer 10 is a portable electronic device that is also called a tablet or a slate computer. As shown in FIG. 1, the tablet computer 10 includes a main body 11 and a touch screen display 17. The touch screen display 17 is attached to be superposed on the upper surface of the main body 11.
 本体11は、薄い箱形の筐体を有している。タッチスクリーンディスプレイ17には、フラットパネルディスプレイと、センサとが組み込まれている。センサは、ペンまたは指と接触されるフラットパネルディスプレイの画面上の位置(接触位置)を検出する。フラットパネルディスプレイは、例えば、液晶表示装置(LCD)であってもよい。センサとしては、例えば、静電容量方式のタッチパネル、電磁誘導方式のデジタイザなどを使用することができる。以下では、デジタイザとタッチパネルの2種類のセンサの双方がタッチスクリーンディスプレイ17に組み込まれている場合を想定する。 The main body 11 has a thin box-shaped housing. The touch screen display 17 incorporates a flat panel display and a sensor. The sensor detects the position (contact position) on the screen of the flat panel display that is in contact with the pen or finger. The flat panel display may be, for example, a liquid crystal display (LCD). As the sensor, for example, a capacitive touch panel, an electromagnetic induction digitizer, or the like can be used. In the following, it is assumed that two types of sensors, a digitizer and a touch panel, are incorporated in the touch screen display 17.
 このタッチスクリーンディスプレイ17は、指と接触される画面上の位置を検出することができ、またペンと接触される画面上の位置を検出することもできる。ペン100は例えば電磁誘導ペン(デジタイザペン)であってもよい。ユーザは、ペン100を使用してタッチスクリーンディスプレイ17の画面上に文字等を書くことができる。この手書き入力操作中においては、画面上のペン100の動きの軌跡、つまり手書き入力されるストロークが、リアルタイムに画面上に描画される。ペン100が画面に接触されている間のペン100の動きの軌跡が1ストロークに相当する。手書き入力された文字または図形などに対応する多数のストロークの集合が手書き文書を構成する。 The touch screen display 17 can detect the position on the screen in contact with the finger, and can also detect the position on the screen in contact with the pen. The pen 100 may be, for example, an electromagnetic induction pen (digitizer pen). The user can write characters on the screen of the touch screen display 17 using the pen 100. During the handwriting input operation, the locus of movement of the pen 100 on the screen, that is, the stroke input by handwriting is drawn on the screen in real time. The locus of movement of the pen 100 while the pen 100 is in contact with the screen corresponds to one stroke. A set of many strokes corresponding to handwritten characters or figures constitutes a handwritten document.
 一つのストロークは、このストローク上の複数の点それぞれに対応する複数の点データの集合によって表現される。各点データは、対応する点の座標(X座標、Y座標)を示す。 A single stroke is represented by a set of a plurality of point data corresponding to each of a plurality of points on this stroke. Each point data indicates the coordinates (X coordinate, Y coordinate) of the corresponding point.
 さらに、タブレットコンピュータ10は、手書きコラボレーション機能を有している。この手書きコラボレーション機能は、手書き情報を複数の電子機器間で共有することが可能な手書き共有サービスを実行する。手書き共有サービスは、各電子機器のユーザが、共有される手書き情報を閲覧すること、他の電子機器のユーザとの協同作業によって手書き情報を編集することを可能にする。 Furthermore, the tablet computer 10 has a handwriting collaboration function. This handwriting collaboration function executes a handwriting sharing service capable of sharing handwritten information among a plurality of electronic devices. The handwriting sharing service enables users of each electronic device to browse shared handwritten information and edit handwritten information through collaborative work with users of other electronic devices.
 この手書き共有サービスは、このサービスに参加(ログイン)している電子機器において手書き入力される手書きデータを、このサービスに参加(ログイン)している他の各電子機器にリアルタイムに配信する。これによって、これら電子機器の表示画面に表示される手書き文書の内容を同期させることができる。異なるユーザによって手書き入力されたストロークは、異なる形態(例えば、異なる色、異なるペン種、等)で表示されてもよい。 This handwriting sharing service distributes handwritten data input by handwriting on an electronic device participating (logged in) to the other electronic devices participating (logged in) in real time. Thereby, the contents of the handwritten document displayed on the display screens of these electronic devices can be synchronized. Strokes handwritten by different users may be displayed in different forms (eg, different colors, different pen types, etc.).
 手書き共有サービスは、複数人のグループによって利用される。手書き共有サービスを利用する複数人のグループは、一人のグループオーナ(主催者)と、一人以上の参加者とを含んでも良い。 The handwriting sharing service is used by a group of multiple people. The group of a plurality of people who use the handwriting sharing service may include one group owner (organizer) and one or more participants.
 図2は、手書き共有サービスを利用する電子機器間の接続例を示す。 
 電子機器10Aは、ユーザAによって使用されるタブレットコンピュータである。電子機器10Bは、ユーザBによって使用されるタブレットコンピュータである。電子機器10Cは、ユーザCによって使用されるタブレットコンピュータである。これら電子機器10A、10B、10Cの各々は、本実施形態のタブレットコンピュータ10と同等の手書きコラボレーション機能を有している。
FIG. 2 shows a connection example between electronic devices using the handwriting sharing service.
The electronic device 10A is a tablet computer used by the user A. The electronic device 10B is a tablet computer used by the user B. The electronic device 10 </ b> C is a tablet computer used by the user C. Each of these electronic devices 10A, 10B, and 10C has a handwriting collaboration function equivalent to that of the tablet computer 10 of the present embodiment.
 電子機器10A、10B、10Cは有線ネットワークまたは無線ネットワークを介して互いに接続される。以下では、電子機器10A、10B、10Cが無線ネットワークを介して互いに接続される場合を想定する。電子機器10A、10B、10Cを互いに無線接続するための方法としては、複数の機器を互いに無線接続することが可能な任意の無線接続規格を使用し得る。例えば、Bluetooth(登録商標)、またはWi-Fi Direct(登録商標)、等が使用されてもよい。 The electronic devices 10A, 10B, and 10C are connected to each other via a wired network or a wireless network. In the following, it is assumed that the electronic devices 10A, 10B, and 10C are connected to each other via a wireless network. As a method for wirelessly connecting electronic devices 10A, 10B, and 10C to each other, any wireless connection standard capable of wirelessly connecting a plurality of devices to each other can be used. For example, Bluetooth (registered trademark), Wi-Fi Direct (registered trademark), or the like may be used.
 電子機器10A、10B、10Cのいずれか1つは、手書き共有サービスを管理するように構成されたサーバ(手書きコラボレーションサーバシステム)として機能することができる。グループオーナの電子機器が、サーバ(手書きコラボレーションサーバシステム)の役割をしてもよい。グループオーナは手書き共有サービスの主催者に相当する。 Any one of the electronic devices 10A, 10B, and 10C can function as a server (handwriting collaboration server system) configured to manage the handwriting sharing service. The electronic device of the group owner may serve as a server (handwriting collaboration server system). The group owner is equivalent to the organizer of the handwriting sharing service.
 このサーバ(手書きコラボレーションサーバシステム)は、手書き共有サービスへの参加を要求している各電子機器が手書き共有サービス(グループ)に参加すること、つまり手書きコラボレーションサーバシステム(手書き共有サービス)にログインすること、を許可するか否かを決定してもよい。手書きコラボレーションサーバシステムから参加(ログイン)の許可を受け取った機器だけが、手書き共有サービスにログインすること、つまりこのグループに参加することが許可されても良い。 In this server (handwriting collaboration server system), each electronic device requesting participation in the handwriting sharing service participates in the handwriting sharing service (group), that is, logs in to the handwriting collaboration server system (handwriting sharing service). , It may be determined whether or not to allow. Only a device that has received permission for participation (login) from the handwriting collaboration server system may be permitted to log in to the handwriting sharing service, that is, to participate in this group.
 ここで、各機器が手書きコラボレーションサーバシステム(手書き共有サービス)へログインする方法としては、この機器自体のID(アカウント)を使用して手書き共有サービスにログインする方法を使用してもよい。あるいは、この機器を使用するユーザのID(アカウント)を使用して手書き共有サービスにログインする方法を使用してもよい。つまり、手書き共有サービスに対するログインおよびログアウトは、電子機器自体のID(アカウント)を使用したログインおよびログアウト、またはユーザのID(アカウント)を使用したログインおよびログアウトのどちらであってもよい。 Here, as a method for each device to log in to the handwriting collaboration server system (handwriting sharing service), a method of logging in to the handwriting sharing service using the ID (account) of the device itself may be used. Or you may use the method of logging in to a handwriting sharing service using ID (account) of the user who uses this apparatus. That is, the login and logout for the handwriting sharing service may be either login and logout using the ID (account) of the electronic device itself or login and logout using the user ID (account).
 いま、電子機器10A、10B、10Cが手書き共有サービスにログインしている状態である場合、つまり電子機器10A、10B、10Cが同じ手書き共有サービスに参加している場合を想定する。電子機器10A、10B、10Cの各々においては、共有される手書き情報を見るための手書き共有画面(カンバス)が表示される。手書き共有画面(カンバス)は電子機器10A、10B、10Cに共通の表示エリアとして使用される。この手書き共有画面(カンバス)は、電子機器10A、10B、10C間のビジュアル通信を可能にする。ビジュアル通信は、手書き情報、および他の様々な電子文書を機器間で交換することを可能にする。 Now, assume that the electronic devices 10A, 10B, and 10C are logged in to the handwriting sharing service, that is, the electronic devices 10A, 10B, and 10C are participating in the same handwriting sharing service. In each of electronic devices 10A, 10B, and 10C, a handwriting sharing screen (canvas) for viewing shared handwritten information is displayed. The handwriting sharing screen (canvas) is used as a display area common to the electronic devices 10A, 10B, and 10C. This handwritten sharing screen (canvas) enables visual communication between the electronic devices 10A, 10B, and 10C. Visual communication allows handwritten information and various other electronic documents to be exchanged between devices.
 ユーザA,B,Cの各々が自身の電子機器において手書き入力した手書きデータは、自身の電子機器の手書き共有画面(カンバス)に表示されるだけでなく、他の各ユーザの電子機器の手書き共有画面(カンバス)にもリアルタイムに反映される。この結果、ユーザA,B,Cの各々が手書き入力した情報(手書き文字、手書き図形等)をユーザA,B,C間で交換・共有することができる。 Handwritten data input by each of the users A, B, and C in his / her electronic device is not only displayed on the handwriting sharing screen (canvas) of his / her electronic device, but also handwritten and shared by the electronic devices of other users. It is also reflected on the screen (canvas) in real time. As a result, information (handwritten characters, handwritten figures, etc.) input by handwriting by each of the users A, B, and C can be exchanged and shared between the users A, B, and C.
 さらに、電子機器10A、10B、10Cは、会議資料のような同じコンテンツをカンバス上に表示することもできる。この場合、各電子機器において手書き入力される手書きデータは、このコンテンツ上に表示される。ユーザA,B,Cは、同じコンテンツを見ながら、このコンテンツ上に手書きされる手書き文字、手書き図形等をユーザA,B,C間で交換・共有することができる。 Furthermore, the electronic devices 10A, 10B, and 10C can display the same content such as conference materials on the canvas. In this case, handwritten data input by handwriting in each electronic device is displayed on this content. Users A, B, and C can exchange and share handwritten characters, handwritten figures, and the like handwritten on the content among the users A, B, and C while viewing the same content.
 図3は、手書きコラボレーションサーバシステムと各電子機器との間のデータの流れを示す。 FIG. 3 shows a data flow between the handwritten collaboration server system and each electronic device.
 図3では、電子機器10Aが、手書きコラボレーションサーバシステムとして動作する場合が想定されている。つまり、電子機器10AのユーザAがグループオーナであり、電子機器10BのユーザBが参加者(参加者1)であり、電子機器10CのユーザCが別の参加者(参加者2)である。 3, it is assumed that the electronic device 10A operates as a handwriting collaboration server system. That is, the user A of the electronic device 10A is a group owner, the user B of the electronic device 10B is a participant (participant 1), and the user C of the electronic device 10C is another participant (participant 2).
 手書きコラボレーションサーバシステム(電子機器10A)は、電子機器10Bにおいて手書き入力される手書きデータを電子機器10Bから受信する。また、手書きコラボレーションサーバシステム(電子機器10A)は、電子機器10Cにおいて手書き入力される手書きデータを電子機器10Cから受信する。 The handwriting collaboration server system (electronic device 10A) receives handwritten data input by handwriting in the electronic device 10B from the electronic device 10B. The handwriting collaboration server system (electronic device 10A) receives handwritten data input by handwriting in the electronic device 10C from the electronic device 10C.
 さらに、手書きコラボレーションサーバシステム(電子機器10A)は、電子機器10Aにおいて手書き入力される手書きデータと電子機器10Cから受信された手書きデータとを電子機器10Bに送信する。またさらに、手書きコラボレーションサーバシステム(電子機器10A)は、電子機器10Aにおいて手書きに入力される手書きデータと電子機器10Bから受信された手書きデータとを電子機器10Cに送信する。 Further, the handwriting collaboration server system (electronic device 10A) transmits handwritten data input by handwriting in the electronic device 10A and handwritten data received from the electronic device 10C to the electronic device 10B. Furthermore, the handwriting collaboration server system (electronic device 10A) transmits handwritten data input by handwriting in the electronic device 10A and handwritten data received from the electronic device 10B to the electronic device 10C.
 したがって、電子機器10Aのディスプレイにおいては、グループオーナの手書きデータが表示されるだけでなく、参加者1の手書きデータ、さらには参加者2の手書きデータも表示される。 Therefore, on the display of the electronic device 10A, not only the handwritten data of the group owner is displayed, but also the handwritten data of the participant 1 and further the handwritten data of the participant 2 are displayed.
 同様にして、電子機器10Bのディスプレイにおいても、参加者1の手書きデータが表示されるだけでなく、グループオーナの手書きデータ、さらには参加者2の手書きデータも表示される。 Similarly, on the display of the electronic device 10B, not only the handwritten data of the participant 1 is displayed, but also the handwritten data of the group owner and further the handwritten data of the participant 2 are displayed.
 また同様に、電子機器10Cのディスプレイにおいても、参加者2の手書きデータが表示されるだけでなく、グループオーナの手書きデータ、さらには参加者1の手書きデータも表示される。 Similarly, on the display of the electronic device 10C, not only the handwritten data of the participant 2 is displayed, but also the handwritten data of the group owner and further the handwritten data of the participant 1 are displayed.
 電子機器10Aは、各電子機器において手書き入力される手書きデータをデータベース12に格納する。このデータベース12は、共同作業によって作成および編集される手書き情報を管理するために使用される。 The electronic device 10 </ b> A stores handwritten data input by handwriting in each electronic device in the database 12. This database 12 is used to manage handwritten information created and edited by collaborative work.
 図4は、手書き共有画面(カンバス)の例を示している。各電子機器のカンバス30Aにおいては、手書き入力可能な透明のレイヤ(手書きレイヤ)30Bが設定される。この手書きレイヤ30B上に、各ユーザの手書きデータが表示される。 FIG. 4 shows an example of a handwriting sharing screen (canvas). In the canvas 30A of each electronic device, a transparent layer (handwriting layer) 30B capable of handwriting input is set. The handwritten data of each user is displayed on the handwriting layer 30B.
 電子機器10Bに関しては、この電子機器10Bのカンバス30Aにおいては、カンバス30A上でペン100Bを使用して参加者1によって手書き入力される手書きデータ40が表示される。さらに、カンバス30A上においては、他の各電子機器において手書き入力される手書きデータが表示される。他の各電子機器において手書き入力される手書きデータには、参加者2の電子機器10Cにおいて手書き入力された手書きデータ42と、グループオーナの電子機器10Aにおいて手書き入力された手書きデータ44とが含まれる。 Regarding the electronic device 10B, in the canvas 30A of the electronic device 10B, handwritten data 40 input by the participant 1 using the pen 100B on the canvas 30A is displayed. Furthermore, on the canvas 30A, handwritten data input by handwriting in other electronic devices is displayed. The handwritten data input by handwriting in each of the other electronic devices includes handwritten data 42 input by handwriting in the electronic device 10C of the participant 2 and handwritten data 44 input by handwriting in the electronic device 10A of the group owner. .
 次に、図5を参照して、ストロークと点データについて説明する。 Next, the stroke and point data will be described with reference to FIG.
 図5においては、「ABC」の手書き文字列が「A」、「B」、「C」の順番で手書きされた場合が想定されている。 In FIG. 5, it is assumed that the handwritten character string “ABC” is handwritten in the order of “A”, “B”, and “C”.
 手書き文字「A」は、ペン100などを使用して手書きされる2つのストローク(「∧」形状の軌跡、「-」形状の軌跡)によって表現される。 The handwritten character “A” is expressed by two strokes (“∧” shape trajectory, “−” shape trajectory) handwritten using the pen 100 or the like.
 ペン100が移動している間に、「∧」形状のペン100の軌跡がリアルタイムにサンプリングされる。これによって、「∧」形状のペン100の軌跡上の複数の点それぞれに対応する複数の点データ(複数の座標データ)PD11、PD12、…PD1mが次々と得られる。例えば、画面上のペン100の位置が所定量移動する度に、新たな位置を示す点データが得られてもよい。図5においては、図示の簡単化のために点データの密度が粗く描かれているが、実際には、より高い密度で複数の点データが得られる。これら点データPD11、PD12、…PD1mは、「∧」形状のペン100の軌跡を画面上に描画するために使用される。ペン100の動きに追従するように、「∧」形状のペン100の軌跡がリアルタイムに画面上に描画される。 While the pen 100 is moving, the trajectory of the “∧” -shaped pen 100 is sampled in real time. Thereby, a plurality of point data (a plurality of coordinate data) PD11, PD12,... PD1m corresponding to the plurality of points on the trajectory of the “∧” -shaped pen 100 are obtained one after another. For example, point data indicating a new position may be obtained each time the position of the pen 100 on the screen moves by a predetermined amount. In FIG. 5, the density of the point data is drawn roughly for the sake of simplicity, but actually, a plurality of point data can be obtained at a higher density. These point data PD11, PD12,... PD1m are used to draw the trajectory of the “∧” -shaped pen 100 on the screen. The locus of the “∧” -shaped pen 100 is drawn on the screen in real time so as to follow the movement of the pen 100.
 同様に、「-」形状のペン100の軌跡も、ペン100が移動している間に、リアルタイムにサンプリングされる。これによって「-」形状のペン100の軌跡上の複数の点それぞれに対応する複数の点データ(複数の座標データ)PD21、PD22、…PD2nが次々と得られる。 Similarly, the trajectory of the “-” shaped pen 100 is also sampled in real time while the pen 100 is moving. As a result, a plurality of point data (a plurality of coordinate data) PD21, PD22,... PD2n corresponding to a plurality of points on the trajectory of the “−” shaped pen 100 are obtained one after another.
 手書き文字「B」は、ペン100などを使用して手書きされた2つのストロークによって表現される。手書き文字「C」は、ペン100などを使用して手書きされた1つのストロークによって表現される。 The handwritten character “B” is expressed by two strokes handwritten using the pen 100 or the like. The handwritten character “C” is expressed by one stroke handwritten using the pen 100 or the like.
 次に、図6を参照して、手書き情報共有サービスのためのデータの流れについて説明する。 Next, the data flow for the handwritten information sharing service will be described with reference to FIG.
 図6では、グループオーナ(電子機器10A)、参加者1(電子機器10B)、参加者2(電子機器10C)の3人のグループで議論を行う場合が想定されている。グループオーナ、参加者1、参加者2は、自身の電子機器10A、10B、10Cを持って会議室に集合しても良い。そして、グループオーナ、参加者1、参加者2は、自身の電子機器のカンバスを見ながら、あるいはカンバス上に手書きしながら、議論を行うことができる。 In FIG. 6, it is assumed that a group of three persons, a group owner (electronic device 10A), a participant 1 (electronic device 10B), and a participant 2 (electronic device 10C) hold discussion. The group owner, participant 1, and participant 2 may gather in the conference room with their own electronic devices 10A, 10B, 10C. Then, the group owner, the participant 1, and the participant 2 can discuss while looking at the canvas of their own electronic devices or while handwriting on the canvas.
 (1)3人のグループで手書きによる議論
 参加者1によって電子機器10Bのカンバス上に手書き入力された手書きデータ(手書き文字、手書き図形等)は、電子機器10Aに送信される。さらに、参加者1の手書きデータは、電子機器10Aによって、電子機器10Cに転送される。よって、参加者1の手書きデータは、電子機器10B、電子機器10A、電子機器10Cの各々のカンバス上に表示される。
(1) Discussion by Handwriting with a Group of Three Handwritten data (handwritten characters, handwritten figures, etc.) handwritten by the participant 1 on the canvas of the electronic device 10B is transmitted to the electronic device 10A. Further, the handwritten data of the participant 1 is transferred to the electronic device 10C by the electronic device 10A. Therefore, the handwritten data of the participant 1 is displayed on each of the electronic device 10B, the electronic device 10A, and the electronic device 10C.
 同様にして、参加者2によって電子機器10Cのカンバス上に手書き入力された手書きデータも、電子機器10Aに送信され、さらに、電子機器10Aによって電子機器10Bに転送される。よって、参加者2の手書きデータは、電子機器10B、電子機器10A、電子機器10Cの各々のカンバス上に表示される。 Similarly, the handwritten data input by handwriting on the canvas of the electronic device 10C by the participant 2 is also transmitted to the electronic device 10A and further transferred to the electronic device 10B by the electronic device 10A. Therefore, the handwritten data of the participant 2 is displayed on the respective canvases of the electronic device 10B, the electronic device 10A, and the electronic device 10C.
 さらに、グループオーナによって電子機器10Aのカンバス上に手書き入力された手書きデータは、電子機器10Bおよび電子機器10Cに送信される。よって、グループオーナの手書き情報も、電子機器10A、電子機器10B、電子機器10Cの各々のカンバス上に表示される。 Furthermore, handwritten data input by handwriting on the canvas of the electronic device 10A by the group owner is transmitted to the electronic device 10B and the electronic device 10C. Therefore, the handwritten information of the group owner is also displayed on each canvas of the electronic device 10A, the electronic device 10B, and the electronic device 10C.
 このようにして、3人のグループは、これら3人の手書きが反映されるカンバスの内容を見ながら、議論(会議)を行うことができる。 In this way, a group of three people can hold a discussion (conference) while looking at the contents of the canvas reflecting the handwriting of these three people.
 (2)議論中のグループに参加依頼
 手書き情報共有サービスが開始された後に、別のユーザ(参加者3)の電子機器10Dが、この手書き情報共有サービスへの参加(ログイン)を要求するかもしれない。このような状況は、例えば、参加者3が後から会議室に到着して、既に開始されている議論に加わるような場合に発生し得る。
(2) Request to join group under discussion After the handwritten information sharing service is started, the electronic device 10D of another user (participant 3) may request participation (login) to the handwritten information sharing service. Absent. Such a situation may occur, for example, when the participant 3 arrives at the conference room later and joins an already started discussion.
 (3)この参加(ログイン)の要求を受信したグループオーナ(電子機器10A)は、参加者3がこの手書き情報共有サービスのグループに参加(ログイン)することを許可することができる。この場合、電子機器10Aは、現在の手書き情報の内容(これまでの議論の内容)を電子機器10Dに送信してもよい。 (3) The group owner (electronic device 10A) that has received the request for participation (login) can permit the participant 3 to participate (login) to the group of the handwritten information sharing service. In this case, the electronic device 10A may transmit the content of the current handwritten information (the content of the discussion so far) to the electronic device 10D.
 (4)この結果、電子機器10Dは、現在の手書き情報の内容を電子機器10Dのカンバス上に描画することができる。 (4) As a result, the electronic device 10D can draw the contents of the current handwritten information on the canvas of the electronic device 10D.
 (5)しかし、現在の手書き情報の内容をみただけでは、参加者3は、これまでの議論の経過、つまりどの様な経緯を辿って現在の手書き情報が構築されたかを、把握できない可能性がある。 (5) However, only by looking at the contents of the current handwritten information, Participant 3 may not be able to grasp the progress of the discussion so far, that is, how the current handwritten information has been constructed. There is.
 そこで、本実施形態の手書きコラボレーション機能は、手書き情報共有サービスに途中から参加した参加者に、現在の手書き情報がどのような経緯を辿って構築されたかを分かりやすく提示するための新たな機能を備えている。 Therefore, the handwriting collaboration function of the present embodiment has a new function for presenting in an easy-to-understand manner how the current handwritten information has been constructed to participants who have joined the handwritten information sharing service midway. I have.
 以下、この新たな機能の概要について説明する。 The following outlines this new function.
 ある電子機器において手書き入力された手書きデータを別の電子機器に送信するための方法としては、一つのストロークが手書き入力される度にそのストロークのデータ(ストロークデータ)全体を一度に送信するという方法を使用することができる。 As a method for transmitting handwritten data input by handwriting in a certain electronic device to another electronic device, a method of transmitting the entire stroke data (stroke data) at a time every time one stroke is input by handwriting Can be used.
 しかし、この場合には、ストロークの手書き入力が完了するまでは、つまりペンが画面からリフトアップされることによってペンと画面との接触が解除されるまでは、ストロークデータは送信されない。したがって、例えば、ある電子機器において3つのストロークが順番に手書き入力された場合には、まず、最初のストロークの手書き入力が完了した後に、その最初のストローク全体の形状が別の電子機器のカンバス上に一度に表示される。そして、2番目のストロークの手書き入力が完了した後に、その2番目のストローク全体の形状が別の電子機器のカンバス上に一度に表示される。そして、3番目のストロークの手書き入力が完了した後に、その3番目のストローク全体の形状が別の電子機器のカンバス上に一度に表示される。 However, in this case, the stroke data is not transmitted until the stroke handwriting input is completed, that is, until the contact between the pen and the screen is released by lifting the pen from the screen. Therefore, for example, when three strokes are sequentially handwritten input in a certain electronic device, first, after completing the first stroke handwriting input, the shape of the entire first stroke is on the canvas of another electronic device. Are displayed at once. Then, after the handwriting input of the second stroke is completed, the shape of the entire second stroke is displayed at once on the canvas of another electronic device. After the handwriting input of the third stroke is completed, the shape of the entire third stroke is displayed at once on the canvas of another electronic device.
 このように、別の電子機器のカンバス上においては、個々のストロークが書かれる様子(線が延びていく様子)は再現されず、手書き入力が完了した各ストロークの形状だけが一度に表示される。 Thus, on the canvas of another electronic device, the state in which individual strokes are written (the state in which lines are extended) is not reproduced, and only the shape of each stroke for which handwriting input has been completed is displayed at a time. .
 一方、ストロークの手書き入力が実際に行われている電子機器においては、そのストロークが書かれる様子(線が延びていく様子)がリアルタイムに表示される。 On the other hand, in an electronic device in which handwriting input of a stroke is actually performed, a state in which the stroke is written (a state in which a line extends) is displayed in real time.
 本実施形態では、どの電子機器においてストロークが手書き入力された場合でも、そのストロークが書かれる様子を他の全ての電子機器のカンバス上において再現できるようにするために、手書きデータは、ストローク単位では無く、点データ単位で送信される。 In this embodiment, in order to be able to reproduce the state in which the stroke is written in any electronic device on any canvas in any electronic device, the handwritten data is in stroke units. No, it is transmitted in point data units.
 手書きコラボレーションサーバシステム(電子機器10A)は、手書き情報共有サービスにログインしている電子機器(例えば、電子機器10B)において手書き入力されるストロークに対応する複数の点データを、電子機器10Bから受信する。これら複数の点データは、このストロークが手書き入力されている間に、電子機器10Bから手書きコラボレーションサーバシステム(電子機器10A)に時系列順に順次送信される。つまり、ストロークに対応する複数の点データが入力された順に、これら複数の点データが電子機器10Bから手書きコラボレーションサーバシステム(電子機器10A)に1つずつ転送される。 The handwriting collaboration server system (electronic device 10A) receives, from the electronic device 10B, a plurality of point data corresponding to strokes input by handwriting in the electronic device (for example, the electronic device 10B) logged in to the handwritten information sharing service. . The plurality of point data are sequentially transmitted from the electronic device 10B to the handwriting collaboration server system (electronic device 10A) in chronological order while the stroke is input by handwriting. That is, the plurality of point data is transferred from the electronic device 10B to the handwriting collaboration server system (electronic device 10A) one by one in the order in which the plurality of point data corresponding to the stroke is input.
 手書きコラボレーションサーバシステム(電子機器10A)は、これら複数の点データを、これら複数の点データの受信時刻をそれぞれ示すタイムスタンプと共に、データベース12に格納するための処理を実行する。各点データに対応するタイムスタンプは、その点データの入力時刻を示してもよい。この場合、電子機器10Bは、各点データをその点データが入力された入力時刻を示す時間情報と共に手書きコラボレーションサーバシステム(電子機器10A)に送信してもよい。 The handwriting collaboration server system (electronic device 10A) executes processing for storing the plurality of point data in the database 12 together with time stamps indicating the reception times of the plurality of point data. The time stamp corresponding to each point data may indicate the input time of the point data. In this case, the electronic device 10B may transmit each point data to the handwriting collaboration server system (electronic device 10A) together with time information indicating an input time when the point data is input.
 そして、手書きコラボレーションサーバシステム(電子機器10A)は、手書き情報共有サービスにログインしている別の電子機器(例えば、電子機器10C)に、これら複数の点データを時系列順に順次送信する。この場合、手書きコラボレーションサーバシステム(電子機器10A)は、一つの点データが電子機器10Aから受信される度に、この受信された点データを電子機器10Cに送信するという処理を実行してもよい。 Then, the handwriting collaboration server system (electronic device 10A) sequentially transmits the plurality of point data in time series order to another electronic device (for example, electronic device 10C) logged in to the handwritten information sharing service. In this case, the handwriting collaboration server system (electronic device 10A) may execute a process of transmitting the received point data to the electronic device 10C each time one piece of point data is received from the electronic device 10A. .
 電子機器10Cは、電子機器10Cの画面上で手書き入力が行われた場合と同様に、複数の点データを電子機器10Aから順番に受信することができる。電子機器10Cは、これら受信された複数の点データに基づいて、電子機器10Aにおいて手書き入力されたストロークに対応する軌跡を電子機器10Cのカンバス上にリアルタイムに描画することができる。このため、電子機器10Cのカンバス上においても、電子機器10Aにおいて手書き入力されたストロークが書かれる様子(線が延びていく様子)を再現することができる。 The electronic device 10C can sequentially receive a plurality of point data from the electronic device 10A in the same manner as when handwritten input is performed on the screen of the electronic device 10C. The electronic device 10C can draw a trajectory corresponding to the stroke input by handwriting in the electronic device 10A in real time on the canvas of the electronic device 10C based on the received plurality of point data. For this reason, it is possible to reproduce a state in which a stroke input by handwriting in the electronic device 10A is written (a state in which a line extends) on the canvas of the electronic device 10C.
 電子機器10Dが手書き情報共有サービスに途中からログインした場合、手書きコラボレーションサーバシステム(電子機器10A)は、電子機器10Dのログイン前にデータベース12に格納された全ての点データ(複数の第1点データ)を、これら複数の第1点データにそれぞれ対応するタイムスタンプに基づくタイミングで、電子機器10Dに時系列順に順次送信するための処理を実行する。 When the electronic device 10D logs in to the handwritten information sharing service from the middle, the handwritten collaboration server system (electronic device 10A) stores all the point data (a plurality of first point data) stored in the database 12 before the electronic device 10D logs in. ) Is sequentially transmitted to the electronic device 10D in time series order at timings based on time stamps corresponding to the plurality of first point data, respectively.
 これにより、既に書かれた多数のストロークが、それらストロークの各々が書かれる様子がリプレイされるかのように電子機器10Dのカンバス上に表示される。よって、電子機器10Dのユーザ(途中参加者)は、どの様な経緯を辿って現在の手書き情報が構築されたかを、容易に把握することができる。 Thereby, a large number of strokes that have already been written are displayed on the canvas of the electronic device 10D as if each stroke was replayed. Therefore, the user (intermediate participant) of the electronic device 10D can easily grasp how the current handwritten information has been constructed.
 ある一つのストロークに関しては、電子機器10Dは、電子機器10Dの画面上で手書き入力が行われた場合と同様に、このストロークに対応する複数の点データを順番に受信することができる。電子機器10Dは、これら受信された複数の点データに基づいて、電子機器10Aにおいて手書き入力されたストロークに対応する軌跡を電子機器10Dのカンバス上にリアルタイムに描画することができる。よって、各ストロークが書かれる様子(線が延びていく様子)を再現することができる。 As for a certain stroke, the electronic device 10D can sequentially receive a plurality of point data corresponding to this stroke in the same manner as when handwritten input is performed on the screen of the electronic device 10D. The electronic device 10D can draw a trajectory corresponding to the stroke input by handwriting in the electronic device 10A in real time on the canvas of the electronic device 10D based on the plurality of received point data. Therefore, it is possible to reproduce a state in which each stroke is written (a state in which a line extends).
 さらに、各ストロークに対応する複数の点データは、これら点データが書かれたタイミングに対応する送信タイミングで、電子機器10Dに順次送信される。このため、書かれたストローク(線)の速度も再現することが可能となる。 Furthermore, a plurality of point data corresponding to each stroke is sequentially transmitted to the electronic device 10D at a transmission timing corresponding to the timing at which the point data is written. For this reason, the speed of the written stroke (line) can also be reproduced.
 図7は、電子機器間の手書きデータの流れを示している。 FIG. 7 shows the flow of handwritten data between electronic devices.
 図7では、図6と同様に、グループオーナ(電子機器10A)、参加者1(電子機器10B)、参加者2(電子機器10C)の3人のグループで議論を行う場合が想定されている。 In FIG. 7, similarly to FIG. 6, it is assumed that the group owner (electronic device 10 </ b> A), the participant 1 (electronic device 10 </ b> B), and the participant 2 (electronic device 10 </ b> C) have a discussion. .
 (1)参加者1の電子機器10Bにおいてストロークが手書き入力される。このストロークは電子機器10Bのカンバス上にリアルタイムに表示される。つまり、電子機器10Bのカンバス上のペンの動きに追従するようにストローク(線)が描画される。 (1) A stroke is input by handwriting in the electronic device 10B of the participant 1. This stroke is displayed in real time on the canvas of the electronic apparatus 10B. That is, the stroke (line) is drawn so as to follow the movement of the pen on the canvas of the electronic device 10B.
 (2)上述したように、ストロークは、その始点から終点までの複数の点データ(複数の座標)の集合として表現される。 (2) As described above, the stroke is expressed as a set of a plurality of point data (a plurality of coordinates) from the start point to the end point.
 (3)このストロークのデータ(ストロークデータ)は、点データ単位でグループオーナ(電子機器10A)に送信される。この様子を図8に示す。図8に示されているように、電子機器10Bにおいては、ペン100Bによってストロークが手書き入力されている間に、このストロークに対応する複数の点データPD1、PD2、…、PD8が次々と得られる。そして、これら点データPD1、PD2、…、PD8はグループオーナ(電子機器10A)に一つずつ送信される。つまり、これら点データPD1、PD2、…、PD8はグループオーナ(電子機器10A)に時系列順に順次送信される。例えば、点データPD1が得られた時には、点データPD1に基づく描画処理が電子機器10Bによって実行され、さらに点データPD1をグループオーナ(電子機器10A)に送信する処理も電子機器10Bによって実行される。そして、次の点データPD2が得られた時には、点データPD2に基づく描画処理が電子機器10Bによって実行され、さらに点データPD2をグループオーナ(電子機器10A)に送信する処理も電子機器10Bによって実行される。 (3) The stroke data (stroke data) is transmitted to the group owner (electronic device 10A) in units of point data. This is shown in FIG. As shown in FIG. 8, in the electronic device 10B, while a stroke is handwritten by the pen 100B, a plurality of point data PD1, PD2,..., PD8 corresponding to this stroke are obtained one after another. . These point data PD1, PD2,..., PD8 are transmitted one by one to the group owner (electronic device 10A). That is, the point data PD1, PD2,..., PD8 are sequentially transmitted to the group owner (electronic device 10A) in time series order. For example, when the point data PD1 is obtained, a drawing process based on the point data PD1 is executed by the electronic device 10B, and a process for transmitting the point data PD1 to the group owner (electronic device 10A) is also executed by the electronic device 10B. . When the next point data PD2 is obtained, a drawing process based on the point data PD2 is executed by the electronic device 10B, and a process of transmitting the point data PD2 to the group owner (electronic device 10A) is also executed by the electronic device 10B. Is done.
 このようにして、ストロークが手書き入力されている間に、多数の点データが連続的にグループオーナ(電子機器10A)に送信される。各点データは、ストロークID、ユーザID(またはデバイスID)、点種別(始点/中点/終点)、ペン属性(ペン種、色、等)等と一緒に、グループオーナ(電子機器10A)に送信されてもよい。ストロークIDは、手書き入力されたストロークを識別可能な情報である。各電子機器は、乱数などを使用して複数桁のユニークIDを生成し、このユニークIDの値を、最初に手書き入力されたストロークを識別するためのストロークIDとして使用しても良い。2番目以降に手書きされたストロークについては、ユニークIDをインクリメントすることによって得られる値が、対応するストロークIDとして使用されてもよい良い。同一のストロークに対応する点データの各々には、同じストロークIDが与えられる。 In this way, a large number of point data are continuously transmitted to the group owner (electronic device 10A) while the stroke is input by handwriting. Each point data is stored in the group owner (electronic device 10A) together with the stroke ID, user ID (or device ID), point type (start point / middle point / end point), pen attributes (pen type, color, etc.), etc. May be sent. The stroke ID is information that can identify a stroke input by handwriting. Each electronic device may generate a unique ID having a plurality of digits using a random number or the like, and use the value of the unique ID as a stroke ID for identifying a stroke input by handwriting first. For strokes handwritten after the second, a value obtained by incrementing the unique ID may be used as the corresponding stroke ID. The same stroke ID is given to each point data corresponding to the same stroke.
 (4)グループオーナ(電子機器10A)は、電子機器10Bから時系列順に順次送信される複数の点データを受信する。そして、グループオーナ(電子機器10A)は、これら複数の点データを、これら複数の点データの受信時刻(受信タイミング)または入力時刻(入力タイミング)をそれぞれ示すタイムスタンプと共に、データベース12に格納する。各タイムスタンプは、対応する点データがグループオーナ(電子機器10A)によって受信された時刻を示してもよいし、同一のストローク内の先頭の点データが受信された時点から対応する点データが受信される時点までの相対時間を示してもよい。あるいは、各タイムスタンプは、対応する点データが入力された時刻を示してもよいし、同一のストローク内の先頭の点データが入力された時点から対応する点データが入力される時点までの相対時間を示してもよい。 (4) The group owner (electronic device 10A) receives a plurality of point data sequentially transmitted from the electronic device 10B in chronological order. Then, the group owner (electronic device 10A) stores the plurality of point data in the database 12 together with a time stamp indicating the reception time (reception timing) or the input time (input timing) of the plurality of point data. Each time stamp may indicate the time when the corresponding point data is received by the group owner (electronic device 10A), or the corresponding point data is received from the time when the first point data in the same stroke is received. The relative time until the point in time may be indicated. Alternatively, each time stamp may indicate the time when the corresponding point data is input, or the relative time from the time when the first point data in the same stroke is input to the time when the corresponding point data is input. Time may be indicated.
 (5)グループオーナ(電子機器10A)は、電子機器10Bから受信された複数の点データを電子機器10Cに送信する。 (5) The group owner (electronic device 10A) transmits a plurality of point data received from the electronic device 10B to the electronic device 10C.
 この場合、これら複数の点データは、これら複数の点データに対応するタイムスタンプに基づくタイミングで、電子機器10Cに時系列順に順次送信されてもよい。これにより、複数の点データが受信された間隔と同じ間隔で、これら複数の点データを電子機器10Cに送信することができる。 In this case, the plurality of point data may be sequentially transmitted to the electronic device 10C in time-series order at a timing based on a time stamp corresponding to the plurality of point data. Accordingly, the plurality of point data can be transmitted to the electronic device 10C at the same interval as the interval at which the plurality of point data is received.
 送信される各点データには、ストロークID、ユーザID(またはデバイスID)、点種別(始点/中点/終点)、ペン属性(ペン種、色、等)等が付加される。 The stroke ID, user ID (or device ID), point type (start point / middle point / end point), pen attributes (pen type, color, etc.) are added to each point data to be transmitted.
 あるいは、グループオーナ(電子機器10A)が電子機器10Bから一つの点データを受信した時に、グループオーナ(電子機器10A)が、その点データを電子機器10Cに即座に送信しても良い。 Alternatively, when the group owner (electronic device 10A) receives one point data from the electronic device 10B, the group owner (electronic device 10A) may immediately transmit the point data to the electronic device 10C.
 さらに、グループオーナ(電子機器10A)は、電子機器10Bからの複数の点データに基づいて、電子機器10Aにおいて手書き入力されたストロークに対応する軌跡をグループオーナのカンバス上にリアルタイムに描画することもできる。 Further, the group owner (electronic device 10A) may draw a locus corresponding to the stroke input by handwriting on the electronic device 10A in real time on the group owner's canvas based on a plurality of point data from the electronic device 10B. it can.
 (6)電子機器10Dが手書き情報共有サービスに途中からログインした場合、グループオーナ(電子機器10A)は、これまでにデータベース12に格納された全ての点データを電子機器10Dに送信する。この場合、これら全ての点データは、これら全てのデータにそれぞれ対応するタイムスタンプに基づくタイミングで、電子機器10Dに時系列順に順次送信される。送信される各点データには、ストロークID、ユーザID(またはデバイスID)、点種別(始点/中点/終点)、ペン属性(ペン種、色、等)等が付加される。 (6) When the electronic device 10D logs in to the handwritten information sharing service from the middle, the group owner (electronic device 10A) transmits all point data stored so far in the database 12 to the electronic device 10D. In this case, all the point data are sequentially transmitted to the electronic device 10D in time series order at timings based on the time stamps corresponding to all the data. Each point data to be transmitted includes a stroke ID, a user ID (or device ID), a point type (start point / middle point / end point), a pen attribute (pen type, color, etc.), and the like.
 これらの点データは、これら点データが受信されたレート(速度)よりも速いレート(速度)で、電子機器10Dに送信されても良い。これら点データが受信されたレート(速度)は、これら点データに対応するタイムスタンプによって得ることができる。ある基準時間当たりに受信された点データの数が多い密の期間の受信レートは高く、基準時間当たりに受信された点データの数が少ない粗の期間の受信レートは低い。 These point data may be transmitted to the electronic device 10D at a rate (speed) faster than the rate (speed) at which these point data are received. The rate (speed) at which the point data is received can be obtained by a time stamp corresponding to the point data. The reception rate in a dense period with a large number of point data received per reference time is high, and the reception rate in a coarse period with a small number of point data received per reference time is low.
 複数の点データを受信レートよりも速い送信レートで送信するための方法としては、複数の点データを、これら複数の点データ間の受信間隔よりも短い送信間隔で、送信するという方法を使用しても良い。これら複数の点データ間の受信間隔は、これら点データに対応するタイムスタンプによって容易に得ることができる。 As a method for transmitting a plurality of point data at a transmission rate faster than the reception rate, a method of transmitting a plurality of point data at a transmission interval shorter than a reception interval between the plurality of point data is used. May be. The reception interval between the plurality of point data can be easily obtained by the time stamp corresponding to the point data.
 例えば、これら点データ間の受信間隔の1/2の送信間隔でこれら点データを送信することにより、これら点データを、これら点データの受信レートの2倍の送信レートで、電子機器10Dに送信することができる。 For example, by transmitting these point data at a transmission interval that is half the reception interval between these point data, these point data are transmitted to the electronic apparatus 10D at a transmission rate that is twice the reception rate of these point data. can do.
 図7の説明では、電子機器10Bにおいてストロークが手書き入力された場合に実行される処理について説明したが、電子機器10Cまたはグループオーナ(電子機器10A)においてストロークが手書き入力された場合も、同様の処理が実行される。 In the description of FIG. 7, the processing that is executed when a stroke is input by handwriting in the electronic device 10B has been described. Processing is executed.
 例えば、電子機器10Cにおいてストロークが手書き入力された場合には、このストロークに対応する複数の点データが点データ単位でグループオーナ(電子機器10A)に送信される。つまり、このストロークが手書き入力されている間に、これら複数の点データは時系列順に順次グループオーナ(電子機器10A)に送信される。そして、これら複数の点データがタイムスタンプと共にデータベース12に格納される。そして、これら複数の点データが点データ単位で電子機器10Bに送信される。 For example, when a stroke is input by handwriting in the electronic device 10C, a plurality of point data corresponding to the stroke is transmitted to the group owner (electronic device 10A) in units of point data. That is, while the stroke is input by handwriting, the plurality of point data are sequentially transmitted to the group owner (electronic device 10A) in time series order. The plurality of point data are stored in the database 12 together with a time stamp. The plurality of point data are transmitted to the electronic device 10B in point data units.
 グループオーナ(電子機器10A)においてストロークが手書き入力された場合には、このストロークに対応する複数の点データがタイムスタンプと共にデータベース12に格納され、さらに、これら複数の点データが点データ単位で電子機器10Bおよび電子機器10Cに送信される。 When a stroke is input by handwriting in the group owner (electronic device 10A), a plurality of point data corresponding to the stroke is stored in the database 12 together with a time stamp, and further, the plurality of point data is electronically stored in units of point data. It is transmitted to the device 10B and the electronic device 10C.
 次に、図9~図11を参照して、各点データをデータベース12に格納する処理について説明する。 Next, processing for storing each point data in the database 12 will be described with reference to FIG. 9 to FIG.
 図9は、電子機器10Bのカンバスに表示される手書き情報の例を示す。図9では、ストローク50、ストローク52、ストローク53が、グループオーナ、参加者1、参加者2の3人のグループで共有されている場合が想定されている。 FIG. 9 shows an example of handwritten information displayed on the canvas of the electronic device 10B. In FIG. 9, it is assumed that the stroke 50, the stroke 52, and the stroke 53 are shared by a group of three people, the group owner, the participant 1, and the participant 2.
 ストローク50は参加者1によって電子機器10Bにおいて手書き入力されたストロークである。ストローク52は参加者2によって電子機器10Cにおいて手書き入力されたストロークである。ストローク54はグループオーナによって電子機器10Aにおいて手書き入力されたストロークである。 The stroke 50 is a stroke input by the participant 1 by handwriting on the electronic device 10B. The stroke 52 is a stroke input by handwriting on the electronic device 10 </ b> C by the participant 2. The stroke 54 is a stroke input by handwriting on the electronic apparatus 10A by the group owner.
 図10はデータベース12に格納される手書きデータの例を示す。データベース12においては、ストローク50に対応する各点データがタイムスタンプと共に格納される。またストローク52に対応する各点データもタイムスタンプと共に格納され、さらに、ストローク54に対応する各点データもタイムスタンプと共に格納される。 FIG. 10 shows an example of handwritten data stored in the database 12. In the database 12, each point data corresponding to the stroke 50 is stored together with a time stamp. Each point data corresponding to the stroke 52 is also stored together with the time stamp, and each point data corresponding to the stroke 54 is also stored together with the time stamp.
 図11はデータベース12のデータ構造を示す。 FIG. 11 shows the data structure of the database 12.
 データベース12においては、例えば、ストローク管理テーブル121と点管理テーブル122とが構築される。 In the database 12, for example, a stroke management table 121 and a point management table 122 are constructed.
 ストローク管理テーブル121は、複数のストロークに対応する複数の行(レコード)を含む。各レコードには、「ストロークID」フィールド、「始点時刻」フィールド、「ユーザID」フィールド、「ペン種」フィールド、「カラー」フィールド、等が定義されている。 The stroke management table 121 includes a plurality of rows (records) corresponding to a plurality of strokes. In each record, a “stroke ID” field, a “start time” field, a “user ID” field, a “pen type” field, a “color” field, and the like are defined.
 点管理テーブル122は、複数の点データに対応する複数の行(レコード)を含む。各レコードには、「ストロークID」フィールド、「時刻」フィールド、「点種別」フィールド、「座標x」フィールド、「座標y」フィールド、等が定義されている。 The point management table 122 includes a plurality of rows (records) corresponding to a plurality of point data. In each record, a “stroke ID” field, a “time” field, a “point type” field, a “coordinate x” field, a “coordinate y” field, and the like are defined.
 電子機器10Aがあるストロークの始点に対応する点データを受信した時、電子機器10Aは、ストローク管理テーブル121に1レコードを追加し、その追加されたレコードに、ストロークIDを示す値、始点時刻を示す値、ユーザIDを示す値、ペン種を示す値、カラーを示す値を格納する。上述したように、受信される点データには、ストロークID、ユーザID、ペン種、カラーを示す追加情報が付加されている。よって、電子機器10Aは、この追加情報を使用して、ストロークIDを示す値、ユーザIDを示す値、ペン種を示す値、カラーを示す値を、レコードに格納することができる。始点時刻を示す値は、ストロークの始点に対応する点データの受信時刻(受信タイミング)を示すタイムスタンプである。このタイムスタンプとしては、点データが受信されたタイミングを識別可能な任意の値を使用することができる。例えば、このタイムスタンプは絶対時間であってもよいし、ある基準時間に対する相対時間であってもよい。 When the electronic device 10A receives the point data corresponding to the start point of a certain stroke, the electronic device 10A adds one record to the stroke management table 121, and adds the value indicating the stroke ID and the start point time to the added record. A value indicating the user ID, a value indicating the pen type, and a value indicating the color are stored. As described above, additional information indicating the stroke ID, user ID, pen type, and color is added to the received point data. Therefore, the electronic device 10A can store a value indicating the stroke ID, a value indicating the user ID, a value indicating the pen type, and a value indicating the color in the record using this additional information. The value indicating the start point time is a time stamp indicating the reception time (reception timing) of the point data corresponding to the start point of the stroke. As this time stamp, any value that can identify the timing at which the point data is received can be used. For example, the time stamp may be an absolute time or a relative time with respect to a certain reference time.
 あるいは、始点時刻を示す値は、ストロークの始点に対応する点データの入力時刻を示すタイムスタンプであってもよい。このタイムスタンプとしては、点データが入力されたタイミングを識別可能な任意の値を使用することができる。 Alternatively, the value indicating the start point time may be a time stamp indicating the input time of the point data corresponding to the start point of the stroke. As this time stamp, any value that can identify the timing at which point data is input can be used.
 電子機器10Aがあるストロークの始点に対応する点データを受信した時、さらに、電子機器10Aは、点管理テーブル122に1レコードを追加し、その追加されたレコードに、ストロークIDを示す値、時刻(入力時刻または受信時刻)を示す値、点種別を示す値、座標xを示す値、座標yを示す値を格納する。上述したように、点データは座標xおよび座標yを示す情報だけでなく、ストロークID、点種別、を示す追加情報も含む。したがって、電子機器10Aは、この追加情報を使用して、ストロークIDを示す値、点種別を示す値をレコードに格納することができる。時刻を示す値は、この点データの入力時刻または受信時刻を示すタイムスタンプである。 When the electronic device 10A receives point data corresponding to the start point of a certain stroke, the electronic device 10A further adds one record to the point management table 122, and the value and time indicating the stroke ID in the added record. A value indicating (input time or reception time), a value indicating point type, a value indicating coordinate x, and a value indicating coordinate y are stored. As described above, the point data includes not only information indicating the coordinates x and coordinates y but also additional information indicating the stroke ID and the point type. Therefore, the electronic apparatus 10A can store a value indicating the stroke ID and a value indicating the point type in the record using this additional information. The value indicating the time is a time stamp indicating the input time or the reception time of the point data.
 電子機器10Aがあるストロークの2番目以降のある点データを受信した時、電子機器10Aは、点管理テーブル122に1レコードを追加して、その追加されたレコードに、ストロークIDを示す値、時刻(入力時刻または受信時刻)を示す値、点種別を示す値、座標xを示す値、座標yを示す値を格納する処理を実行する。 When the electronic device 10A receives point data after the second of a certain stroke, the electronic device 10A adds one record to the point management table 122, and the value and time indicating the stroke ID in the added record. A process of storing a value indicating (input time or reception time), a value indicating the point type, a value indicating the coordinate x, and a value indicating the coordinate y is executed.
 図11のデータベース12は、手書き共有サービスにログインしている全ての電子機器から参照可能な共有データであってもよい。この場合、各電子機器は、データベース12の内容に基づいて、カンバスに表示されている現在の手書き情報を、任意の時点の手書き情報にロールバックすることができる。 The database 12 in FIG. 11 may be shared data that can be referred to from all electronic devices logged into the handwriting sharing service. In this case, each electronic device can roll back the current handwritten information displayed on the canvas to the handwritten information at an arbitrary time point based on the contents of the database 12.
 あるいは、図11のデータベース12の内容が各参加者の電子機器のローカルストレージにコピーされても良い。この場合でも、上述のロールバックを実現できる。 Alternatively, the contents of the database 12 in FIG. 11 may be copied to the local storage of each participant's electronic device. Even in this case, the above-described rollback can be realized.
 図12はデータベース12に格納された複数の点データが2倍速でリプレイされる様子を示す。 FIG. 12 shows how a plurality of point data stored in the database 12 are replayed at double speed.
 ストローク50に対応する複数の点データは、これら複数の点データ間の受信間隔の1/2の時間間隔で、電子機器10Aから電子機器10Dに送信される。例えば、最初の点データと2番目の点データとの間の受信間隔がT1であり、2番目の点データと3番目の点データとの間の受信間隔がT2である場合を想定する。この場合、最初の点データが電子機器10Dに送信されてからT1/2の時間間隔だけ経過した時に、2番目の点データが電子機器10Dに送信される。そして、2番目の点データが電子機器10Dに送信されてからT2/2の時間間隔だけ経過した時に、3番目の点データが電子機器10Dに送信される。 The plurality of point data corresponding to the stroke 50 is transmitted from the electronic device 10A to the electronic device 10D at a time interval that is ½ of the reception interval between the plurality of point data. For example, it is assumed that the reception interval between the first point data and the second point data is T1, and the reception interval between the second point data and the third point data is T2. In this case, the second point data is transmitted to the electronic device 10D when the time interval of T1 / 2 has elapsed since the first point data was transmitted to the electronic device 10D. Then, the third point data is transmitted to the electronic device 10D when the time interval of T2 / 2 has elapsed since the second point data was transmitted to the electronic device 10D.
 これにより、電子機器10Dのカンバス上においては、ストローク50は2倍速でリプレイされる。同様に、ストローク52に対応する複数の点データも、これら複数の点データの受信間隔の1/2の時間間隔で、電子機器10Aから電子機器10Dに送信される。これにより、電子機器10Dのカンバス上においては、ストローク52は2倍速でリプレイされる。よって、途中からサービスにログインした参加者3は、これまでの議論の経過、つまりどの様な経緯を辿って現在の手書き情報が構築されたかを、短い時間で把握することができる。 Thereby, the stroke 50 is replayed at double speed on the canvas of the electronic device 10D. Similarly, a plurality of point data corresponding to the stroke 52 are also transmitted from the electronic device 10A to the electronic device 10D at a time interval that is ½ of the reception interval of the plurality of point data. Thereby, the stroke 52 is replayed at double speed on the canvas of the electronic apparatus 10D. Therefore, the participant 3 who has logged in to the service from the middle can grasp the progress of the discussion so far, that is, how the current handwritten information has been constructed through a short time.
 受信レートに対する送信レート(リプレイ速度)の倍率は、2倍に限らず、例えば、1倍、1.5倍、3倍、4倍、…30倍のような、任意の倍率に可変設定可能である。受信レートに対する送信レートの倍率を可変設定可能とするために、ユーザの操作に応じてリプレイ速度を増減可能なユーザインタフェースを使用しても良い。あるいは、多くの点データが存在する密の期間と点データの数が少ない粗の期間との間で、受信レートに対する送信レートの倍率を変化させても良い。この場合、粗の期間では受信レートに対する送信レートの倍率を1に近い低い倍率に設定し、密の期間では受信レートに対する送信レートの倍率を1よりも高い倍率に設定してもよい。 The magnification of the transmission rate (replay speed) with respect to the reception rate is not limited to 2 times, and can be variably set to any magnification such as 1 times, 1.5 times, 3 times, 4 times,. is there. In order to variably set the magnification of the transmission rate with respect to the reception rate, a user interface that can increase or decrease the replay speed according to the user's operation may be used. Alternatively, the ratio of the transmission rate to the reception rate may be changed between a dense period where a lot of point data exists and a coarse period where the number of point data is small. In this case, the magnification of the transmission rate relative to the reception rate may be set to a low magnification close to 1 in the coarse period, and the magnification of the transmission rate relative to the reception rate may be set to a magnification higher than 1 in the dense period.
 あるいは、受信レートに対する送信レート(リプレイ速度)の倍率は、手書き共有サービスが開始される時点から電子機器10D(途中参加者)がログインする時点までの期間(遅れ期間)の長さに基づいて決定してもよい。 Alternatively, the magnification of the transmission rate (replay speed) with respect to the reception rate is determined based on the length of the period (delay period) from the time when the handwriting sharing service is started to the time when the electronic device 10D (halfway participant) logs in. May be.
 図13は受信レートに対する送信レートの倍率を決定する処理を示す。 FIG. 13 shows a process for determining the magnification of the transmission rate with respect to the reception rate.
 図13において、t0は手書き共有サービスが開始される時点を表し、t1は電子機器10D(途中参加者)がログインする時点を表している。ここでは、リプレイ時間Rtが固定である場合を想定する。リプレイ時間Rtは、遅れ期間Dtの間にデータベース12に蓄積された全ての点データをリプレイするための時間間隔である。リプレイ時間Rtは、例えば、30秒、または1分に設定されても良い。 In FIG. 13, t0 represents a point in time when the handwriting sharing service is started, and t1 represents a point in time when the electronic device 10D (participant on the way) logs in. Here, it is assumed that the replay time Rt is fixed. The replay time Rt is a time interval for replaying all the point data accumulated in the database 12 during the delay period Dt. The replay time Rt may be set to 30 seconds or 1 minute, for example.
 受信レート(オリジナル速度)に対する送信レートの倍率Nは、
 N=Dt/Rt
によって与えられる。
The magnification N of the transmission rate with respect to the reception rate (original speed) is
N = Dt / Rt
Given by.
 なお、リプレイ時間Rtは必ずしも固定でなくてもよい。この場合、例えば、遅れ期間Dtがしきい時間未満であれば、予め決められた第1倍速(例えば2倍速)でリプレイが実行されても良い。一方、遅れ期間Dtがしきい時間以上であれば、予め決められた第2倍速(例えば10倍速)でリプレイが実行されても良い。また、一つ前の点データの受信時刻(または入力時刻)から次の点データの受信時刻(または入力時刻)までの時間間隔がある基準時間を超えている場合には、この時間間隔だけ待つこと無く、一つ前の点データを送信した直後に、次の点データを送信してもよい。 Note that the replay time Rt is not necessarily fixed. In this case, for example, if the delay period Dt is less than the threshold time, the replay may be executed at a predetermined first double speed (for example, double speed). On the other hand, if the delay period Dt is equal to or longer than the threshold time, the replay may be executed at a predetermined second speed (for example, 10 times speed). If the time interval from the reception time (or input time) of the previous point data to the reception time (or input time) of the next point data exceeds a certain reference time, this time interval is waited. Instead, the next point data may be transmitted immediately after the previous point data is transmitted.
 図14は、タブレットコンピュータ10のシステム構成を示す。 
 タブレットコンピュータ10は、図14に示されるように、CPU101、システムコントローラ102、主メモリ103、グラフィクスプロセッシングユニット(GPU)104、BIOS-ROM105、不揮発性メモリ106、無線通信デバイス107、エンベデッドコントローラ(EC)108等を備える。
FIG. 14 shows a system configuration of the tablet computer 10.
As shown in FIG. 14, the tablet computer 10 includes a CPU 101, a system controller 102, a main memory 103, a graphics processing unit (GPU) 104, a BIOS-ROM 105, a nonvolatile memory 106, a wireless communication device 107, an embedded controller (EC). 108 and the like.
 CPU101は、タブレットコンピュータ10内の様々なコンポーネントの動作を制御するプロセッサである。CPU101は、ストレージデバイスである不揮発性メモリ106から主メモリ103にロードされる様々なプログラムを実行する。これらプログラムには、オペレーティングシステム(OS)201、および様々なアプリケーションプログラムが含まれている。アプリケーションプログラムには、手書き共有アプリケーションプログラム202が含まれている。この手書き共有アプリケーションプログラム202は、手書き情報を複数の電子機器間で共有するための上述の手書きコラボレーション機能を実行することができる。 The CPU 101 is a processor that controls the operation of various components in the tablet computer 10. The CPU 101 executes various programs loaded from the nonvolatile memory 106 that is a storage device to the main memory 103. These programs include an operating system (OS) 201 and various application programs. The application program includes a handwriting sharing application program 202. The handwriting sharing application program 202 can execute the above-described handwriting collaboration function for sharing handwritten information among a plurality of electronic devices.
 また、CPU101は、BIOS-ROM105に格納された基本入出力システム(BIOS)も実行する。BIOSは、ハードウェア制御のためのプログラムである。 The CPU 101 also executes a basic input / output system (BIOS) stored in the BIOS-ROM 105. The BIOS is a program for hardware control.
 システムコントローラ102は、CPU101のローカルバスと各種コンポーネントとの間を接続するデバイスである。システムコントローラ102には、主メモリ103をアクセス制御するメモリコントローラも内蔵されている。また、システムコントローラ102は、PCI EXPRESS規格のシリアルバスなどを介してグラフィクスプロセッシングユニット(GPU)104との通信を実行する機能も有している。 The system controller 102 is a device that connects between the local bus of the CPU 101 and various components. The system controller 102 also includes a memory controller that controls access to the main memory 103. The system controller 102 also has a function of executing communication with a graphics processing unit (GPU) 104 via a PCI EXPRESS serial bus or the like.
 GPU104は、本タブレットコンピュータ10のディスプレイモニタとして使用されるLCD17Aを制御する表示プロセッサである。このGPU104によって生成される表示信号はLCD17Aに送られる。LCD17Aは、表示信号に基づいて画面イメージを表示する。このLCD17Aの上面側にはタッチパネル17Bが配置されている。LCD17Aの下面側にはデジタイザ17Cが配置されている。タッチパネル17Bは、LCD17Aの画面上で入力を行うための静電容量式のポインティングデバイスである。指が接触される画面上の接触位置および接触位置の動き等はタッチパネル17Bによって検出される。デジタイザ17CはLCD17Aの画面上で入力を行うための電磁誘導式のポインティングデバイスである。ペン100が接触される画面上の接触位置および接触位置の動き等はデジタイザ17Cによって検出される。 The GPU 104 is a display processor that controls the LCD 17 </ b> A used as a display monitor of the tablet computer 10. A display signal generated by the GPU 104 is sent to the LCD 17A. The LCD 17A displays a screen image based on the display signal. A touch panel 17B is disposed on the upper surface side of the LCD 17A. A digitizer 17C is disposed on the lower surface side of the LCD 17A. The touch panel 17B is a capacitance-type pointing device for inputting on the screen of the LCD 17A. The touch position on the screen where the finger is touched and the movement of the touch position are detected by the touch panel 17B. The digitizer 17C is an electromagnetic induction type pointing device for inputting on the screen of the LCD 17A. The digitizer 17C detects the contact position on the screen where the pen 100 is touched, the movement of the contact position, and the like.
 無線通信デバイス107は、無線通信を実行するように構成されたデバイスである。EC108は、電力管理のためのエンベデッドコントローラを含むワンチップマイクロコンピュータである。EC108は、ユーザによるパワーボタンの操作に応じて本タブレットコンピュータ10を電源オンまたは電源オフする機能を有している。 The wireless communication device 107 is a device configured to execute wireless communication. The EC 108 is a one-chip microcomputer including an embedded controller for power management. The EC 108 has a function of turning on or off the tablet computer 10 in accordance with the operation of the power button by the user.
 次に、図15を参照して、手書き共有アプリケーションプログラム202の構成について説明する。 Next, the configuration of the handwriting sharing application program 202 will be described with reference to FIG.
 手書き共有アプリケーションプログラム202は、手書き情報を共有するための機能実行モジュールとして、手書き入力インタフェース300、表示処理部301、処理部302、送信制御部303、および受信制御部304等を含む。 The handwriting sharing application program 202 includes a handwriting input interface 300, a display processing unit 301, a processing unit 302, a transmission control unit 303, a reception control unit 304, and the like as function execution modules for sharing handwritten information.
 手書き共有アプリケーションプログラム202は、タッチスクリーンディスプレイ17を用いて入力されるストロークデータを使用することによって、手書きページデータの作成、表示、編集等を行う。タッチスクリーンディスプレイ17のデジタイザ17Cは、「タッチ」、「移動(スライド)」、「リリース」等のイベントの発生を検出するように構成されている。「タッチ」は、画面上にペンが接触したことを示すイベントである。「移動(スライド)」は、画面上にペンが接触されている間に接触位置が移動されたことを示すイベントである。「リリース」は、画面からペンが離されたことを示すイベントである。 The handwriting sharing application program 202 creates, displays, and edits handwritten page data by using stroke data that is input using the touch screen display 17. The digitizer 17C of the touch screen display 17 is configured to detect occurrence of events such as “touch”, “move (slide)”, “release” and the like. “Touch” is an event indicating that the pen has touched the screen. “Move (slide)” is an event indicating that the contact position has been moved while the pen is in contact with the screen. “Release” is an event indicating that the pen is released from the screen.
 手書き入力インタフェース300は、タッチスクリーンディスプレイ17のデジタイザ17Cと協同して手書き入力を行うように構成されたインタフェースである。手書き入力インタフェース300は、タッチスクリーンディスプレイ17のデジタイザ17Cから「タッチ」または「移動(スライド)」のイベントを受信し、これによって手書き入力操作を検出する。「タッチ」イベントには、接触位置の座標が含まれている。「移動(スライド)」イベントにも、移動先の接触位置の座標が含まれている。したがって、手書き入力インタフェース300は、タッチスクリーンディスプレイ17から、接触位置の動きの軌跡に対応する座標列(複数の点データ)を受信することができる。 The handwriting input interface 300 is an interface configured to perform handwriting input in cooperation with the digitizer 17C of the touch screen display 17. The handwriting input interface 300 receives a “touch” or “move (slide)” event from the digitizer 17 </ b> C of the touch screen display 17, thereby detecting a handwriting input operation. The “touch” event includes the coordinates of the contact position. The “movement (slide)” event also includes the coordinates of the contact position of the movement destination. Therefore, the handwriting input interface 300 can receive a coordinate sequence (a plurality of point data) corresponding to the movement locus of the contact position from the touch screen display 17.
 表示処理部301は、手書き入力インタフェース300からの座標列に基づいて、ペン100を使用した手書き入力操作によって手書き入力される各ストロークをLCD17Aの画面上に表示する。さらに、表示処理部301は、処理部302の制御の下、他の電子機器から受信された座標列に基づいて、各ストロークをLCD17Aの画面上に表示する。 The display processing unit 301 displays, on the screen of the LCD 17 </ b> A, each stroke input by handwriting input operation using the pen 100 based on the coordinate sequence from the handwriting input interface 300. Further, the display processing unit 301 displays each stroke on the screen of the LCD 17A based on the coordinate sequence received from another electronic device under the control of the processing unit 302.
 送信制御部303は、処理部302の制御の下、無線通信デバイス107を使用して複数の点データを時系列順に順次他の電子機器に送信するための処理を実行する。受信制御部304は、処理部302の制御の下、無線通信デバイス107を使用して他の電子機器から複数の点データを時系列順に順次受信するための処理を実行する。 The transmission control unit 303 executes processing for sequentially transmitting a plurality of point data to other electronic devices in time series using the wireless communication device 107 under the control of the processing unit 302. Under the control of the processing unit 302, the reception control unit 304 uses the wireless communication device 107 to execute processing for sequentially receiving a plurality of point data from other electronic devices in chronological order.
 処理部302は、複数の電子機器間で手書き情報を共有するための処理を実行する。この処理部302は、メンバ管理部311、保存処理部312、およびリプレイ処理部313等を含む。 The processing unit 302 executes processing for sharing handwritten information among a plurality of electronic devices. The processing unit 302 includes a member management unit 311, a storage processing unit 312, a replay processing unit 313, and the like.
 メンバ管理部311は、手書き共有サービスにログインしているメンバ(電子機器)それぞれを管理する。メンバ管理部311は、手書き共有サービスへのログインを要求している電子機器に、ログインすることを許可するか否かを決定することができる。メンバ管理部311から許可を受け取った電子機器は、手書き共有サービスにログインすることが許可され、これによって手書き共有サービスにログインしている他の各電子機器と接続される。メンバ管理部311の機能は、手書きコラボレーションサーバシステムとして動作する電子機器(グループオーナの電子機器)においてのみ実行されても良い。 The member management unit 311 manages each member (electronic device) logged into the handwriting sharing service. The member management unit 311 can determine whether or not to permit login to an electronic device requesting login to the handwriting sharing service. The electronic device that has received permission from the member management unit 311 is permitted to log in to the handwriting sharing service, and is thereby connected to other electronic devices that are logged in to the handwriting sharing service. The function of the member management unit 311 may be executed only in an electronic device (group owner electronic device) operating as a handwriting collaboration server system.
 保存処理部312は、他の電子機器から受信される各点データを、タイムスタンプと共に、データベース12に保存するための処理を実行する。リプレイ処理部313は、第3の電子機器が前記サービスに途中からログインした場合、上述のリプレイのための処理を実行する。つまり、ある電子機器が手書き共有サービスに途中からログインした場合、リプレイ処理部313は、この電子機器のログイン前にデータベース12に格納された複数の点データを、これら点データにそれぞれ対応するタイムスタンプに基づくタイミングで、この電子機器に時系列順に順次送信するための処理を実行する。この場合、これら点データの送信はN倍速(Nは1以上)で実行することができる。 The storage processing unit 312 executes processing for storing each point data received from another electronic device in the database 12 together with a time stamp. When the third electronic device logs in to the service from the middle, the replay processing unit 313 executes the above-described processing for replay. That is, when a certain electronic device logs in to the handwriting sharing service from the middle, the replay processing unit 313 uses a plurality of point data stored in the database 12 before the login of the electronic device as time stamps corresponding to these point data, respectively. At the timing based on the above, processing for sequentially transmitting to the electronic device in chronological order is executed. In this case, transmission of these point data can be executed at N times speed (N is 1 or more).
 参加者(クライアント)として動作する電子機器においては、リプレイ処理部313は、グループオーナの電子機器から時系列順に順次送信される点データを受信しながらそれら点データを表示する処理を実行する。 In an electronic device that operates as a participant (client), the replay processing unit 313 executes a process of displaying the point data while receiving the point data sequentially transmitted from the group owner electronic device in time series.
 図16のフローチャートは、本実施形態の手書きデータ配信処理の手順を示す。 The flowchart of FIG. 16 shows the procedure of handwritten data distribution processing of the present embodiment.
 手書きコラボレーションサーバシステム(電子機器10A)の処理部302は、ログイン状態である複数の参加者の電子機器のいずれかにおいて手書き入力されるストロークに対応する複数の点データを、この電子機器から受信する(ブロックB11)。上述したように、これら複数の点データは、この電子機器から手書きコラボレーションサーバシステム(電子機器10A)に時系列順に順次送信される。 The processing unit 302 of the handwriting collaboration server system (electronic device 10A) receives, from this electronic device, a plurality of point data corresponding to strokes input by handwriting in any of a plurality of participant electronic devices that are logged in. (Block B11). As described above, the plurality of point data are sequentially transmitted from the electronic device to the handwriting collaboration server system (electronic device 10A) in time series.
 処理部302は、受信された各点データをこの点データの入力時刻または受信時刻を示すタイムスタンプとともにデータベース12に格納するための点データ保存処理を実行する(ブロックB12)。 The processing unit 302 executes a point data storage process for storing each received point data in the database 12 together with a time stamp indicating the input time or the reception time of the point data (block B12).
 処理部302は、受信された複数の点データを、他の各参加者の電子機器に送信する(ブロックB13)。ブロックB13では、複数の点データは、他の各参加者の電子機器に、時系列順に順次送信される。 The processing unit 302 transmits the received plurality of point data to the electronic devices of other participants (block B13). In block B13, the plurality of point data are sequentially transmitted to the electronic devices of the other participants in chronological order.
 図17のフローチャートは、図16のブロックB12で行われる点データ保存処理の手順を示す。 The flowchart of FIG. 17 shows the procedure of the point data storage process performed in block B12 of FIG.
 処理部302が点データを受信した時(ブロックB21のYES)、処理部302は、点データに付加されている点種別に基づいて、この点データがストロークの始点の点データであるか否かを判定する(ブロックB22)。 When the processing unit 302 receives the point data (YES in block B21), the processing unit 302 determines whether the point data is point data at the start point of the stroke based on the point type added to the point data. Is determined (block B22).
 この点データがストロークの始点の点データであるならば(ブロックB22のYES)、処理部302は、ストローク管理テーブル121に1レコードを追加し、その追加されたレコードに、ストロークIDを示す値、始点時刻を示す値、ユーザIDを示す値、ペン種を示す値、カラーを示す値を格納する(ブロックB23)。そして、処理部302は、点管理テーブル122に1レコードを追加し、その追加されたレコードに、ストロークIDを示す値、時刻を示す値、点種別を示す値、座標xを示す値、座標yを示す値を格納する(ブロックB24)。そして、処理部302は、受信された点データを、他の各参加者の電子機器に送信する(ブロックB25)。 If this point data is point data of the start point of the stroke (YES in block B22), the processing unit 302 adds one record to the stroke management table 121, and a value indicating the stroke ID in the added record, A value indicating the start point time, a value indicating the user ID, a value indicating the pen type, and a value indicating the color are stored (block B23). Then, the processing unit 302 adds one record to the point management table 122, and adds a value indicating the stroke ID, a value indicating the time, a value indicating the point type, a value indicating the coordinate x, and a coordinate y to the added record. Is stored (block B24). Then, the processing unit 302 transmits the received point data to the electronic devices of other participants (block B25).
 受信された点データがストロークの中点または終点の点データであるならば(ブロックB22のYES)、処理部302は、ブロックB23の処理をスキップして、ブロックB24、ブロックB25の処理のみを実行する。 If the received point data is the midpoint or end point data of the stroke (YES in block B22), the processing unit 302 skips the processing of block B23 and executes only the processing of block B24 and block B25. To do.
 図18のフローチャートは、リプレイ処理の手順を示す。 FIG. 18 is a flowchart showing the replay processing procedure.
 新たな参加者が手書き共有サービスに途中から参加(ログイン)したならば(ブロックB31のYES)、処理部302は、新たな参加者の参加の前にデータベース12に格納された全ての点データを新たな参加者の電子機器に送信するための点データ送信処理を実行する(ブロックB32)。ブロックB32では、これら全ての点データは、対応するタイムスタンプによって指定されるタイミングで、新たな参加者の電子機器に時系列順に順次送信される。 If a new participant joins (logs in) the handwriting sharing service from the middle (YES in block B31), the processing unit 302 stores all the point data stored in the database 12 before the new participant joins. A point data transmission process for transmitting to the electronic device of the new participant is executed (block B32). In block B32, all these point data are sequentially transmitted to the new participant's electronic devices in time-series order at the timing specified by the corresponding time stamp.
 ブロックB33で全ての点データの送信が完了したと判定されるまで、点データ送信処理は繰り返し実行される。 The point data transmission process is repeatedly executed until it is determined in block B33 that transmission of all point data has been completed.
 図19のフローチャートは、点データ送信処理の手順を示す。 The flowchart of FIG. 19 shows the procedure of the point data transmission process.
 ここでは、遅れ期間Dtの長さに基づいて、リプレイをN倍速で実行する場合を想定する。 Here, it is assumed that replay is executed at N times speed based on the length of the delay period Dt.
 まず、処理部302は、オリジナル速度の何倍の速度でリプレイすべきかを決定する(ブロックB41)。ブロックB41では、処理部302は、遅れ期間Dtの長さに基づいて、受信レート(オリジナル速度)に対する送信レートの倍率Nを算出する。固定のリプレイ時間Rtを使用する場合においては、倍率Nは、
 N=Dt/Rt
によって与えられる。
First, the processing unit 302 determines how many times the original speed should be replayed (block B41). In block B41, the processing unit 302 calculates the magnification N of the transmission rate with respect to the reception rate (original speed) based on the length of the delay period Dt. In the case of using a fixed replay time Rt, the magnification N is
N = Dt / Rt
Given by.
 処理部302は、最初の点データを、新たな参加者の電子機器に送信する(ブロックB42)。次に、処理部302は、最初の点データの受信時刻(または入力時刻)と次の点データの受信時刻(または入力時刻)との間の時間間隔と、倍率Nとに基づいて、次の点データが送信されるべき送信タイミングを決定する(ブロックB43)。処理部302は、次の点データの送信タイミングが到来したか否かを判定する(ブロックB44)。次の点データの送信タイミングが到来しならば(ブロックB44のYES)、処理部302は、最初の点データを、新たな参加者の電子機器に送信する(ブロックB45)。そして、処理部302は、全ての点データの送信が完了したか否かを判定する(ブロックB46)。 The processing unit 302 transmits the first point data to the electronic device of the new participant (block B42). Next, the processing unit 302 determines the next interval based on the time interval between the reception time (or input time) of the first point data and the reception time (or input time) of the next point data and the magnification N. The transmission timing at which point data is to be transmitted is determined (block B43). The processing unit 302 determines whether or not the next point data transmission timing has arrived (block B44). If the next point data transmission timing has arrived (YES in block B44), the processing unit 302 transmits the first point data to the electronic device of the new participant (block B45). Then, the processing unit 302 determines whether transmission of all point data has been completed (block B46).
 全ての点データの送信が完了するまで、送信対象の次の点データを更新しながら、ブロックB43~B45の処理が繰り返される。 Until the transmission of all point data is completed, the processing of blocks B43 to B45 is repeated while updating the next point data to be transmitted.
 図20のフローチャートは、参加者の電子機器によって実行される処理の手順を示す。 The flowchart of FIG. 20 shows a procedure of processing executed by the participant's electronic device.
 参加者の電子機器の処理部302は、手書きコラボレーションサーバシステムにログイン要求(参加要求)を送信して手書き共有サービスにログインする(ステップB51)。データベース12に既に蓄積されている点データが存在する場合には(ブロックB52のYES)、処理部302は、リプレイ処理モードに遷移する。 The processing unit 302 of the participant's electronic device transmits a login request (participation request) to the handwriting collaboration server system and logs in to the handwriting sharing service (step B51). If there is point data already stored in the database 12 (YES in block B52), the processing unit 302 transitions to the replay processing mode.
 リプレイ処理モードである間は、処理部302は、参加者の電子機器におけるストロークの手書き入力を禁止する。 During the replay processing mode, the processing unit 302 prohibits handwriting input of strokes in the participant's electronic device.
 リプレイ処理モードでは、処理部302は、手書きコラボレーションサーバシステムから送信される点データを受信する。手書きコラボレーションサーバシステムから点データが受信された時(ブロックB53のYES)、処理部302は、受信された点データに基づいて謬画処理を実行する(ブロックB54)。既に蓄積されている全ての点データの受信及び描画が完了するまでは(ブロックB54のNO)、ブロックB53、B54の処理が繰り返される。 In the replay processing mode, the processing unit 302 receives point data transmitted from the handwriting collaboration server system. When the point data is received from the handwritten collaboration server system (YES in block B53), the processing unit 302 executes the drawing process based on the received point data (block B54). Until the reception and drawing of all the already accumulated point data are completed (NO in block B54), the processes in blocks B53 and B54 are repeated.
 既に蓄積されている全ての点データの受信及び描画が完了すると(ブロックB54のYES)、処理部302は、リプレイ処理モードを抜け、手書き共有モードに遷移する。手書き共有モードでは、処理部302は、参加者の電子機器におけるストロークの手書き入力を許可する。 When the reception and drawing of all the accumulated point data are completed (YES in block B54), the processing unit 302 exits the replay processing mode and transitions to the handwriting sharing mode. In the handwriting sharing mode, the processing unit 302 permits handwriting input of strokes in the participant's electronic device.
 手書き共有モードにおいて、ユーザ(参加者)によってストロークの手書き入力が開始されたならば(ブロックB56のYES)、処理部302は、このストロークに対応する複数の点データに基づいてストロークを描画する処理を実行し(ブロックB57)、さらに、複数の点データを時系列順に順次手書きコラボレーションサーバシステムに送信する処理を実行する(ブロックB58)。 If handwriting input of a stroke is started by the user (participant) in the handwriting sharing mode (YES in block B56), the processing unit 302 performs processing for drawing a stroke based on a plurality of point data corresponding to the stroke. (Block B57), and further, a process of sequentially transmitting a plurality of point data to the handwriting collaboration server system in chronological order (block B58).
 手書き共有モードにおいて、手書きコラボレーションサーバシステムから点データが受信されたならば(ブロックB59のYES)、処理部302は、受信された点データに基づいて描画処理を実行する(ブロックB60)。 In the handwriting sharing mode, when point data is received from the handwriting collaboration server system (YES in block B59), the processing unit 302 executes drawing processing based on the received point data (block B60).
 次に、図21~図23を参照して、ロールバック処理を説明する。 Next, the rollback process will be described with reference to FIGS.
 図21に示されているように、カンバス上には、共有されている現在の手書き情報の内容が表示される。ここでは、手書きデータ401、手書きデータ402、手書きデータ403、手書きデータ404がカンバス上に表示されている。これら各手書きデータは、手書き共有サービスにログインしているいずれかの電子機器において手書き入力された1以上のストロークから構成される。 21. As shown in FIG. 21, the contents of the current handwritten information being shared are displayed on the canvas. Here, handwritten data 401, handwritten data 402, handwritten data 403, and handwritten data 404 are displayed on the canvas. Each of these handwritten data is composed of one or more strokes input by handwriting in any electronic device logged into the handwriting sharing service.
 ユーザはカンバス上にメニューを表示することもできる。このメニューは、「タイムライン」ボタンを含む。「タイムライン」ボタンはロールバック処理を起動するためのソフトウェアボタンである。 The user can also display a menu on the canvas. This menu includes a “Timeline” button. The “timeline” button is a software button for starting rollback processing.
 「タイムライン」ボタンがユーザによってタップされると、図22に示すように、タイムライン501と、タイムライン501上を移動可能なスライダ502、再生ボタン504等がカンバス上に表示される。 When the “timeline” button is tapped by the user, as shown in FIG. 22, a timeline 501, a slider 502 that can be moved on the timeline 501, a playback button 504, and the like are displayed on the canvas.
 タイムライン501の左端は、手書き共有サービスが開始された時点に対応する。タイムライン501の右端は現時点に対応する。スライダ502のデフォルト位置はタイムライン501の右端である。 The left end of the timeline 501 corresponds to the time when the handwriting sharing service is started. The right end of the timeline 501 corresponds to the current time. The default position of the slider 502 is the right end of the timeline 501.
 図23に示されているように、スライダ502がタイムライン501の例えば中央位置にユーザによって移動されると、カンバス上の手書き情報の内容は、中央位置に対応する時時点の手書き情報に更新される。 As shown in FIG. 23, when the user moves the slider 502 to, for example, the center position of the timeline 501, the content of the handwritten information on the canvas is updated to the handwritten information at the time corresponding to the center position. The
 中央位置に対応する時時点よりも後に手書きされたデータはカンバスから消える。ここでは、手書きデータ403、手書きデータ404がカンバス上から消えている。 * Data handwritten after the time corresponding to the central position disappears from the canvas. Here, the handwritten data 403 and the handwritten data 404 disappear from the canvas.
 再生ボタン504がユーザによってタップされると、スライダ502によって指定される時点から現時点までの手書き情報がリプレイされる開始される。 When the playback button 504 is tapped by the user, handwritten information from the time point specified by the slider 502 to the present time is started to be replayed.
 なお、以上の説明では、手書き共有サービスにログインしている複数の電子機器の1つが手書きコラボレーションサーバシステムとして機能する場合を例示したが、手書きコラボレーションサーバシステムは、これら電子機器以外の1以上のサーバによって実現されても良い。 In the above description, the case where one of a plurality of electronic devices logged in to the handwriting sharing service functions as a handwriting collaboration server system is illustrated. However, the handwriting collaboration server system includes one or more servers other than these electronic devices. It may be realized by.
 以上説明したように、本実施形態においては、手書きデータは、ストロークデータ単位では無く、点データ単位で送信される。よって、どの電子機器においてストロークが手書き入力された場合でも、そのストロークが書かれる様子を他の全ての電子機器のカンバス上において再現することができる。よって、よりリアルタイムに手書き情報の共有が可能となる。 As described above, in the present embodiment, handwritten data is transmitted not in units of stroke data but in units of point data. Therefore, regardless of the electronic device in which the stroke is input by handwriting, the state in which the stroke is written can be reproduced on the canvas of all other electronic devices. Therefore, handwritten information can be shared in real time.
 さらに、電子機器10Dが手書き情報共有サービスに途中からログインした場合、手書きコラボレーションサーバシステム(電子機器10A)は、電子機器10Dのログイン前にデータベース12に格納された全ての点データ(複数の第1点データ)を、これら複数の第1点データにそれぞれ対応するタイムスタンプに基づくタイミングで、電子機器10Dに時系列順に順次送信する。 Further, when the electronic device 10D logs in to the handwritten information sharing service from the middle, the handwriting collaboration server system (electronic device 10A) stores all the point data (a plurality of first data items) stored in the database 12 before the electronic device 10D logs in. Point data) is sequentially transmitted to the electronic device 10D in time-series order at timings based on time stamps respectively corresponding to the plurality of first point data.
 これにより、既に書かれた多数のストロークが、それらストロークが書かれる様子がリプレイされるかのように電子機器10Dのカンバス上に表示される。よって、電子機器10Dのユーザ(途中参加者)は、どの様な経緯を辿って現在の手書き情報が構築されたかを、容易に把握することができる。 Thus, a large number of strokes that have already been written are displayed on the canvas of the electronic device 10D as if the strokes were written. Therefore, the user (intermediate participant) of the electronic device 10D can easily grasp how the current handwritten information has been constructed.
 また、会議は数日に跨がって実行される場合もある。この場合、翌日の会議の冒頭で、前日の会議終了時までの手書き情報を格納しているデータベース12を使用することによって、前日の会議において手書き情報が構築された過程をリプレイしてもよい。 Also, the conference may be held over several days. In this case, at the beginning of the next day's meeting, the database 12 storing handwritten information until the end of the previous day's meeting may be used to replay the process in which the handwritten information was constructed in the previous day's meeting.
 データベース12の内容は、会議終了時などに、各電子機器のローカルストレージに格納しても良い。 The contents of the database 12 may be stored in the local storage of each electronic device at the end of the conference.
 なお、本実施形態の手書きコラボレーションサーバシステム(電子機器10A)の機能は1以上のプロセッサによって実現できる。 In addition, the function of the handwriting collaboration server system (electronic device 10A) of this embodiment is realizable by one or more processors.
 また、本実施形態の手書きコラボレーションサーバシステム(電子機器10A)の機能はコンピュータプログラムによって実現することができるので、このコンピュータプログラムを格納したコンピュータ読み取り可能な記憶媒体を通じてこのコンピュータプログラムをコンピュータにインストールして実行するだけで、本実施形態と同様の効果を容易に実現することができる。 Moreover, since the function of the handwriting collaboration server system (electronic device 10A) of this embodiment can be realized by a computer program, the computer program is installed in the computer through a computer-readable storage medium storing the computer program. The effect similar to this embodiment can be easily realized only by executing.
 本発明のいくつかの実施形態を説明したが、これらの実施形態は、例として提示したものであり、発明の範囲を限定することは意図していない。これら新規な実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。これら実施形態やその変形は、発明の範囲や要旨に含まれるとともに、特許請求の範囲に記載された発明とその均等の範囲に含まれる。 Although several embodiments of the present invention have been described, these embodiments are presented as examples and are not intended to limit the scope of the invention. These novel embodiments can be implemented in various other forms, and various omissions, replacements, and changes can be made without departing from the scope of the invention. These embodiments and modifications thereof are included in the scope and gist of the invention, and are included in the invention described in the claims and the equivalents thereof.

Claims (15)

  1.  手書き情報を共有可能なサービスにログインしている第1の電子機器において手書き入力されるストロークに対応する複数の点データを前記第1の電子機器から受信する受信手段であって、前記複数の点データは、前記ストロークが手書き入力されている間に、前記第1の電子機器から時系列順に順次送信される、受信手段と、
     前記複数の点データを、前記複数の点データの入力時刻又は受信時刻をそれぞれ示すタイムスタンプと共に、記憶媒体に格納するための処理を実行する処理手段と、
     前記サービスにログインしている第2の電子機器に前記複数の点データを時系列順に順次送信する送信手段とを具備し、
     第3の電子機器が前記サービスに途中からログインした場合、前記処理手段は、前記第3の電子機器のログイン前に前記記憶媒体に格納された複数の第1点データを、前記複数の第1点データにそれぞれ対応するタイムスタンプに基づくタイミングで、前記第3の電子機器に時系列順に順次送信するための処理を実行する、システム。
    Receiving means for receiving, from the first electronic device, a plurality of point data corresponding to a stroke input by handwriting in a first electronic device logged in to a service capable of sharing handwritten information, the plurality of points The data is sequentially transmitted from the first electronic device in chronological order while the stroke is input by hand, and receiving means;
    Processing means for executing processing for storing the plurality of point data in a storage medium together with a time stamp indicating an input time or reception time of the plurality of point data;
    Transmission means for sequentially transmitting the plurality of point data to a second electronic device logged into the service in chronological order;
    When a third electronic device logs in to the service from the middle, the processing means stores a plurality of first point data stored in the storage medium before the third electronic device logs in the plurality of first items. A system for executing processing for sequentially transmitting to the third electronic device in time-series order at a timing based on a time stamp corresponding to each point data.
  2.  前記処理手段は、前記複数の第1点データを、前記複数の第1点データが受信されたレートよりも速い第1レートで、前記第3の電子機器に時系列順に順次送信する請求項1記載のシステム。 The processing means sequentially transmits the plurality of first point data to the third electronic device in a time-series order at a first rate faster than a rate at which the plurality of first point data is received. The system described.
  3.  前記複数の第1点データが受信されたレートに対する前記第1レートの倍率は、可変設定可能である請求項2記載のシステム。 The system according to claim 2, wherein a magnification of the first rate with respect to a rate at which the plurality of first point data is received can be variably set.
  4.  前記複数の第1点データが受信されたレートに対する前記第1レートの倍率は、前記サービスが開始される時点から前記第3の電子機器がログインする時点までの期間の長さに基づいて決定される請求項2記載のシステム。 The ratio of the first rate to the rate at which the plurality of first point data is received is determined based on the length of the period from the time when the service is started to the time when the third electronic device logs in. The system according to claim 2.
  5.  前記第3の電子機器への前記複数の第1点データの送信が完了するまで、前記第3の電子機器におけるストロークの手書き入力が禁止される請求項1記載のシステム。 The system according to claim 1, wherein handwriting input of a stroke in the third electronic device is prohibited until transmission of the plurality of first point data to the third electronic device is completed.
  6.  手書き情報を共有可能なサービスにログインしている第1の電子機器において手書き入力されるストロークに対応する複数の点データを前記第1の電子機器から受信することであって、前記複数の点データは、前記ストロークが手書き入力されている間に、前記第1の電子機器から時系列順に順次送信される、受信することと、
     前記複数の点データを、前記複数の点データの入力時刻又は受信時刻をそれぞれ示すタイムスタンプと共に、記憶媒体に格納することと、
     前記サービスにログインしている第2の電子機器に前記複数の点データを時系列順に順次送信することと、
     第3の電子機器が前記サービスに途中からログインした場合、前記第3の電子機器のログイン前に前記記憶媒体に格納された複数の第1点データを、前記複数の第1点データにそれぞれ対応するタイムスタンプに基づくタイミングで、前記第3の電子機器に時系列順に順次送信することとを具備する方法。
    Receiving a plurality of point data corresponding to strokes input by handwriting in a first electronic device logged in to a service capable of sharing handwritten information from the first electronic device, wherein the plurality of point data Receiving sequentially transmitted from the first electronic device in chronological order while the stroke is input by handwriting;
    Storing the plurality of point data in a storage medium together with a time stamp indicating an input time or a reception time of the plurality of point data;
    Sequentially transmitting the plurality of point data to a second electronic device logged into the service in chronological order;
    When a third electronic device logs in to the service from the middle, a plurality of first point data stored in the storage medium before the third electronic device logs in corresponds to the plurality of first point data, respectively. And sequentially transmitting to the third electronic device in chronological order at a timing based on the time stamp.
  7.  前記複数の第1点データを送信することは、前記複数の第1点データを、前記複数の第1点データが受信されたレートよりも速い第1レートで、前記第3の電子機器に時系列順に順次送信することを含む請求項6記載の方法。 Transmitting the plurality of first point data may include transmitting the plurality of first point data to the third electronic device at a first rate that is faster than a rate at which the plurality of first point data is received. 7. The method of claim 6, comprising transmitting sequentially in sequence order.
  8.  前記複数の第1点データが受信されたレートに対する前記第1レートの倍率は、可変設定可能である請求項7記載の方法。 The method according to claim 7, wherein a magnification of the first rate with respect to a rate at which the plurality of first point data is received can be variably set.
  9.  前記複数の第1点データが受信されたレートに対する前記第1レートの倍率は、前記サービスが開始される時点から前記第3の電子機器がログインする時点までの期間の長さに基づいて決定される請求項7記載の方法。 The ratio of the first rate to the rate at which the plurality of first point data is received is determined based on the length of the period from the time when the service is started to the time when the third electronic device logs in. The method according to claim 7.
  10.  前記第3の電子機器への前記複数の第1点データの送信が完了するまで、前記第3の電子機器におけるストロークの手書き入力が禁止される請求項6記載の方法。 The method according to claim 6, wherein handwriting input of strokes in the third electronic device is prohibited until transmission of the plurality of first point data to the third electronic device is completed.
  11.  コンピュータによって実行されるプログラムであって、
     手書き情報を共有可能なサービスにログインしている第1の電子機器において手書き入力されるストロークに対応する複数の点データを前記第1の電子機器から受信することであって、前記複数の点データは、前記ストロークが手書き入力されている間に、前記第1の電子機器から時系列順に順次送信される、受信することと、
     前記複数の点データを、前記複数の点データの入力時刻又は受信時刻をそれぞれ示すタイムスタンプと共に、記憶媒体に格納することと、
     前記サービスにログインしている第2の電子機器に前記複数の点データを時系列順に順次送信することと、
     第3の電子機器が前記サービスに途中からログインした場合、前記第3の電子機器のログイン前に前記記憶媒体に格納された複数の第1点データを、前記複数の第1点データにそれぞれ対応するタイムスタンプに基づくタイミングで、前記第3の電子機器に時系列順に順次送信すること
    の機能を実行するように前記コンピュータを制御するプログラム。
    A program executed by a computer,
    Receiving a plurality of point data corresponding to strokes input by handwriting in a first electronic device logged in to a service capable of sharing handwritten information from the first electronic device, wherein the plurality of point data Receiving sequentially transmitted from the first electronic device in chronological order while the stroke is input by handwriting;
    Storing the plurality of point data in a storage medium together with a time stamp indicating an input time or a reception time of the plurality of point data;
    Sequentially transmitting the plurality of point data to a second electronic device logged into the service in chronological order;
    When a third electronic device logs in to the service from the middle, a plurality of first point data stored in the storage medium before the third electronic device logs in corresponds to the plurality of first point data, respectively. A program for controlling the computer to execute a function of sequentially transmitting to the third electronic device in a time-series order at a timing based on a time stamp.
  12.  前記複数の第1点データを送信することは、前記複数の第1点データを、前記複数の第1点データが受信されたレートよりも速い第1レートで、前記第3の電子機器に時系列順に順次送信することを含む請求項11記載のプログラム。 Transmitting the plurality of first point data may include transmitting the plurality of first point data to the third electronic device at a first rate that is faster than a rate at which the plurality of first point data is received. The program according to claim 11, comprising transmitting sequentially in a sequence order.
  13.  前記複数の第1点データが受信されたレートに対する前記第1レートの倍率は、可変設定可能である請求項12記載のプログラム。 13. The program according to claim 12, wherein a magnification of the first rate with respect to a rate at which the plurality of first point data is received can be variably set.
  14.  前記複数の第1点データが受信されたレートに対する前記第1レートの倍率は、前記サービスが開始される時点から前記第3の電子機器がログインする時点までの期間の長さに基づいて決定される請求項12記載のプログラム。 The ratio of the first rate to the rate at which the plurality of first point data is received is determined based on the length of the period from the time when the service is started to the time when the third electronic device logs in. The program according to claim 12.
  15.  前記第3の電子機器への前記複数の第1点データの送信が完了するまで、前記第3の電子機器におけるストロークの手書き入力が禁止される請求項11記載のプログラム。 12. The program according to claim 11, wherein handwriting input of strokes in the third electronic device is prohibited until transmission of the plurality of first point data to the third electronic device is completed.
PCT/JP2014/071303 2014-08-12 2014-08-12 System and method for sharing handwriting information WO2016024329A1 (en)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2016542462A JP6235723B2 (en) 2014-08-12 2014-08-12 System and method for sharing handwritten information
PCT/JP2014/071303 WO2016024329A1 (en) 2014-08-12 2014-08-12 System and method for sharing handwriting information

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2014/071303 WO2016024329A1 (en) 2014-08-12 2014-08-12 System and method for sharing handwriting information

Publications (1)

Publication Number Publication Date
WO2016024329A1 true WO2016024329A1 (en) 2016-02-18

Family

ID=55303973

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2014/071303 WO2016024329A1 (en) 2014-08-12 2014-08-12 System and method for sharing handwriting information

Country Status (2)

Country Link
JP (1) JP6235723B2 (en)
WO (1) WO2016024329A1 (en)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2017033576A (en) * 2016-09-07 2017-02-09 株式会社ワコム Handwritten data drawing method, handwritten data drawing device, and program
JP2017151502A (en) * 2016-02-22 2017-08-31 株式会社東芝 Electronic instrument and method
JP2018056657A (en) * 2016-09-26 2018-04-05 ブラザー工業株式会社 Management program and conference management method
US10769349B2 (en) 2015-08-04 2020-09-08 Wacom Co., Ltd. Handwritten data capture method and handwritten data capture device
JP2020154437A (en) * 2019-03-18 2020-09-24 株式会社リコー Communication management system, communication system, communication management device, communication management method, and program
JP2021103533A (en) * 2019-11-14 2021-07-15 株式会社ワコム Method, computer, and program

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006163760A (en) * 2004-12-07 2006-06-22 Canon Inc Drawing system
JP2012058799A (en) * 2010-09-06 2012-03-22 Ricoh Co Ltd Image display system, image display method, and program
JP2012227745A (en) * 2011-04-20 2012-11-15 Konica Minolta Business Technologies Inc Conference support device, conference support device control method, and conference support device control program
JP2014110061A (en) * 2014-01-09 2014-06-12 Toshiba Corp System and data providing method and electronic equipment

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006091938A (en) * 2004-09-16 2006-04-06 Ricoh Co Ltd Electronic conference system
JP6015086B2 (en) * 2012-04-17 2016-10-26 株式会社リコー Information sharing apparatus, information sharing system, drawing processing method, and program

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006163760A (en) * 2004-12-07 2006-06-22 Canon Inc Drawing system
JP2012058799A (en) * 2010-09-06 2012-03-22 Ricoh Co Ltd Image display system, image display method, and program
JP2012227745A (en) * 2011-04-20 2012-11-15 Konica Minolta Business Technologies Inc Conference support device, conference support device control method, and conference support device control program
JP2014110061A (en) * 2014-01-09 2014-06-12 Toshiba Corp System and data providing method and electronic equipment

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10769349B2 (en) 2015-08-04 2020-09-08 Wacom Co., Ltd. Handwritten data capture method and handwritten data capture device
US11175771B2 (en) 2015-08-04 2021-11-16 Wacom Co., Ltd. Handwritten data capture method and handwritten data capture device
US11586320B2 (en) 2015-08-04 2023-02-21 Wacom Co., Ltd. Handwritten data capture method and handwritten data capture device
JP2017151502A (en) * 2016-02-22 2017-08-31 株式会社東芝 Electronic instrument and method
JP2017033576A (en) * 2016-09-07 2017-02-09 株式会社ワコム Handwritten data drawing method, handwritten data drawing device, and program
JP2018056657A (en) * 2016-09-26 2018-04-05 ブラザー工業株式会社 Management program and conference management method
JP2020154437A (en) * 2019-03-18 2020-09-24 株式会社リコー Communication management system, communication system, communication management device, communication management method, and program
JP7172775B2 (en) 2019-03-18 2022-11-16 株式会社リコー Communication management system, communication system, communication management device, communication management method, and program
JP7452602B2 (en) 2019-03-18 2024-03-19 株式会社リコー Terminal device, communication system, communication method, and program
JP2021103533A (en) * 2019-11-14 2021-07-15 株式会社ワコム Method, computer, and program
JP7036966B2 (en) 2019-11-14 2022-03-15 株式会社ワコム Methods, computers, and programs

Also Published As

Publication number Publication date
JPWO2016024329A1 (en) 2017-05-25
JP6235723B2 (en) 2017-11-22

Similar Documents

Publication Publication Date Title
JP6235723B2 (en) System and method for sharing handwritten information
US10311383B2 (en) Device, method, and graphical user interface for meeting space management and interaction
US20200226501A1 (en) Device, method, and graphical user interface for meeting space management and interaction
US20200296147A1 (en) Systems and methods for real-time collaboration
EP3014408B1 (en) Showing interactions as they occur on a whiteboard
US9372543B2 (en) Presentation interface in a virtual collaboration session
US9398059B2 (en) Managing information and content sharing in a virtual collaboration session
US9608950B2 (en) Systems and methods for sharing videos and images in a texting environment
CA2962706C (en) Methods and systems for obscuring text in a conversation
US20160191576A1 (en) Method for conducting a collaborative event and system employing same
US20150177967A9 (en) Methodology for Creating an Easy-To-Use Conference Room System Controller
US9584682B2 (en) System and method for sharing data across multiple electronic devices
US20150154291A1 (en) Managing Behavior in a Virtual Collaboration Session
US20150163067A1 (en) Control of computing device use during conferences
CN113196239A (en) Intelligent management of content related to objects displayed within a communication session
ES2790827T3 (en) Recording and playback in a conference
JP6354421B2 (en) Information processing apparatus, information processing system, program, and recording medium
JP6465277B2 (en) Electronic device, processing method and program
CN114285681A (en) Conference initiating method, conference responding method, device and storage medium
JP6293903B2 (en) Electronic device and method for displaying information
JP2013232123A (en) Electronic conference system, terminal, and file providing server
US20170201721A1 (en) Artifact projection
JP2015045945A (en) Information processing device, program, and information processing system
CN114298353A (en) Conference reservation method and device
CA2815724C (en) System and method for sharing data across multiple electronic devices

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 14899564

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2016542462

Country of ref document: JP

Kind code of ref document: A

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 14899564

Country of ref document: EP

Kind code of ref document: A1