WO2013058047A1 - 入力装置、入力装置の制御方法、被制御装置、電子黒板システム、制御プログラム、および記録媒体 - Google Patents

入力装置、入力装置の制御方法、被制御装置、電子黒板システム、制御プログラム、および記録媒体 Download PDF

Info

Publication number
WO2013058047A1
WO2013058047A1 PCT/JP2012/073843 JP2012073843W WO2013058047A1 WO 2013058047 A1 WO2013058047 A1 WO 2013058047A1 JP 2012073843 W JP2012073843 W JP 2012073843W WO 2013058047 A1 WO2013058047 A1 WO 2013058047A1
Authority
WO
WIPO (PCT)
Prior art keywords
input
input device
unit
pattern
locus
Prior art date
Application number
PCT/JP2012/073843
Other languages
English (en)
French (fr)
Inventor
充 鮫島
文彦 高木
Original Assignee
シャープ株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by シャープ株式会社 filed Critical シャープ株式会社
Priority to CN201280050624.3A priority Critical patent/CN103890698B/zh
Priority to US14/351,780 priority patent/US20140292702A1/en
Publication of WO2013058047A1 publication Critical patent/WO2013058047A1/ja

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text

Definitions

  • the present invention relates to an input device that sends input information to an external controlled device.
  • FIG. 14 is a schematic diagram showing a usage example of a general electronic blackboard.
  • the electronic blackboard is used when a presenter displays a document and makes a presentation.
  • the presenter can write characters or the like on the displayed material by performing a handwriting operation on the electronic blackboard during the presentation.
  • the conventional electronic blackboard has an advantage that the user can obtain an intuitive handwriting feeling by directly displaying the locus handwritten on the input area with the pointing tool in the display area.
  • the user may feel inconvenience such as writing a fine character or the like with a writing instrument that is too thick.
  • it takes more time as the physical input area is larger as in an electronic blackboard.
  • Patent Document 1 describes a handwriting input device that can reduce the handwritten information that has already been displayed and secure an area in which new handwritten information can be input.
  • Patent Document 2 describes a handwriting input device capable of handwriting information in a frame expanded from the handwritten display range, instead of directly handwriting information in the handwritten display range on the display screen.
  • Patent Literature 3 describes a handwritten character input area setting device that can change the size of the input area to a size desired by the user when inputting handwritten characters.
  • Japanese Patent Publication “JP 2009-116476 A Japanese Patent Publication “Japanese Patent Laid-Open No. 9-124164 (published May 6, 1994)” Japanese Patent Publication “Japanese Patent Laid-Open No. 5-143770 (published on June 11, 1993)”
  • the present invention has been made in view of the above-described problems, and its purpose is to make it convenient for the user by instructing an external controlled device to send a command by a simple handwriting operation. It is to provide an input device, an input device control method, a controlled device, an electronic blackboard system, a control program, and a recording medium that can improve the performance.
  • an input device includes an input surface that can acquire a trajectory of a handwriting operation by a user, and can input information based on the trajectory.
  • An input device that sends information to an external controlled device refers to a storage device in which a command and a predetermined pattern are associated with each other and stored in advance, and whether or not the locus and the pattern match
  • the collation unit for judging determines that the trajectory and the pattern do not match with each other, the trajectory is sent out, and when it is judged that they match, the command associated with the matched pattern is sent.
  • a sending means for sending is provided.
  • a control method for an input device includes an input surface that can acquire a locus of a handwriting operation by a user, and can input information based on the locus.
  • a method of controlling an input device for sending the input information to an external controlled device, wherein a command and a predetermined pattern are associated with each other and a storage device stored in advance is referred to.
  • a sending step for sending the command associated with the pattern.
  • the input device and the control method for the device of the present invention even when the user is inputting characters by handwriting operation, the user can issue a command that causes the controlled device to perform a predetermined process. Input with simple handwriting.
  • the input device and the control method for the device according to one embodiment of the present invention have an effect of improving user convenience.
  • FIG. 1 It is a block diagram which shows the principal part structure of the electronic blackboard which incorporated the input device and display which concern on one embodiment of this invention.
  • reciprocation operation which is an example of a gesture
  • trajectory of the reciprocation operation which connects a start position or an end position, and a return position with a curve.
  • flowchart which shows an example of the process which the said input device and the said display apparatus perform.
  • schematic diagram showing the usage example of the conventional general electronic blackboard.
  • the same member number is attached to the information having different member names, and a, b, or c is further attached to the member. May show. That is, the handwriting operation 3 includes a character input operation 3a and a gesture 3b.
  • the input information 4 includes handwritten characters 4a, commands 4b, and changed handwritten characters 4c.
  • the feature amount 5 includes a distance 5a, an angle (angle formed) 5b, and a position (start position or end position) 5c.
  • the position at which the handwriting operation 3 is started is referred to as a start position 8a
  • the position at which the handwriting operation 3 is ended is referred to as an end position 8b
  • a position at which it is folded back is referred to as a folding position 8c.
  • the lines forming the angle 5b are referred to as a horizontal line (a predetermined reference line set on the input surface) 9a and an oblique line (a straight line connecting the start position and the folding position) 9b.
  • FIG. 1 is a block diagram showing a main configuration of the electronic blackboard 100.
  • the input device 11 is a device that includes an input surface that accepts input by a user's handwriting operation 3 and that can send input information 4 input from the input surface to the display device 12.
  • a handwriting operation 3 by bringing a pointing tool such as a finger or a stylus (hereinafter simply referred to as “pointing tool”) into contact with the input surface
  • the input device 11 performs the input surface of the touch position of the pointing tool. It is assumed that the above two-dimensional coordinate information 6 can be acquired.
  • the display device (controlled device) 12 receives the input information 4 (handwritten characters 4a, commands 4b) and the feature amount 5 sent from the input device 11, performs predetermined processing, and displays the handwritten characters 4a on the display unit 70. Or it is an apparatus which displays the change handwritten character 4c.
  • the predetermined process refers to a process of changing the handwritten character 4a according to the feature amount 5 in accordance with the command 4b received from the input device 11. Details of the command 4b will be described later.
  • An electronic blackboard (electronic blackboard system) 100 is an input / output system including the input device 11 and the display device 12 described above.
  • the user can make a presentation by displaying materials on the display device 12. Further, the user can add characters, figures, and the like to the displayed material by giving the input information 4 to the input device 11 by the handwriting operation 3.
  • FIG. 2 is a schematic diagram illustrating an example of the handwriting operation 3 performed on the input surface of the input device 11 and an example of the handwritten character 4a that the display device 12 displays on the display unit 70.
  • FIG. 3 and an example of the locus 1 drawn by the operation, (b) shows an example of the handwritten character 4a.
  • a character expressed as a set of trajectories 1 is referred to as a handwritten character 4a.
  • it is limited to characters, but the set of trajectories 1 input by the handwriting operation 3 may be any figure.
  • the start position 8 a of the handwriting operation 3 (The locus 1 of the pointing tool from the position where the pointing tool is brought into contact with the input surface) to the end position 8b (the position where the pointing tool is separated from the input surface) is input as input information 4 to the input device 11.
  • the start position 8a is represented by a white circle and the end position 8b is represented by a black circle. This is for clearly indicating the start position 8a and the end position 8b, and these are actually displayed as circles. I don't mean. The same applies to the folding position 8c described later.
  • the user can input the handwritten character 4 a to the input device 11 by repeating the handwriting operation 3.
  • an operation for inputting the handwritten character 4 a is particularly referred to as a “character input operation 3 a”.
  • the input device 11 in this Embodiment sends the handwritten character 4a to the display apparatus 12.
  • FIG. Thereby, the handwritten character 4a is displayed on the display part 70 with which the display apparatus 12 is provided.
  • FIGS. 3, 6, and 8 are schematic diagrams illustrating examples of the gesture 3 b performed on the input surface of the input device 11.
  • FIG. 4 is a schematic diagram showing an example of handwritten characters 4a input by the user through the character input operation 3a. Further, FIGS. 5, 7, and 9 show examples in which the handwritten character 4a shown in FIG. 4 is changed to the changed handwritten character 4c in accordance with the gesture 3b shown in FIGS. 3, 6, and 8, respectively. It is the shown schematic diagram.
  • the input device 11 recognizes the gesture 3b input by the user.
  • the gesture 3b is, for example, a reciprocating operation as shown in the figure, that is, the start position 8a and the end position 8b are substantially the same, and from the start position 8a to the return position 8c different from the start position 8a.
  • the input device 11 collates the trajectory 1 with the predetermined pattern 2 and determines whether or not they match each other.
  • the pattern 2 to be collated may be plural. In that case, the input device 11 tries collation for all patterns in order.
  • pattern 2 is a trace pattern drawn when the user performs a reciprocating operation.
  • the pattern 2 is defined so as to allow an error to the extent that the character input operation 3a and the gesture 3b are not confused, the trajectory 1 and the pattern 2 may not be exactly the same.
  • the input device 11 When it is determined that the locus 1 and the pattern 2 do not match, the input device 11 sends the locus 1 as the handwritten character 4a to the display device 12 without performing other processes. On the other hand, if it is determined that they match, the input device 11 extracts the feature quantity 5 of the trajectory 1. Then, the input device 11 sends the command 4b and the feature amount 5 associated with the matched pattern 2 to the display device 12.
  • the feature amount 5 is, for example, the start position 8a, the end position 8b, or the turn-back position 8c of the gesture 3b that is a reciprocating operation, or the start position 8a. Or the distance 5a from the end position 8b to the turn-back position 8c.
  • the angle 5b is formed by the horizontal line 9a and the diagonal line 9b.
  • the input device 11 receives the character input operation 3 a from the user after extracting the feature amount 5. Then, the input device 11 changes the handwritten character 4 a input by the character input operation according to the feature amount 5 and causes the display device 12 to display the changed handwritten character 4 c.
  • the input device 11 displays the handwritten character 4 a at a position corresponding to the start position 8 a or the end position 8 b of the gesture 3 b on the display unit 70 of the display device 12. To do.
  • the input device 11 displays the handwritten character 4a with the character height and width enlarged or reduced according to the distance 5a of the gesture 3b.
  • the input device 11 rotates and displays the handwritten character 4 a according to the angle 5 b of the gesture 3 b.
  • the input device 11 sends the locus 1 as the handwritten character 4a to the display device 12, and when it corresponds to the gesture 3b, the input device 11 and the feature amount 5 is sent to the display device 12.
  • the display device 12 displays the handwritten character on the display unit 70, and when the command 4b and the feature amount 5 are sent from the input device 11, the display device 12 continues.
  • the display unit 70 displays the changed handwritten character 4 c obtained by changing the transmitted handwritten character 4 a according to the command 4 b and the feature amount 5.
  • the user can give the command 4b to the display device 12 by giving the same locus 1 as the pattern 2 by the gesture 3b.
  • the input device 11 can cause the display device 12 to perform the change process.
  • the gesture 3b for giving the command only needs to perform a reciprocal operation on the input surface, for example. That is, unlike the above-described prior art, a complicated operation requiring several steps is not required for changing the handwritten character 4a. Thereby, since the user can display the handwritten character 4a in a desired form on the input device 11 only by performing a simple and intuitive operation, the convenience of the user can be improved.
  • UI user interface
  • the electronic blackboard 100 includes an input device 11, a display device 12, and a storage device 30.
  • the input device 11 includes an input unit (input surface capable of inputting a trajectory) 40, an input control unit 50, a collation unit (collation unit) 15, an extraction unit (extraction unit) 17, and a transmission unit (transmission unit) 16.
  • the display device 12 includes a change application unit (execution unit) 18, a display control unit (output unit) 60, and a display unit (output unit) 70.
  • the extraction unit 17 includes a distance extraction unit 171, an angle extraction unit 172, and a position extraction unit 173.
  • the change application unit 18 includes an expansion / contraction unit 181, a rotation unit 182, and a position adjustment unit 183.
  • the electronic blackboard 100 may include the omitted configuration.
  • the input device 11 input unit 40, input control unit 50, collation unit 15, extraction unit 17, sending unit 16
  • display device 12 change application unit 18, display control unit 60, display unit 70
  • storage device 30 storage device 30
  • the input device 11 is a device that can input information from an input surface (input unit 40) through which a locus can be input by a user's handwriting operation and sends the input information to the display device 12.
  • the input unit 40 receives a handwriting operation 3 by the user.
  • a touch panel is mainly assumed.
  • the type of hardware is not limited as long as it has an input surface capable of inputting information to the display device 12 by the user's handwriting operation 3 (that is, the input surface is included in the input unit 40).
  • the input unit 40 outputs the two-dimensional coordinate information 6 on the input surface of the pointing tool in contact with the input surface to the input control unit 50.
  • the input control unit 50 detects the locus 1 of the handwriting operation 3 from the user on the input surface of the input unit 40.
  • the coordinate information 6 is acquired from the input unit 40 at predetermined time intervals, and the series of coordinate data is output as the locus 1 to the collation unit 15.
  • the collation part 15 determines whether the locus
  • a command 4b for the display device 12 and a predetermined pattern 2 are stored in advance in association with each other.
  • the collation unit 15 collates whether or not the locus 1 by the handwriting operation 3 input from the input control unit 50 matches the pattern 2 read from the storage device 30.
  • the collation unit 15 When it is determined that the locus 1 and the pattern 2 do not match (the locus is the handwritten character 4a by the character input operation 3a), the collation unit 15 outputs the handwritten character 4a to the sending unit 16.
  • the collation unit 15 uses the command 4b and the locus 1 associated with the pattern 2 as follows. , Output to the sending unit 16 and the extracting unit 17, respectively.
  • the collation unit 15 outputs the locus 1 continuously input from the input control unit 50 to the transmission unit 16 as the handwritten character 4a.
  • the collation part 15 detects whether the input operation (character input operation 3a) of the said handwritten character was complete
  • this detection method for example, an elapsed time after the input operation is performed is measured, and when the elapsed time exceeds a predetermined time limit, the collation unit 15 detects the end and sends the handwritten character 4a. 16 is output.
  • collation part 15 may detect the end concerned, when a predetermined gesture by a user is detected.
  • the trajectory 1 that is subsequently input from the input control unit 50 to the verification unit 15 may match the pattern 2. Or it may be a case where it matches with other patterns (for example, a pattern like FIG.10 (b) mentioned later).
  • the extraction unit 17 extracts the feature quantity 5 of the locus 1 input from the collation unit 15. Specifically, the distance extraction unit 171 extracts the distance 5a of the locus 1, the angle extraction unit 172 extracts the angle 5b, and the position extraction unit 173 extracts the position 5c. The extraction unit 17 outputs the feature quantity 5 of the trajectory 1 extracted in each configuration to the sending unit 16.
  • the sending unit 16 displays the input information 4 (handwritten characters 4a, commands 4b) input from the collation unit 15 and the feature amount 5 (distance 5a, angle 5b, position 5c) input from the extraction unit 17 on the display device 12. To the change application unit 18.
  • Display device 12 The display device 12 receives the input information 4 (handwritten characters 4a, commands 4b) and the feature amount 5 (distance 5a, angle 5b, position 5c) sent from the input device 11, performs predetermined processing, and performs display processing.
  • 70 is a display device.
  • the change applying unit 18 changes the handwritten character 4a input from the sending unit 16 according to the feature value. Specifically, the enlargement / reduction unit 181 enlarges / reduces the handwritten character 4a according to the distance 5a. The rotating unit 182 rotates the handwritten character 4a according to the angle 5b. And the position adjustment part 183 determines the display position in the display part 70 of the handwritten character 4a according to the position 5c.
  • the position adjustment unit 183 displays the changed handwritten character 4c at a position where any one point on the leading side of the circumscribed rectangular character string where the entire changed handwritten character 4c fits coincides with the start position 8a.
  • the enlargement / reduction unit 181 performs enlargement / reduction while maintaining the aspect ratio of the circumscribed rectangle of the handwritten character 4a.
  • the change application unit 18 changes the handwritten character 4a when the start position 8a or the end position 8b is on the character string head side of the circumscribed rectangle, and the character whose turn-back position 8c is opposite to the character string head side. It can be said that the handwritten character 4a is changed so as to be on the end side of the column. However, it is not always necessary to align both ends of the rectangle at the positions defined by the gesture 3b as described above.
  • the enlargement / reduction unit 181 may change the handwritten character 4a as a real number multiple of the length 5a (that is, the enlargement / reduction ratio of the length 5a and the handwritten character 4a is proportional).
  • the change application unit 18 outputs the handwritten character 4a changed in each configuration to the display control unit 60 as the changed handwritten character 4c. However, when only the handwritten character 4a is input from the sending unit 16 and the command 4b and the feature amount 5 are not input, the change applying unit 18 outputs the change to the display control unit 60 without changing the handwritten character 4a.
  • the display control unit 60 converts information (for example, handwritten characters 4 a) output from the input device 11 into display data 7 according to a format that can be displayed on the display unit 70.
  • the display data 7 may be, for example, an image in a bitmap format, an image according to another format, or another data format suitable for display.
  • the display control unit 60 only needs to be capable of converting the format of the information into the display data 7, and may be a general display adapter, for example.
  • the display unit 70 is a device that displays video and the like.
  • a liquid crystal display LCD
  • the type of hardware is not limited as long as the device has a display function (particularly, a flat panel display).
  • an apparatus including a display element such as a plasma display (PDP) or EL (Electroluminescence) display and a driver circuit that drives the display element based on display data 7 received from the display control unit 60
  • the display unit 70a can be configured.
  • FIG. 1 shows the input unit 40 and the display unit 70 separately in order to clearly show the functions of each configuration.
  • the input unit 40 is a touch panel and the display unit 70 is a liquid crystal display
  • the input unit 40 includes a data input surface made of a transparent transparent member such as glass formed in a rectangular plate shape, and is integrally formed so as to cover the data display surface of the display unit 70. Good.
  • the contact position of the pointing tool with respect to the input surface of the input unit 40 and the position of the figure displayed on the display surface by the display unit 70 in accordance with the contact match the user can obtain a natural handwriting feeling. it can.
  • the storage device 30 is a nonvolatile storage device that stores the pattern 2.
  • the storage device 30 can be constituted by, for example, a hard disk, a semiconductor memory, a DVD (Digital Versatile Disk), or the like.
  • the storage device 30 is shown in FIG. 1 as a device built in the electronic blackboard 100 separately from the input device 11 and the display device 12, but the input device 11 or the display device 12 includes A built-in internal storage device may be used, or an external storage device that is communicably connected to the outside of the electronic blackboard 100 may be used.
  • FIG. 10 is a schematic diagram illustrating the pattern 2 recognized by the input device 11 as the gesture 3b.
  • FIG. 10A is an example of a gesture that designates the display form (position and size) of the handwritten character 4a with a diagonal line of the display area.
  • B shows an example of a gesture associated with the command 4b for causing the display device 12 to execute a process for ending an application, and
  • c shows an example of a gesture that repeats a reciprocating operation twice.
  • the user can also specify the display form of the handwritten character 4a by the diagonal line of the rectangular display area.
  • the input device 11 determines the size and display position of the handwritten character 4a so that the handwritten character 4a fits in the rectangular display area stretched by the diagonal line, and displays the changed handwritten character 4c.
  • the input device 11 may recognize the gesture 3b illustrated in FIG. 10B as an input for sending the command 4b.
  • the command 4b sent from the input device 11 to the display device 12 may be, for example, an instruction to end an application for character input, or an instruction to turn off the electronic blackboard 100. There may be.
  • the gesture 3b defined as the pattern 2 and the command 4b stored in the storage device 30 in association with the pattern 2 can be arbitrarily defined. Therefore, the electronic blackboard 100 can give an intuitive operation by the handwriting operation 3 to various devices by devising a combination of the gesture 3b and the command 4b.
  • the gesture 3b is preferably defined so that the input device 11 can clearly distinguish the character input operation 3a and the gesture 3b. This is because if the trajectory corresponding to the gesture 3b is included in the character input operation 3a, the input device 11 confuses both and executes the command 4b that is not intended by the user.
  • the above-described reciprocating operation (the operation in which the start position 8a and the end position 8b are substantially the same, and the reciprocating position 8c differs from the start position 8a to the end position 8b in a substantially straight line. ) Is an operation that is not performed by normal input of characters, figures, and the like, and is suitable as the gesture 3b.
  • the reciprocating operation can input the feature amount 5 such as the start position 8a, the end position 8b, the turn-back position 8c, the distance 5a, and the angle 5b by one handwriting operation
  • the command 4b for changing the handwritten character is used. It is optimal as the gesture 3b to be associated.
  • the gesture 3b that repeats the reciprocating operation twice as illustrated in FIG. 10C is less likely to be confused with the character input operation 3a, and even an operation that is complicated as the input becomes complicated.
  • it is suitable for an instruction for ending an application for inputting characters or turning off the electronic blackboard 100.
  • the electronic blackboard 100 including the input device 11 and the display device 12 has been described.
  • the device combined with the input device 11 may not be the display device 12, and the system configured by this is the electronic blackboard 100. Not necessary.
  • a personal computer or a mobile phone capable of more general processing may be combined with the input device 11 to receive the command 4b.
  • an appropriate gesture 3b may be associated with a command 4b for instructing mail transmission, activation of an Internet browser, or the like.
  • the user can execute the above-described processing by a simple and intuitive operation by the handwriting operation 3 where a complicated operation is conventionally required via a mouse, a keyboard, or the like.
  • FIG. 11 is a schematic diagram showing the relationship between the start position 8a, the end position 8b, and the return position 8c and the display position of the handwritten character 4a.
  • FIG. 11A shows the return position 8c, the start position 8a, and the end position 8b.
  • (B) shows the case where the folding position 8c is located to the left of the start position 8a and the end position 8b.
  • the change application unit 18 displays the changed handwritten character 4c at a position where any one point on the leading side of the circumscribed rectangle character string where the entire changed handwritten character 4c fits coincides with the start position 8a. Let Thereby, depending on the positional relationship between the start position 8a or the end position 8b and the turn-back position 8c, the handwritten character 4a is displayed upside down as illustrated in FIG. 11B.
  • FIG. 12 shows an example of the reciprocation operation 1 connecting the start position 8a and the end position 8b and the turn-back position 8c with a curve in the reciprocation described above as an example of the gesture 3b, and an example of the changed handwritten character 4c displayed thereby. It is a schematic diagram which shows.
  • FIG. 13 is a flowchart illustrating an example of processing executed by the input device 11 and the display device 12.
  • the input unit 40 receives a handwriting operation 3 by the user and outputs coordinate information 6 to the input control unit 50 (step 1a: hereinafter abbreviated as S1a).
  • the input control part 50 acquires the locus
  • the collation unit 15 determines whether or not the trajectory 1 input from the input control unit 50 matches the predetermined pattern 2 stored in the storage device 30 (S3, collation step). When it is determined that they do not match (NO in S3), the collation unit 15 outputs the locus 1 as the handwritten character 4a to the transmission unit 16.
  • the sending unit 16 sends the handwritten character 4a input from the matching unit 15 to the display device 12 (S4a, sending step).
  • the collation unit 15 when it is determined that the locus 1 and the pattern 2 match (YES in S3), the collation unit 15 outputs the command 4b associated with the pattern 2 to the transmission unit 16. At the same time, the collation unit 15 outputs the locus 1 to the extraction unit 17.
  • the extraction unit 17 extracts the feature quantity 5 from the trajectory 1 input from the collation unit 15, and outputs the feature quantity 5 to the sending unit 16 (S5).
  • the sending unit 16 sends the command 4b input from the collating unit 15 and the feature quantity 5 input from the extracting unit 17 to the display device 12 (S6, sending step).
  • the change application unit 18 of the display device 12 receives the input of the handwritten character 4a from the input device 11 (the route that is NO in S3), the change handing unit 18 continues to the display control unit 60 without changing the handwritten character. Output.
  • the display control unit 60 displays the handwritten character on the display unit 70 by converting the handwritten character 4a input from the change applying unit 18 into the display data 7 (S9).
  • the command 4b and the feature quantity 5 are received from the input device 11 (the route that becomes YES in S3), the input device 11 waits for further input of the handwritten character 4a.
  • the locus 1 is input to the collation unit 15 through the same processing as S1 and S2 (S1b, S2b).
  • collation unit 15 outputs locus 1 as handwritten character 4a to sending unit 16, and sending unit 16 sends handwritten character 4a to display device 12 (S4b).
  • the change application unit 18 adds a change corresponding to the feature amount 5 to the handwritten character 4a input from the input device 11 in accordance with the command 4b (S8).
  • the change applying unit 18 outputs the changed handwritten character 4c after applying the change to the display control unit 60.
  • the display control unit 60 displays the handwritten character on the display unit 70 by converting the changed handwritten character 4c input from the change applying unit 18 into the display data 7 (S9).
  • the user gives a command 4b to the display device 12 by the gesture 3b, thereby causing the display device 12 to perform a predetermined process (for example, by making a predetermined change to the handwritten character 4a and displaying it as the changed handwritten character 4c).
  • the gesture 3b for giving the command is a simple handwriting operation 3 such as a reciprocal operation on the input surface. That is, since the user can cause the display device 12 to perform the predetermined process only by performing a simple and intuitive operation, the input device 11 can improve user convenience.
  • An input device includes: (1) An input device having an input surface capable of acquiring a trajectory of a handwriting operation by a user, capable of inputting information based on the trajectory, and sending the input information to an external controlled device, (2) referring to a storage device in which a command and a predetermined pattern are associated with each other and stored in advance, and collating means for determining whether or not the locus and the pattern match; (3) Sending out the trajectory when the collation means determines that the trajectory and the pattern do not match, and sending out the command associated with the matched pattern when it is determined that they match. Means.
  • an input device control method includes: (1) A control method for an input device that includes an input surface that can acquire a trajectory of a handwriting operation by a user, can input information based on the trajectory, and sends the input information to an external controlled device. And (2) a collating step of referring to a storage device stored in advance in which a command and a predetermined pattern are associated with each other, and determining whether the trajectory and the pattern match; (3) If it is determined in the matching step that the locus and the pattern do not match, the locus of the handwriting operation is sent out. If it is determined that the locus matches, the command associated with the matched pattern is sent. And a sending step for sending.
  • the input device which concerns on 1 aspect of this invention, and the control method of the said input device determine whether the locus
  • the input device or the like even when the user is inputting characters by handwriting operation, the user can execute a command for causing the controlled device to perform a predetermined process with a simple handwriting operation. You can enter.
  • the input device or the like according to one embodiment of the present invention can improve user convenience.
  • An input device includes: (1) When the collation unit determines that the trajectory and the pattern match, it further includes an extraction unit that extracts a feature amount of the trajectory, (2) The sending unit may further send the feature amount extracted by the extracting unit to the controlled device.
  • the input device extracts a feature amount of a trajectory input by a user's handwriting operation and sends it to the controlled device together with the command. That is, the user can give a parameter to the command as a feature amount of the trajectory and send it to the controlled device.
  • the controlled device makes a predetermined change to the handwritten information.
  • None of the conventional techniques described in the above-mentioned patent documents allow a user to display input characters or the like in a desired form.
  • the input device of the present invention can indicate the position, size, rotation angle, and the like for displaying handwritten characters and the like by a simple handwriting operation.
  • the input device can improve user convenience, for example, by displaying handwritten information input by the user in a desired form.
  • a start position on the input surface where the user starts the handwriting operation and an end position on the input surface where the user ends the handwriting operation are substantially the same,
  • a trajectory drawn by an operation that reciprocates in a substantially straight line to the end position via a folding position different from the start position may be determined to match the pattern.
  • the input device in order for the user to send a command to the input device, it is only necessary to perform a reciprocal operation on the input surface. Therefore, the input device according to one embodiment of the present invention can cause the user to send a command to the controlled device through an intuitive and simple operation.
  • the extraction unit may extract at least one of the start position, the end position, and the turn-back position as one of the feature amounts.
  • the input device extracts at least one of the start position, the end position, and the turn-back position of the reciprocating operation as one of the feature values, and outputs this together with the command. Send to control device. Therefore, the controlled device can display the input information, for example, at the start position of the reciprocating operation input from the user.
  • the extraction unit may extract a distance from the start position or the end position to the turn-back position as one of feature quantities.
  • the input device extracts the distance from the start position or the end position of the reciprocating operation to the turn-back position as one of the feature quantities, and this is controlled along with the command.
  • the controlled device can display the input information in a scaled manner according to the reciprocation distance of the reciprocation operation input from the user, for example.
  • the extraction unit extracts, as a feature amount, an angle formed by a straight line connecting the start position or the end position and the turn-back position with respect to a predetermined reference line set on the input surface. You can do it.
  • the input device extracts the inclination (angle) of the reciprocating operation as one of the feature values, and sends this to the controlled device together with the command. Therefore, the controlled device can rotate and display the input information according to the inclination of the reciprocating operation input from the user, for example.
  • a controlled device includes: (1) You may provide the execution means which performs the said command sent from the said input device.
  • the controlled device receives a command sent from the input device, and executes a predetermined process defined by the command. Accordingly, in the command, for example, if it is specified that a predetermined change is made to the handwritten information, the change intended by the user can be added to the handwritten information sent from the input device.
  • a controlled device includes: (1) You may provide the output means which outputs the locus
  • the controlled device receives the locus sent from the input device and outputs the locus. Therefore, the user can obtain information input via the input device as an output from the controlled device.
  • the command is a command for instructing to apply a change to the trajectory.
  • the execution unit may apply the change according to the feature amount.
  • the controlled device changes the trajectory according to the feature amount of the trajectory sent from the input device.
  • the user can display the handwritten information input by the user in a desired form.
  • the electronic blackboard system includes: (1) the input device; (2) The above-mentioned controlled device may be included.
  • the user can display the handwritten information input by the user in a desired form.
  • the input device and the controlled device may be realized by a computer.
  • a control program for causing the input device and the controlled device to be realized by a computer by operating the computer as each means of the input device and the controlled device, and a computer-readable record that records the control program Media are also within the scope of the present invention.
  • each block of the input device 11 and the display device 12 may be realized in hardware by a logic circuit formed on an integrated circuit (IC chip), or may be a CPU ( It may be realized by software using a Central Processing Unit.
  • IC chip integrated circuit
  • CPU Central Processing Unit
  • the input device 11 and the display device 12 include a CPU that executes program instructions for realizing each function, a ROM (Read Only Memory) that stores the program, and a RAM ( Random Access Memory), and a storage device (recording medium) such as a memory for storing the program and various data.
  • An object of the present invention is to provide program codes (execution format program, intermediate code program, source program) of control programs for the input device 11 and the display device 12 (electronic blackboard 100), which are software for realizing the functions described above, on a computer.
  • the readable recording medium is supplied to the input device 11 and the display device 12 (electronic blackboard 100), and the computer (or CPU or MPU) reads out and executes the program code recorded on the recording medium. Is achievable.
  • Examples of the recording medium include tapes such as magnetic tapes and cassette tapes, magnetic disks such as floppy (registered trademark) disks / hard disks, and disks including optical disks such as CD-ROM / MO / MD / DVD / CD-R.
  • IC cards including memory cards
  • semiconductor memories such as mask ROM / EPROM / EEPROM / flash ROM, PLD (Programmable logic device) and FPGA (Field Programmable Gate Array) Logic circuits can be used.
  • the input device 11 and the display device 12 may be configured to be connectable to a communication network, and the program code may be supplied via the communication network.
  • the communication network is not particularly limited as long as it can transmit the program code.
  • the Internet intranet, extranet, LAN, ISDN, VAN, CATV communication network, virtual private network (Virtual Private Network), telephone line network, mobile communication network, satellite communication network, etc. can be used.
  • the transmission medium constituting the communication network may be any medium that can transmit the program code, and is not limited to a specific configuration or type.
  • wired lines such as IEEE 1394, USB, power line carrier, cable TV line, telephone line, ADSL (Asymmetric Digital Subscriber Line) line, infrared rays such as IrDA and remote control, Bluetooth (registered trademark), IEEE 802.11 wireless, HDR ( It can also be used by wireless such as High Data Rate, NFC (Near Field Communication), DLNA (Digital Living Network Alliance), mobile phone network, satellite line, terrestrial digital network.
  • the present invention can also be realized in the form of a computer data signal embedded in a carrier wave in which the program code is embodied by electronic transmission.
  • the present invention can be applied to an electronic blackboard, a mobile phone, a tablet terminal, a personal computer, and other electronic devices that can be driven by input by handwriting operation.

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

 コマンド(4b)とパターン(2)とが対応付けられて予め格納された記憶装置(30)を参照し、軌跡(1)とパターン(2)とが一致するか否かを判定し、軌跡(1)とパターン(2)とが一致しないと判定された場合は軌跡(1)を手書き文字(4a)として送出し、一致すると判定された場合は一致したパターン(2)に対応付けられたコマンド(4b)を送出する。

Description

入力装置、入力装置の制御方法、被制御装置、電子黒板システム、制御プログラム、および記録媒体
 本発明は、入力された情報を外部の被制御装置に送出する入力装置等に関するものである。
 タッチパネルを備えた表示画面を有する電子機器が広く普及するなか、ユーザが当該電子機器に手書き入力を行う機会が増えている。例えば、いわゆるスマートフォンをはじめとする情報端末や一部の家庭用ゲーム機においては、ユーザが指やスタイラスなどの指示具(以下、単に「指示具」と称する)で手書き操作を行うことにより、文字や図形などを入力する形態が一般的である。また、近年では、主に教育目的で使用可能な電子黒板が教育機関等に導入されつつある。
 図14に基づいて、ユーザが手書き操作で情報を入力可能な電子機器の一例として、電子黒板を説明する。図14は、一般的な電子黒板の使用例を表した模式図である。このように、発表者が資料を表示させてプレゼンテーションを行う場合などに、電子黒板は使用される。上記電子黒板では、発表者はプレゼンテーションの最中に当該電子黒板に手書き操作を行うことにより、表示させた資料に対して文字等を書き加えることができる。
 ここで、入力領域に対して指示具で手書きした軌跡がそのまま表示領域に表示されることによって、ユーザが直感的な手書き感覚を得ることができるという利点を、従来の電子黒板は有する。一方で、例えば小さい文字等を書き加えたい場合、ユーザは太すぎる筆記具で細かい文字等を書き込むような不便を感じることがある。反対に、大きな文字等を書き加えたい場合、電子黒板のように物理的な入力領域が大きいほど手間がかかる。
 この問題を解決するために、例えば下記の特許文献1には、すでに表示された手書き情報を縮小し、新たな手書き情報が入力可能な領域を確保できる手書き入力装置が記載されている。また、下記の特許文献2には、表示画面上の手書き表示範囲に情報を直接手書きするのではなく、手書き表示範囲より拡大された枠内に情報を手書きできる手書き入力装置が記載されている。さらに、下記の特許文献3には、手書き文字の入力時に、その入力領域の大きさをユーザが所望する大きさに設定変更できる手書き文字入力領域設定装置が記載されている。
日本国公開特許公報「特開2009-116476号公報(2009年5月28日公開)」 日本国公開特許公報「特開平9-124164号公報(1994年5月6日公開)」 日本国公開特許公報「特開平5-143770号公報(1993年6月11日公開)」
 上記の特許文献に記載された従来技術は、いずれも入力領域と表示領域とを異ならせることにより、上記の問題を解決しようとするものである。すなわち、入力領域に対して指示具で手書きした軌跡をそのまま表示領域に表示するのではなく、当該手書きした軌跡に所定の変更を加えて、表示領域に表示するアプローチを採用している。
 しかし、上記特許文献に記載された従来技術は、いずれも煩雑な操作を必要とする。すなわち、入力された文字等に所定の処理を加えて表示させるまでに、ユーザは数ステップを要する複雑な操作(アイコンモード切り替え、縮小率の設定、拡大操作など)を行う必要がある。また、必要となる操作は、所定のメニューを選択するなど「手書き操作」という利点を生かした直感的な操作ではない。
 本発明は、上記の問題点に鑑みてなされたものであり、その目的は、簡単な手書き操作で外部の被制御装置にコマンドを送出するよう指示することを可能にすることにより、ユーザの利便性を向上させることができる入力装置、入力装置の制御方法、被制御装置、電子黒板システム、制御プログラム、および記録媒体を提供することである。
 上記の課題を解決するために、本発明の一態様に係る入力装置は、ユーザによる手書き操作の軌跡を取得できる入力面を備え、前記軌跡に基づいて情報を入力可能であり、入力された当該情報を外部の被制御装置に送出する入力装置であって、コマンドと所定のパターンとが対応付けられて予め格納された記憶装置を参照し、前記軌跡と前記パターンとが一致するか否かを判定する照合手段と、前記照合手段によって前記軌跡と前記パターンとが一致しないと判定された場合は前記軌跡を送出し、一致すると判定された場合は一致した当該パターンに対応付けられた前記コマンドを送出する送出手段とを備えている。
 また、上記の課題を解決するために、本発明の一態様に係る入力装置の制御方法は、ユーザによる手書き操作の軌跡を取得できる入力面を備え、前記軌跡に基づいて情報を入力可能であり、入力された当該情報を外部の被制御装置に送出する入力装置の制御方法であって、コマンドと所定のパターンとが対応付けられて予め格納された記憶装置を参照し、前記軌跡と前記パターンとが一致するか否かを判定する照合ステップと、前記照合ステップにおいて前記軌跡と前記パターンとが一致しないと判定された場合は前記手書き操作の軌跡を送出し、一致すると判定された場合は一致した当該パターンに対応付けられた前記コマンドを送出する送出ステップとを含んでいる。
 本発明の入力装置および当該装置の制御方法の一態様によれば、ユーザが手書き操作で文字入力を行っている途中であっても、被制御装置に所定の処理を行わせるコマンドを、ユーザは簡単な手書き操作で入力できる。これにより、本発明の一態様に係る入力装置および当該装置の制御方法は、ユーザの利便性を向上させることができるという効果を奏する。
本発明の一実施の形態に係る入力装置および表示装置を内蔵した電子黒板の要部構成を示すブロック図である。 上記入力装置の入力面に対して行う手書き操作の例と、上記表示装置が表示部に表示する手書き文字の例を示した模式図であり、(a)は手書き操作と当該操作によって描かれる軌跡の例、(b)は手書き文字の例を示している。 上記入力装置の入力面に対して行うジェスチャーの例を示した模式図である。 ユーザが文字入力操作によって入力する、手書き文字の例を示した模式図である。 図3に示した上記ジェスチャーに応じて、図4に示した上記手書き文字が変更手書き文字に変更される例を示した模式図である。 上記入力装置の入力面に対して行うジェスチャーの例を示した模式図である。 図6に示した上記ジェスチャーに応じて、図4に示した上記手書き文字が変更手書き文字に変更される例を示した模式図である。 上記入力装置の入力面に対して行うジェスチャーの例を示した模式図である。 図8に示した上記ジェスチャーに応じて、図4に示した上記手書き文字が変更手書き文字に変更される例を示した模式図である。 上記入力装置がジェスチャーとして認識するパターンを例示した模式図であり、(a)は手書き文字の表示形態を表示領域の対角線で指定するジェスチャーの例、(b)は上記表示装置にアプリケーションを終了させる処理を実行させるコマンドに対応付けられたジェスチャーの例、(c)は往復操作を2回繰り返すジェスチャーの例を示す。 開始位置、終了位置、および折り返し位置と手書き文字の表示位置との関係を示した模式図であり、(a)は折り返し位置が、開始位置および終了位置より右に位置する場合、(b)は折り返し位置が、開始位置および終了位置より左に位置する場合を示す。 ジェスチャーの一例である往復操作において、開始位置または終了位置と、折り返し位置とを曲線で結ぶ往復操作の軌跡と、これにより表示される変更手書き文字の一例を示す模式図である。 上記入力装置および上記表示装置が実行する処理の一例を示すフローチャートである。 従来の一般的な電子黒板の使用例を表した模式図である。
 図1~図13に基づいて、本発明の実施の形態を詳細に説明する。
 なお、入力装置11および表示装置12が扱う情報の関連性を明示するために、異なる部材名を有する情報に同一の部材番号を付し、a、b、またはcをさらに付して当該部材を示すことがある。すなわち、手書き操作3は、文字入力操作3a、およびジェスチャー3bを含む。入力情報4は、手書き文字4a、コマンド4b、および変更手書き文字4cを含む。特徴量5は、距離5a、角度(なす角)5b、および位置(開始位置または終了位置)5cを含む。
 さらに、手書き操作3の位置に関して、手書き操作3を開始する位置を開始位置8a、終了する位置を終了位置8b、および折り返す位置を折り返し位置8cという。角度5bを形成する線に関して、水平線(入力面に設定された所定の基準線)9aおよび斜め線(開始位置と折り返し位置とを結ぶ直線)9bという。
 〔入力装置11、表示装置12、および電子黒板100の概要〕
 図1に基づいて、本実施の形態に係る入力装置11および表示装置12を備えた電子黒板100の概要を説明する。図1は、電子黒板100の要部構成を示すブロック図である。
 入力装置11は、ユーザの手書き操作3による入力を受け付ける入力面を備え、当該入力面から入力された入力情報4を表示装置12に送出可能な装置である。ここで、ユーザが指やスタイラスなどの指示具(以下、単に「指示具」と称する)を入力面に接触させて手書き操作3を行うため、入力装置11は指示具の接触位置の当該入力面上における2次元の座標情報6を取得できるものとする。
 表示装置(被制御装置)12は、入力装置11から送出された入力情報4(手書き文字4a、コマンド4b)と特徴量5とを受信し、所定の処理を施して表示部70に手書き文字4aまたは変更手書き文字4cを表示する装置である。所定の処理とは、後述するように、入力装置11から受信したコマンド4bにしたがって、手書き文字4aに特徴量5に応じた変更を加える処理をいう。なお、コマンド4bの詳細については、後で説明する。
 電子黒板(電子黒板システム)100は、上記の入力装置11と表示装置12とを含む入出力システムである。例えば、ユーザは、表示装置12に資料を表示させてプレゼンテーションを行うことができる。また、ユーザは、手書き操作3により入力装置11に入力情報4を与えることで、表示している当該資料に対して文字や図形等を書き加えることができる。
 図2に基づいて、入力装置11および表示装置12の動作の概要を説明する。図2は、入力装置11の入力面に対して行う手書き操作3の例と、表示装置12が表示部70に表示する手書き文字4aの例を示した模式図であり、(a)は手書き操作3と当該操作によって描かれる軌跡1の例、(b)は手書き文字4aの例を示している。なお、軌跡1の集合として表現される文字を、手書き文字4aと称している。説明の便宜のために文字に限定するが、手書き操作3で入力される軌跡1の集合は任意の図形であってよい。
 図2の(a)に示すように、ユーザが入力装置11の入力面に指示具(図2では指)を接触させたまま手書き操作3を行うと、手書き操作3の開始位置8a(ユーザが入力面に指示具を接触させた位置)から終了位置8b(入力面から指示具を離した位置)までの指示具の軌跡1が、入力装置11に入力情報4として入力される。なお、図2では、開始位置8aを白丸で、終了位置8bを黒丸で表現しているが、これは開始位置8aおよび終了位置8bを明示するためであり、実際にこれらが丸印として表示されるわけではない。後述する折り返し位置8cについても同様である。
 図2の(b)に示すように、ユーザは手書き操作3を繰り返すことにより、手書き文字4aを入力装置11に入力できる。なお、手書き操作3のうち、手書き文字4aを入力する操作を、特に「文字入力操作3a」と称する。そして、本実施の形態における入力装置11は、手書き文字4aを表示装置12に送出する。これにより、表示装置12が備える表示部70に、手書き文字4aが表示される。
 図3~図9に基づいて、入力装置11および表示装置12の動作の概要をさらに説明する。図3、図6、図8は、いずれも入力装置11の入力面に対して行うジェスチャー3bの例を示した模式図である。また、図4は、ユーザが文字入力操作3aによって入力する、手書き文字4aの例を示した模式図である。さらに、図5、図7、図9は、それぞれ図3、図6、図8に示したジェスチャー3bに応じて、図4に示した手書き文字4aが、変更手書き文字4cに変更される例を示した模式図である。
 図3、図6、図8に示すように、入力装置11は、ユーザにより入力されたジェスチャー3bを認識する。ここで、ジェスチャー3bとは、例えば同図に示されるような往復操作、すなわち開始位置8aと終了位置8bとが略同一であって、開始位置8aから開始位置8aとは異なる折り返し位置8cを経由し、終了位置8bまでを略直線で往復する操作をいう。
 入力装置11は、軌跡1と所定のパターン2とを照合し、これらが互いに一致するか否かを判定する。ここで、照合するパターン2は複数であってもよい。その場合、入力装置11は、すべてのパターンに対して順番に照合を試みる。本実施の形態では、パターン2は、ユーザが往復操作をした場合に描かれる軌跡のパターンであるとする。ここで、パターン2は、文字入力操作3aとジェスチャー3bとを混同しない程度に誤差を許容するように定義されているため、軌跡1とパターン2とは厳密に同一でなくともよい。
 軌跡1とパターン2とが一致しないと判定する場合、入力装置11は、軌跡1を手書き文字4aとして、その他の処理を経ることなく表示装置12に送出する。一方、一致すると判定する場合、入力装置11は、軌跡1の特徴量5を抽出する。そして、入力装置11は、一致したパターン2に対応付けられたコマンド4bと特徴量5とを表示装置12に送出する。
 ここで、特徴量5とは、図3、図6、図8に示すように、例えば往復操作であるジェスチャー3bの、開始位置8a、終了位置8b、または折り返し位置8cであり、あるいは開始位置8aまたは終了位置8bから、折り返し位置8cまでの距離5aである。または、図8に示すように、例えば水平線9aと斜め線9bとが作る角度5bである。
 図4に示すように、入力装置11は、特徴量5を抽出した後で、ユーザから文字入力操作3aを受け付ける。そして、入力装置11は、特徴量5に応じて当該文字入力操作によって入力された手書き文字4aに変更を加え、変更手書き文字4cを表示装置12に表示させる。
 例えば、図5、図7、図9に例示するように、入力装置11は、表示装置12の表示部70において、ジェスチャー3bの開始位置8aまたは終了位置8bに対応する位置に手書き文字4aを表示する。または、同図に例示するように、入力装置11は、ジェスチャー3bの距離5aに応じて、手書き文字4aを文字の高さおよび幅について拡縮して表示する。または、図9に例示するように、入力装置11は、ジェスチャー3bの角度5bに応じて、手書き文字4aを回転させて表示する。
 以上、図2~5を参照して説明した概要をまとめる。入力装置11は、ユーザから受け付けた手書き操作3が文字入力操作3aに該当する場合は、軌跡1を手書き文字4aとして表示装置12に送出し、ジェスチャー3bに該当する場合は、コマンド4bと特徴量5とを表示装置12に送出する。
 表示装置12は、入力装置11から手書き文字4aが送出された場合は、当該手書き文字を表示部70に表示させ、入力装置11からコマンド4bと特徴量5とが送出された場合は、続いて送出される手書き文字4aに対して、コマンド4bおよび特徴量5に応じて変更を加えた変更手書き文字4cを表示部70に表示させる。
 これにより、ユーザは、ジェスチャー3bによりパターン2と同じ軌跡1を与えることで、表示装置12にコマンド4bを与えることができる。具体的には、例えば当該コマンドが手書き文字4aに所定の変更を加えることを指示するものであれば、入力装置11は表示装置12に当該変更の処理を行わせることができる。
 ここで、当該コマンドを与えるためのジェスチャー3bは、例えば入力面上で往復操作を行うだけでよい。すなわち、前述した従来技術のように、手書き文字4aに変更を加えるにあたり、数ステップを要する複雑な操作を必要としない。これにより、ユーザは簡単で直感的な操作を行うだけで、入力装置11に手書き文字4aを所望する形態で表示させることができるため、ユーザの利便性を向上させることができる。
 また、当該変更を加えるためのユーザインターフェース(User Interface;UI)も必要とならないため、UIを開発するためのコストも削減できる。
 〔電子黒板100の構成〕
 図1に基づいて、本実施の形態に係る入力装置11および表示装置12を備えた電子黒板100の各構成の詳細を説明する。図示のように、電子黒板100は、入力装置11、表示装置12、および記憶装置30を含む。
 入力装置11は、入力部(軌跡を入力できる入力面)40、入力制御部50、照合部(照合手段)15、抽出部(抽出手段)17、および送出部(送出手段)16を含む。表示装置12は、変更適用部(実行手段)18、表示制御部(出力手段)60、および表示部(出力手段)70を含む。また、上記抽出部17は、距離抽出部171、角度抽出部172、および位置抽出部173を含む。上記変更適用部18は、拡縮部181、回転部182、および位置調整部183を含む。
 なお、本実施の形態に直接関係のない部分(例えば、外部機器との接続やプリンター機能などを実現する部分)は、記載の簡潔性を担保する観点から、構成の説明およびブロック図から省略した。ただし、実施の実情に則して、本実施の形態に係る電子黒板100は当該省略した構成を含んでもよい。
 以下、入力装置11(入力部40、入力制御部50、照合部15、抽出部17、送出部16)、表示装置12(変更適用部18、表示制御部60、表示部70)、記憶装置30の順序で各構成が担う機能を説明する。
 (入力装置11)
 入力装置11は、ユーザによる手書き操作で軌跡を入力できる入力面(入力部40)から情報を入力可能であり、入力された当該情報を表示装置12に送出する装置である。
 入力部40は、ユーザによる手書き操作3を受け付ける。本実施の形態では主にタッチパネルを想定している。ただし、ユーザによる手書き操作3で表示装置12に対して情報の入力が可能な入力面を備えてさえいれば(すなわち、当該入力面は入力部40に含まれる)、ハードウェアの種類は限定されない。入力部40は、その入力面に接触した指示具の当該入力面上における2次元の座標情報6を、入力制御部50に出力する。
 入力制御部50は、入力部40の入力面に対するユーザからの手書き操作3の軌跡1を検出する。例えば、入力部40から座標情報6を所定の時間間隔で取得し、その一連の座標データを軌跡1として照合部15へ出力する。
 照合部15は、軌跡1とパターン2とが同一であるか否かを判定する。記憶装置30には、表示装置12に対するコマンド4bと所定のパターン2とが対応付けられて予め格納されている。照合部15は、入力制御部50から入力された手書き操作3による軌跡1と、記憶装置30から読み出したパターン2とが一致するか否かを照合する。
 軌跡1とパターン2とが一致しない(当該軌跡が文字入力操作3aによる手書き文字4aである)と判定された場合、照合部15は、手書き文字4aを送出部16へ出力する。
 一方、軌跡1とパターン2とが一致する(当該軌跡がジェスチャー3bによるコマンド4bの入力操作である)と判定された場合、照合部15は、パターン2に対応付けられたコマンド4bおよび軌跡1を、それぞれ送出部16および抽出部17へ出力する。
 この場合、照合部15は、入力制御部50から続けて入力された軌跡1を、手書き文字4aとして送出部16へ出力する。ここで、照合部15は、当該手書き文字の入力操作(文字入力操作3a)が終了したか否かを検知する。この検知方法としては、例えば当該入力操作がなされてからの経過時間を測定し、その経過時間が所定の制限時間を超えた場合、照合部15は当該終了を検知して手書き文字4aを送出部16へ出力する。または、照合部15は、ユーザによる所定のジェスチャーを検出した場合に、当該終了を検知してもよい。例えば、入力制御部50から照合部15に続けて入力される軌跡1が、パターン2と一致する場合であってよい。あるいは、他のパターン(例えば、後述する図10(b)のようなパターン)と一致する場合であってもよい。
 抽出部17は、照合部15から入力された軌跡1の特徴量5を抽出する。具体的には、距離抽出部171が軌跡1の距離5aを抽出し、角度抽出部172が角度5bを抽出し、位置抽出部173が位置5cを抽出する。抽出部17は、各構成で抽出した軌跡1の特徴量5を、送出部16へ出力する。
 送出部16は、照合部15から入力された入力情報4(手書き文字4a、コマンド4b)、および抽出部17から入力された特徴量5(距離5a、角度5b、位置5c)を、表示装置12の変更適用部18へ送出する。
 (表示装置12)
 表示装置12は、入力装置11から送出された入力情報4(手書き文字4a、コマンド4b)と特徴量5(距離5a、角度5b、位置5c)とを受信し、所定の処理を施して表示部70に表示する装置である。
 変更適用部18は、入力装置11の送出部16から特徴量5が入力されると、当該特徴量に応じて送出部16から入力された手書き文字4aに変更を加える。具体的には、拡縮部181が距離5aに応じて手書き文字4aを拡縮する。回転部182が角度5bに応じて手書き文字4aを回転させる。そして、位置調整部183が位置5cに応じて手書き文字4aの表示部70における表示位置を決定する。
 ここで、位置調整部183は、例えば変更手書き文字4cの全体がおさまる外接矩形の文字列先頭側の辺上における任意の1点が開始位置8aと一致する位置に、変更手書き文字4cを表示させる。また、拡縮部181は、手書き文字4aの上記外接矩形のアスペクト比を保って拡縮を行う。
 変更適用部18における手書き文字4aの変更は、開始位置8aまたは終了位置8bが上記外接矩形の文字列先頭側の辺上にあるとき、折り返し位置8cが当該文字列先頭側の辺と相対する文字列末尾側の辺上にあるように、手書き文字4aを変更することと言える。ただし、必ずしも上記のように矩形の両端をジェスチャー3bで規定される各位置に揃える必要はない。例えば、拡縮部181は、長さ5aの実数倍として(すなわち、長さ5aと手書き文字4aの拡縮率が比例するように)手書き文字4aを変更してもよい。
 変更適用部18は、各構成で変更を加えた手書き文字4aを、変更手書き文字4cとして表示制御部60へ出力する。ただし、送出部16から手書き文字4aだけが入力され、コマンド4bおよび特徴量5が入力されなかった場合、変更適用部18は、手書き文字4aに変更を加えることなく表示制御部60へ出力する。
 表示制御部60は、入力装置11が出力する情報(例えば手書き文字4a)を、表示部70で表示可能な形式にしたがう表示用データ7に変換する。ここで、表示用データ7としては、例えばビットマップ(bitmap)形式の画像であってよいし、他の形式に従う画像、またはその他表示に適したデータ形式であってもよい。なお、表示制御部60は、当該情報を表示用データ7へ形式変換できるものであればよく、例えば一般的なディスプレイアダプタでよい。
 表示部70は、映像等を表示する装置である。本実施の形態では主に液晶ディスプレイ(Liquid Crystal Display;LCD)を想定しているが、表示機能を有する装置(特に、フラットパネルディスプレイ)でありさえすればハードウェアの種類は限定されない。例えば、プラズマディスプレイ(Plasma Display Panel;PDP)やEL(Electroluminescence)ディスプレイなどの表示素子と、表示制御部60から入力を受けた表示用データ7に基づいて表示素子を駆動するドライバ回路とを備える装置等によって、表示部70aを構成できる。
 図1は、各構成が有する機能を明示するために、入力部40と表示部70とを分離して示している。しかし、例えば入力部40がタッチパネルであり、表示部70が液晶ディスプレイである場合、両者は一体として構成されることが望ましい。すなわち、入力部40は、矩形板状に形成されたガラス等の透明な透過部材からなるデータ入力面を含んで構成され、表示部70が有するデータ表示面を覆うように一体的に形成されてよい。これにより、入力部40の入力面に対する指示具の接触位置と、表示部70が当該接触に応じて表示面に表示する図形の位置とが一致するため、ユーザは自然な手書き感覚を得ることができる。
 (記憶装置30)
 記憶装置30は、パターン2を記憶した不揮発性の記憶機器である。記憶装置30は、例えばハードディスク、半導体メモリ、DVD(Digital Versatile Disk)等で構成できる。なお、本実施の形態では、記憶装置30は、入力装置11および表示装置12とは別体に電子黒板100に内蔵される装置として図1に示しているが、入力装置11または表示装置12に内蔵された内部記憶装置であってもよいし、電子黒板100の外部に通信可能に接続された外部記憶装置であってもよい。
 〔ジェスチャー3bおよびコマンド4bの種類〕
 図10に基づいて、ジェスチャー3bの種類を説明する。図10は、入力装置11がジェスチャー3bとして認識するパターン2を例示した模式図であり、(a)は手書き文字4aの表示形態(位置、大きさ)を表示領域の対角線で指定するジェスチャーの例、(b)は表示装置12にアプリケーションを終了させる処理を実行させるコマンド4bに対応付けられたジェスチャーの例、(c)は往復操作を2回繰り返すジェスチャーの例を示す。
 図10の(a)で例示されるように、ユーザは手書き文字4aの表示形態を、矩形の表示領域の対角線で指定することもできる。この場合、入力装置11は、当該対角線で張られる矩形の表示領域に手書き文字4aがおさまるように、その大きさおよび表示位置を決定し、変更手書き文字4cとして表示する。
 図10の(b)で例示されるようなジェスチャー3bを、コマンド4bを送出する入力として入力装置11は認識してもよい。このとき、入力装置11が表示装置12に送出するコマンド4bは、例えば文字入力用のアプリケーションを終了させることを指示するものであってよいし、電子黒板100の電源を切ることを指示するものであってもよい。
 すなわち、パターン2として定義されるジェスチャー3b、およびパターン2に対応付けられて記憶装置30に格納されるコマンド4bは、任意に定義できる。したがって、電子黒板100は、ジェスチャー3bとコマンド4bとの組み合わせを工夫することにより、さまざまな機器に対して手書き操作3による直感的な操作を与えることが可能になる。
 ただし、ジェスチャー3bは、文字入力操作3aとジェスチャー3bとを入力装置11が明確に区別できるように定義されていることが望ましい。文字入力操作3aにジェスチャー3bに相当する軌跡が含まれると、入力装置11が両者を混同してしまい、ユーザの意図しないコマンド4bを実行してしまうからである。
 したがって、上述した往復操作(開始位置8aと終了位置8bとが略同一であって、開始位置8aから開始位置8aとは異なる折り返し位置8cを経由し、終了位置8bまでを略直線で往復する操作)は、文字や図形等の通常の入力では行われない操作であるため、ジェスチャー3bとして好適である。
 また、上記往復操作は、開始位置8a、終了位置8b、折り返し位置8c、距離5a、角度5b等の特徴量5を1回の手書き操作で入力できるため、手書き文字を変更するためのコマンド4bに対応付けられるジェスチャー3bとして最適である。
 さらに、例えば図10の(c)で例示されるような、往復操作を2回繰り返すジェスチャー3bであれば、文字入力操作3aと混同が生じるおそれがより小さく、入力が煩雑となるほど複雑な操作でもないため、例えば文字入力用のアプリケーションの終了や電子黒板100の電源を切るための指示に適している。
 本実施の形態では、入力装置11および表示装置12を含む電子黒板100を説明したが、入力装置11と組み合わせる装置は表示装置12でなくともよいし、これにより構成されるシステムは電子黒板100でなくともよい。
 例えば、より汎用的な処理が可能なパーソナルコンピュータや携帯電話が、入力装置11と組み合わされることによりコマンド4bの入力を受けてもよい。このとき、適当なジェスチャー3bにメールの送信やインターネットブラウザの起動等を指示するコマンド4bを対応させておけばよい。これにより、従来はマウスやキーボード等を介した煩雑な操作が必要であったところを、ユーザは手書き操作3による簡単かつ直感的な操作で、上記処理を実行させることができる。
 〔変更手書き文字4cの表示態様〕
 図11に基づいて、変更手書き文字4cの表示態様を説明する。図11は、開始位置8a、終了位置8b、および折り返し位置8cと手書き文字4aの表示位置との関係を示した模式図であり、(a)は折り返し位置8cが、開始位置8aおよび終了位置8bの右に位置する場合、(b)は折り返し位置8cが、開始位置8aおよび終了位置8bの左に位置する場合を示す。
 前述したように、変更適用部18は、変更手書き文字4cの全体がおさまる外接矩形の文字列先頭側の辺上の任意の1点が開始位置8aと一致する位置に、変更手書き文字4cを表示させる。これにより、開始位置8aまたは終了位置8bと、折り返し位置8cとの位置関係によっては、図11の(b)に例示されるように、手書き文字4aが逆さまに表示される。
 〔往復操作の変形例〕
 図12に基づいて、ジェスチャー3bに含まれる往復操作(図3、図6、図8を参照)の変形例を説明する。図12は、ジェスチャー3bの例として前述した往復操作において、開始位置8aおよび終了位置8bと、折り返し位置8cとを曲線で結ぶ往復操作の軌跡1と、これにより表示される変更手書き文字4cの一例を示す模式図である。
 図12に例示されるような曲線の往復操作を行うと、手書き文字4aは当該曲線に沿って弯曲して表示される。これにより、簡単なジェスチャー3bで、ユーザはより豊かに文字を表現できる。
 〔表示装置12が実行する処理〕
 図13に基づいて、表示装置12が実行する処理の流れを説明する。図13は、入力装置11および表示装置12が実行する処理の一例を示すフローチャートである。
 まず、入力部40はユーザによる手書き操作3を受け付け、座標情報6を入力制御部50に出力する(ステップ1a:以下、S1aのように略記する)。次に、入力制御部50は、入力部40の入力面に対するユーザからの手書き操作3の軌跡1を取得し、照合部15に出力する(S2a)。
 照合部15は、入力制御部50から入力された軌跡1と記憶装置30に格納された所定のパターン2とが一致するか否かを判定する(S3、照合ステップ)。一致しないと判定する場合(S3においてNO)、照合部15は軌跡1を手書き文字4aとして送出部16に出力する。送出部16は、照合部15から入力された手書き文字4aを表示装置12へ送出する(S4a、送出ステップ)。
 一方、軌跡1とパターン2とが一致すると判定する場合(S3においてYES)、照合部15は、パターン2に対応付けられたコマンド4bを送出部16へ出力する。同時に、照合部15は軌跡1を抽出部17へ出力する。抽出部17は、照合部15から入力された軌跡1から特徴量5を抽出し、特徴量5を送出部16へ出力する(S5)。送出部16は、照合部15から入力されたコマンド4bと、抽出部17から入力された特徴量5とを、表示装置12へ送出する(S6、送出ステップ)。
 表示装置12の変更適用部18は、入力装置11から手書き文字4aの入力を受けた場合(S3においてNOとなる経路)、当該手書き文字をそのまま(変更を加えずに)、表示制御部60へ出力する。表示制御部60は、変更適用部18から入力された手書き文字4aを表示用データ7に変換することで、当該手書き文字を表示部70に表示させる(S9)。一方、入力装置11からコマンド4bおよび特徴量5の入力を受けた場合は(S3においてYESとなる経路)、入力装置11からさらに手書き文字4aが入力されるのを待ち受ける。
 上記S1およびS2と同様の処理を経て、照合部15に軌跡1が入力される(S1b、S2b)。照合部15は、予め設定された時間が経過した場合(S7においてYES)、軌跡1を手書き文字4aとして送出部16に出力し、送出部16は手書き文字4aを表示装置12へ送出する(S4b)。変更適用部18は、コマンド4bにしたがって、入力装置11から入力された手書き文字4aに、特徴量5に応じた変更を加える(S8)。
 変更適用部18は、変更を適用した後の変更手書き文字4cを表示制御部60に出力する。表示制御部60は、変更適用部18から入力された変更手書き文字4cを表示用データ7に変換することで、当該手書き文字を表示部70に表示させる(S9)。
 〔入力装置11、表示装置12、および電子黒板100により奏される効果〕
 ユーザはジェスチャー3bにより表示装置12にコマンド4bを与えることで、表示装置12に所定の処理(例えば、手書き文字4aに所定の変更を加えて、変更手書き文字4cとして表示させる)を行わせることができる。ここで、当該コマンドを与えるためのジェスチャー3bは、入力面上で往復操作を行うなどの簡単な手書き操作3である。すなわち、ユーザは簡単で直感的な操作を行うだけで、表示装置12に上記所定の処理を行わせることができるため、入力装置11は、ユーザの利便性を向上させることができる。
 〔まとめ〕
 本発明の一態様に係る入力装置(入力装置11)は、
(1)ユーザによる手書き操作の軌跡を取得できる入力面を備え、前記軌跡に基づいて情報を入力可能であり、入力された当該情報を外部の被制御装置に送出する入力装置であって、
(2)コマンドと所定のパターンとが対応付けられて予め格納された記憶装置を参照し、前記軌跡と前記パターンとが一致するか否かを判定する照合手段と、
(3)前記照合手段によって前記軌跡と前記パターンとが一致しないと判定された場合は前記軌跡を送出し、一致すると判定された場合は一致した当該パターンに対応付けられた前記コマンドを送出する送出手段とを備えている。
 また、上記の課題を解決するために、本発明の一態様に係る入力装置の制御方法は、
(1)ユーザによる手書き操作の軌跡を取得できる入力面を備え、前記軌跡に基づいて情報を入力可能であり、入力された当該情報を外部の被制御装置に送出する入力装置の制御方法であって、
(2)コマンドと所定のパターンとが対応付けられて予め格納された記憶装置を参照し、前記軌跡と前記パターンとが一致するか否かを判定する照合ステップと、
(3)前記照合ステップにおいて前記軌跡と前記パターンとが一致しないと判定された場合は前記手書き操作の軌跡を送出し、一致すると判定された場合は一致した当該パターンに対応付けられた前記コマンドを送出する送出ステップとを含んでいる。
 上記の構成によれば、本発明の一態様に係る入力装置および当該入力装置の制御方法は、ユーザによる手書き操作で入力された軌跡と、予め与えられたパターンとが一致するか否かを判定できる。そして、一致すると判定する場合は、当該パターンと対応付けられた所定のコマンドを被制御装置に送出し、一致しないと判定する場合は、当該軌跡を手書き情報として被制御装置に送出する。
 すなわち、前述したように、従来は所定の処理(例えば、入力された文字等に所定の変更を加えて表示させる等)を被制御装置に行わせるために、ユーザは数ステップを要する複雑な操作が必要であった。
 これに対して、上記入力装置等によれば、ユーザが手書き操作で文字入力を行っている途中であっても、被制御装置に所定の処理を行わせるコマンドを、ユーザは簡単な手書き操作で入力できる。これにより、本発明の一態様に係る入力装置等は、ユーザの利便性を向上させることが可能となる。
 また、本発明の一態様に係る入力装置は、
(1)前記照合手段によって前記軌跡と前記パターンとが一致すると判定された場合、前記軌跡の特徴量を抽出する抽出手段をさらに備え、
(2)前記送出手段は、前記抽出手段によって抽出された特徴量をさらに前記被制御装置に送出してよい。
 上記の構成によれば、本発明の一態様に係る入力装置は、ユーザによる手書き操作で入力された軌跡の特徴量を抽出し、上記コマンドとともに被制御装置に送出する。すなわち、ユーザは、軌跡の特徴量として上記コマンドにパラメータを付与し、被制御装置に送出できる。
 ここで、被制御装置が手書き情報に所定の変更を加える上記の例を考える。上記の特許文献に記載された従来技術は、いずれも入力した文字等をユーザが所望の形態で表示させることを可能にするものではない。これに対して、本発明の入力装置は、手書き文字等を表示させる位置、サイズ、回転角度などを、簡単な手書き操作によって指示できる。
 これにより、本発明の一態様に係る入力装置は、例えばユーザが自身で入力した手書き情報を所望する形態で表示させることができるなど、ユーザの利便性を向上させることができる。
 また、本発明の一態様に係る入力装置では、
(1)前記照合手段は、ユーザが前記手書き操作を開始した前記入力面における開始位置とユーザが前記手書き操作を終了した前記入力面における終了位置とが略同一であって、前記開始位置から前記開始位置とは異なる折り返し位置を経由して前記終了位置までを略直線で往復する操作により描かれる軌跡が入力された場合、前記パターンと一致すると判定してもよい。
 上記の構成によれば、ユーザが上記入力装置にコマンドを送出させるためには、入力面上で往復操作を行うだけでよい。したがって、本発明の一態様に係る入力装置は、ユーザに直感的で簡単な操作によって被制御装置にコマンドを送出させることができる。
 また、本発明の一態様に係る入力装置では、
(1)前記抽出手段は、前記開始位置、前記終了位置、または前記折り返し位置のうち少なくとも1つを前記特徴量の1つとして抽出してよい。
 上記の構成によれば、本発明の一態様に係る入力装置は、往復操作の開始位置、終了位置、または折り返し位置のうち少なくとも1つを特徴量の1つとして抽出し、これをコマンドとともに被制御装置へ送出する。したがって、被制御装置は、例えばユーザから入力された往復操作の開始位置等に入力情報を表示させることができる。
 また、本発明の一態様に係る入力装置では、
(1)前記抽出手段は、前記開始位置または前記終了位置から、前記折り返し位置までの距離を特徴量の1つとして抽出してよい。
 上記の構成によれば、本発明の一態様に係る入力装置は、往復操作の開始位置または終了位置から、折り返し位置までの距離を特徴量の1つとして抽出し、これをコマンドとともに被制御装置へ送出する。したがって、被制御装置は、例えばユーザから入力された往復操作の往復距離に応じて入力情報を拡縮して表示させることができる。
 また、本発明の一態様に係る入力装置では、
(1)前記抽出手段は、前記入力面に設定された所定の基準線に対して、前記開始位置または前記終了位置と、前記折り返し位置とを結ぶ直線がなす角を特徴量の1つとして抽出してよい。
 上記の構成によれば、本発明の一態様に係る入力装置は、往復操作の傾き(角度)を特徴量の1つとして抽出し、これをコマンドとともに被制御装置へ送出する。したがって、被制御装置は、例えばユーザから入力された往復操作の傾きに応じて入力情報を回転して表示させることができる。
 また、本発明の一態様に係る被制御装置は、
(1)上記入力装置から送出された前記コマンドを実行する実行手段を備えてよい。
 上記の構成によれば、本発明の一態様に係る被制御装置は、上記入力装置から送出されたコマンドを受信し、当該コマンドに規定される所定の処理を実行する。したがって、当該コマンドにおいて、例えば手書き情報に所定の変更を加えることが規定されている場合であれば、上記入力装置から送出された手書き情報にユーザの意図する変更を加えることができる。
 また、本発明の一態様に係る被制御装置は、
(1)前記入力装置から送出された軌跡を出力する出力手段を備えてよい。
 上記の構成によれば、本発明の一態様に係る被制御装置は、上記入力装置から送出された軌跡を受信し、当該軌跡を出力する。したがって、ユーザは、上記入力装置を介して入力した情報を、被制御装置からの出力として得ることができる。
 また、本発明の一態様に係る被制御装置では、
(1)前記コマンドは、前記軌跡に対して変更を適用することを指示するコマンドであり、
(2)前記実行手段は、特徴量が前記コマンドとともに前記入力装置から送出された場合、当該特徴量に応じて前記変更を適用してよい。
 上記の構成によれば、本発明の一態様に係る被制御装置は、上記入力装置から送出された軌跡の特徴量に応じて軌跡に変更を加える。これにより、ユーザは自身が入力した手書き情報を所望する形態で表示させることができる。
 また、本発明の一態様に係る電子黒板システムは、
(1)上記入力装置と、
(2)上記被制御装置とを含んでよい。
 上記の構成によれば、ユーザは自身が入力した手書き情報を所望する形態で表示させることができる。
 なお、前記入力装置および前記被制御装置は、コンピュータによって実現してもよい。この場合には、コンピュータを前記入力装置および前記被制御装置の各手段として動作させることにより、前記入力装置および前記被制御装置をコンピュータで実現させる制御プログラム、およびこれを記録したコンピュータ読み取り可能な記録媒体も本発明の範疇に入る。
 〔各実施の形態に含まれる構成(技術的手段)の組み合わせについて〕
 上述した実施の形態に含まれる構成は、適宜組み合わせられることに注意する。すなわち、上記の実施の形態で説明したすべての構成は、当該説明に係る実施の形態のみならず、他の実施の形態においても当該構成の全部または一部を組み合わせて利用でき、それによって得られる実施の形態についても本発明の技術的範囲に含まれる。
 さらに換言すれば、本発明は上述した実施の形態に限定されるものではなく、請求項に示した範囲で種々の変更が可能である。すなわち、請求項に示した範囲で適宜変更した技術的手段を組み合わせて得られる実施の形態についても本発明の技術的範囲に含まれる。
 〔ソフトウェアによる実現例〕
 最後に、入力装置11および表示装置12の各ブロック(電子黒板100の各ブロック)は、集積回路(ICチップ)上に形成された論理回路によってハードウェア的に実現してもよいし、CPU(Central Processing Unit)を用いてソフトウェア的に実現してもよい。
 後者の場合、入力装置11および表示装置12(電子黒板100)は、各機能を実現するプログラムの命令を実行するCPU、上記プログラムを格納したROM(Read Only Memory)、上記プログラムを展開するRAM(Random Access Memory)、上記プログラムおよび各種データを格納するメモリ等の記憶装置(記録媒体)などを備えている。そして、本発明の目的は、上述した機能を実現するソフトウェアである入力装置11および表示装置12(電子黒板100)の制御プログラムのプログラムコード(実行形式プログラム、中間コードプログラム、ソースプログラム)をコンピュータで読み取り可能に記録した記録媒体を、入力装置11および表示装置12(電子黒板100)に供給し、そのコンピュータ(またはCPUやMPU)が記録媒体に記録されているプログラムコードを読み出し実行することによっても、達成可能である。
 上記記録媒体としては、例えば、磁気テープやカセットテープ等のテープ類、フロッピー(登録商標)ディスク/ハードディスク等の磁気ディスクやCD-ROM/MO/MD/DVD/CD-R等の光ディスクを含むディスク類、ICカード(メモリカードを含む)/光カード等のカード類、マスクROM/EPROM/EEPROM/フラッシュROM等の半導体メモリ類、あるいはPLD(Programmable logic device)やFPGA(Field Programmable Gate Array)等の論理回路類などを用いることができる。
 また、入力装置11および表示装置12(電子黒板100)を通信ネットワークと接続可能に構成し、上記プログラムコードを通信ネットワークを介して供給してもよい。この通信ネットワークは、プログラムコードを伝送可能であればよく、特に限定されない。例えば、インターネット、イントラネット、エキストラネット、LAN、ISDN、VAN、CATV通信網、仮想専用網(Virtual Private Network)、電話回線網、移動体通信網、衛星通信網等が利用可能である。また、この通信ネットワークを構成する伝送媒体も、プログラムコードを伝送可能な媒体であればよく、特定の構成または種類のものに限定されない。例えば、IEEE1394、USB、電力線搬送、ケーブルTV回線、電話線、ADSL(Asymmetric Digital Subscriber Line)回線等の有線でも、IrDAやリモコンのような赤外線、Bluetooth(登録商標)、IEEE802.11無線、HDR(High Data Rate)、NFC(Near Field Communication)、DLNA(Digital Living Network Alliance)、携帯電話網、衛星回線、地上波デジタル網等の無線でも利用可能である。なお、本発明は、上記プログラムコードが電子的な伝送で具現化された、搬送波に埋め込まれたコンピュータデータ信号の形態でも実現され得る。
 本発明は、電子黒板、携帯電話、タブレット端末、パーソナルコンピュータ、その他手書き操作による入力で駆動可能な電子機器に適用できる。
  1  軌跡
  2  パターン
  3  手書き操作
  3a 文字入力操作
  3b ジェスチャー(往復する操作)
  4  入力情報(手書き操作で入力された情報)
  4a 手書き文字
  4b コマンド
  4c 変更手書き文字
  5  特徴量
  5a 距離
  5b 角度(なす角)
  5c 位置(開始位置または終了位置)
  8a 開始位置
  8b 終了位置
  8c 折り返し位置
  9a 水平線(入力面に設定された所定の基準線)
  9b 斜め線(開始位置と折り返し位置とを結ぶ直線)
 11  入力装置
 12  表示装置(被制御装置)
 15  照合部(照合手段)
 16  送出部(送出手段)
 17  抽出部(抽出手段)
 18  変更適用部(実行手段)
 30  記憶装置
 40  入力部(軌跡を入力できる入力面)
 60  表示制御部(出力手段)
 70  表示部(出力手段)
100  電子黒板(電子黒板システム)

Claims (14)

  1.  ユーザによる手書き操作の軌跡を取得できる入力面を備え、前記軌跡に基づいて情報を入力可能であり、入力された当該情報を外部の被制御装置に送出する入力装置であって、
     コマンドと所定のパターンとが対応付けられて予め格納された記憶装置を参照し、前記軌跡と前記パターンとが一致するか否かを判定する照合手段と、
     前記照合手段によって前記軌跡と前記パターンとが一致しないと判定された場合は前記軌跡を送出し、一致すると判定された場合は一致した当該パターンに対応付けられた前記コマンドを送出する送出手段とを備えたことを特徴とする入力装置。
  2.  前記照合手段によって前記軌跡と前記パターンとが一致すると判定された場合、前記軌跡の特徴量を抽出する抽出手段をさらに備え、
     前記送出手段は、前記抽出手段によって抽出された特徴量をさらに前記被制御装置に送出することを特徴とする請求項1に記載の入力装置。
  3.  前記照合手段は、開始位置と終了位置とが略同一であって、前記開始位置から前記開始位置とは異なる折り返し位置を経由して前記終了位置までを略直線で往復するパターンと、前記軌跡との一致を判定することを特徴とする請求項2に記載の入力装置。
  4.  前記抽出手段は、前記開始位置、前記終了位置、または前記折り返し位置のうち少なくとも1つを前記特徴量の1つとして抽出することを特徴とする請求項3に記載の入力装置。
  5.  前記抽出手段は、前記開始位置または前記終了位置から、前記折り返し位置までの距離を特徴量の1つとして抽出することを特徴とする請求項3または4に記載の入力装置。
  6.  前記抽出手段は、前記入力面に設定された所定の基準線に対して、前記開始位置または前記終了位置と、前記折り返し位置とを結ぶ直線がなす角を特徴量の1つとして抽出することを特徴とする請求項3から5のいずれか1項に記載の入力装置。
  7.  前記照合手段は、開始位置と終了位置とが略同一であって、前記開始位置から前記開始位置とは異なる折り返し位置を経由して前記終了位置までを略直線で往復するパターンと、前記軌跡との一致を判定することを特徴とする請求項1に記載の入力装置。
  8.  請求項1から7のいずれか1項に記載の入力装置から送出された前記コマンドを実行する実行手段を備えたことを特徴とする被制御装置。
  9.  前記入力装置から送出された軌跡を出力する出力手段を備えたことを特徴とする請求項8に記載の被制御装置。
  10.  前記コマンドは、前記軌跡に対して変更を適用することを指示するコマンドであり、
     前記実行手段は、特徴量が前記コマンドとともに前記入力装置から送出された場合、当該特徴量に応じて前記変更を適用することを特徴とする請求項8または9に記載の被制御装置。
  11.  請求項1から7のいずれか1項に記載の入力装置と、
     請求項8から10のいずれか1項に記載の被制御装置とを含むことを特徴とする電子黒板システム。
  12.  ユーザによる手書き操作の軌跡を取得できる入力面を備え、前記軌跡に基づいて情報を入力可能であり、入力された当該情報を外部の被制御装置に送出する入力装置の制御方法であって、
     コマンドと所定のパターンとが対応付けられて予め格納された記憶装置を参照し、前記軌跡と前記パターンとが一致するか否かを判定する照合ステップと、
     前記照合ステップにおいて前記軌跡と前記パターンとが一致しないと判定された場合は前記手書き操作の軌跡を送出し、一致すると判定された場合は一致した当該パターンに対応付けられた前記コマンドを送出する送出ステップとを含むことを特徴とする入力装置の制御方法。
  13.  請求項1から7のいずれか1項に記載の入力装置、および請求項8から10のいずれか1項に記載の被制御装置の少なくとも一方を動作させるための制御プログラムであって、コンピュータを前記各手段として機能させるための制御プログラム。
  14.  請求項13に記載の制御プログラムを記録したコンピュータ読み取り可能な記録媒体。
     
PCT/JP2012/073843 2011-10-21 2012-09-18 入力装置、入力装置の制御方法、被制御装置、電子黒板システム、制御プログラム、および記録媒体 WO2013058047A1 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN201280050624.3A CN103890698B (zh) 2011-10-21 2012-09-18 输入装置、输入装置的控制方法、被控制装置以及电子黑板系统
US14/351,780 US20140292702A1 (en) 2011-10-21 2012-09-18 Input device, input device control method, controlled device, electronic whiteboard system, and recording medium

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2011232222A JP5848946B2 (ja) 2011-10-21 2011-10-21 入出力システム、入出力システムの制御方法、制御プログラム、および記録媒体
JP2011-232222 2011-10-21

Publications (1)

Publication Number Publication Date
WO2013058047A1 true WO2013058047A1 (ja) 2013-04-25

Family

ID=48140701

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2012/073843 WO2013058047A1 (ja) 2011-10-21 2012-09-18 入力装置、入力装置の制御方法、被制御装置、電子黒板システム、制御プログラム、および記録媒体

Country Status (4)

Country Link
US (1) US20140292702A1 (ja)
JP (1) JP5848946B2 (ja)
CN (1) CN103890698B (ja)
WO (1) WO2013058047A1 (ja)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102799358B (zh) * 2012-06-20 2017-08-08 南京中兴软件有限责任公司 光标显示位置的确定方法及装置
KR102040851B1 (ko) * 2012-08-06 2019-11-06 삼성전자주식회사 휴대단말기의 키 입력 방법
JP6150652B2 (ja) * 2013-07-29 2017-06-21 キヤノン株式会社 撮像装置、撮像装置の制御方法及びプログラム並びに記録媒体
GB2519124A (en) * 2013-10-10 2015-04-15 Ibm Controlling application launch
JP6329032B2 (ja) * 2014-08-27 2018-05-23 シャープ株式会社 タッチパネルシステム及びタッチパネル装置
US10489051B2 (en) * 2014-11-28 2019-11-26 Samsung Electronics Co., Ltd. Handwriting input apparatus and control method thereof

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH06289983A (ja) * 1992-07-31 1994-10-18 Sony Corp 手書き入力情報処理装置
JPH08212299A (ja) * 1995-02-08 1996-08-20 Nippon Telegr & Teleph Corp <Ntt> 手書き入力制御方法及びその装置
JPH1185398A (ja) * 1997-09-11 1999-03-30 Kenwood Corp タッチパネルディスプレー用コマンド入力装置
JP2001005599A (ja) * 1999-06-22 2001-01-12 Sharp Corp 情報処理装置及び情報処理方法並びに情報処理プログラムを記録した記録媒体
US20060001656A1 (en) * 2004-07-02 2006-01-05 Laviola Joseph J Jr Electronic ink system
US20070262951A1 (en) * 2006-05-09 2007-11-15 Synaptics Incorporated Proximity sensor device and method with improved indication of adjustment
JP2008027082A (ja) * 2006-07-19 2008-02-07 Fujitsu Ltd 手書き入力装置、手書き入力方法、及びコンピュータプログラム
JP2011053986A (ja) * 2009-09-02 2011-03-17 Sharp Corp 計算装置、計算プログラムおよびこれが記録された記録媒体
JP2011203829A (ja) * 2010-03-24 2011-10-13 Seiko Epson Corp コマンド生成装置、その制御方法及びそれを備えたプロジェクター

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9024890B2 (en) * 2008-05-17 2015-05-05 David H. Chin Comparison of an applied gesture on a touch screen of a mobile device with a remotely stored security gesture
CN101354747B (zh) * 2008-09-18 2011-07-20 炬力集成电路设计有限公司 一种手写符号的识别方法及装置
US20110260829A1 (en) * 2010-04-21 2011-10-27 Research In Motion Limited Method of providing security on a portable electronic device having a touch-sensitive display
US9134800B2 (en) * 2010-07-20 2015-09-15 Panasonic Intellectual Property Corporation Of America Gesture input device and gesture input method

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH06289983A (ja) * 1992-07-31 1994-10-18 Sony Corp 手書き入力情報処理装置
JPH08212299A (ja) * 1995-02-08 1996-08-20 Nippon Telegr & Teleph Corp <Ntt> 手書き入力制御方法及びその装置
JPH1185398A (ja) * 1997-09-11 1999-03-30 Kenwood Corp タッチパネルディスプレー用コマンド入力装置
JP2001005599A (ja) * 1999-06-22 2001-01-12 Sharp Corp 情報処理装置及び情報処理方法並びに情報処理プログラムを記録した記録媒体
US20060001656A1 (en) * 2004-07-02 2006-01-05 Laviola Joseph J Jr Electronic ink system
US20070262951A1 (en) * 2006-05-09 2007-11-15 Synaptics Incorporated Proximity sensor device and method with improved indication of adjustment
JP2008027082A (ja) * 2006-07-19 2008-02-07 Fujitsu Ltd 手書き入力装置、手書き入力方法、及びコンピュータプログラム
JP2011053986A (ja) * 2009-09-02 2011-03-17 Sharp Corp 計算装置、計算プログラムおよびこれが記録された記録媒体
JP2011203829A (ja) * 2010-03-24 2011-10-13 Seiko Epson Corp コマンド生成装置、その制御方法及びそれを備えたプロジェクター

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
TAKEO IGARASHI ET AL.: "Interactive Beautification:A Technique for Rapid Geometric Design", TRANSACTIONS OF INFORMATION PROCESSING SOCIETY OF JAPAN, vol. 39, no. 5, 15 May 1998 (1998-05-15), pages 1373 - 1384 *
TOSHIBA CORP., MICROSOFTARV WINDOWS FOR PEN COMPUTING USERS GUIDE, A1 EDITION, 9 November 1994 (1994-11-09), pages 69 - 80 *

Also Published As

Publication number Publication date
US20140292702A1 (en) 2014-10-02
JP5848946B2 (ja) 2016-01-27
CN103890698B (zh) 2016-10-26
JP2013089203A (ja) 2013-05-13
CN103890698A (zh) 2014-06-25

Similar Documents

Publication Publication Date Title
WO2013058047A1 (ja) 入力装置、入力装置の制御方法、被制御装置、電子黒板システム、制御プログラム、および記録媒体
US8669955B2 (en) Portable display device, method of controlling portable display device, program, and recording medium
US10133310B2 (en) Mobile terminal and method for controlling the same
JP4295602B2 (ja) 言語をペン先idに関連付ける方法、入力デバイスを使用して電子インクを処理装置に入力する方法および電子インクを受け取るための装置
JP5584802B2 (ja) 情報処理装置、情報処理装置の制御方法、制御プログラム、コンピュータ読み取り可能な記録媒体
US20120176313A1 (en) Display apparatus and voice control method thereof
US20100188352A1 (en) Information processing apparatus, information processing method, and program
JP2013041332A (ja) 情報処理装置、操作画面表示方法、制御プログラムおよび記録媒体
JP2013238935A (ja) 入力装置、入力装置の制御方法、制御プログラム、および記録媒体
CN109101165A (zh) 用户界面调节方法
JP2012133490A (ja) 表示制御装置及びその制御方法、プログラム、及び記録媒体
EP2180400A2 (en) Image processing apparatus, image processing method, and program
KR102367184B1 (ko) 스크린 키보드를 이용한 정보 입력 방법 및 이를 위한 장치
KR20150134674A (ko) 사용자 단말 및 이의 제어 방법, 그리고 멀티미디어 시스템
JP5864319B2 (ja) 電子機器、電子機器を制御するための方法、および、電子機器を制御するためのプログラム
TWI442305B (zh) 多點控制的操作方法及其控制系統
CN107665087B (zh) 图像显示装置、图像显示方法以及图像显示系统
JP5657269B2 (ja) 画像処理装置、表示装置、画像処理方法、画像処理プログラム、記録媒体
JP2013214188A (ja) 文字認識処理装置、文字認識処理方法、文字認識処理プログラム、および、コンピュータ読み取り可能な記録媒体
US20130188218A1 (en) Print Requests Including Event Data
WO2023273761A1 (zh) 一种显示设备及图像处理方法
WO2023273462A1 (zh) 一种显示设备及填色方法
JP6971671B2 (ja) 画像表示装置、画像表示システム及びプログラム
JP2012212448A (ja) 情報処理装置およびプログラム
JP5165661B2 (ja) 制御装置、制御方法、制御プログラム、及び記録媒体

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 12842432

Country of ref document: EP

Kind code of ref document: A1

WWE Wipo information: entry into national phase

Ref document number: 14351780

Country of ref document: US

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 12842432

Country of ref document: EP

Kind code of ref document: A1