WO2005006211A1 - 情報処理方法、情報処理プログラム、情報処理装置およびリモートコントローラ - Google Patents

情報処理方法、情報処理プログラム、情報処理装置およびリモートコントローラ Download PDF

Info

Publication number
WO2005006211A1
WO2005006211A1 PCT/JP2004/009923 JP2004009923W WO2005006211A1 WO 2005006211 A1 WO2005006211 A1 WO 2005006211A1 JP 2004009923 W JP2004009923 W JP 2004009923W WO 2005006211 A1 WO2005006211 A1 WO 2005006211A1
Authority
WO
WIPO (PCT)
Prior art keywords
paste
copy
user
information processing
destination
Prior art date
Application number
PCT/JP2004/009923
Other languages
English (en)
French (fr)
Inventor
Noriaki Izumi
Akira Takagi
Original Assignee
National Institute Of Advanced Industrial Science And Technology
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by National Institute Of Advanced Industrial Science And Technology filed Critical National Institute Of Advanced Industrial Science And Technology
Priority to AU2004256647A priority Critical patent/AU2004256647A1/en
Priority to EP04747390A priority patent/EP1662403A4/en
Priority to US10/564,032 priority patent/US20070035745A1/en
Publication of WO2005006211A1 publication Critical patent/WO2005006211A1/ja

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00—Handling natural language data
    • G06F40/10—Text processing
    • G06F40/103—Formatting, i.e. changing of presentation of documents
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00—Handling natural language data
    • G06F40/10—Text processing
    • G06F40/166—Editing, e.g. inserting or deleting
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00—Handling natural language data
    • G06F40/30—Semantic analysis

Definitions

  • the present invention relates to an information processing method, an information processing program, an information processing device, and a remote controller suitable for performing copy-and-paste, and in particular, to a plurality of objects by a simple operation.
  • the present invention relates to an information processing method, an information processing program, an information processing device, and a remote controller that can perform copy and paste.
  • Patent Document 1 A conventional information processing device (Patent Document 1) generally copies (including cuts) a specific character string (object) on a screen and then pastes the character string to another position on the screen. It has the function of copy-and-paste (pasting).
  • a copy range is specified by pressing a range specification key provided on a keyboard or pressing a mouse button. For example, in a copy operation using a keyboard, move the cursor to the first character of the object, press the range designation key provided on the keyboard, and move the cursor from the first character to the last character, Is pressed, the copy range is specified.
  • a copy range is specified by moving the mouse cursor to the first character of the object, pressing the mouse button, and moving the mouse cursor to the last character as it is. .
  • Patent Document 1 JP-A-11-306177
  • the present invention has been made in view of the above, and is an information processing method, an information processing program, an information processing apparatus, and a remote control capable of performing copy / paste on a plurality of objects by a simple operation. It is intended to provide a controller.
  • an information processing method includes a copying step of copying a plurality of objects, and a semantic analyzing step of analyzing the meaning of each of the plurality of objects. And a paste destination selecting step of selecting a paste destination that matches the semantic analysis result, and a paste step of pasting the plurality of objects to the paste destination.
  • An information processing program causes a computer to execute the above-described information processing method.
  • the information processing apparatus provides a copy method for copying a plurality of objects.
  • a step semantic analysis means for analyzing the meaning of each of the plurality of objects, paste destination selection means for selecting a paste destination that matches the result of the analysis of the meaning, and a paste for pasting the plurality of objects to the paste destination Means.
  • a remote controller executes the above-described information processing method.
  • FIG. 1 is a block diagram showing a configuration of a first exemplary embodiment according to the present invention.
  • FIG. 2 is a diagram showing copy copy information displayed on a display unit shown in FIG. 1 and a copy source module shown in FIG. 22.
  • FIG. 3 is a diagram showing first destination information displayed on a display unit shown in FIG. 1 and a paste destination module shown in FIG. 22.
  • FIG. 4 is a view showing a state after pasting the paste destination information shown in FIG. 3.
  • FIG. 5 is a diagram showing copy source information X corresponding to the copy source information shown in FIG. 2.
  • FIG. 6 is a diagram showing copy source information corresponding to the copy source information shown in FIG. 2.
  • FIG. 7 is a diagram showing paste destination source information corresponding to the paste destination information shown in FIG. 3.
  • FIG. 8 is a diagram showing the dictionary database shown in FIG. 1.
  • FIG. 9 is a flowchart illustrating an operation of Embodiments 13 working on the present invention.
  • FIG. 10 is a flowchart illustrating a copy process shown in FIG. 9 in the first embodiment.
  • FIG. 11 is a flowchart illustrating a paste preparation process shown in FIG. 9 in the first embodiment.
  • FIG. 12 is a flowchart illustrating the paste processing shown in FIG. 9 in the first and second embodiments.
  • FIG. 13 is a diagram showing a result of a source structure analysis of a copy source according to the first and second embodiments.
  • FIG. 14 is a diagram illustrating the operation of the first embodiment.
  • FIG. 15 is a diagram illustrating the operation of the first embodiment.
  • FIG. 16 is a diagram showing a result of a copy source semantic analysis according to the first embodiment.
  • FIG. 17 is a diagram showing a result of a paste destination source structure analysis in the first and second embodiments.
  • FIG. 18 is a diagram illustrating the operation of the first embodiment.
  • FIG. 19 is a diagram illustrating the operation of the first embodiment.
  • FIG. 20 is a view showing a result of a semantic analysis of a paste destination according to the first embodiment.
  • FIG. 21 is a view for explaining selection of a paste destination in the first embodiment.
  • FIG. 22 is a block diagram showing a configuration of a second exemplary embodiment of the present invention.
  • FIG. 23 is a diagram showing the dictionary database shown in FIG. 22.
  • FIG. 24 is a flowchart illustrating the copy processing shown in FIG. 9 in the second embodiment.
  • FIG. 25 is a flowchart illustrating a paste preparation process shown in FIG. 9 in the second embodiment.
  • FIG. 26 is a diagram showing a result of a copy source semantic analysis in the second embodiment.
  • FIG. 27 is a diagram showing a correspondence relationship between a copy source semantic analysis result and a voice command analysis result shown in FIG. 26.
  • FIG. 28 is a diagram illustrating the operation of the second embodiment.
  • FIG. 29 shows a result of a semantic analysis of the paste destination according to the second embodiment.
  • FIG. 30 is a block diagram showing a configuration of a third exemplary embodiment of the present invention.
  • FIG. 31 is a diagram showing copy source information displayed on the display unit shown in FIG. 30.
  • FIG. 32 is a diagram showing paste destination information displayed on the display unit shown in FIG. 30.
  • FIG. 33 is a diagram showing the thesaurus dictionary database shown in FIG. 30.
  • FIG. 34 is a flowchart illustrating the copy processing shown in FIG. 9 in the third embodiment.
  • FIG. 35 is a flowchart illustrating a paste preparation process shown in FIG. 9 in the third embodiment.
  • FIG. 36 is a flowchart illustrating the paste processing shown in FIG. 9 in the third embodiment.
  • FIG. 37 is a block diagram showing a configuration of a modified example of Embodiment 13;
  • FIG. 1 is a block diagram showing a configuration of Embodiment 1 which is useful for the present invention.
  • a display control unit 10 performs display control on a display unit 20.
  • the display unit 20 is an LCD (Liquid Crystal Display), a CRT (Cathode Ray Tube), or the like.
  • the display unit 20 displays, for example, copy source information 100 (see FIG. 2) and paste destination information 200 (see FIG. 3) under the control of the display control unit 10.
  • the copy source information 100 shown in FIG. 2 is, for example, HTML (HyperText Markup).
  • the copy source information 100 is displayed on the display unit 20 after the copy source information 110 is read by a browser (not shown).
  • FIG. 13 is a diagram showing the copy source information 110 (copy source information 100) in a logical structure.
  • the copy source information 100 shown in FIG. 2 is copy source information in copy “and” paste.
  • the word “copy” includes “cut”.
  • this copy source information 100 as a hotel list (Tokyo region), the hotel name (" ⁇ Hotel Capitol” etc.), postal code ("100-1111” etc.) and address ("1-11 Nagatacho, Chiyoda-ku, Tokyo”) -1), telephone numbers (such as "03-3333-1111"), and remarks (such as "meeting rooms and banquet halls and internet available”).
  • the paste destination information 200 shown in FIG. 3 also corresponds to the paste destination source information 210 described in, for example, HTML (see FIG. 7). (Not shown) and displayed on the display unit 20.
  • FIG. 4 is a diagram showing the paste destination information 200 shown in FIG. 3 after pasting.
  • the user interface unit 30 has a function as a man-machine interface (mouse, keyboard, trackball, etc.) operated by the user.
  • the user interface section 30 includes a user operation management section 31, a copy area designation section 32, a paste area designation section 33, and an auxiliary designation section.
  • the user operation management unit 31 has a function of managing user operations.
  • the copy area designation unit 32 has a function of designating a copy area including an object (character string or the like) to be copied, based on the user's operation, with respect to the copy source information 100 (see FIG. 2) displayed on the display unit 20. Have.
  • the copy area designating unit 32 cooperates with the cursor C shown in FIG. 2, and designates an area near the cursor C as a copy area.
  • the paste area designating section 33 has a function of designating a paste area where the above object is to be pasted from the destination information 200 (see FIG. 3) displayed on the display section 20 based on a user operation. Have.
  • the paste area designating section 33 also cooperates with the cursor C shown in FIG. 3 in the same manner as the copy area designating section 32, and designates an area near the cursor C as a paste area.
  • the auxiliary designating section 34 includes an object other than the copy area and the paste area described above. It has a function to specify the job.
  • the auxiliary designation unit 34 designates a copy source file in the storage unit 60 described later.
  • the source information analysis unit 40 includes copy source source information 110 (see Figs. 5 and 6), paste destination source information 210 (see Fig. 7), partial copy source source information 110a (see Fig. 5) described later, It has a function to analyze the source structure (tree structure, etc.) and semantic structure of the paste destination source information 210a (see Fig. 7).
  • the source information analysis unit 40 includes a source structure analysis unit 41, a semantic analysis unit 42, and a shaping unit 43.
  • the source structure analysis section 41 includes the copy source information 110
  • FIG. 13 is a diagram showing a copy source source structure analysis result corresponding to the copy source source information 110.
  • FIG. 17 is a diagram showing a paste destination source structure analysis result corresponding to paste destination source information 210 (see FIG. 7).
  • the semantic analysis unit 42 has a function of analyzing the semantic structure of the partial copy source information 110a (see FIG. 5) and the partial paste destination source information 210a (see FIG. 7) while referring to the dictionary database 50. Have.
  • the dictionary database 50 is a database that stores rules described in an if / then format or the like.
  • FIG. 8 illustrates rules for giving semantic attributes, rules for defining the relationship between the character system IJ and the semantic attributes, rules for tag structures, rules for defining the inclusive relation of character strings, and the like.
  • the analysis target of the semantic structure is [11-9] described by if (meaning that it is any number of 1-9), [0-9] -9], ⁇ , [0-9], the analysis target is analyzed as “zip code” and semantic structure as described in then.
  • the formatting unit 43 collectively shapes the original copy source source information, partial copy source source information, copy source source structure analysis result, and copy source semantic analysis result as a copy source file. After that, it is stored in the storage unit 60.
  • Paste processing section 70 executes processing related to paste based on the copy source semantic analysis result included in the copy source file specified by auxiliary specifying section 34.
  • the input candidate selection unit 71 has a function of reading the copy source file designated by the auxiliary designation unit 34 from the storage unit 60 as an input candidate.
  • the paste destination selection unit 72 determines the copy source object based on the copy source semantic analysis result included in the copy source file read by the input candidate selection unit 71 and the result obtained by comparing the paste destination semantic analysis result. Select the paste destination. Details of the operation of the paste destination selection unit 72 will be described later. As shown in FIG. 4, the paste unit 73 pastes the copy source object to the first destination (see FIG. 3) selected by the paste destination selection unit 72.
  • display unit 20 displays copy source information 100 (see FIG. 2) and paste destination information 200 (see FIG. 3).
  • step SA 1 shown in FIG. 9 the source structure analysis unit 41 uses the copy area designation unit 32 to determine whether a copy area has been designated in the copy source information 100 (see FIG. 2). Is determined, and in this case, the determination result is “No”.
  • step SA2 the source structure analysis unit 41 determines whether or not the user has specified the paste area in the paste destination information 200 (see Fig. 3) by using the paste area specification unit 33. And the determination result is “No”. Thereafter, the determinations in step SA1 and step SA2 are repeated until the determination result becomes "Yes ⁇ ".
  • step SA3 copy processing is executed.
  • the cursor C is located at the address “1-11-1 Nagatacho, Chiyoda-ku, Tokyo”.
  • source structure analysis section 41 transmits copy source source information 110 (see FIGS. 5 and 6) corresponding to copy source information 100 to user interface section 30. Read from the display control unit 10 via the.
  • step SB2 the source structure analysis unit 41 analyzes the copy source information 110 and obtains a copy source source structure analysis result having a tree structure as shown in FIG.
  • step SB3 the source structure analysis unit 41 acquires the position information of the cursor C in the copy source information 100 shown in FIG.
  • the object corresponding to the position information is recognized based on the analysis result of the copy source structure shown in FIG.
  • the source structure analysis unit 41 sets the font> and the 1-11-1 Nagatacho, Chiyoda-ku, Tokyo, which are shaded in FIG. 14, to correspond to the position information of the cursor C (see FIG. 2). Recognize as an object to do.
  • step SB5 the source structure analysis unit 41 bundles a plurality of objects including the objects (ku font> and K 1-11_1 Nagatacho, Chiyoda-ku, Tokyo: see Fig. 14) recognized in step SB4. To present to the user.
  • the plurality of powerful objects are a plurality of objects under "ku font” and "ku td> which is a higher-level object of" 1-11-1 Nagatacho, Chiyoda-ku, Tokyo “(see Fig. 14).
  • spatially neighboring objects may be selected. You can also use a multiple object selection pattern to select multiple objects located in the.
  • a plurality of objects for example, “@Hotel Capitol” and “@Etacel Hotel Tokyo” existing in a circle having a radius r shown in FIG. 31 described later.
  • the user determines whether or not the partial force of the “no” or “light” display is a desired copy area.
  • the determination result is set to “Yes” and the auxiliary designation portion is set. Use 34 to approve the copy area.
  • step SB6 the source structure analysis unit 41 determines whether or not the user has obtained the approval, and in this case, sets the determination result to “Yes”. If the result of the determination in step SB6 is “No”, in step SB5, the source structure analysis unit 41 uses another multiple object selection pattern to set the object (ku font> and Ku 1-11- Nagatacho, Chiyoda-ku, Tokyo). 1>: Refer to Fig. 14) and present it again to the user.
  • step SB7 the semantic analysis unit 42, based on the copy source information 110 shown in FIG. 5, converts the partial copy source information 110a (part enclosed by a broken line) corresponding to the plurality of objects approved in step SB6. Extract.
  • step SB8 the semantic analysis unit 42 analyzes the meaning of the following objects included in the partial copy source information 110a while referring to the dictionary database 50.
  • FIG. 16 shows the result of the semantic analysis of the copy source in step SB8.
  • “100-1111” is interpreted as “postal code” as a semantic attribute.
  • “1-11-1 Nagatacho, Chiyoda-ku, Tokyo” is interpreted as “address” as a semantic attribute.
  • “03-3333-1111” is interpreted as “telephone number” as a semantic attribute.
  • “Meeting rooms and banquet rooms available and internet available” is a semantic attribute. Is interpreted as "remarks”.
  • step SB9 the shaping unit 43 performs the original copy source source information 110, the partial copy unitary source information 110a, the copy source source structure analysis result (see Fig. 13), and the copy source meaning analysis result (see Fig. 16). Is formatted as a copy source file and stored in the storage unit 60.
  • step SA4 paste preparation processing is executed.
  • the paste destination information 200 it is assumed that the cursor C is positioned at “address”.
  • source structure analysis section 41 displays paste destination source information 210 (see FIG. 7) corresponding to paste destination information 200 via user interface section 30. Read from control unit 10.
  • step SC2 the source structure analysis unit 41 analyzes the paste destination source information 210, and obtains a paste destination source structure analysis result having a tree structure as shown in FIG.
  • step SC3 the source structure analysis unit 41 acquires the position information of the cursor C in the paste destination information 200 shown in FIG.
  • the object corresponding to the position information is recognized based on the result of the paste destination source structure analysis shown in FIG.
  • the source structure analysis unit 41 recognizes dt> and the address>, which are shaded in FIG. 18, as an object corresponding to the position information of the cursor C (see FIG. 3).
  • step SC5 the source structure analysis unit 41 uses the same multiple object selection pattern as in step SB5 (see Fig. 10) to recognize the object (and dt> and address) recognized in step SC4: see Fig. 18. ) And present them to the user in a lump Specifically, the plurality of objects are shaded in FIG. 19 as dl>, dt>, “ ⁇ ”, dd>, and input> (right of “ ⁇ ” in FIG. 3). Dt>, "address”, dd>, ⁇ input> (corresponds to the input field to the right of "address” shown in Fig. 3), dt>, "telephone number"Dd> and input> (corresponding to the input field to the right of "telephone number” shown in Fig. 3).
  • the plurality of powerful objects are a plurality of objects under the control of dt> and the upper-level object of the “address” (see FIG. 18), that is, dl>.
  • a space is selected.
  • a plurality of object selection patterns for selecting a plurality of objects located near the object may be used.
  • the user determines whether or not the partial force S for highlight display is a desired paste area.
  • step SC6 the source structure analysis unit 41 determines whether or not the user has approved the paste area (part of the noise light display). In this case, the determination result is “Yes”. If the determination result in step SC6 is “No”, in step SC5, the source structure analysis unit 41 uses another multiple object selection pattern to select the object ( ⁇ dt> and “address”: see FIG. 18). And present it to the user as a group of multiple objects including.
  • step SC7 the semantic analysis unit 42 determines from the paste destination source information 210 shown in FIG.
  • the partial paste destination source information 210a (portion enclosed by a broken line) corresponding to the plurality of objects approved in step SC6 is extracted.
  • step SC8 the semantic analysis unit 42 determines the meaning of the following objects included in the partial paste destination source information 210a, that is, the objects shaded in FIG. 19 while referring to the dictionary database 50. To analyze.
  • FIG. 20 is a diagram showing the result of the paste-point semantic analysis (shaded portion) in step SC8.
  • “@” is interpreted as “postal code” as a semantic attribute.
  • “Ku input ⁇ ” is interpreted as input field # 1 as a semantic attribute.
  • “Address” is interpreted as “address” as a semantic attribute.
  • “Ku input>” is interpreted as an input field # 2 as a semantic attribute.
  • “Phone number” is interpreted as "phone number” as a semantic attribute.
  • “Ku input>” is interpreted as an input field # 3 as a semantic attribute.
  • step SA5 a paste process is executed. More specifically, in step SD1 shown in FIG. 12, the input candidate selection unit 71 selects the copy source file (in this case, the copy source information 100 (see FIG. 2) corresponding to the copy source information specified by the user in the auxiliary specification unit 34). ) Is read from the storage unit 60.
  • the copy source file in this case, the copy source information 100 (see FIG. 2) corresponding to the copy source information specified by the user in the auxiliary specification unit 34).
  • step SD2 the paste destination selection unit 72 determines the following copy source semantic analysis result (see FIG. 16) included in the copy source file and the following paste destination semantic analysis result (see FIG. 16) obtained in step SC8. 20) is compared with the semantic attribute as a key.
  • the collation result is an object to be pasted (referred to as a paste target object).
  • the paste destination selection unit 72 selects the paste destination of the paste target object from the paste destination semantic analysis result based on the collation result.
  • the paste destination selecting unit 72 uses the semantic attribute of the paste target object as a key to check the object from the paste destination semantic analysis result. For example, in the case of the first paste object “100-1111” (zip code), the object “ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ” (zip code) is confirmed from the result of the semantic analysis of the paste destination.
  • the paste destination selection unit 72 determines from the result of the paste destination semantic analysis shown in FIG. 20 that the object “ku input>” located near the object “ ⁇ ” (postal code) (input box # 1) Is selected as the paste destination of the paste target object "100-1111" (zip code) (see Fig. 21).
  • r ⁇ input> j input field # 1 corresponds to the input field located near the right of “ ⁇ ” in the paste destination information 200 (see FIG. 3).
  • the paste destination selection unit 72 extracts the object "ku input>" (input box # 2) located near the object "address” (address) from the paste destination semantic analysis result shown in FIG. Then, select the paste target object "1-11-1 Nagatacho, Chiyoda-ku, Tokyo” (address) as the paste destination (see Fig. 21).
  • r ⁇ input> j input field # 2 corresponds to an input field located near the right of “address” in the paste destination information 200 (see FIG. 3).
  • the object “telephone number” is confirmed from the paste destination semantic analysis result.
  • the paste destination selecting unit 72 determines from the result of the paste destination semantic analysis shown in FIG. 20 that the object located outside the object “telephone number” (telephone number) “ku input>” (input field # 3) Select the paste destination of the paste target object “03-3333-1111” (telephone number) (see Fig. 21).
  • r ⁇ input> j input field # 3 corresponds to the input field located to the right of “telephone number” in paste destination information 200 (see FIG. 3).
  • step SD4 the paste destination selection unit 72 highlights the three paste destinations (three input fields shown in Fig. 3) selected in step SD3, and allows the user to select paste destination candidates. Present.
  • the user determines whether or not the partial force of the highlighted display is the desired paste destination. In this case, it is assumed that user approval has been obtained for the paste destination.
  • step SD5 the paste destination selecting unit 72 determines whether or not the above-mentioned approval has been obtained by the user, and in this case, makes the determination result "Yes ⁇ ".
  • step SD3 the paste destination selection unit 72 selects the first destination according to another selection criterion in step SD3, and re-presents the paste destination in step SD4.
  • step SD6 as shown in Fig. 4, the paste unit 73 pastes the paste target object to the paste destination that has been approved by the user.
  • the paste unit 73 pastes the paste target object to the paste destination that has been approved by the user.
  • the meaning of each of a plurality of objects copied via the user interface unit 30 is analyzed by the semantic analysis unit 42, and the semantic analysis result is obtained. After selecting a matching paste destination, multiple objects are pasted to the paste destination, so copy and 'paste' over multiple objects can be performed with a simple operation.
  • a copy instruction is issued by one user operation
  • a paste instruction is issued by one user operation. You can do copy 'and' paste on multiple objects with.
  • the structure between objects is clarified for copy source information 100 (copy module) and paste destination information 200 (paste module) described in HTML. Can shorten the processing time required, and can speed up copy and paste.
  • a plurality of structurally coherent objects are copied from copy source information 100 (copy module) based on a copy instruction, and paste destination information 200 is copied according to a paste instruction. Since the paste destination that has a structural unity is selected from the (paste module), copy 'and' paste over multiple objects can be performed with simple operations.
  • step SB6 a plurality of object candidates are presented to the user for approval. Until the recognition is obtained, another plurality of object candidates are re-presented to the user, so that the copying accuracy can be improved.
  • step SD5 the candidate for the paste destination is presented to the user for approval. Until obtained, another paste destination candidate is presented to the user again, so that the paste accuracy can be improved.
  • the force described in the configuration example for completing the copy-and-paste on the display unit 20 shown in FIG. 1 is applied to the copy-and-paste between two physically separated modules.
  • a configuration example in which the paste is performed may be used.
  • FIG. 22 is a block diagram showing a configuration of Embodiment 2 which is useful for the present invention.
  • a copy source module 800 and a paste destination module 900 are modules that exist physically separated from each other and have a wireless communication function (including infrared communication and the like).
  • the user interface unit 300, the source information analysis unit 400, the dictionary database 500, and the paste processing unit 700 also have a wireless communication function.
  • the copy source module 800 displays copy source information 100 (see Fig. 2) to be copied. In addition, it has a function of retaining the copy source information 110 corresponding to the copy source information 100 and a wireless communication function, and is a television device or the like.
  • the paste destination module 900 has a function of pasting an object copied from the copy source module 800, and is a car navigation device, a personal computer, a microwave oven, or the like.
  • the paste destination module 900 displays the paste destination information 200 (see FIG. 3) and the paste destination information corresponding to the paste destination information 200.
  • Source information 210 (see Fig. 7) is retained.
  • the copy source module 800 will be described as a television device, and the paste destination module 900 will be described as a car navigation device.
  • the hotel list (copy source information 100) is displayed on the copy source module 800 (television device)
  • the information (object) relating to the hotel you want to go to is copied, and then this object is copied to the paste destination module. It is assumed that the image is to be pasted on a rule 900 (car navigation device).
  • the user interface unit 300 has a function as a man-machine interface operated by a voice command issued by the user, and includes a user operation management unit 301, a microphone 302, and a voice command analysis unit 303. , An auxiliary designation unit 304, a wired interface unit 305, and a display unit 306.
  • a part of the user interface unit 300 (including a part of the auxiliary specifying unit 304) or the whole (including a part of the auxiliary specifying unit 304) is carried by the user as a remote controller.
  • the function of the remote controller is implemented in a portable information device such as an IC card, a portable terminal, and a PDA (Personal Digital Assistant).
  • voice command in the case of a copy operation, “ ⁇ Store the address of the hotel capitol” is exemplified.
  • examples of the voice command include “input hotel address” and “input hotel” (abbreviated type).
  • the user operation management unit 301 has a function of managing user operations and a function of wireless communication with the outside.
  • the user operation management unit 301 also has a function of extracting partial copy source information corresponding to an object to be copied from the copy source information 110 (see FIGS. 5 and 6).
  • Microphone 302 is a voice command that can be used by the user Is provided with a function to convert the audio signal into an audio signal.
  • the voice command analysis unit 303 has a function of analyzing a voice command based on a voice signal from the microphone 302.
  • the auxiliary designation unit 304 has a function of designating a copy source file in the storage unit 600 described later.
  • the wired interface unit 305 has a function for performing wired communication such as a LAN (Local Area Network).
  • the display unit 306 is an LCD or the like.
  • the source information analyzer 400 has a function of analyzing the semantic structure of the copy source information 110 (see FIGS. 5 and 6) and the destination information 210 (see FIG. 7).
  • the source structure analysis unit 401 determines the source structure (tree structure) of the copy source information 110 (see Figs. 5 and 6) and the paste destination source information 210 (see Fig. 7). Etc.).
  • FIG. 13 is a diagram illustrating a result of the analysis of the copy source source structure corresponding to the copy source information 110.
  • FIG. 17 is a diagram showing a result of the paste destination source structure analysis corresponding to the paste destination source information 210 (see FIG. 7).
  • the semantic analysis unit 402 analyzes the semantic structure of the copy source information 110 (see FIGS. 5 and 6) and the paste source information 210 (see FIG. 7) while referring to the dictionary database 500. It has.
  • the dictionary database 500 is a database that stores rules described in an if / then format or the like.
  • rules defining object qualifiers in addition to the rules of the dictionary database 50 (see FIG. 8), rules defining object qualifiers, rules defining object directives, and area directives are included. New rules have been added, such as the rules to define, IJI to define operation words, and rules on paraphrasing operation words.
  • the object modifier, the object indicator, the area indicator, and the operation word described above are words constituting a voice command generated by a user's power and collected by the microphone 302.
  • the object modifier is equivalent to an adjective such as “big”.
  • the object designation word corresponds to a noun such as “ ⁇ Hotel Capitol”.
  • the area designation word is a word for designating a copy area and a paste area, and includes “almost upper”, “upper”, “slightly upper”, “almost lower”, “lower”, “horizontal”, “next”, “It”, “this”, “all”, etc.
  • Operation words define copy and paste operations Words, such as "copy”, “memory”, “paste”, “paste”, and "input”.
  • the shaping unit 403 collectively shapes the original copy source source information, the partial copy source source information, the copy source source structure analysis result, and the copy source semantic analysis result as a copy source file. After that, it is stored in the storage section 600.
  • Pasting section 700 performs matching using the meaning as a key, based on the copy source file specified by auxiliary specifying section 304, and executes processing related to paste based on the matching result.
  • the input candidate selection unit 701 has a function of reading the copy source file specified by the auxiliary specification unit 304 from the storage unit 600 as an input candidate.
  • the paste destination selection unit 702 compares the copy source semantic analysis result included in the copy source file read by the input candidate selection unit 701 with the paste destination semantic analysis result, based on the copy source object. Select the paste destination.
  • the paste unit 703 pastes the copy source object to the paste destination (see FIG. 3) selected by the paste destination selection unit 702, as shown in FIG.
  • copy source information 100 (see FIG. 2) is displayed on copy source module 800 (television device).
  • paste destination information 200 (see FIG. 3) is also displayed on paste destination module 900 (car navigation device).
  • step SA1 shown in FIG. 9 user operation management section 301 determines whether or not the user has designated a copy area by using a voice command. In this case, the determination result is “N”. o ".
  • step SA2 the user operation management unit 301 uses a voice command by the user. Then, it is determined whether or not the paste area has been designated. In this case, the determination result is “No”. Thereafter, the determinations in step SA1 and step SA2 are repeated until the determination result becomes “Yes”.
  • the user can specify a copy area by selecting "@ Hotel Capitole Address.
  • the voice is collected by the microphone 302 and then recognized by the voice command analysis unit 303 as the designation of the copy area from the keyword of “memory”.
  • the user operation management unit 301 sets the determination result of step SA1 to “Yes”.
  • step SA3 copy processing is executed. Specifically, in step SE1 shown in FIG. 24, the user operation management unit 301 transmits the copy source information 110 corresponding to the copy source information 100 from the copy source module 800 by wireless communication (see FIGS. 5 and 6). Is read and passed to the source information analyzer 400.
  • step SE2 the source structure analysis unit 401 analyzes the copy source information 110 (see FIGS. 5 and 6) and, as shown in FIG. Get.
  • step SE3 the semantic analysis unit 402 analyzes the meaning of each object of the copy source information 110 while referring to the dictionary database 500. Further, the semantic analysis unit 402 transfers the copy source semantic analysis result to the user interface unit 300.
  • FIG. 26 shows the result of the semantic analysis of the copy source (bold part).
  • Tokyo region is interpreted as a “character string” as a semantic attribute.
  • Hotel list is interpreted as a “character string” as a semantic attribute.
  • ⁇ Hotel Capitol is interpreted as a “character string” as a semantic attribute.
  • “100-1111” is interpreted as “zip code” as a semantic attribute. “1-11-1 Nagatacho, Chiyoda-ku, Tokyo” is interpreted as “address” as a semantic attribute. “03-3333-1111” is interpreted as “telephone number” as a semantic attribute. “Meeting room / banquet room available and internet available” is interpreted as “remarks” as a semantic attribute.
  • step SE4 the voice command analysis unit 303 refers to the dictionary database 500. Then, the voice command (in this case, “ ⁇ Remember the address of Hotel Capitol”) is analyzed, and the voice command analysis result consisting of the object modifier, the object indicator, the area indicator, and the operation word is analyzed as follows. obtain.
  • step SE5 the user operation management unit 301 determines whether or not the copy source semantic analysis result (see FIG. 26) includes an object corresponding to the voice command analysis result.
  • step SE5 As shown in FIG. 27, as objects corresponding to both “object qualifier:“ ⁇ Hotel Capitol ”+“ no ”” and “object indicator:“ address ”, characters are used. Since there is a row (@Hotel Capitol) and an address (1-11-1 Nagatacho, Chiyoda-ku, Tokyo), the user operation management unit 301 sets the determination result of step SE5 to "Yes".
  • step SE6 the user operation management unit 301 groups together a plurality of objects (shaded portions) including the object corresponding to the "object directive:" address ", as shown in FIG. Display on the display unit 306 and present it to the user.
  • the plurality of objects are indicated by shading in the same figure as td>, ⁇ font>, "zip code (100-llll)", ⁇ font>, ⁇ font>, "address ( 1-11-1 Nagatacho, Chiyoda-ku, Tokyo) ''
  • a spatial object is selected.
  • a plurality of object selection patterns for selecting a plurality of objects located near the object may be used.
  • the user can display the presented multiple objects ("100-1111", “Chiyoda, Tokyo”). (1-11-1, Nagata-ku, 03-3333-1111) is a desired copy area. In this case, the determination result is set to “Yes” and the auxiliary designation unit 304 is used. , Approve copy space.
  • step SE7 the user operation management unit 301 determines whether or not the user has obtained the approval, and in this case, sets the determination result to "Yes”. If the determination result in step SE7 is S “No”, in step SE5, the user operation management unit 301 selects a plurality of objects according to another plurality of observable selection patterns and re-presents them to the user.
  • step SE8 the user operation management unit 301 determines, based on the copy source semantic analysis result (see Fig. 27), a plurality of objects (default) For example, all objects) are presented together to the user.
  • step SE9 the user operation management unit 301 copies the operation desired by the user from the operation word "memory" analyzed in step SE4 with reference to the dictionary database 500 (see Fig. 23). Recognize that this is an operation.
  • step SE10 the user operation management unit 301 extracts the partial copy source information 110a corresponding to the object to be copied from the copy source information 110 read in step SE1 (see Figs. 5 and 6). And passes it to the source information analysis unit 400.
  • the partial copy unitary source information 110a corresponds to a plurality of objects that have been approved by the user in step SE7 (or a plurality of objects set by default in step SE8).
  • step SE11 the shaping unit 403 outputs the original copy source source information 110, the partial copy source source information 110a passed from the user interface unit 300 (see Fig. 5), and the copy source source structure analysis result (see Fig. 13). ) And the results of the semantic analysis of the copy source shown in FIG. 26 (corresponding to the shaded portions in FIG. 28) are collectively shaped as copy source files, and then stored in the storage unit 600.
  • step SA4 paste preparation processing is executed. Specifically, in step SF1 shown in FIG. 25, the user operation management unit 301 reads the paste destination source information 210 (see FIG. 7) corresponding to the paste destination information 200 from the paste destination module 900 by wireless communication. And pass it to the source information analyzer 400.
  • step SF2 source structure analysis section 401 analyzes paste destination source information 210 (see FIG. 7), and obtains a paste destination source structure analysis result having a tree structure as shown in FIG.
  • step SF3 the semantic analysis unit 402 analyzes the meaning of each object of the paste destination source information 210 with reference to the dictionary database 500. In addition, the semantic analysis unit 402 transfers the paste destination semantic analysis result to the user interface unit 300.
  • Fig. 29 shows the result of the semantic analysis of paste destination (bold part).
  • rinputj (corresponding to the input field on the right side of " ⁇ ⁇ " shown in Fig. 3) is interpreted as input field # 1 as a semantic attribute.
  • “Address” is interpreted as “address” as a semantic attribute.
  • ⁇ Input> (corresponding to the input field to the right of “address” in Fig. 3) is interpreted as input field # 2 as a semantic attribute.
  • “Phone number” is interpreted as "telephone number” as a semantic attribute.
  • Input> (corresponding to the input field to the right of "telephone number” shown in Fig. 3) is interpreted as input field # 3 as a semantic attribute.
  • step SF4 the voice command analysis unit 303 analyzes the voice command (in this case, "enter the hotel address") with reference to the dictionary database 500, and obtains the object modifier, Obtain the voice command analysis result consisting of the target word, the area word, and the operation word.
  • step SF5 the user operation management unit 301 sends the paste destination semantic analysis result (see Fig. 29). Then, it is determined whether or not there is an object corresponding to the voice command analysis result.
  • the user operation management unit 301 sets the determination result of step SF5 to “Yes”.
  • step SF6 the user operation management unit 301 puts together a plurality of objects (shaded portions) including the object corresponding to the “address” (address) on the display unit 306. And display it to the user.
  • the plurality of powerful objects are a plurality of objects under the control of dt> and the control object dl>, which is a superordinate object of "address”.
  • a plurality of objects in addition to the plurality of objects that structurally select a plurality of objects located above or near (lower than, for example) the relevant object, a plurality of objects: Alternatively, a plurality of object selection patterns for selecting a plurality of objects located spatially near the object may be used.
  • the user determines whether or not the presented plurality of objects are the desired paste area. In this case, the determination result is "Yes ⁇ ", and the Approve the region.
  • step SF7 the user operation management unit 301 determines whether the user has obtained the above-mentioned approval or not, and in this case, makes the determination result "Yes ⁇ ".
  • step SF6 the user operation management unit 301 selects a plurality of objects according to another plurality of observable selection patterns and re-presents them to the user.
  • step SF8 the user operation management unit 301 uses the paste destination semantic analysis result (see FIG. 29) to set a plurality of objects (for example, , All objects) are presented together to the user.
  • a plurality of objects for example, , All objects
  • step SF9 the user operation management unit 301 refers to the dictionary database 500 (see FIG. 23) and selects the user's desired input word "input" analyzed in step SF4. Recognize that the operation to be performed is a paste operation.
  • step SA5 a paste process is executed. More specifically, in step SD1 shown in FIG. 12, the input candidate selection unit 701 determines whether the copy source file specified by the user in the auxiliary specification unit 304 (in this case, the copy source information 100 (see FIGS. 5 and 6) Is read from the storage unit 600.
  • step SD2 the paste destination selection unit 702 compares the following copy source semantic analysis results (see Fig. 28) and the following paste destination semantic analysis results (see Fig. 29) included in the copy source file. Match using the semantic attribute as a key.
  • the collation result is an object to be pasted-a target object to be pasted).
  • the paste destination selection unit 702 selects a negative destination of the paste target object from the result of the paste destination semantic analysis based on the above-mentioned collation result.
  • paste destination selection unit 702 maps the semantic attribute of the paste target object.
  • the object is confirmed from the result of the semantic analysis of the paste destination. For example, in the case of “100-1111” (postal code), which is the first target object, the object “@” (postal code) is confirmed from the result of the semantic analysis of the paste destination.
  • the paste destination selection unit 702 outputs the object "ku input>" (input box # 1) located near the above-mentioned object “ ⁇ ” (postal code). ) Is selected as the paste destination of the paste target object “100-1111” (postal code). r ⁇ input> j (input field # 1) corresponds to the input field located to the right of “ ⁇ ” in the paste destination information 200 (see FIG. 3).
  • the paste destination selection unit 702 generates an object "ku input>" (input field # 2) located near the above-mentioned object "address” (address). Is selected as the paste destination of the paste target object "1-11-1 Nagatacho, Chiyoda-ku, Tokyo” (address).
  • ⁇ input> j input field # 2 corresponds to the input field located to the right of “address” in the paste destination information 200 (see FIG. 3).
  • the paste destination selection unit 702 outputs the object "ku input>” (input field) located near the above-mentioned object “telephone number” (telephone number).
  • # Select 3 as the paste destination of the paste target object “03-3333-1111” (telephone number).
  • “Ku input>” (input field # 3) corresponds to the input field located to the right of “phone number” in the paste destination information 200 (see FIG. 3).
  • step SD4 the paste destination selection unit 702 causes the display unit 306 or the like to display the three best destinations (three input fields shown in Fig. 3) selected in step SD3 by wireless communication. , And present it to the user as a paste destination candidate.
  • the user can determine whether the partial force of the highlighted display is the desired paste destination or not. to decide. In this case, it is assumed that user approval has been obtained for the paste destination.
  • paste destination selection unit 702 determines whether or not the above-mentioned approval has been obtained by the user, and in this case, makes a "Yes ⁇ " determination.
  • the paste destination selection unit 702 selects a paste destination according to another selection criterion in step SD3, and re-presents the paste destination in step SD4.
  • step SD6 paste section 703 pastes the paste target object to the paste destination that has been approved by the user.
  • “100-1111”, “1-11-1 Nagatacho, Chiyoda-ku, Tokyo” and “03-3333-1111” are pasted into the respective input fields of the paste destination information 200.
  • the copy source information 100 displayed on the copy source module 800
  • it is called “store almost above” to specify a copy area.
  • the voice is collected by the microphone 302 and then recognized by the voice command analysis unit 303 as the designation of a copy area from the keyword “memory”. Accordingly, the user operation management unit 301 sets the determination result of step SA1 to “Yes”.
  • step SA3 copy processing is executed. Specifically, in step SE1 shown in FIG. 24, the user operation management unit 301 transmits the copy source information 110 corresponding to the copy source information 100 from the copy source module 800 by wireless communication (see FIGS. 5 and 6). Is read and passed to the source information analyzer 400.
  • step SE2 the source structure analysis unit 401 analyzes the copy source information 110 (see FIGS. 5 and 6), and as shown in FIG. 13, the copy source source structure analysis result having a tree structure. Get.
  • step SE3 the semantic analysis unit 402 analyzes the meaning of each object of the copy source information 110 while referring to the dictionary database 500. In addition, the semantic analysis unit 402 passes the copy source semantic analysis result shown in FIG. 26 to the user interface unit 300.
  • step SE4 the voice command analysis unit 303 analyzes the voice command (in this case, "almost memorize") with reference to the dictionary database 500, and obtains the object modifier and the object Obtain voice command analysis results such as object directives, area directives, and operation language skills.
  • step SE5 the user operation management unit 301 determines whether or not the copy source semantic analysis result (see Fig. 26) includes an object corresponding to the voice command analysis result.
  • the user operation management unit 301 sets the determination result of step SE5 to “Yes”.
  • step SE6 the user operation management unit 301 puts together a plurality of objects (shaded portions) including the object corresponding to the "region instruction word:" almost above "”. Is displayed on the display unit 306 and presented to the user.
  • step SE7 the user operation management unit 301 determines whether or not the user has obtained the approval, and in this case, sets the determination result to 63 ". Thereafter, the processing of step SE9 to step SE11 is executed in the same manner as the above-described operation.
  • the voice command analysis unit 303 recognizes the designation of the paste area from the keyword “input”. Accordingly, the user operation management unit 301 sets the determination result of step SA2 illustrated in FIG. 9 to “Yes”.
  • step SA4 paste preparation processing is executed. Specifically, in step SF1 shown in FIG. 25, the user operation management unit 301 reads the paste destination source information 210 (see FIG. 7) corresponding to the paste destination information 200 from the paste destination module 900 by wireless communication. And pass it to the source information analyzer 400.
  • step SF2 source structure analysis section 401 analyzes paste destination source information 210 (see FIG. 7) and obtains a paste destination source structure analysis result having a tree structure as shown in FIG.
  • step SF3 the semantic analysis unit 402 determines whether each object of the paste destination source information 210 Is analyzed with reference to the dictionary database 500.
  • the semantic analysis unit 4 determines whether each object of the paste destination source information 210 Is analyzed with reference to the dictionary database 500.
  • Fig. 29 shows the result of the semantic analysis of paste destination (bold part).
  • step SF4 the voice command analysis unit 303 refers to the dictionary database 500.
  • voice command (in this case, “input all”) is analyzed, and voice command analysis results including the object modifier, the object indicator, the area indicator, and the operation word power are obtained as follows.
  • step SF5 the user operation management unit 301 determines whether or not there is an object corresponding to the voice command analysis result in the paste destination semantic analysis result (see Fig. 29).
  • the user operation management unit 301 Since there are “address” (address) and “telephone number” (phone number), the user operation management unit 301 sets the determination result of step SF5 to “Yes”.
  • step SF6 the user operation management unit 301 sends a plurality of mails including the "zip code” ( ⁇ ), "address” (address), and "telephone number” (telephone number).
  • the objects (shaded portions) are collectively displayed on the display unit 306 and presented to the user.
  • the user determines whether or not the presented multiple objects are the desired paste area. In this case, the determination result is "Yes ⁇ ", and the Approve the region.
  • step SF7 the user operation management unit 301 determines whether or not the user has obtained the approval, and in this case, sets the determination result to "$ 63".
  • step SF9 the user operation management unit 301 pastes the operation desired by the user from the “input”, which is the operation word analyzed in step SF4, with reference to the dictionary database 500 (see FIG. 23). Recognize that this is an operation. Thereafter, the above-described paste processing is performed.
  • the user interface unit 300 A configuration in which the copy area and the paste area are designated using only the force S and the voice described in the configuration example in which the copy area and the paste area are designated only by the user and the pointer designated by the user may be employed.
  • This pointer uses, for example, RFID (Radio Frequency Identification), and is mounted on the above-mentioned remote controller (IC card, mobile terminal, PDA, etc.).
  • the auxiliary designation unit 304 shown in Fig. 22 may have the function as the pointer. Specifically, based on the user's operation, the auxiliary designating unit 304 converts the copy area including the object (such as a character string) to be copied from the copy source information 100 (see FIG. 2) displayed on the copy source module 800. It has a function to specify
  • the auxiliary designation unit 304 has a function of designating a paste area in which the above object is to be pasted from the paste destination information 200 (see FIG. 3) displayed on the paste destination module 900 based on a user operation. Get ready.
  • the user designates the copy area corresponding to the cursor C using the auxiliary designation unit 304,
  • the voice command is collected by the microphone 302 and then recognized by the voice command analysis unit 303 as the designation of the copy area from the keyword “this is good”.
  • copy processing is executed. More specifically, the user operation management unit 301 reads the copy source information 110 (see FIGS. 5 and 6) corresponding to the copy source information 100 from the copy source module 800 by wireless communication, and reads the source information analysis unit 400 Pass to
  • the source structure analysis unit 401 analyzes the copy source information 110 (see FIGS. 5 and 6), and obtains a copy source structure analysis result having a tree structure as shown in FIG.
  • the semantic analysis unit 402 analyzes the meaning of each object of the copy source information 110 with reference to the dictionary database 500. Further, the semantic analysis unit 402 passes the copy source semantic analysis result shown in FIG. 26 to the user interface unit 300. [0206] Next, the voice command analysis unit 303 analyzes the voice command (in this case, "this is good") with reference to the dictionary database 500, and obtains a voice command analysis result including the following operation words. obtain.
  • the user operation management unit 301 acquires the position information of the cursor C in the copy source information 100 shown in FIG. Next, the user operation management unit 301 recognizes the object corresponding to the position information in the copy unitary source structure analysis result shown in FIG.
  • the user operation management unit 301 is configured to use "ku font>" and "ku"
  • the user operation management unit 301 puts together a plurality of objects (shaded portions) including the above objects (ku font> and Ku 1-1 1-1, Nagatacho, Chiyoda-ku, Tokyo: see FIG. 28). Display on the display unit 306 and present it to the user.
  • objects ku font> and Ku 1-1 1-1, Nagatacho, Chiyoda-ku, Tokyo: see FIG. 28.
  • the user operation management unit 301 When the user's approval is obtained, the user operation management unit 301
  • the operation word “this is good” recognizes that the operation desired by the user is a copy operation.
  • the user operation management unit 301 extracts the partial copy source information 110a corresponding to the object to be copied from the copy source information 110 (see Figs. 5 and 6). Pass to
  • the shaping unit 403 generates the original copy source source information 110, the partial copy source source information 110a passed from the user interface unit 300 (see Fig. 5), and the copy source source structure analysis result (
  • the source semantic analysis results (corresponding to the shaded parts in FIG. 28) shown in FIG. 26 and the copy source files shown in FIG. 26 are collectively shaped as copy source files and stored in the storage unit 600.
  • the paste area is specified by using both the voice and the pointer (auxiliary specifying unit 304) specified by the user.
  • the copy source module 800 As described above, according to the second embodiment, according to the user's copy instruction (voice command), the copy source module 800, and a plurality of objects are copied, and the user's key is copied. Since the paste destination is selected from the paste destination module 900 in accordance with the strike instruction (voice command), even between different modules (copy source module 800, paste destination module 900), a simple operation can be applied to multiple objects. Such copy 'and' paste can be performed.
  • a copy instruction and a paste instruction by a voice command are transmitted to user interface unit 300 (instruction device) having a communication function between copy source module 800 and paste destination module 900. Therefore, even between different modules (copy source module 800, paste destination module 900), copy 'and' paste for multiple objects can be performed by a simple operation.
  • a copy instruction is issued by a user's voice
  • a paste instruction is issued by a user's voice, so that a plurality of objects are easily applied only by the user's voice. You can do copy 'and' paste.
  • a copy instruction is issued by the user's voice and the pointer of the user
  • a paste instruction is issued by the user's voice and the pointer of the user. You can easily copy and paste multiple objects while supplementing the ambiguity with pointers.
  • first and second embodiments examples using tree-structured copy source information and paste-destination source information composed of HTML or the like have been described.
  • a set of objects (not a tree structure) may be used as copy source information ( ⁇ first destination source information).
  • the semantic distance between the copy source object and the first destination object may be calculated, and copy and paste may be executed for a combination having a short semantic distance.
  • this configuration example will be described as a third embodiment.
  • FIG. 30 is a block diagram showing a configuration of the third embodiment that is useful for the present invention.
  • parts corresponding to the respective parts in FIG. 1 are denoted by the same reference numerals.
  • a source information analyzer 1000 and a paste processor 1200 are provided instead of the source information analyzer 40 and the paste processor 70 shown in FIG.
  • the base 1100 is newly provided.
  • display unit 20 displays copy source information 130 having no tree structure.
  • paste destination information 1400 (see Fig. 32) are displayed.
  • Copy source information 1300 shown in Fig. 31 is copy source information in a copy (including cuts; the same applies hereinafter) 'and' list, and is described only in text. Therefore, the copy unitary information 1300 is a list of information, and does not have a tree structure like the copy source information 100 described in HTML (see FIG. 2).
  • This copy source information 1300 includes, as a hotel list (Tokyo area), a hotel name (" ⁇ Hotel Rukiyapitol”, etc.), a zip code ("100-1111", etc.), and an address ("Nagatacho, Chiyoda-ku, Tokyo”).
  • paste destination information 1400 shown in FIG. 32 is information of a paste destination in copy (including cut; the same applies hereinafter) 'and paste', and is described only in text. Therefore, the paste destination information 1400 is also a list of information in the same manner as the copy source information 1300, and has a tree structure like the paste destination information 200 described in HTML (see FIG. 3). Les, nare ,.
  • Paste destination information 1400 includes "Enter destination”, “Enter destination (facility)”, “Facility”, “Facility input”, “Send query”, and "Reset”. Contains objects (text).
  • the source information analysis unit 1000 has a function of analyzing morphological analysis, structural analysis, and semantic structure of the copy source information 1300 (see Fig. 31) and the paste destination information 1400 (see Fig. 32). It consists of a structure analysis unit 1001, a semantic analysis unit 1002, and a shaping unit 1003.
  • the source structure analysis unit 1001 has a function of performing morphological analysis and structural analysis on the copy source information 1300 (see Fig. 31) and the paste destination information 1400 (see Fig. 32). ing. Further, the source information analysis unit 1000 obtains, from the copy source information 1300 and the paste destination information 1400, a partial copy source source corresponding to a range specified by the user (for example, a circle having a radius r shown in FIGS. 31 and 32). Extract information and partial paste destination source information.
  • the semantic analyzing unit 1002 has a function of analyzing the semantic structure of the partial copy source information and the partial paste destination source information while referring to the dictionary database 50.
  • the shaping unit 1003 collectively shapes the original copy source source information, the partial copy source source information, and the copy source semantic analysis result as a copy source file, and then stores it in the storage unit 6
  • Thesaurus dictionary database 1100 is a database that stores dictionaries in which synonyms and synonyms referred to in fuzzy search are systematized.
  • FIG. 33 illustrates a thesaurus dictionary database 1100.
  • “location” is defined at the top of the hierarchical structure, and “synonym” and “synonymous” are defined below “location”.
  • paste processing section 1200 calculates the semantic distance between each object of the partial copy source information and each object of the partial paste destination source information from thesaurus dictionary database 1100 (see FIG. 33). In addition, it has a function to paste the copy source object to the paste destination object (input box) for a pair whose semantic distance is short.
  • the input candidate selection unit 1201 has a function of reading out the copy source file specified by the auxiliary specification unit 34 from the storage unit 60 as an input candidate.
  • the paste destination selection unit 1202 selects a paste destination of the copy source object based on the calculation result of the semantic distance. Details of the operation of the paste destination selection unit 1202 will be described later.
  • the paste unit 1203 pastes the copy source object to the paste destination selected by the paste destination selection unit 1202.
  • the semantic distance calculation unit 1204 calculates a semantic distance between objects using the thesaurus dictionary database 1100.
  • display unit 20 displays copy source information 1300 (see FIG. 31) and paste destination information 1400 (see FIG. 32).
  • step SA1 shown in FIG. 9 the source structure analysis unit 1001 Using the area specifying unit 32, it is determined whether or not a copy area has been specified in the copy source information 1300 (see FIG. 31). In this case, the determination result is “No”.
  • step SA2 the source structure analysis unit 1001 operates the paste area designation unit by the user.
  • step SA1 and step SA2 are repeated until the determination result becomes “Yes”.
  • step SA3 copy processing is executed.
  • step SG1 shown in FIG. 34 the source structure analysis unit 1001 reads the copy source information 1300 (see FIG. 31) from the display control unit 10 via the user interface unit 30.
  • step SG2 the source structure analysis unit 1001 performs morphological analysis on the copy source information 1300, and extracts each object (object).
  • step SG3 the source structure analysis unit 1001 extracts objects included in a circle with a radius r specified by the user (see FIG. 31). In this case, two objects, “ ⁇ Hotel Capitol” and “ ⁇ Eta Cell Hotel Tokyo”, are extracted.
  • the source structure analysis unit 1001 presents the objects ("@ Hotel Capitol” and "@ Etacel Hotel Tokyo") extracted at step SG3 to the user.
  • the user determines whether or not the partial force of the “no” or “light” display is the desired copy area.
  • This criterion is whether or not the object to be pasted is included in the above highlighted display in the paste destination information 1400 (see FIG. 32).
  • step SG5 the source structure analysis unit 1001 determines whether or not the approval has been obtained by the user, and in this case, the determination result is "No".
  • step SG4 the source structure analysis unit 1001 deletes, for example, “@Etacel Hotel Tokyo” from the previously presented objects and re-presents only “@Hotel Capitol” to the user using another presentation pattern. Show. In this case, the user operates the auxiliary designation unit 34 to approve the re-presented object.
  • the source structure analysis unit 1001 sets the determination result of step SG5 to "Yes".
  • step SG6 the source structure analysis unit 1001 sets the object (“ ⁇ Hotel Capitol”) for which the user's approval has been obtained as the partial copy source information.
  • step SG7 the semantic analysis unit 1002 analyzes the meaning of the following objects included in the partial copy source information with reference to the dictionary database 50 (see Fig. 8).
  • step SG8 the shaping unit 1003 shapes the original copy source information 1300, the partial copy source information, and the copy source semantic analysis result as a copy source file, and stores them in the storage unit 60.
  • paste preparation processing is executed.
  • step SH 1 shown in FIG. 35 the source structure analysis unit 1001 reads the paste destination information 1400 (see FIG. 32) from the display control unit 10 via the user interface unit 30.
  • step SH2 the source structure analysis unit 1001 performs a morphological analysis on the paste destination information 1400, and extracts each object (object).
  • step SH3 The source structure analysis unit 1001 extracts objects included in a circle with a radius r specified by the user (see FIG. 32). In this case, "Please input the destination (facility).” And “facility” (including the next "input field”) are extracted.
  • step SH4 the source structure analysis unit 1001 performs processing outside the object extracted in step SH3 ("Enter the destination (facility).", “Facility” (including the “input box” next to it). ) To the user.
  • the paste destination information 1400 shown in Fig. 31 indicates that the object is not an object ("Please input destination (facility)." (Including the entry field) is highlighted.
  • the user determines whether or not the partial force of the highlighted display is the desired paste area.
  • the user operates the auxiliary designation unit 34 to reject the presented object.
  • step SH5 the source structure analysis unit 1001 determines whether or not the approval has been obtained by the user. In this case, the determination result is "No".
  • step SH4 the source structure analysis unit 1001 deletes, for example, “Enter the destination (facility).” From the previously presented objects using another presentation pattern, and replaces the “facility” (horizontal (Including “input field”) to the user. In this case, the user operates the auxiliary designation unit 34 to approve the re-presented object.
  • the source structure analyzing unit 1001 sets the determination result of step SH5 to "Yes".
  • step SH6 the source structure analysis unit 1001 sets the “facility” (including the horizontal “input box”) for which the user's approval has been obtained as the partial paste destination source information.
  • step SH7 the semantic analysis unit 1002 analyzes the meaning of the following objects included in the partial copy source information with reference to the dictionary database 50 (see Fig. 8).
  • step SA5 a paste process is executed. Specifically, FIG. In step SI1, the input candidate selection unit 1201 reads the copy source file (corresponding to the paste destination information 1400 (see FIG. 31) in this case) specified by the user in the auxiliary specification unit 34 from the storage unit 60.
  • step SI2 the semantic distance calculation unit 1204 uses the thesaurus dictionary database 1100 (see Fig. 33) and the following copy source semantic analysis result included in the copy source file and the step SH7 (Fig. Calculate the semantic distance to the object of the following paste destination semantic analysis result (see Fig. 20) obtained in (35).
  • step SI3 the paste destination selection unit 1202 sets the semantic distance calculated in step SI2.
  • the paste destination selecting unit 1202 selects “facility” (including the horizontal “input box”) as the paste destination.
  • step SI4 the paste destination selection unit 1202 selects the paste destination selected in step SI3.
  • the user determines whether or not the partial force of the highlight display is the desired paste destination. In this case, it is assumed that user approval has been obtained for the paste destination.
  • step SI5 the paste destination selecting unit 1202 determines whether or not the user has obtained the approval, and in this case, sets the determination result to "Yes”. If the determination result in step SI5 is “No”, the paste destination selection unit 1202 selects a paste destination according to another selection criterion in step SI3, and re-presents the paste destination in step SI4.
  • step SI6 the paste unit 1203 stores the ⁇ Paste the target object.
  • “ ⁇ Hotel Capitol” is pasted into the input field of the facility in the paste destination information 1400, respectively.
  • the power described in the configuration example in which the dictionary database 50 and thesaurus dictionary database 1100 shown in Fig. 30 are independent is not limited to this.
  • the dictionary database 1100 may be configured as one database.
  • the semantic distance between objects in copy source information 1300 (copy module information) and paste destination information 1400 (paste module) was analyzed using thesaurus dictionary database 1100. Since the paste destination is selected based on the result, copy 'and' paste can be applied to a simple set of objects whose structure between objects is not clear.
  • a plurality of objects in a circle with a radius r are copied from copy source information 1300 (copy module), and according to the first instruction.
  • Paste module strength The paste destination that is structurally cohesive (in this case, the paste destination within a circle with a radius r (predetermined range) from the paste destination information 1400) is selected. You can copy and paste over objects.
  • a program for realizing the above-described copy-and-paste function is recorded on the computer-readable recording medium 1600 shown in FIG.
  • Each function may be realized by reading and executing the program recorded in the recording medium 1600 on the computer 1500 shown in FIG.
  • the computer 1500 shown in the figure has a CPU (Central Processing Unit (CPU)
  • Read read It is composed of a device 1550, an output device 1560 such as a display and a printer, and a bus 1570 connecting each part of the device.
  • the CPU 1510 reads the program recorded on the recording medium 1600 via the reading device 1550, and executes the program to realize the above-described functions.
  • the recording medium 1600 includes an optical disk, a flexible disk, a hard disk, and the like.
  • control described as being performed automatically in the embodiment may be manually performed, and conversely, all or any of the control described as being performed manually may be performed. Any part may be automated based on a known technique or the above-described concept.
  • each functional block shown in the embodiment can be actually configured as a CPU and a computer program read and executed by the CPU, or configured as hard-wired logic. be able to.
  • Each of the above-described electrical components is functionally conceptual, and need not necessarily be physically configured as illustrated. In other words, the specific form of dispersion / integration of each part is not limited to the one shown in the figure, and all or part of it is functionally or physically dispersed / integrated in arbitrary units according to various loads and usage conditions. Can be configured.
  • the processing procedure or the control procedure shown in the document or the drawings can be arbitrarily changed unless otherwise specified.
  • the information processing method, information processing program, information processing apparatus, and remote controller that are powerful in the present invention are used as techniques for performing copy 'and' paste of various target data in various information processing fields. This is useful, and is especially suitable for performing copy and paste operations on multiple objects with simple operations.

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Artificial Intelligence (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Computational Linguistics (AREA)
  • General Health & Medical Sciences (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)
  • Document Processing Apparatus (AREA)

Abstract

コピー時に表示部（２０）に表示されたコピー元情報から複数のオブジェクトを含むコピー領域を指定し、またペースト時にペースト先情報からペースト領域を指定するためのユーザインタフェース部（３０）と、複数のオブジェクトのそれぞれの意味を解析する意味解析部（４２）と、意味の解析結果に合致するペースト先を選択するペースト先選択部（７２）と、複数のオブジェクトをペースト先選択部（７２）で選択されたペースト先へペーストするペースト部（７３）とを備えている。

Description

明 細 書
情報処理方法、情報処理プログラム、情報処理装置およびリモートコント ローラ
技術分野
[0001] 本発明は、コピー'アンド 'ペーストを行うことに適する情報処理方法、情報処理プロ グラム、情報処理装置およびリモートコントローラに関するものであり、特に、簡易な 操作で複数のオブジェクトを対象としたコピー'アンド 'ペーストを行うことができる情 報処理方法、情報処理プログラム、情報処理装置およびリモートコントローラに関す るものである。
背景技術
[0002] 従来の情報処理装置 (特許文献 1)は、一般に、画面上の特定の文字列 (オブジェ タト）をコピー（カットを含む）した後、画面上の別の位置に該文字列をペースト（張り 付け）するというコピー'アンド 'ペーストの機能を備えている。
[0003] ここで、コピー操作においては、キーボードに備えられた範囲指定キーの押下やマ ウスのボタンの押下によりコピー範囲が指定される。例えば、キーボードを用いたコピ 一操作においては、オブジェクトの先頭文字にカーソルを移動させて、キーボードに 備えられた範囲指定キーを押下し、さらに先頭文字から最終文字までカーソルを移 動させて、同様に範囲指定キーを押下することによりコピー範囲が指定される。
[0004] また、マウスを用いたコピー操作においては、オブジェクトの先頭文字にマウスカー ソルを移動させてマウスボタンを押下し、そのままマウスカーソルを最終文字まで移動 させることにより、コピー範囲が指定される。
[0005] 例えば、入力欄（ペースト先）に住所 (コピー元）を入力する場合には、上記コピー · アンド ·ペーストにより、住所の文字列をコピーした後、該住所の文字列を入力欄にぺ 一ストすることにより、住所を手入力する手間を省くことが可能となる。
[0006] このように、従来では、コピ一.アンド'ペーストの対象になるオブジェクトの範囲（例 えば、先頭文字から最終文字）を正確に物理的に指定し、コピー 'アンド'ペーストが 行われている。 [0007] 特許文献 1 :特開平 11一 306177号公報
発明の開示
発明が解決しょうとする課題
[0008] し力 ながら、従来の情報処理装置においては、コピー ·アンド'ペーストを行うべき オブジェクトが複数存在する場合、オブジェクト毎にコピー 'アンド'ペーストの操作を ユーザが行わなければならな力 た。したがって、コピ一 ·アンド、·ペーストの操作が 非常に煩わしいという問題があった。
[0009] 例えば、郵便番号、住所、電話番号、氏名、生年月日、出身校という 6つのォブジ ェクトを入力するための入力欄が 6つ存在する場合、ユーザは、コピー 'アンド'ぺー ストの操作を都合 6回も行わなければならなレ、。し力、も、ユーザは、コピーされたォブ ジヱタトと、ペースト先の入力欄とを照合し、オブジェクトに一致する入力欄にペースト するという照合も行わなければならない。
[0010] また、従来では、オブジェクトの範囲指定を物理的に正確に行わなければならない ため、例えば、意味的にまとまりがあるオブジェクトの集合を 1回の操作で範囲指定す るようなことができなかった。したがって、ユーザにとって操作しやすいマンマシンイン タフエースを提供することが難しかった。
[0011] 本発明は、上記に鑑みてなされたもので、複数のオブジェクトにかかるコピー ·アン ド 'ペーストを簡易な操作で行うことができる情報処理方法、情報処理プログラム、情 報処理装置およびリモートコントローラを提供することを目的とする。
課題を解決するための手段
[0012] 上述した課題を解決し、 目的を達成するために、本発明にかかる情報処理方法は 、複数のオブジェクトをコピーするコピー工程と、前記複数のオブジェクトのそれぞれ の意味を解析する意味解析工程と、前記意味の解析結果に合致するペースト先を選 択するペースト先選択工程と、前記複数のオブジェクトを前記ペースト先へペースト するペースト工程とを含む。
[0013] また、本発明に力、かる情報処理プログラムは、上述した情報処理方法をコンビユー タに実行させるものである。
[0014] また、本発明にかかる情報処理装置は、複数のオブジェクトをコピーするコピー手 段と、前記複数のオブジェクトのそれぞれの意味を解析する意味解析手段と、前記 意味の解析結果に合致するペースト先を選択するペースト先選択手段と、前記複数 のオブジェクトを前記ペースト先へペーストするペースト手段とを備える。
[0015] また、本発明に力、かるリモートコントローラは、上述の情報処理方法を実行するもの である。
発明の効果
[0016] この発明によれば、コピーされた複数のオブジェクトのそれぞれの意味を解析し、こ の意味の解析結果に合致するペースト先を選択した後、複数のオブジェクトをペース ト先へペーストすることとしたので、簡易な操作で複数のオブジェクトにかかるコピー · アンド'ペーストを行うことができる。
図面の簡単な説明
[0017] [図 1]本発明にかかる実施の形態 1の構成を示すブロック図である。
[図 2]図 1に示した表示部および図 22に示したコピー元モジュールに表示されるコピ 一元情報を示す図である。
[図 3]図 1に示した表示部および図 22に示したペースト先モジュールに表示されるぺ 一スト先情報を示す図である。
[図 4]図 3に示したペースト先情報のペースト後を示す図である。
[図 5]図 2に示したコピー元情報に対応するコピー元ソース情報 Xを示す図である。
[図 6]図 2に示したコピー元情報に対応するコピー元ソース情報を示す図である。
[図 7]図 3に示したペースト先情報に対応するペースト先ソース情報を示す図である。
[図 8]図 1に示した辞書データベースを示す図である。
[図 9]本発明に力かる実施の形態 1一 3の動作を説明するフローチャートである。
[図 10]同実施の形態 1における図 9に示したコピー処理を説明するフローチャートで める。
[図 11]同実施の形態 1における図 9に示したペースト準備処理を説明するフローチヤ ートである。
[図 12]同実施の形態 1および 2における図 9に示したペースト処理を説明するフロー チャートである。 [図 13]同実施の形態 1および 2におけるコピー元ソース構造解析結果を示す図であ る。
[図 14]同実施の形態 1の動作を説明する図である。
[図 15]同実施の形態 1の動作を説明する図である。
[図 16]同実施の形態 1におけるコピー元意味解析結果を示す図である。
[図 17]同実施の形態 1および 2におけるペースト先ソース構造解析結果を示す図であ る。
[図 18]同実施の形態 1の動作を説明する図である。
[図 19]同実施の形態 1の動作を説明する図である。
[図 20]同実施の形態 1におけるペースト先意味解析結果を示す図である。
[図 21]同実施の形態 1におけるペースト先の選択を説明する図である。
[図 22]本発明にかかる実施の形態 2の構成を示すブロック図である。
[図 23]図 22に示した辞書データベースを示す図である。
[図 24]同実施の形態 2における図 9に示したコピー処理を説明するフローチャートで める。
[図 25]同実施の形態 2における図 9に示したペースト準備処理を説明するフローチヤ ートである。
[図 26]同実施の形態 2におけるコピー元意味解析結果を示す図である。
[図 27]図 26図に示したコピー元意味解析結果と音声コマンド解析結果との対応関係 を示す図である。
[図 28]同実施の形態 2の動作を説明する図である。
[図 29]同実施の形態 2におけるペースト先意味解析結果を示す図である。
[図 30]本発明にかかる実施の形態 3の構成を示すブロック図である。
[図 31]図 30に示した表示部に表示されるコピー元情報を示す図である。
[図 32]図 30に示した表示部に表示されるペースト先情報を示す図である。
[図 33]図 30に示したシソーラス辞書データベースを示す図である。
[図 34]同実施の形態 3における図 9に示したコピー処理を説明するフローチャートで める。 [図 35]同実施の形態 3における図 9に示したペースト準備処理を説明するフローチヤ ートである。
[図 36]同実施の形態 3における図 9に示したペースト処理を説明するフローチャート である。
[図 37]同実施の形態 1一 3の変形例の構成を示すブロック図である。
符号の説明
20 表示部
30 ユーザインタフェース部
31 ユーザ操作管理部
32 コピー領域指定部
33 ペースト領域指定部
34 補助指定部
40 ソース情報解析部
41 ソース構造解析部
42 意味解析部
43 整形部
70 ペースト処理部
71 入力候補選択部
72 ペースト先選択部
73 ペースト部
300 ユーザインタフェース部
301 ユーザ操作管理部
302 マイクロフォン
303 音声コマンド解析部
400 ソース情報解析部
401 ソース構造解析部
402 意味解析部
700 ペースト処理部 702 ペースト先選択部
703 ペースト部
800 コピー元モジユーノレ
900 ペースト先モジュール
1000 ソース情報解析部
1001 ソース構造解析部
1002 意味解析部
1003 整形部
1100 シソーラス辞書データベース
1200 ペースト処理部
1201 入力候補選択部
1202 ペースト先選択部
1203 ペース！^
1204 意味距離計算部
発明を実施するための最良の形態
[0019] 以下、図面を参照して本発明に力かる情報処理方法、情報処理プログラム、情報 処理装置およびリモートコントローラの実施の形態 1一 3について詳細に説明する。
[0020] 実施の形態 1.
図 1は、本発明に力、かる実施の形態 1の構成を示すブロック図である。この図にお いて、表示制御部 10は、表示部 20に対する表示制御を行う。表示部 20は、 LCD ( Liquid Crystal Display)や CRT (Cathode Ray Tube)等である。この表示部 20は、 表示制御部 10の制御により、例えば、コピー元情報 100 (図 2参照）およびペースト 先情報 200 (図 3参照）を表示する。
[0021] 図 2に示したコピー元情報 100は、例えば、 HTML (HyperText Markup
Language)で記述されたコピー元ソース情報 110 (図 5および図 6参照）に対応してい る。実際には、コピー元情報 100は、コピー元ソース情報 110がブラウザ（図示略）に 読み込まれて、表示部 20に表示される。
[0022] ここで、 HTMLは、文書 (文字列等）の論理的な構造を記述するために用いられ、「 く」及び「>」内に指定されたタグと呼ばれる予約語によって、他の文書へのリンクを 表す言語である。図 13は、コピー元ソース情報 110 (コピー元情報 100)を論理的な 構造で表した図である。
[0023] 図 2に示したコピー元情報 100は、コピー 'アンド'ペーストにおけるコピー元の情報 である。なお、以下、「コピー」の語には、「カット」も含むものとする。このコピー元情報 100には、ホテル一覧（東京地方）として、ホテル名（「〇〇ホテルキヤピトル」等）、郵 便番号（「100-1111」等）、住所（「東京都千代田区永田町 1-11-1」等）、電話番号（「 03-3333-1111」等）および備考（「会議室 ·宴会場ありインターネット利用可」等）が含 まれている。
[0024] 一方、図 3に示したペースト先情報 200も、例えば、 HTMLで記述されたペースト 先ソース情報 210 (図 7参照）に対応しており、このペースト先ソース情報 210がブラ ゥザ（図示略）に読み込まれて、表示部 20に表示される。ここで、図 4は、図 3に示し たペースト先情報 200のペースト後を示す図である。
[0025] 図 1に戻り、ユーザインタフェース部 30は、ユーザにより操作されるマンマシンインタ フェース（マウス、キーボード、トラックボール等）としての機能を備える。このユーザィ ンタフェース部 30は、ユーザ操作管理部 31、コピー領域指定部 32、ペースト領域指 定部 33および補助指定部 34から構成されている。
[0026] ユーザ操作管理部 31は、ユーザの操作を管理する機能を備えている。コピー領域 指定部 32は、ユーザの操作に基づいて、表示部 20に表示されたコピー元情報 100 (図 2参照）について、コピー対象のオブジェクト（文字列等）を含むコピー領域を指定 する機能を備えている。例えば、コピー領域指定部 32は、図 2に示したカーソル Cと 連携しており、カーソル Cの近傍領域をコピー領域として指定する。
[0027] ペースト領域指定部 33は、ユーザの操作に基づいて、表示部 20に表示されたぺ 一スト先情報 200 (図 3参照）から、上記オブジェクトをペーストするペースト領域を指 定する機能を備えている。このペースト領域指定部 33も、コピー領域指定部 32と同 様にして、図 3に示したカーソル Cと連携しており、カーソル Cの近傍領域をペースト 領域として指定する。
[0028] 図 1に戻り、補助指定部 34は、上述したコピー領域およびペースト領域以外のォブ ジ工タトについて、指定を行うための機能を備えている。例えば、補助指定部 34は、 後述する格納部 60におけるコピー元ファイルを指定する。
[0029] ソース情報解析部 40は、コピー元ソース情報 110 (図 5および図 6参照）、ペースト 先ソース情報 210 (図 7参照）、後述する部分コピー元ソース情報 110a (図 5参照）、 部分ペースト先ソース情報 210a (図 7参照）について、ソース構造 (木構造等）及び 意味構造を解析する機能を備えている。このソース情報解析部 40は、ソース構造解 析部 41、意味解析部 42および整形部 43から構成されてレ、る。
[0030] ソース情報解析部 40において、ソース構造解析部 41は、コピー元ソース情報 110
(図 5および図 6参照）、ペースト先ソース情報 210 (図 7参照）について、ソース構造（ 木構造等）を解析する機能を備えている。図 13は、コピー元ソース情報 110に対応 するコピー元ソース構造解析結果を示す図である。図 17は、ペースト先ソース情報 2 10 (図 7参照）に対応するペースト先ソース構造解析結果を示す図である。
[0031] 意味解析部 42は、部分コピー元ソース情報 110a (図 5参照）、部分ペースト先ソー ス情報 210a (図 7参照）について、辞書データベース 50を参照しつつ意味構造を解 析する機能を備えている。
[0032] 辞書データベース 50は、図 8に示したように、 if/then形式等により記述された各 規則を格納するデータベースである。図 8においては、意味属性を与える規則、文字 歹 IJと意味属性との関係を定義する規則、タグ構造に関する規則、文字列の包含関係 を定義する規則等が図示されている。
[0033] 例えば、意味属性を与える規則においては、意味構造の解析対象が、 ifで記述さ れた [ 1一 9] (1一 9のうちいずれかの数字であるとの意味）、 [0-9] , · · ·、 [0— 9]に該 当する場合、当該解析対象は、 thenで記述されたように"郵便番号"と意味構造が解 析される。
[0034] 図 1に戻り、整形部 43は、オリジナルのコピー元ソース情報、部分コピー元ソース情 報、コピー元ソース構造解析結果およびコピー元意味解析結果をコピー元ファイルと してひとまとめに整形した後、格納部 60に格納する。
[0035] ペースト処理部 70は、補助指定部 34により指定されたコピー元ファイルに含まれる コピー元意味解析結果に基づいて、ペーストに関する処理を実行する。 [0036] 入力候補選択部 71は、補助指定部 34により指定されたコピー元ファイルを入力候 補として格納部 60から読み出す機能を備えている。ペースト先選択部 72は、入力候 補選択部 71により読み出されたコピー元ファイルに含まれるコピー元意味解析結果 とペースト先意味解析結果とを照合した結果とに基づいて、コピー元のオブジェクト のペースト先を選択する。このペースト先選択部 72の動作の詳細については、後述 する。ペースト部 73は、図 4に示したように、ペースト先選択部 72により選択されたぺ 一スト先（図 3参照）に、コピー元のオブジェクトをペーストする。
[0037] つぎに、実施の形態 1の動作について、図 9一図 12に示したフローチャート、図 13 一図 21を参照しつつ説明する。ここでは、表示部 20には、コピー元情報 100 (図 2参 照）およびペースト先情報 200 (図 3参照）が表示されているものとする。
[0038] 図 9に示したステップ SA1では、ソース構造解析部 41は、ユーザにより、コピー領 域指定部 32を用いて、コピー元情報 100 (図 2参照）でコピー領域が指定されたか否 力を判断し、この場合、判断結果を「No」とする。
[0039] ステップ SA2では、ソース構造解析部 41は、ユーザにより、ペースト領域指定部 33 を用いて、ペースト先情報 200 (図 3参照）でペースト領域が指定されたか否力を判断 し、この場合、判断結果を「No」とする。以後、判断結果が「Yes^なるまで、ステップ SA1およびステップ SA2の判断が繰り返される。
[0040] そして、図 2に示したコピー元情報 100において、コピー領域指定部 32を用いて、 カーソル Cに対応するコピー領域がユーザにより指定されると、ソース構造解析部 41 は、ステップ SA1の判断結果を「Yes」とする。ステップ SA3では、コピー処理が実行 される。ここで、コピー元情報 100においては、住所である「東京都千代田区永田町 1-11-1」にカーソル Cが位置しているものとする。
[0041] 具体的には、図 10に示したステップ SB1では、ソース構造解析部 41は、コピー元 情報 100に対応するコピー元ソース情報 110 (図 5および図 6参照）をユーザインタフ エース部 30を介して表示制御部 10より読み込む。
[0042] ステップ SB2では、ソース構造解析部 41は、コピー元ソース情報 110を解析し、図 13に示したように、木構造からなるコピー元ソース構造解析結果を得る。
[0043] 同図には、図 2に示したコピー元情報 100における各文字列のうち、「東京地方」、「 ホテル一覧」、「〇〇ホテルキヤピトル」、「100-1111」、「東京都千代田区永田町
1-11-1」、「03-3333-1111」および「会議室 ·宴会場ありインターネット利用可」が図示 されている。なお、他の文字列の図示は、紙面の関係より省略されている。
[0044] ステップ SB3では、ソース構造解析部 41は、ユーザ操作管理部 31より、図 2に示し たコピー元情報 100におけるカーソル Cの位置情報を取得する。ステップ SB4では、 図 13に示したコピー元ソース構造解析結果で位置情報に対応するオブジェクトを認 識する。
[0045] この場合、ソース構造解析部 41は、図 14に網掛けで示したく font>およびく東京都 千代田区永田町 1-11-1〉を、カーソル C (図 2参照）の位置情報に対応するオブジェ タトとして認識する。
[0046] ステップ SB5では、ソース構造解析部 41は、ステップ SB4で認識されたォブジェク ト（く font>およびく東京都千代田区永田町 1-11_1>：図 14参照）を含む複数オブジェク トをひとまとめにしてユーザに提示する。
[0047] 具体的には、上記複数オブジェクトは、図 15に網掛けで示したく td〉、く font>、「
100-1111」、く br/>、く font〉、「東京都千代田区永田町 1-11-1」、く br/>、く font〉、「 03-3333-1111」、く br/>、 <i>,「会議室 ·宴会場ありインターネット利用可」およびく br/〉 である。
[0048] ここで、力かる複数オブジェクトは、く font〉および「東京都千代田区永田町 1-11-1」 ( 図 14参照）の上位オブジェクトであるく td〉の配下の複数のオブジェクトである。
[0049] なお、複数オブジェクトの選定にあたっては、構造的に当該オブジェクトの上位や 近傍（下位等）に位置する複数のオブジェクトを選択する複数オブジェクト選択パター ンの他に、空間的に当該オブジェクトの近傍に位置する複数のオブジェクトを選択す る複数オブジェクト選定パターンを用いてもょレ、。
[0050] ここで、構造的な複数オブジェクトパターンでは、図 15に示したように、例えば、 HT
MLで構造が明確化された複数のオブジェクトを対象としており、あるノードに位置す るオブジェクトと、該オブジェクトと構造的に関連が深い他のオブジェクト（上位ノード に直接リンクする下位ノード等）とが選択される。
[0051] 一方、空間的な複数オブジェクトパターンでは、オブジェクト間の物理的距離に基 づレヽて複数のオブジェクト（例えば、後述する図 31に示した半径 rの円内に存在する 「〇〇ホテルキヤピトル」、「〇〇エタセルホテル東京」）が選択される。
[0052] また、上記複数オブジェクトがユーザに提示されると、図 2に示したコピー元情報 10 0においては、網掛けで示したように、「100-1111」、「東京都千代田区永田町 1-11-1 」、「03-3333-1111」および「会議室 ·宴会場ありインターネット利用可」がハイライト表 示される。
[0053] これにより、ユーザは、ノ、イライト表示の部分力 所望のコピー領域であるか否かを 判断する。この判断基準としては、ペースト先情報 200 (図 3参照）にペーストすべき オブジェクト (文字列等）が上記ハイライト表示の部分に含まれている場合、判断結果 を「Yes」として、補助指定部 34を用いて、コピー領域を承認する。
[0054] ステップ SB6では、ソース構造解析部 41は、ユーザにより上記承認が得られたか否 力、を判断し、この場合、判断結果を「Yes」とする。なお、ステップ SB6の判断結果が「 No」である場合、ステップ SB5では、ソース構造解析部 41は、別の複数オブジェクト 選定パターンにより、オブジェクト（く font>およびく東京都千代田区永田町 1-11-1〉： 図 14参照）を含む複数オブジェクトをひとまとめにしてユーザに再提示する。
[0055] ステップ SB7では、意味解析部 42は、図 5に示したコピー元ソース情報 110から、 ステップ SB6で承認が得られた複数オブジェクトに対応する部分コピー元ソース情報 110a (破線囲い部分）を抽出する。
[0056] ステップ SB8では、意味解析部 42は、部分コピー元ソース情報 110aに含まれる以 下のオブジェクトについて、辞書データベース 50を参照しつつ意味を解析する。
[0057] '「100-1111」
•「東京都千代田区永田町 1-11-1」
•「03-3333-1111」
•「会議室 ·宴会場ありインターネット利用可」
[0058] 図 16にステップ SB8におけるコピー元意味解析結果を示す。同図において、「 100-1111」は、意味属性として「郵便番号」と解される。 「東京都千代田区永田町 1-11-1」は、意味属性として「住所」と解される。 「03-3333-1111」は、意味属性として「 電話番号」と解される。「会議室 ·宴会場ありインターネット利用可」は、意味属性とし て「備考」と解される。
[0059] ステップ SB9では、整形部 43は、オリジナルのコピー元ソース情報 110、部分コピ 一元ソース情報 110a、コピー元ソース構造解析結果（図 13参照）およびコピー元意 味解析結果（図 16参照）をコピー元ファイルとしてひとまとめに整形した後、格納部 6 0に格納する。
[0060] そして、図 3に示したペースト先情報 200において、ペースト領域指定部 33を用い て、カーソル Cに対応するペースト領域がユーザにより指定されると、ソース構造解析 部 41は、ステップ SA2の判断結果を「Yes」とする。ステップ SA4では、ペースト準備 処理が実行される。ここで、ペースト先情報 200においては、「住所」にカーソル Cが 位置しているものとする。
[0061] 具体的には、図 11に示したステップ SC1では、ソース構造解析部 41は、ペースト 先情報 200に対応するペースト先ソース情報 210 (図 7参照）をユーザインタフェース 部 30を介して表示制御部 10より読み込む。
[0062] ステップ SC2では、ソース構造解析部 41は、ペースト先ソース情報 210を解析し、 図 17に示したように、木構造からなるペースト先ソース構造解析結果を得る。
[0063] 同図には、図 3に示したペースト先情報 200における「目的地入力」、「目的地の住 所を入力してください.」、 「〒（〒は、郵便番号を示す記号である）」、「住所」および「 電話番号」とレ、う文字列（単一の文字も含む）が図示されてレ、る。
[0064] ステップ SC3では、ソース構造解析部 41は、ユーザ操作管理部 31より、図 3に示し たペースト先情報 200におけるカーソル Cの位置情報を取得する。ステップ SC4では 、図 17に示したペースト先ソース構造解析結果で位置情報に対応するオブジェクト を認識する。
[0065] この場合、ソース構造解析部 41は、図 18に網掛けで示したく dt>およびく住所〉を、 カーソル C (図 3参照）の位置情報に対応するオブジェクトとして認識する。
[0066] ステップ SC5では、ソース構造解析部 41は、ステップ SB5 (図 10参照）と同様の複 数オブジェクト選定パターンによりステップ SC4で認識されたオブジェクト（く dt>およ びく住所〉：図 18参照）を含む複数オブジェクトをひとまとめにしてユーザに提示する [0067] 具体的には、上記複数オブジェクトは、図 19に網掛けで示したく dl>、く dt>、「〒」、く dd〉、く input> (図 3に示した「〒」の右方の入力欄に対応）、く dt>、「住所」、く dd〉、 < input> (図 3に示した「住所」の右方の入力欄に対応）、く dt〉、「電話番号」、く dd>およ びく input> (図 3に示した「電話番号」の右方の入力欄に対応）である。
[0068] ここで、力かる複数オブジェクトは、く dt〉および「住所」（図 18参照）の上位オブジェ タトであるく dl>の配下の複数のオブジェクトである。
[0069] なお、複数オブジェクトの選定にあたっては、前述したように、構造的に当該ォブジ ェタトの上位や近傍（下位等）に位置する複数のオブジェクトを選択する複数オブジェ タト選択パターンの他に、空間的に当該オブジェクトの近傍に位置する複数のォブジ ヱタトを選択する複数オブジェクト選定パターンを用いてもょレ、。
[0070] また、上記複数オブジェクトがユーザに提示されると、図 3に示したペースト先情報
200においては、「〒」（右方の入力欄も含む）、「住所」（右方の入力欄も含む）およ び「電話番号」（右方の入力欄も含む）力 Sハイライト表示される。
[0071] これにより、ユーザは、ハイライト表示の部分力 S、所望のペースト領域であるか否か を判断する。
[0072] ステップ SC6では、ソース構造解析部 41は、ユーザによりペースト領域 (ノヽイライト 表示の部分）について承認が得られたか否力を判断し、この場合、判断結果を「Yes 」とする。なお、ステップ SC6の判断結果が「No」である場合、ステップ SC5では、ソ ース構造解析部 41は、別の複数オブジェクト選定パターンにより、オブジェクト（く dt> および「住所」：図 18参照）を含む複数オブジェクトをひとまとめにしてユーザに再提 示する。
[0073] ステップ SC7では、意味解析部 42は、図 7に示したペースト先ソース情報 210から
、ステップ SC6で承認が得られた複数オブジェクトに対応する部分ペースト先ソース 情報 210a (破線囲い部分）を抽出する。
[0074] ステップ SC8では、意味解析部 42は、部分ペースト先ソース情報 210aに含まれる 以下のオブジェクト、すなわち、図 19に網掛けで示した各オブジェクトについて、辞 書データベース 50を参照しつつ意味を解析する。
[0075] ·「〒」 •「く input type=〃text〃name=〃zip— code〃value=〃〃〉」 (但し、図 18—図 21で はく input〉と表示）（入力欄）
•「住所」
•「、mput type= text size= 60 name= address value= >」 (但し、図 18一
図 21ではく input>と表示）（入力欄）
•「電話番号」
•「く input type="text"size="15"name="te 'value="">」（但し、図 18 図 2
1ではく input〉と表示）（入力欄）
[0076] 図 20は、ステップ SC8におけるペースト先意味解析結果 (網掛け部分）を示す図で ある。同図からわかるように、「〒」は、意味属性として「郵便番号」と解される。 「く input 〉」は、意味属性として入力欄 # 1と解される。 「住所」は、意味属性として「住所」と解 される。「く input〉」は、意味属性として入力欄 # 2と解される。「電話番号」は、意味属 性として「電話番号」と解される。 「く input>」は、意味属性として入力欄 # 3と解される。
[0077] 図 9に戻り、ステップ SA5では、ペースト処理が実行される。具体的には、図 12に示 したステップ SD1では、入力候補選択部 71は、補助指定部 34でユーザにより指定さ れたコピー元ファイル (この場合、コピー元情報 100 (図 2参照）に対応）を格納部 60 から読み込む。
[0078] ステップ SD2では、ペースト先選択部 72は、上記コピー元ファイルに含まれる以下 のコピー元意味解析結果（図 16参照）と、ステップ SC8で得られた以下のペースト先 意味解析結果（図 20参照）とを意味属性をキーとして照合する。
[0079] <コピー元意味解析結果 >
•「100_1111」→「郵便番号」
•「東京都千代田区永田町 1-11-1」→「住所」
•「03-3333-1111」→「電話番号」
•「会議室'宴会場ありインターネット利用可」→「備考」
[0080] <ペースト先意味解析結果 >
·「〒」→「郵便番号」
'「く input>」→「入力欄 # 1」 •「住所」→「住所」
'「く input>」→「入力欄 # 2」
•「電話番号」→「電話番号」
'「く input>」→「入力欄 # 3」
[0081] 以下に上記照合結果 (意味属性が一致)を示す。
•「100-1111」（郵便番号）
•「東京都千代田区永田町 1-11-1」（住所）
•「03-3333-1111」（電話番号）
[0082] 上記照合結果は、ペーストすべきオブジェクト（ペースト対象オブジェクトという）であ る。ステップ SD3では、ペースト先選択部 72は、ペースト先意味解析結果から、上記 照合結果に基づレ、て、ペースト対象オブジェクトのペースト先を選択する。
[0083] 具体的には、ペースト先選択部 72は、ペースト対象オブジェクトの意味属性をキー として、ペースト先意味解析結果からオブジェクトを確認する。例えば、 1つ目のぺー スト対象オブジェクトである「100-1111」（郵便番号）の場合には、ペースト先意味解析 結果からオブジェクト「〒」（郵便番号）が確認される。
[0084] つぎに、ペースト先選択部 72は、図 20に示したペースト先意味解析結果から上記 オブジェクト「〒」（郵便番号）の近傍に位置するオブジェクト「く input>」（入力欄 # 1) を、ペースト対象オブジェクト「100-1111」（郵便番号）のペースト先として選択する（図 21参照）。 r<input>j (入力欄 # 1)は、ペースト先情報 200 (図 3参照）における「〒」 の右方近傍に位置する入力欄に対応している。
[0085] また、 2つ目のペースト対象オブジェクトである「東京都千代田区永田町 1-11-1」 ( 住所)の場合には、ペースト先意味解析結果力 オブジェクト「住所」（住所）が確認さ れる。
[0086] つぎに、ペースト先選択部 72は、図 20に示したペースト先意味解析結果から上記 オブジェクト「住所」（住所）の近傍に位置するオブジェクト「く input>」（入力欄 # 2)を、 ペースト対象オブジェクト「東京都千代田区永田町 1-11-1」（住所）のペースト先とし て選択する（図 21参照）。 r<input>j (入力欄 # 2)は、ペースト先情報 200 (図 3参照） における「住所」の右方近傍に位置する入力欄に対応している。 [0087] また、 3つ目のペースト対象オブジェクトである「03-3333-1111」（電話番号）の場合 には、ペースト先意味解析結果からオブジェクト「電話番号」（電話番号）が確認され る。
[0088] つぎに、ペースト先選択部 72は、図 20に示したペースト先意味解析結果から上記 オブジェクト「電話番号」（電話番号)の近傍に位置するオブジェ外「く input>」（入力 欄 # 3)を、ペースト対象オブジェクト「03-3333-1111」（電話番号）のペースト先として 選択する（図 21参照）。 r<input>j (入力欄 # 3)は、ペースト先情報 200 (図 3参照）に おける「電話番号」の右方近傍に位置する入力欄に対応している。
[0089] ステップ SD4では、ペースト先選択部 72は、ステップ SD3で選択された 3つのぺー スト先（図 3に示した 3つの入力欄）をハイライト表示させて、ユーザにペースト先の 候補として提示する。
[0090] これにより、ユーザは、ハイライト表示の部分力 所望のペースト先であるか否かを 判断する。この場合、ペースト先についてユーザ承認が得られたものとする。
[0091] ステップ SD5では、ペースト先選択部 72は、ユーザにより上記承認が得られたか否 力を判断し、この場合、判断結果を「Yes^する。なお、ステップ SD5の判断結果が「 No」である場合、ペースト先選択部 72は、ステップ SD3で、別の選択基準により、ぺ 一スト先を選択し、ステップ SD4でペースト先を再提示する。
[0092] ステップ SD6では、ペースト部 73は、図 4に示したように、ユーザの承認が得られた ペースト先に、ペースト対象オブジェクトをペーストする。これにより、ペースト先情報 2 00の各入力欄には、「100-1111」、「東京都千代田区永田町 1-11-1」および「
03-3333-1111」がそれぞれペーストされる。
[0093] 以上説明したように、実施の形態 1によれば、ユーザインタフェース部 30を経由して コピーされた複数のオブジェクトのそれぞれの意味を意味解析部 42で解析し、この 意味の解析結果に合致するペースト先を選択した後、複数のオブジェクトをペースト 先へペーストすることとしたので、簡易な操作で複数のオブジェクトにかかるコピー. アンド'ペーストを行うことができる。
[0094] また、実施の形態 1によれば、 1回のユーザ操作でコピー指示が出され、 1回のユー ザ操作でペースト指示が出されることとしたので、ワンクリック型で極めて簡易な操作 で複数のオブジェクトにかかるコピー 'アンド'ペーストを行うことができる。
[0095] また、実施の形態 1によれば、 HTMLで記述されたコピー元情報 100 (コピーモジ ユール）およびペースト先情報 200 (ペーストモジュール）についてオブジェクト間の 構造が明確化されているため、構造解析に要する処理時間の短縮化を図ることがで き、コピー'アンド 'ペーストを高速化することができる。
[0096] また、実施の形態 1によれば、コピー指示に基づいて、コピー元情報 100 (コピーモ ジュール)から、構造的にまとまりがある複数のオブジェクトをコピーし、ペースト指示 に従って、ペースト先情報 200 (ペーストモジュール）から構造的にまとまりがあるぺー スト先を選択することとしたので、簡易な操作で複数のオブジェクトにかかるコピー 'ァ ンド'ペーストを行うことができる。
[0097] また、実施の形態 1によれば、ステップ SB6 (図 10参照）で説明したように、複数の オブジェクトの候補をユーザに提示して承認をとり、承認が得られなかった場合、承 認が得られるまで別の複数のオブジェクトの候補をユーザに再提示することとしたの で、コピーの精度を高めることができる。
[0098] また、実施の形態 1によれば、ステップ SD5 (図 12参照）で説明したように、ペースト 先の候補をユーザに提示して承認をとり、承認が得られなかった場合、承認が得られ るまで別のペースト先の候補をユーザに再提示することとしたので、ペーストの精度 を高めることができる。
[0099] 実施の形態 2.
さて、前述した実施の形態 1においては、図 1に示した表示部 20においてコピー' アンド'ペーストを完結させる構成例について説明した力 物理的に離れた 2つのモ ジュール間でコピ一'アンド 'ペーストを行う構成例としてもよい。
[0100] 図 22は、本発明に力、かる実施の形態 2の構成を示すブロック図である。同図におい て、コピー元モジュール 800およびペースト先モジュール 900は、物理的に離れた状 態で存在し、無線通信機能（赤外線通信等も含む）を備えたモジュールである。また 、ユーザインタフェース部 300、ソース情報解析部 400、辞書データベース 500およ びペースト処理部 700も、無線通信機能を備えている。
[0101] コピー元モジュール 800は、コピー対象のコピー元情報 100 (図 2参照）を表示する とともに、コピー元情報 100に対応するコピー元ソース情報 110を保持する機能と、 無線通信機能とを備えており、テレビジョン装置等である。
[0102] 一方、ペースト先モジュール 900は、コピー元モジュール 800力らコピーされたォブ ジェタトがペーストされる機能を備えており、カーナビゲーシヨン装置、パーソナルコン ピュータ、電子レンジ等である。
[0103] 例えば、ペースト先モジュール 900がカーナビゲーシヨン装置である場合、ペースト 先モジュール 900には、ペースト先情報 200 (図 3参照）が表示されるとともに、ぺー スト先情報 200に対応するペースト先ソース情報 210 (図 7参照）が保持されている。
[0104] 以下では、コピー元モジュール 800をテレビジョン装置、ペースト先モジュール 900 をカーナビゲーシヨン装置として説明する。この場合には、コピー元モジュール 800 ( テレビシヨン装置）にホテル一覧（コピー元情報 100)が表示された際に、行きたいホ テルに関する情報（オブジェクト）をコピーした後、このオブジェクトをペースト先モジュ ール 900 (カーナビゲーシヨン装置）にペーストするという場面が想定される。
[0105] 図 22に戻り、ユーザインタフェース部 300は、ユーザから発せられる音声コマンドに より操作されるマンマシンインタフェースとしての機能を備えており、ユーザ操作管理 部 301、マイクロフォン 302、音声コマンド解析部 303、補助指定部 304、有線インタ フェース部 305および表示部 306力 構成されている。
[0106] また、ユーザインタフェース部 300の一部（補助指定部 304の一部も含む）または全 部（補助指定部 304の一部も含む）は、リモートコントローラとしてユーザに携帯される 。一例として、リモートコントローラの機能は、 ICカード、携帯端末、 PDA (Personal Digital Assistant)等の携帯情報機器に実装される。
[0107] ここで、音声コマンドとしては、コピー操作の場合、「〇〇ホテルキヤピトルの住所を 記憶」等が挙げられる。また、ペースト操作の場合、音声コマンドとしては、「ホテルの 住所を入力」や「ホテルを入力」（省略型)等が挙げられる。
[0108] ユーザ操作管理部 301は、ユーザの操作を管理する機能や、外部との無線通信機 能を備えている。また、ユーザ操作管理部 301は、コピー元ソース情報 110 (図 5およ び図 6参照）から、コピーすべきオブジェクトに対応する部分コピー元ソース情報を抽 出する機能も備えている。マイクロフォン 302は、ユーザ力も発せられる音声コマンド を音声信号に変換する機能を備えてレ、る。
[0109] 音声コマンド解析部 303は、マイクロフォン 302からの音声信号に基づいて、音声 コマンドを解析する機能を備えている。補助指定部 304は、後述する格納部 600に おけるコピー元ファイルを指定する機能を備えている。有線インタフェース部 305は、 LAN (Local Area Network)等の有線による通信を行うための機能を備えている。 表示部 306は、 LCD等である。
[0110] ソース情報解析部 400は、コピー元ソース情報 110 (図 5および図 6参照）およびべ 一スト先ソース情報 210 (図 7参照）について、意味構造を解析する機能を備えてい る。
[0111] ソース情報解析部 400において、ソース構造解析部 401は、コピー元ソース情報 1 10 (図 5および図 6参照）、ペースト先ソース情報 210 (図 7参照）について、ソース構 造 (木構造等）を解析する機能を備えている。図 13は、コピー元ソース情報 110に対 応するコピー元ソース構造解析結果を示す図である。図 17は、ペースト先ソース情 報 210 (図 7参照）に対応するペースト先ソース構造解析結果を示す図である。
[0112] 意味解析部 402は、コピー元ソース情報 110 (図 5および図 6参照）、ペースト先ソ ース情報 210 (図 7参照）について、辞書データベース 500を参照しつつ意味構造を 解析する機能を備えている。
[0113] 辞書データベース 500は、図 23に示したように、 if/then形式等により記述された 各規則を格納するデータベースである。同図に示した辞書データベース 500におい ては、辞書データベース 50 (図 8参照）の各規則に加えて、対象物修飾語を定義す る規則、対象物指示語を定義する規則、領域指示語を定義する規則、操作語を定義 する規貝 IJ、操作語等の言い換えに関する規則等が新たに追加されている。
[0114] ここで、上述した対象物修飾語、対象物指示語、領域指示語および操作語は、ュ 一ザ力 発せられ、マイクロフォン 302により集音された音声コマンドを構成する語で ある。対象物修飾語は、「大きい」等の形容詞に相当する。対象物指示語は、「〇〇 ホテルキヤピトル」等の名詞に相当する。領域指示語は、コピー領域、ペースト領域を 指示するための語であり、「ほぼ上」、「上」、「少し上」、「ほぼ下」、「下」、「横」、「次」 、「それ」、「これ」、「全部」等である。操作語は、コピー操作、ペースト操作を定義する 語であり、「コピー」、「記憶」、「ペースト」、「張り付け」、「入力」等である。
[0115] また、操作語等の言い換えに関する規則において、 ifで記述された「コピー」、「記 憶」、「いいね」は、 thenで記述されたように「コピー操作」と言い換えられる。同様にし て、 ifで記述された「ペースト」、「張り付け」、「入力」は、 thenで記述されたように「ぺ 一スト操作」と言レ、換えられる。
[0116] 図 22に戻り、整形部 403は、オリジナルのコピー元ソース情報、部分コピー元ソー ス情報、コピー元ソース構造解析結果およびコピー元意味解析結果をコピー元ファ ィルとしてひとまとめに整形した後、格納部 600に格納する。
[0117] ペースト処理部 700は、補助指定部 304により指定されたコピー元ファイルに基づ いて、意味をキーとしてマッチングを行い、マッチング結果に基づいて、ペーストに関 する処理を実行する。
[0118] 入力候補選択部 701は、補助指定部 304により指定されたコピー元ファイルを入力 候補として格納部 600から読み出す機能を備えている。ペースト先選択部 702は、入 力候補選択部 701により読み出されたコピー元ファイルに含まれるコピー元意味解 析結果とペースト先意味解析結果とを照合した結果に基づいて、コピー元のォブジ ェタトのペースト先を選択する。
[0119] このペースト先選択部 702の動作の詳細については、後述する。ペースト部 703は 、図 4に示したように、ペースト先選択部 702により選択されたペースト先（図 3参照） に、コピー元のオブジェクトをペーストする。
[0120] つぎに、実施の形態 2の動作について、図 9、図 24、図 25および図 12に示したフロ 一チャート、図 26—図 29を参照しつつ説明する。ここでは、コピー元モジュール 800 (テレビジョン装置）には、コピー元情報 100 (図 2参照）が表示されているものとする。 一方、ペースト先モジュール 900 (カーナビゲーシヨン装置）にもペースト先情報 200 (図 3参照）が表示されるものとする。
[0121] 図 9に示したステップ SA1では、ユーザ操作管理部 301は、ユーザにより、音声コ マンドを用いて、コピー領域が指定されたか否力、を判断し、この場合、判断結果を「N o」とする。
[0122] ステップ SA2では、ユーザ操作管理部 301は、ユーザにより、音声コマンドを用い て、ペースト領域が指定されたか否力を判断し、この場合、判断結果を「No」とする。 以後、判断結果が「Yes」となるまで、ステップ SA1およびステップ SA2の判断が繰り 返される。
[0123] そして、例えば、動作例 1として、コピー元モジュール 800に表示されたコピー元情 報 100 (図 2参照）において、コピー領域を指定すベぐ「〇〇ホテルキヤピトノレの住 所を記憶」という音声コマンドがユーザから発せられると、マイクロフォン 302に集音さ れた後、音声コマンド解析部 303で「記憶」というキーワードからコピー領域の指定と 認識される。これにより、ユーザ操作管理部 301は、ステップ SA1の判断結果を「Ye s」とする。
[0124] ステップ SA3では、コピー処理が実行される。具体的には、図 24に示したステップ SE1では、ユーザ操作管理部 301は、無線通信により、コピー元モジュール 800から コピー元情報 100に対応するコピー元ソース情報 110 (図 5および図 6参照）を読み 込み、ソース情報解析部 400へ渡す。
[0125] ステップ SE2では、ソース構造解析部 401は、コピー元ソース情報 110 (図 5および 図 6参照）を解析し、図 13に示したように、木構造からなるコピー元ソース構造解析結 果を得る。
[0126] ステップ SE3では、意味解析部 402は、コピー元ソース情報 110の各オブジェクト について、辞書データベース 500を参照しつつ意味を解析する。また、意味解析部 4 02は、コピー元意味解析結果をユーザインタフェース部 300へ渡す。ここで、図 26 にコピー元意味解析結果 (太字部分)を示す。
[0127] 同図において、「東京地方」は、意味属性として「文字列」と解される。 「ホテル一覧」 は、意味属性として「文字列」と解される。 「〇〇ホテルキヤピトル」は、意味属性として 「文字列」と解される。
[0128] 「100-1111」は、意味属性として「郵便番号」と解される。「東京都千代田区永田町 1-11-1」は、意味属性として「住所」と解される。 「03-3333-1111」は、意味属性として「 電話番号」と解される。「会議室 ·宴会場ありインターネット利用可」は、意味属性とし て「備考」と解される。
[0129] ステップ SE4では、音声コマンド解析部 303は、辞書データベース 500を参照して 、音声コマンド (この場合、「〇〇ホテルキヤピトルの住所を記憶」）を解析し、以下 のように、対象物修飾語、対象物指示語、領域指示語および操作語からなる音声コ マンド解析結果を得る。
[0130] '対象物修飾語：「〇〇ホテルキヤピトルの」（「〇〇ホテルキヤピトル」 +「の」）
•対象物指示語：「住所」
•領域指示語:該当無し
•操作語:記憶
[0131] ステップ SE5では、ユーザ操作管理部 301は、コピー元意味解析結果（図 26参照） に、上記音声コマンド解析結果に対応するオブジェクトがあるか否力、を判断する。
[0132] この場合、図 27に示したように「対象物修飾語：「〇〇ホテルキヤピトル」 +「の」」お よび「対象物指示語：「住所」」の双方に対応するオブジェクトとして、文字列（〇〇ホ テルキヤピトル）および住所 (東京都千代田区永田町 1-11-1)があるため、ユーザ操 作管理部 301は、ステップ SE5の判断結果を「Yes」とする。
[0133] ステップ SE6では、ユーザ操作管理部 301は、図 28に示したように、上記「対象物 指示語：「住所」」に対応するオブジェクトを含む複数オブジェクト (網掛け部分)をひと まとめにして表示部 306に表示させ、ユーザに提示する。
[0134] 具体的には、上記複数オブジェクトは、同図に網掛けで示したく td〉、く font>、「郵便 番号（100-l l l l)」、<br/>、く font〉、「住所 (東京都千代田区永田町 1-11-1)」、く br/>
、く font>、「電話番号 (03-3333-1111)」、く br/〉、 <i>、「備考 (会議室'宴会場ありイン ターネット利用可）」およびく br/〉である。
[0135] ここで、力かる複数オブジェクトは、く font〉および「住所 (東京都千代田区永田町
1-11-1)」（図 28参照）の上位オブジェクトであるく td〉の配下の複数のオブジェクトで める。
[0136] なお、複数オブジェクトの選定にあたっては、前述したように、構造的に当該ォブジ ェタトの上位や近傍（下位等）に位置する複数のオブジェクトを選択する複数オブジェ タト選択パターンの他に、空間的に当該オブジェクトの近傍に位置する複数のォブジ ヱタトを選択する複数オブジェクト選定パターンを用いてもょレ、。
[0137] これにより、ユーザは、提示された複数オブジェクト（「100-1111」、「東京都千代田 区永田町 1-11-1」、「03-3333-1111」、）が所望のコピー領域であるか否かを判断し、 この場合、判断結果を「Yes」として、補助指定部 304を用いて、コピー領域を承認す る。
[0138] ステップ SE7では、ユーザ操作管理部 301は、ユーザにより上記承認が得られたか 否力、を判断し、この場合、判断結果を「Yes」とする。なお、ステップ SE7の判断結果 力 S「No」である場合、ステップ SE5では、ユーザ操作管理部 301は、別の複数ォブジ ヱタト選定パターンにより、複数オブジェクトを選定しユーザに再提示する。
[0139] また、ステップ SE5の判断結果が「No」である場合、ステップ SE8では、ユーザ操 作管理部 301は、コピー元意味解析結果（図 27参照）から、デフォルトで設定された 複数オブジェクト (例えば、全オブジェクト）をひとまとめにしてユーザに提示する。
[0140] ステップ SE9では、ユーザ操作管理部 301は、辞書データベース 500 (図 23参照） を参照しつつ、ステップ SE4で解析された操作語である「記憶」より、ユーザが所望す る操作がコピー操作であることを認識する。
[0141] ステップ SE10では、ユーザ操作管理部 301は、ステップ SE1で読み込んだコピー 元ソース情報 110 (図 5および図 6参照）から、コピーすべきオブジェクトに対応する部 分コピー元ソース情報 110aを抽出し、ソース情報解析部 400へ渡す。この部分コピ 一元ソース情報 110aは、ステップ SE7でユーザの承認が得られた複数オブジェクト（ または、ステップ SE8でデフォルトにて設定された複数オブジェクト）に対応している。
[0142] ステップ SE11では、整形部 403は、オリジナルのコピー元ソース情報 110、ユーザ インタフェース部 300から渡された部分コピー元ソース情報 110a (図 5参照）、コピー 元ソース構造解析結果（図 13参照）、図 26に示したコピー元意味解析結果（図 28の 網掛け部分に対応）をコピー元ファイルとしてひとまとめに整形した後、格納部 600に 格納する。
[0143] そして、例えば、ペースト先モジュール 900に表示されたペースト先情報 200 (図 3 参照）において、ペースト領域を指定すベぐ「ホテルの住所を入力」という音声コマ ンドがユーザ力 発せられると、マイクロフォン 302に集音された後、音声コマンド解 析部 303で「入力」というキーワードからペースト領域の指定と認識される。これにより 、ユーザ操作管理部 301は、図 9に示したステップ SA2の判断結果を「Yes」とする。 [0144] ステップ SA4では、ペースト準備処理が実行される。具体的には、図 25に示したス テツプ SF1では、ユーザ操作管理部 301は、無線通信により、ペースト先モジュール 900からペースト先情報 200に対応するペースト先ソース情報 210 (図 7参照）を読み 込み、ソース情報解析部 400へ渡す。
[0145] ステップ SF2では、ソース構造解析部 401は、ペースト先ソース情報 210 (図 7参照 )を解析し、図 17に示したように、木構造からなるペースト先ソース構造解析結果を得 る。
[0146] ステップ SF3では、意味解析部 402は、ペースト先ソース情報 210の各オブジェクト について、辞書データベース 500を参照しつつ意味を解析する。また、意味解析部 4 02は、ペースト先意味解析結果をユーザインタフェース部 300へ渡す。ここで、図 29 にペースト先意味解析結果 (太字部分)を示す。
[0147] 同図において、「目的地の住所を入力してください.」は、意味属性として「文字列」 と解される。「目的地入力」は、意味属性として「文字列」と解される。 「干」は、意味属 性として「郵便番号」と解される。
[0148] rinputj (図 3に示した「〒」の右方の入力欄に対応）は、意味属性として入力欄 # 1 と解される。「住所」は、意味属性として、「住所」と解される。く input〉（図 3に示した「住 所」の右方の入力欄に対応）は、意味属性として、入力欄 # 2と解される。 「電話番号 」は、意味属性として、「電話番号」と解される。く input〉（図 3に示した「電話番号」の右 方の入力欄に対応）は、意味属性として、入力欄 # 3と解される。
[0149] ステップ SF4では、音声コマンド解析部 303は、辞書データベース 500を参照して 、音声コマンド (この場合、「ホテルの住所を入力」）を解析し、以下のように、対象物 修飾語、対象物指示語、領域指示語および操作語からなる音声コマンド解析結果を 得る。
[0150] ·対象物修飾語：「ホテルの」（「ホテル」 +「の」）
•対象物指示語：「住所」
•領域指示語:該当無し
•操作語:入力
[0151] ステップ SF5では、ユーザ操作管理部 301は、ペースト先意味解析結果（図 29参 照）に、上記音声コマンド解析結果に対応するオブジェクトがあるか否力を判断する。
[0152] この場合、「対象物指示語：「住所」」に対応するオブジェクトとして、住所 (住所)が あるため、ユーザ操作管理部 301は、ステップ SF5の判断結果を「Yes」とする。
[0153] ステップ SF6では、ユーザ操作管理部 301は、図 29に示したように、上記「住所」 ( 住所）に対応するオブジェクトを含む複数オブジェクト（網掛け部分）をひとまとめにし て表示部 306に表示させ、ユーザに提示する。
[0154] 具体的には、上記複数オブジェクトは、同図に網掛けで示したく dl>、く dt〉、「〒」、く dd〉、く input> (図 3に示した「〒」の右方の入力欄に対応）、く dt>、「住所」、く dd〉、 < input> (図 3に示した「住所」の右方の入力欄に対応）、く dt〉、「電話番号」、く dd>およ びく input> (図 3に示した「電話番号」の右方の入力欄に対応）である。
[0155] ここで、力かる複数オブジェクトは、く dt〉および「住所」の上位オブジェクトであるく dl〉 の配下の複数のオブジェクトである。
[0156] なお、複数オブジェクトの選定にあたっては、前述したように、構造的に当該ォ： ェタトの上位や近傍（下位等）に位置する複数のオブジェクトを選択する複数ォ： タト選択パターンの他に、空間的に当該オブジェクトの近傍に位置する複数のォブジ ヱタトを選択する複数オブジェクト選定パターンを用いてもょレ、。
[0157] これにより、ユーザは、提示された複数オブジェクトが所望のペースト領域であるか 否力を判断し、この場合、判断結果を「Yes^して、補助指定部 304を用いて、ぺー スト領域を承認する。
[0158] ステップ SF7では、ユーザ操作管理部 301は、ユーザにより上記承認が得られたか 否力を判断し、この場合、判断結果を「Yes^する。なお、ステップ SF7の判断結果 力 S「No」である場合、ステップ SF6では、ユーザ操作管理部 301は、別の複数ォブジ ヱタト選定パターンにより、複数オブジェクトを選定しユーザに再提示する。
[0159] また、ステップ SF5の判断結果が「No」である場合、ステップ SF8では、ユーザ操作 管理部 301は、ペースト先意味解析結果（図 29参照）から、デフォルトで設定された 複数オブジェクト (例えば、全オブジェクト）をひとまとめにしてユーザに提示する。
[0160] ステップ SF9では、ユーザ操作管理部 301は、辞書データベース 500 (図 23参照） を参照しつつ、ステップ SF4で解析された操作語である「入力」より、ユーザが所望す る操作がペースト操作であることを認識する。
[0161] 図 9に戻り、ステップ SA5では、ペースト処理が実行される。具体的には、図 12に示 したステップ SD1では、入力候補選択部 701は、補助指定部 304でユーザにより 指定されたコピー元ファイル (この場合、コピー元情報 100 (図 5および図 6参照）に 対応）を格納部 600から読み込む。
[0162] ステップ SD2では、ペースト先選択部 702は、上記コピー元ファイルに含まれる以 下のコピー元意味解析結果（図 28参照）と、以下のペースト先意味解析結果（図 29 参照）とを意味属性をキーとして照合する。
[0163] <コピー元意味解析結果 >
•「100_1111」→「郵便番号」
•「東京都千代田区永田町 1-11-1」→「住所」
•「03-3333-1111」→「電話番号」
•「会議室'宴会場ありインターネット利用可」→「備考」
[0164] <ペースト先意味解析結果 >
·「〒」→「郵便番号」
'「く input>」→「入力欄 # 1」
•「住所」→「住所」
'「く input>」→「入力欄 # 2」
•「電話番号」→「電話番号」
'「く input>」→「入力欄 # 3」
[0165] 以下に上記照合結果 (意味属性が一致)を示す。
•「100-1111」（郵便番号）
•「東京都千代田区永田町 1-11-1」（住所）
•「03-3333-1111」（電話番号）
[0166] 上記照合結果は、ペーストすべきオブジェクト -スト対象オブジェクトという）であ る。ステップ SD3では、ペースト先選択部 702は、ぺ—スト先意味解析結果から、上 記照合結果に基づレ、て、ペースト対象オブジェクトの -スト先を選択する。
[0167] 具体的には、ペースト先選択部 702は、ペースト対象オブジェクトの意味属性をキ 一として、ペースト先意味解析結果からオブジェクトを確認する。例えば、 1つ目のぺ 一スト対象オブジェクトである「100-1111」（郵便番号）の場合には、ペースト先意味解 析結果からオブジェクト「〒」（郵便番号）が確認される。
[0168] つぎに、ペースト先選択部 702は、図 29に示したペースト先意味解析結果から上 記オブジェクト「〒」（郵便番号）の近傍に位置するオブジェクト「く input>」（入力欄 # 1 )を、ペースト対象オブジェクト「100-1111」（郵便番号）のペースト先として選択する。 r<input>j (入力欄 # 1)は、ペースト先情報 200 (図 3参照）における「〒」の右方近傍 に位置する入力欄に対応している。
[0169] また、 2つ目のペースト対象オブジェクトである「東京都千代田区永田町 1-11-1」 ( 住所)の場合には、ペースト先意味解析結果力 オブジェクト「住所」（住所）が確認さ れる。
[0170] つぎに、ペースト先選択部 702は、図 29に示したペースト先意味解析結果から上 記オブジェクト「住所」（住所）の近傍に位置するオブジェクト「く input>」（入力欄 # 2) を、ペースト対象オブジェクト「東京都千代田区永田町 1-11-1」（住所）のペースト先と して選択する。 <input>j (入力欄 # 2)は、ペースト先情報 200 (図 3参照）における「 住所」の右方近傍に位置する入力欄に対応している。
[0171] また、 3つ目のペースト対象オブジェクトである「03-3333-1111」（電話番号）の場合 には、ペースト先意味解析結果からオブジェクト「電話番号」（電話番号）が確認され る。
[0172] つぎに、ペースト先選択部 702は、図 29に示したペースト先意味解析結果から上 記オブジェクト「電話番号」（電話番号）の近傍に位置するオブジェクト「く input>」（入 力欄 # 3)を、ペースト対象オブジェクト「03-3333-1111」（電話番号）のペースト先とし て選択する。 「く input>」（入力欄 # 3)は、ペースト先情報 200 (図 3参照）における「電 話番号」の右方近傍に位置する入力欄に対応している。
[0173] ステップ SD4では、ペースト先選択部 702は、ステップ SD3で選択された 3つのべ 一スト先（図 3に示した 3つの入力欄）を、無線通信により表示部 306等に表示させて 、ハイライト表示させて、ユーザにペースト先の候補として提示する。
[0174] これにより、ユーザは、ハイライト表示の部分力 所望のペースト先であるか否かを 判断する。この場合、ペースト先についてユーザ承認が得られたものとする。
[0175] ステップ SD5では、ペースト先選択部 702は、ユーザにより上記承認が得られたか 否力を判断し、この場合、判断結果を「Yes^する。なお、ステップ SD5の判断結果 が「No」である場合、ペースト先選択部 702は、ステップ SD3で、別の選択基準によ り、ペースト先を選択し、ステップ SD4でペースト先を再提示する。
[0176] ステップ SD6では、ペースト部 703は、図 4に示したように、ユーザの承認が得られ たペースト先に、ペースト対象オブジェクトをペーストする。これにより、ペースト先情 報 200の各入力欄には、「100-1111」、「東京都千代田区永田町 1-11-1」および「 03-3333-1111」がそれぞれペーストされる。
[0177] また、実施の形態 2の動作例 2として、例えば、コピー元モジュール 800に表示され たコピー元情報 100 (図 2参照）において、コピー領域を指定すベぐ「ほぼ上を記憶 」という音声コマンドがユーザから発せられると、マイクロフォン 302に集音された後、 音声コマンド解析部 303で「記憶」というキーワードからコピー領域の指定と認識され る。これにより、ユーザ操作管理部 301は、ステップ SA1の判断結果を「Yes」とする。
[0178] ステップ SA3では、コピー処理が実行される。具体的には、図 24に示したステップ SE1では、ユーザ操作管理部 301は、無線通信により、コピー元モジュール 800から コピー元情報 100に対応するコピー元ソース情報 110 (図 5および図 6参照）を読み 込み、ソース情報解析部 400へ渡す。
[0179] ステップ SE2では、ソース構造解析部 401は、コピー元ソース情報 110 (図 5および 図 6参照）を解析し、図 13に示したように、木構造からなるコピー元ソース構造解析結 果を得る。
[0180] ステップ SE3では、意味解析部 402は、コピー元ソース情報 110の各オブジェクト について、辞書データベース 500を参照しつつ意味を解析する。また、意味解析部 4 02は、図 26に示したコピー元意味解析結果をユーザインタフェース部 300へ渡す。
[0181] ステップ SE4では、音声コマンド解析部 303は、辞書データベース 500を参照して 、音声コマンド (この場合、「ほぼ上を記憶」）を解析し、以下のように、対象物修飾語 、対象物指示語、領域指示語および操作語力 なる音声コマンド解析結果を得る。
[0182] ·対象物修飾語:該当無し •対象物指示語:該当無し
•領域指示語：ほぼ上
•操作語:記憶
[0183] ステップ SE5では、ユーザ操作管理部 301は、コピー元意味解析結果（図 26参照） に、上記音声コマンド解析結果に対応するオブジェクトがあるか否力、を判断する。
[0184] この場合、図 27に示したように「領域指示語：「ほぼ上」」に対応するオブジェクトとし て、図 26図に示したほぼ上の階層に位置する郵便番号（100-1111)、住所 (東京都 千代田区永田町 1-11-1)、電話番号 (03-3333-1111)等があるため、ユーザ操作管 理部 301は、ステップ SE5の判断結果を「Yes」とする。
[0185] ステップ SE6では、ユーザ操作管理部 301は、図 28に示したように、上記「領域指 示語：「ほぼ上」」に対応するオブジェクトを含む複数オブジェクト（網掛け部分）をひと まとめにして表示部 306に表示させ、ユーザに提示する。
[0186] ステップ SE7では、ユーザ操作管理部 301は、ユーザにより上記承認が得られたか 否力を判断し、この場合、判断結果を 63」とする。以後、前述した動作と同様にし て、ステップ SE9—ステップ SE11の処理が実行される。
[0187] そして、例えば、ペースト先モジュール 900に表示されたペースト先情報 200 (図 3 参照）において、ペースト領域を指定すベぐ「全部を入力」という音声コマンドがユー ザから発せられると、マイクロフォン 302に集音された後、音声コマンド解析部 303で 「入力」というキーワードからペースト領域の指定と認識される。これにより、ユーザ操 作管理部 301は、図 9に示したステップ SA2の判断結果を「Yes」とする。
[0188] ステップ SA4では、ペースト準備処理が実行される。具体的には、図 25に示したス テツプ SF1では、ユーザ操作管理部 301は、無線通信により、ペースト先モジュール 900からペースト先情報 200に対応するペースト先ソース情報 210 (図 7参照）を読み 込み、ソース情報解析部 400へ渡す。
[0189] ステップ SF2では、ソース構造解析部 401は、ペースト先ソース情報 210 (図 7参照 )を解析し、図 17に示したように、木構造からなるペースト先ソース構造解析結果を得 る。
[0190] ステップ SF3では、意味解析部 402は、ペースト先ソース情報 210の各オブジェクト について、辞書データベース 500を参照しつつ意味を解析する。また、意味解析部 4
02は、ペースト先意味解析結果をユーザインタフェース部 300へ渡す。ここで、図 29 にペースト先意味解析結果 (太字部分)を示す。
[0191] ステップ SF4では、音声コマンド解析部 303は、辞書データベース 500を参照して
、音声コマンド (この場合、「全部を入力」）を解析し、以下のように、対象物修飾語、 対象物指示語、領域指示語および操作語力 なる音声コマンド解析結果を得る。
[0192] ·対象物修飾語:該当無し
•対象物指示語:該当無し
•領域指示語:全部
•操作語:入力
[0193] ステップ SF5では、ユーザ操作管理部 301は、ペースト先意味解析結果（図 29参 照）に、上記音声コマンド解析結果に対応するオブジェクトがあるか否力、を判断する。
[0194] この場合、「領域指示語：「全部」」に対応するオブジェクトとして、「郵便番号」（〒）、
「住所」（住所)、「電話番号」（電話番号)があるため、ユーザ操作管理部 301は、ステ ップ SF5の判断結果を「Yes」とする。
[0195] ステップ SF6では、ユーザ操作管理部 301は、図 29に示したように、上記「郵便番 号」（〒）、「住所」（住所)、「電話番号」（電話番号)を含む複数オブジェクト (網掛け 部分）ひとまとめにして、表示部 306に表示させ、ユーザに提示する。
[0196] これにより、ユーザは、提示された複数オブジェクトが所望のペースト領域であるか 否力を判断し、この場合、判断結果を「Yes^して、補助指定部 304を用いて、ぺー スト領域を承認する。
[0197] ステップ SF7では、ユーザ操作管理部 301は、ユーザにより上記承認が得られたか 否力、を判断し、この場合、判断結果を「丫63」とする。
[0198] ステップ SF9では、ユーザ操作管理部 301は、辞書データベース 500 (図 23参照） を参照しつつ、ステップ SF4で解析された操作語である「入力」より、ユーザが所望す る操作がペースト操作であることを認識する。以後、前述したペースト処理が実行さ れる。
[0199] また、実施の形態 2においては、変形例として、ユーザインタフェース部 300で音声 のみでコピー領域やペースト領域の指定を行う構成例について説明した力 S、音声と、 ユーザ指定によるポインタとを併用して、コピー領域およびペースト領域の指定を行う 構成としてもよレヽ。このポインタは、例えば、 RFID (Radio Frequency Identification) を用いたものであり、前述したリモートコントローラ（ICカード、携帯端末、 PDA等）に 実装される。
[0200] 実施の形態 2の変形例においては、図 22に示した補助指定部 304に上記ポインタ としての機能を持たせればよい。具体的には、補助指定部 304は、ユーザの操作に 基づいて、コピー元モジュール 800に表示されたコピー元情報 100 (図 2参照）から、 コピー対象のオブジェクト (文字列等）を含むコピー領域を指定する機能を備えてい る。
[0201] また、補助指定部 304は、ユーザの操作に基づいて、ペースト先モジュール 900に 表示されたペースト先情報 200 (図 3参照）から、上記オブジェクトをペーストするぺー スト領域を指定する機能を備えてレ、る。
[0202] つぎに、実施の形態 2の変形例の動作について説明する。例えば、コピー元モジュ ール 800に表示されたコピー元情報 100 (図 2参照）で、補助指定部 304を用いて、 カーソル Cに対応するコピー領域がユーザにより指定されるとともに、「これいいね」と レ、う音声コマンドがユーザから発せられると、音声コマンドがマイクロフォン 302に集 音された後、音声コマンド解析部 303で「これいいね」というキーワードからコピー領 域の指定と認識される。
[0203] つぎに、コピー処理が実行される。具体的には、ユーザ操作管理部 301は、無線通 信により、コピー元モジュール 800からコピー元情報 100に対応するコピー元ソース 情報 110 (図 5および図 6参照）を読み込み、ソース情報解析部 400へ渡す。
[0204] つぎに、ソース構造解析部 401は、コピー元ソース情報 110 (図 5および図 6参照） を解析し、図 13に示したように、木構造からなるコピー元ソース構造解析結果を得る
[0205] つぎに、意味解析部 402は、コピー元ソース情報 110の各オブジェクトについて、 辞書データベース 500を参照しつつ意味を解析する。また、意味解析部 402は、図 2 6に示したコピー元意味解析結果をユーザインタフェース部 300へ渡す。 [0206] つぎに、音声コマンド解析部 303は、辞書データベース 500を参照して、音声コマ ンド（この場合、「これいいね」）を解析し、以下の操作語からなる音声コマンド解析結 果を得る。
[0207] ·操作語：これいいね
[0208] つぎに、ユーザ操作管理部 301は、図 2に示したコピー元情報 100におけるカーソ ル Cの位置情報を取得する。つぎに、ユーザ操作管理部 301は、図 28に示したコピ 一元ソース構造解析結果で位置情報に対応するオブジェクトを認識する。
[0209] この場合、ユーザ操作管理部 301は、く font>およびく東京都千代田区永田町
1-11-1〉を、カーソル C (図 2参照）の位置情報に対応するオブジェクトとして認識する
[0210] つぎに、ユーザ操作管理部 301は、上記オブジェクト（く font>およびく東京都千代田 区永田町 1-11-1〉：図 28参照）を含む複数オブジェクト（網掛け部分）をひとまとめに して表示部 306に表示させ、ユーザに提示する。
[0211] そして、ユーザの承認が得られると、ユーザ操作管理部 301は、辞書データベース
500 (図 23参照）を参照しつつ、操作語である「これいいね」より、ユーザが所望する 操作がコピー操作であることを認識する。
[0212] つぎに、ユーザ操作管理部 301は、コピー元ソース情報 110 (図 5および図 6参照） から、コピーすべきオブジェクトに対応する部分コピー元ソース情報 110aを抽出し、 ソース情報解析部 400へ渡す。
[0213] つぎに、整形部 403は、オリジナルのコピー元ソース情報 110、ユーザインタフエ一 ス部 300から渡された部分コピー元ソース情報 110a (図 5参照）、コピー元ソース構 造解析結果（図 13参照）、図 26に示したコピー元意味解析結果（図 28の網掛け部 分に対応）をコピー元ファイルとしてひとまとめに整形した後、格納部 600に格納する
[0214] ペースト準備処理においても、上述したコピー処理と同様にして、音声と、ユーザ指 定によるポインタ（補助指定部 304)とを併用して、ペースト領域の指定が行われる。
[0215] 以上説明したように、実施の形態 2によれば、ユーザのコピー指示（音声コマンド） に従って、コピー元モジュール 800力、ら複数のオブジェクトをコピーし、ユーザのぺー スト指示（音声コマンド）に従って、ペースト先モジュール 900からペースト先を選択す ることとしたので、異モジュール間（コピー元モジュール 800、ペースト先モジュール 9 00)においても、簡易な操作で複数のオブジェクトにかかるコピー'アンド'ペーストを 行うことができる。
[0216] また、実施の形態 2によれば、音声コマンドによるコピー指示およびペースト指示が 、コピー元モジュール 800およびペースト先モジュール 900との間で通信機能を有す るユーザインタフェース部 300 (指示装置）によりなされることとしたので、異モジユー ル間（コピー元モジュール 800、ペースト先モジュール 900)においても、簡易な操作 で複数のオブジェクトにかかるコピー 'アンド'ペーストを行うことができる。
[0217] また、実施の形態 2によれば、ユーザの音声でコピー指示が出され、ユーザの音声 でペースト指示が出されることとしたので、ユーザの音声のみで簡易に複数のォブジ ェタトにかかるコピー'アンド 'ペーストを行うことができる。
[0218] また、実施の形態 2によれば、ユーザの音声および該ユーザによるポインタでコピ 一指示が出され、ユーザの音声および該ユーザによるポインタでペースト指示が出さ れることとしたので、音声による曖昧さをポインタで補完しつつ簡易に複数のオブジェ タトにかかるコピー ·アンド'ペーストを行うことができる。
[0219] 実施の形態 3.
さて、前述した実施の形態 1および 2においては、 HTML等からなる木構造のコピ 一元ソース情報、ペースト先ソース情報を用いた例について説明した。これらの木構 造の情報に代えて、オブジェクトの集合 (木構造ではなレ、）をコピー元ソース情報 (ぺ 一スト先ソース情報）として用いてもよレ、。この場合には、コピー元のオブジェクトとぺ 一スト先のオブジェクトとの意味距離を計算し、意味距離が近い組み合わせについて コピー'アンド 'ペーストを実行すればよい。以下では、この構成例を実施の形態 3とし て説明する。
[0220] 図 30は、本発明に力、かる実施の形態 3の構成を示すブロック図である。この図にお いて、図 1の各部に対応する部分には同一の符号を付ける。図 30においては、図 1 に示したソース情報解析部 40およびペースト処理部 70に代えて、ソース情報解析部 1000およびペースト処理部 1200が設けられているとともに、シソーラス辞書データ ベース 1100が新たに設けられてレ、る。
[0221] また、実施の形態 3において、表示部 20には、木構造を有しないコピー元情報 130
0 (図 31参照）およびペースト先情報 1400 (図 32参照）が表示される。
[0222] 図 31に示したコピー元情報 1300は、コピー（カットも含む。以下同様） 'アンド'ぺ 一ストにおけるコピー元の情報であり、テキストのみで記述されている。従って、コピ 一元情報 1300は、情報の羅列であり、 HTMLで記述されたコピー元情報 100 (図 2 参照）のように、木構造を有していない。
[0223] このコピー元情報 1300には、ホテル一覧（東京地方）として、ホテル名（「〇〇ホテ ルキヤピトル」等）、郵便番号（「 100-1111」等）、住所（「東京都千代田区永田町
1-11-1」等）、電話番号（「03-3333-1111」等）および備考（「会議室'宴会場ありインタ 一ネット利用可」等）のオブジェクト（テキスト）が含まれてレ、る。
[0224] 一方、図 32に示したペースト先情報 1400は、コピー（カットも含む。以下同様） 'ァ ンド.ペーストにおけるペースト先の情報であり、テキストのみで記述されている。従つ て、ペースト先情報 1400も、コピー元情報 1300と同様にして、情報の羅列であり、 H TMLで記述されたペースト先情報 200 (図 3参照）のように、木構造を有してレ、なレ、。
[0225] ペースト先情報 1400には、「目的地入力」、「目的地 (施設）を入力してください.」 、「施設」、「施設の入力欄」、「クエリ送信」および「リセット」のオブジェクト（テキスト）が 含まれている。
[0226] ソース情報解析部 1000は、コピー元情報 1300 (図 31参照）、ペースト先情報 140 0 (図 32参照）について、形態素解析、構造解析、意味構造を解析する機能を備え ており、ソース構造解析部 1001、意味解析部 1002および整形部 1003から構成さ れている。
[0227] ソース情報解析部 1000において、ソース構造解析部 1001は、コピー元情報 130 0 (図 31参照）、ペースト先情報 1400 (図 32参照）について、形態素解析や構造解 析を行う機能を備えている。また、ソース情報解析部 1000は、コピー元情報 1300お よびペースト先情報 1400から、ユーザにより指定された範囲（例えば、図 31および 図 32に示した半径 rの円）に対応する部分コピー元ソース情報および部分ペースト先 ソース情報を抽出する。 [0228] 意味解析部 1002は、部分コピー元ソース情報、部分ペースト先ソース情報につい て、辞書データベース 50を参照しつつ意味構造を解析する機能を備えてレ、る。
[0229] 整形部 1003は、オリジナルのコピー元ソース情報、部分コピー元ソース情報およ びコピー元意味解析結果をコピー元ファイルとしてひとまとめに整形した後、格納部 6
0に格納する。
[0230] シソーラス辞書データベース 1100は、曖昧検索で参照される同義語、類義語が体 系化された辞書が格納されたデータベースである。図 33には、シソーラス辞書デー タベース 1100が図示されてレ、る。
[0231] 同図に示したように、シソーラス辞書データベース 1100においては、階層構造のト ップに、例えば、「場所」が定義され、「場所」の下層に、同義語、類語義としての「建 物」、「位置指標」、 · · · ·が定義されている。この「建物」の下層に、「施設」、 · · ·が定 義されている。さらに、「施設」の下層に「宿泊施設」、「ホテル」等が定義されている。 また、「位置指標」の下層に、「住所」、「郵便番号」、 · · ·が定義されている。
[0232] 図 30に戻り、ペースト処理部 1200は、部分コピー元ソース情報の各オブジェクトと 部分ペースト先ソース情報の各オブジェクトとの意味距離をシソーラス辞書データべ ース 1100 (図 33参照）から計算し、意味距離が近い組について、コピー元のォブジ ェクトをペースト先のオブジェクト（入力欄）にペーストする機能を備えている。
[0233] 入力候補選択部 1201は、補助指定部 34により指定されたコピー元ファイルを入力 候補として格納部 60から読み出す機能を備えている。ペースト先選択部 1202は、上 記意味距離の計算結果に基づいて、コピー元のオブジェクトのペースト先を選択する 。このペースト先選択部 1202の動作の詳細については、後述する。
[0234] ペースト部 1203は、ペースト先選択部 1202により選択されたペースト先に、コピー 元のオブジェクトをペーストする。意味距離計算部 1204は、シソーラス辞書データべ ース 1100を用いて、オブジェクト間の意味距離を計算する。
[0235] つぎに、実施の形態 3の動作について、図 9、図 34—図 36に示したフローチャート を参照しつつ説明する。ここでは、表示部 20には、コピー元情報 1300 (図 31参照） およびペースト先情報 1400 (図 32参照）が表示されているものとする。
[0236] 図 9に示したステップ SA1では、ソース構造解析部 1001は、ユーザにより、コピー 領域指定部 32を用いて、コピー元情報 1300 (図 31参照）でコピー領域が指定され たか否力を判断し、この場合、判断結果を「No」とする。
[0237] ステップ SA2では、ソース構造解析部 1001は、ユーザにより、ペースト領域指定部
33を用いて、ペースト先情報 1400 (図 32参照）でペースト領域が指定されたか否か を判断し、この場合、判断結果を「No」とする。以後、判断結果が「Yes」となるまで、 ステップ SA1およびステップ SA2の判断が繰り返される。
[0238] そして、図 31に示したコピー元情報 1300において、コピー領域指定部 32を用い て、カーソル Cに対応するコピー領域（カーソル Cを中心とする半径 rの円）がユーザ により指定されると、ソース構造解析部 1001は、ステップ SA1の判断結果を「Yes」と する。ステップ SA3では、コピー処理が実行される。
[0239] 具体的には、図 34に示したステップ SG1では、ソース構造解析部 1001は、コピー 元情報 1300 (図 31参照）をユーザインタフェース部 30を介して表示制御部 10より読 み込む。
[0240] ステップ SG2では、ソース構造解析部 1001は、コピー元情報 1300に対して形態 素解析を実行し、各オブジェクト（オブジェクト）を抽出する。ステップ SG3では、ソー ス構造解析部 1001は、ユーザにより指定された半径 rの円内（図 31参照）に含まれ るオブジェクトを抽出する。この場合には、 「〇〇ホテルキヤピトル」および「〇〇エタ セルホテル東京」という 2つのオブジェクトが抽出される。
[0241] ステップ SG4では、ソース構造解析部 1001は、ステップ SG3で抽出されたォブジ ェクト（「〇〇ホテルキヤピトル」および「〇〇エタセルホテル東京」）をユーザに提示す る。
[0242] また、上記オブジェクトがユーザに提示されると、図 31に示したコピー元情報 1300 においては、網掛けで示したように、「〇〇ホテルキヤピトル」および「〇〇エタセルホ テル東京」がハイライト表示される。
[0243] これにより、ユーザは、ノ、イライト表示の部分力 所望のコピー領域であるか否かを 判断する。この判断基準としては、ペースト先情報 1400 (図 32参照）にペーストすべ きオブジェクトが上記ハイライト表示の部分に含まれているか否かである。
[0244] この場合、「〇〇ホテルキヤピトル」のみがペーストすべきオブジェクトであるとすると 、ユーザは、補助指定部 34を操作し、提示されたオブジェクトを未承認とする。
[0245] ステップ SG5では、ソース構造解析部 1001は、ユーザにより上記承認が得られた か否力を判断し、この場合、判断結果を「No」とする。ステップ SG4では、ソース構造 解析部 1001は、別の提示パターンにより、先に提示したオブジェクトのうち、例えば 、「〇〇エタセルホテル東京」を削除し、「〇〇ホテルキヤピトル」のみをユーザに再提 示する。この場合、ユーザは、補助指定部 34を操作し、再提示されたオブジェクトを 承認する。
[0246] これにより、ソース構造解析部 1001は、ステップ SG5の判断結果を「Yes」とする。
ステップ SG6では、ソース構造解析部 1001は、ユーザの承認が得られたオブジェク ト（「〇〇ホテルキヤピトル」 )を部分コピー元ソース情報とする。
[0247] ステップ SG7では、意味解析部 1002は、部分コピー元ソース情報に含まれる以下 のオブジェクトについて、辞書データベース 50 (図 8参照）を参照しつつ意味を解析 する。
[0248] ·「〇〇ホテルキヤピトル」
[0249] コピー元意味解析結果においては、「〇〇ホテルキヤピトル」力 S、意味属性として「 ホテル」と解される。
[0250] ステップ SG8では、整形部 1003は、オリジナノレのコピー元情報 1300、部分コピー 元ソース情報およびコピー元意味解析結果をコピー元ファイルとしてひとまとめに整 形した後、格納部 60に格納する。
[0251] そして、図 32に示したペースト先情報 1400において、ペースト領域指定部 33を用 いて、カーソル Cに対応するペースト領域がユーザにより指定されると、ソース構造解 析部 1001は、ステップ SA2の判断結果を「Yes」とする。ステップ SA4では、ペースト 準備処理が実行される。
[0252] 具体的には、図 35に示したステップ SH1では、ソース構造解析部 1001は、ペース ト先情報 1400 (図 32参照）をユーザインタフェース部 30を介して表示制御部 10より 読み込む。
[0253] ステップ SH2では、ソース構造解析部 1001は、ペースト先情報 1400に対して形 態素解析を実行し、各オブジェクト（オブジェクト）を抽出する。ステップ SH3では、ソ ース構造解析部 1001は、ユーザにより指定された半径 rの円内（図 32参照）に含ま れるオブジェクトを抽出する。この場合には、「目的地 (施設）を入力してください.」、「 施設」（横の「入力欄」も含む）が抽出される。
[0254] ステップ SH4では、ソース構造解析部 1001は、ステップ SH3で抽出されたォブジ ェ外（「目的地 (施設）を入力してください.」、「施設」（横の「入力欄」も含む）をユー ザに提示する。
[0255] また、上記オブジェクトがユーザに提示されると、図 31に示したペースト先情報 140 0においては、オブジェ外（「目的地 (施設）を入力してください.」、「施設」（横の「入 力欄」も含む）がハイライト表示される。
[0256] これにより、ユーザは、ハイライト表示の部分力 所望のペースト領域であるか否か を判断する。この場合、「施設」（横の「入力欄」も含む）のみがペースト先であるとする と、ユーザは、補助指定部 34を操作し、提示されたオブジェクトを未承認とする。
[0257] ステップ SH5では、ソース構造解析部 1001は、ユーザにより上記承認が得られた か否力を判断し、この場合、判断結果を「No」とする。ステップ SH4では、ソース構造 解析部 1001は、別の提示パターンにより、先に提示したオブジェクトのうち、例えば 、「目的地 (施設）を入力してください.」を削除し、「施設」（横の「入力欄」も含む）をュ 一ザに再提示する。この場合、ユーザは、補助指定部 34を操作し、再提示されたォ ブジェクトを承認する。
[0258] これにより、ソース構造解析部 1001は、ステップ SH5の判断結果を「Yes」とする。
ステップ SH6では、ソース構造解析部 1001は、ユーザの承認が得られた「施設」（横 の「入力欄」も含む）を部分ペースト先ソース情報とする。
[0259] ステップ SH7では、意味解析部 1002は、部分コピー元ソース情報に含まれる以下 のオブジェクトについて、辞書データベース 50 (図 8参照）を参照しつつ意味を解析 する。
[0260] ·「施設」（横の「入力欄」も含む）
[0261] ペースト先意味解析結果においては、「施設」（横の「入力欄」も含む）が、意味属性 として「施設」と解される。
[0262] 図 9に戻り、ステップ SA5では、ペースト処理が実行される。具体的には、図 36に示 したステップ SI1では、入力候補選択部 1201は、補助指定部 34でユーザにより指定 されたコピー元ファイル (この場合、ペースト先情報 1400 (図 31参照）に対応）を格納 部 60から読み込む。
[0263] ステップ SI2では、意味距離計算部 1204は、シソーラス辞書データベース 1100 ( 図 33参照）を用いて、上記コピー元ファイルに含まれる以下のコピー元意味解析結 果のオブジェクトと、ステップ SH7 (図 35参照）で得られた以下のペースト先意味解 析結果（図 20参照）のオブジェクトとの意味距離を計算する。
[0264] <コピー元意味解析結果 >
•「〇〇ホテルキヤピトル」→「ホテル」
[0265] <ペースト先意味解析結果 >
'「施設」（横の「入力欄」も含む)→「施設」
[0266] この場合、図 33に示したシソーラス辞書データベース 1100においては、「施設」よ り 2ノード下に「ホテル」が存在する。従って、「ホテル」と「施設」との意味距離は、 2ノ ードである。
[0267] ステップ SI3では、ペースト先選択部 1202は、ステップ SI2で計算された意味距離
(= 2ノード）がしきい値以下（例えば、 3ノード）でかつ最小の組み合わせのオブジェ タトをペースト先として選択する。この場合、組み合わせ力 組のみであるため、ぺー スト先選択部 1202は、ペースト先として「施設」（横の「入力欄」も含む）を選択する。
[0268] ステップ SI4では、ペースト先選択部 1202は、ステップ SI3で選択されたペースト先
(「施設」（横の「入力欄」も含む））をハイライト表示させて、ユーザにペースト先の候 補として提示する。
[0269] これにより、ユーザは、ハイライト表示の部分力 所望のペースト先であるか否かを 判断する。この場合、ペースト先についてユーザ承認が得られたものとする。
[0270] ステップ SI5では、ペースト先選択部 1202は、ユーザにより上記承認が得られたか 否力、を判断し、この場合、判断結果を「Yes」とする。なお、ステップ SI5の判断結果が 「No」である場合、ペースト先選択部 1202は、ステップ SI3で、別の選択基準により、 ペースト先を選択し、ステップ SI4でペースト先を再提示する。
[0271] ステップ SI6では、ペースト部 1203は、ユーザの承認が得られたペースト先に、ぺ 一スト対象オブジェクトをペーストする。これにより、ペースト先情報 1400における施 設の入力欄には、「〇〇ホテルキヤピトル」がそれぞれペーストされる。
[0272] なお、実施の形態 3においては、図 30に示した辞書データベース 50とシソーラス辞 書データベース 1100とを独立させた構成例について説明した力 これに限定される ことなく、辞書データベース 50とシソーラス辞書データベース 1100とを一つのデータ ベースとして構成してもよレ、。
[0273] 以上説明したように、実施の形態 3によれば、コピー元情報 1300 (コピーモジユー ノレ）およびペースト先情報 1400 (ペーストモジュール）におけるオブジェクト間の意味 距離をシソーラス辞書データベース 1100を用いて解析した結果に基づいて、ペース ト先を選択することとしたので、オブジェクト間の構造が明確化されていない単なるォ ブジエタトの集合に対しても、コピー 'アンド'ペーストを適用することができる。
[0274] また、実施の形態 3によれば、コピー指示に基づいて、コピー元情報 1300 (コピー モジュール)から、半径 rの円（所定範囲）における複数のオブジェクトをコピーし、ぺ 一スト指示に従って、ペーストモジュール力 構造的にまとまりがあるペースト先（この 場合には、ペースト先情報 1400から半径 rの円（所定範囲）内のペースト先）を選択 することとしたので、簡易な操作で複数のオブジェクトにかかるコピー'アンド 'ペース トを行うことができる。
[0275] 以上本発明に力かる実施の形態 1一 3について図面を参照して詳述してきた力 具 体的な構成例はこれらの実施の形態 1一 3に限られるものではなぐ本発明の要旨を 逸脱しない範囲の設計変更等があっても本発明に含まれる。
[0276] 例えば、前述した実施の形態 1一 3においては、前述したコピ一 ·アンド'ペーストの 機能を実現するためのプログラムを図 37に示したコンピュータ読み取り可能な記録 媒体 1600に記録して、この記録媒体 1600に記録されたプログラムを同図に示した コンピュータ 1500に読み込ませ、実行することにより各機能を実現してもよい。
[0277] 同図に示したコンピュータ 1500は、上記プログラムを実行する CPU (Central
Processing Unit) 1510と、キーボード、マウス等の入力装置 1520と、各種データを 記憶する ROM (Read Only Memory) 1530と、演算パラメータ等を記憶する RAM ( Random Access Memorv) 1540と、記録媒体 1600からプログラムを読み取る読取 装置 1550と、ディスプレイ、プリンタ等の出力装置 1560と、装置各部を接続するバ ス 1570と力ら構成されている。
[0278] CPU1510は、読取装置 1550を経由して記録媒体 1600に記録されているプログ ラムを読み込んだ後、プログラムを実行することにより、前述した機能を実現する。な お、記録媒体 1600としては、光ディスク、フレキシブルディスク、ハードディスク等が 挙げられる。
[0279] また、実施の形態で自動的に行われるものとして説明した制御の全部又は任意の 一部を手動で行っても良ぐ逆に、手動で行われるものとして説明した制御の全部又 は任意の一部を公知技術又は上述した思想に基づいて自動化しても良い。また、実 施の形態において示した各機能ブロックは、実際には、 CPU及びこの CPUにて読 み出され実行されるコンピュータプログラムとして構成することができ、あるいは、ハー ドワイヤードロジックにて構成することができる。また、上述した各電気的構成要素は 機能概念的なものであり、必ずしも物理的に図示の如く構成されていることを要しな レ、。すなわち、各部の分散'統合の具体的形態は図示のものに限られず、その全部 又は一部を、各種の負荷や使用状況などに応じて、任意の単位で機能的又は物理 的に分散 ·統合して構成することができる。この他、前記文書中や図面中で示した処 理手順、又は、制御手順については、特記する場合を除いて任意に変更することが できる。
産業上の利用可能性
[0280] 以上のように、本発明に力かる情報処理方法、情報処理プログラム、情報処理装置 およびリモートコントローラは、各種の情報処理分野において、各種の対象データの コピー 'アンド'ペーストを行う技術として有用であり、特に、複数のオブジェクトにかか るコピー.アンド '·ペーストを簡易な操作で行うことに適している。

Claims

請求の範囲
[1] 複数のオブジェクトをコピーするコピー工程と、
前記複数のオブジェクトのそれぞれの意味を解析する意味解析工程と、 前記意味の解析結果に合致するペースト先を選択するペースト先選択工程と、 前記複数のオブジェクトを前記ペースト先へペーストするペースト工程と、 を含む情報処理方法。
[2] 前記コピー工程では、ユーザのコピー指示に従って、コピーモジュールから前記複 数のオブジェクトをコピーし、前記ペースト先選択工程では、ユーザのペースト指示 に従って、ペーストモジュールからペースト先を選択する請求項 1に記載の情報処理 方法。
[3] 前記コピー工程では、 1回のユーザ操作で前記コピー指示が出され、前記ペースト 先選択工程では、 1回のユーザ操作で前記ペースト指示が出される請求項 2に記載 の情報処理方法。
[4] 前記ペースト先選択工程では、前記コピーモジュールおよび前記ペーストモジユー ルにおけるオブジェクト間の意味距離を解析した結果に基づいて、前記ペースト先を 選択する請求項 2または 3に記載の情報処理方法。
[5] 前記コピー工程では、前記コピー指示に基づいて、前記コピーモジュールから、構 造的にまとまりがある複数のオブジェクトをコピーし、前記ペースト先選択工程では、 前記ペースト指示に従って、前記ペーストモジュール力 構造的にまとまりがあるべ 一スト先を選択する請求項 4に記載の情報処理方法。
[6] 前記コピー工程では、前記コピー指示に基づいて、前記コピーモジュールから、所 定範囲における複数のオブジェクトをコピーし、前記ペースト先選択工程では、前記 ペースト指示に従って、前記ペーストモジュールから所定範囲内のペースト先を選択 する請求項 2または 3に記載の情報処理方法。
[7] 前記コピー工程では、前記ユーザの音声で前記コピー指示が出され、前記ペース ト先選択工程では、前記ユーザの音声で前記ペースト指示が出される請求項 2— 6 のいずれか一つに記載の情報処理方法。
[8] 前記コピー工程では、前記ユーザの音声および該ユーザによるポインタで前記コピ 一指示が出され、前記ペースト先選択工程では、前記ユーザの音声および該ユーザ によるポインタで前記ペースト指示が出される請求項 2— 6のいずれか一つに記載の 情報処理方法。
[9] 前記コピー工程では、前記複数のオブジェクトの候補を前記ユーザに提示して承 認をとり、承認が得られなかった場合、承認が得られるまで別の複数のオブジェクトの 候補を前記ユーザに再提示する請求項 2 8のいずれか一つに記載の情報処理方 法。
[10] 前記ペースト先選択工程では、ペースト先の候補を前記ユーザに提示して承認をと り、承認が得られなかった場合、承認が得られるまで別のペースト先の候補を前記ュ 一ザに再提示する請求項 2— 9のいずれか一つに記載の情報処理方法。
[11] 前記コピー指示および前記ペースト指示は、前記コピーモジュールおよび前記ぺ 一ストモジュールとの間で通信機能を有する指示装置によりなされる請求項 2 10の いずれか一つに記載の情報処理方法。
[12] 前記請求項 1一 11のレ、ずれか一つに記載の情報処理方法をコンピュータに実行さ せるための情報処理プログラム。
[13] 複数のオブジェクトをコピーするコピー手段と、
前記複数のオブジェ外のそれぞれの意味を解析する意味解析手段と、 前記意味の解析結果に合致するペースト先を選択するペースト先選択手段と、 前記複数のオブジェクトを前記ペースト先へペーストするペースト手段と、 を備えた情報処理装置。
[14] 前記コピー手段は、ユーザのコピー指示に従って、コピーモジュールから前記複数 のオブジェクトをコピーし、前記ペースト先選択手段は、ユーザのペースト指示に従つ て、ペーストモジュールからペースト先を選択する請求項 13に記載の情報処理装置
[15] 前記コピー手段は、 1回のユーザ操作で前記コピー指示が出され、前記ペースト先 選択手段は、 1回のユーザ操作で前記ペースト指示が出される請求項 14に記載の 情報処理装置。
[16] 前記ペースト先選択手段は、前記コピーモジュールおよび前記ペーストモジュール におけるオブジェクト間の意味距離を解析した結果に基づいて、前記ペースト先を選 択する請求項 14または 15に記載の情報処理装置。
[17] 前記コピー手段は、前記コピー指示に基づいて、前記コピーモジュールから、構造 的にまとまりがある複数のオブジェクトをコピーし、前記ペースト先選択手段は、前記 ペースト指示に従って、前記ペーストモジュール力、ら構造的にまとまりがあるペースト 先を選択する請求項 16に記載の情報処理装置。
[18] 前記コピー手段は、前記コピー指示に基づいて、前記コピーモジュールから、所定 範囲における複数のオブジェクトをコピーし、前記ペースト先選択手段は、前記ぺー スト指示に従って、前記ペーストモジュールから所定範囲内のペースト先を選択する 請求項 14または 15に記載の情報処理装置。
[19] 前記コピー手段は、前記ユーザの音声で前記コピー指示が出され、前記ペースト 先選択手段は、前記ユーザの音声で前記ペースト指示が出される請求項 14一 18の いずれか一つに記載の情報処理装置。
[20] 前記コピー手段は、前記ユーザの音声および該ユーザによるポインタで前記コピー 指示が出され、前記ペースト先選択手段は、前記ユーザの音声および該ユーザによ るポインタで前記ペースト指示が出される請求項 14一 18のいずれか一つに記載の
I B -
[21] 前記コピー手段は、前記複数のオブジェクトの候補を前記ユーザに提示して承認 をとり、承認が得られなかった場合、承認が得られるまで別の複数のオブジェクトの候 補を前記ユーザに再提示する請求項 14一 20のいずれか一つに記載の情報処理装 置。
[22] 前記ペースト先選択手段は、ペースト先の候補を前記ユーザに提示して承認をとり 、承認が得られなかった場合、承認が得られるまで別のペースト先の候補を前記ュ 一ザに再提示する請求項 14一 21のいずれか一つに記載の情報処理装置。
[23] 前記コピー指示および前記ペースト指示は、前記コピーモジュールおよび前記ぺ 一ストモジュールとの間で通信機能を有する指示装置によりなされる請求項 14一 22 のレ、ずれか一つに記載の情報処理装置。
[24] 前記請求項 1一 11のレ、ずれか一つに記載の情報処理方法を実行するリモートコン
£Z6600請 Zdf/ェ:) d 9V TIZ900/S00Z OAV
PCT/JP2004/009923 2003-07-11 2004-07-12 情報処理方法、情報処理プログラム、情報処理装置およびリモートコントローラ WO2005006211A1 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
AU2004256647A AU2004256647A1 (en) 2003-07-11 2004-07-12 Information processing method, information processing program, information processing device, and remote controller
EP04747390A EP1662403A4 (en) 2003-07-11 2004-07-12 METHOD, PROGRAM, AND DATA PROCESSING DEVICE, AND REMOTE CONTROL DEVICE
US10/564,032 US20070035745A1 (en) 2003-07-11 2004-12-07 Information processing method, information processing program, information processing device, and remote controller

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2003-196076 2003-07-11
JP2003196076A JP2005031979A (ja) 2003-07-11 2003-07-11 情報処理方法、情報処理プログラム、情報処理装置およびリモートコントローラ

Publications (1)

Publication Number Publication Date
WO2005006211A1 true WO2005006211A1 (ja) 2005-01-20

Family

ID=34055766

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2004/009923 WO2005006211A1 (ja) 2003-07-11 2004-07-12 情報処理方法、情報処理プログラム、情報処理装置およびリモートコントローラ

Country Status (6)

Country Link
US (1) US20070035745A1 (ja)
EP (1) EP1662403A4 (ja)
JP (1) JP2005031979A (ja)
CN (1) CN1813252A (ja)
AU (1) AU2004256647A1 (ja)
WO (1) WO2005006211A1 (ja)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7262089B2 (en) 2004-03-11 2007-08-28 Micron Technology, Inc. Methods of forming semiconductor structures
CN105975203A (zh) * 2016-04-28 2016-09-28 乐视控股（北京）有限公司 一种智能复制文本内容的终端及方法
US10246801B2 (en) 2015-07-13 2019-04-02 Ets A. Deschamps Et Fils Method and machine for producing a woven structure

Families Citing this family (25)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007094818A (ja) 2005-09-29 2007-04-12 Internatl Business Mach Corp <Ibm> 複数データの一括コピー及びペースト方法、装置、およびコンピュータ・プログラム
US8370423B2 (en) 2006-06-16 2013-02-05 Microsoft Corporation Data synchronization and sharing relationships
JP4888071B2 (ja) * 2006-11-15 2012-02-29 富士通株式会社 プログラム、コピーアンドペースト処理方法、装置及び記録媒体
US8429551B2 (en) * 2007-02-15 2013-04-23 Microsoft Corporation Application-based copy and paste operations
JP2009005194A (ja) * 2007-06-22 2009-01-08 Canon Inc 画像処理装置、方法及びプログラム
JP5028379B2 (ja) * 2008-10-20 2012-09-19 株式会社日立製作所 ペン型情報入出力システムおよび情報管理方法
JP5477971B2 (ja) 2010-11-30 2014-04-23 インターナショナル・ビジネス・マシーンズ・コーポレーション フォーム入力の部分的問合せ方法、その方法に使用されるコンピュータ・プログラム、及びそのプログラムを搭載した処理装置
EP2535811A1 (en) * 2011-06-15 2012-12-19 Amadeus S.A.S. Improvements in or relating to pasting data
KR20140055133A (ko) * 2012-10-30 2014-05-09 삼성전자주식회사 사용자 단말 장치 및 그 제어 방법
JP5924666B2 (ja) * 2012-02-27 2016-05-25 国立研究開発法人情報通信研究機構 述語テンプレート収集装置、特定フレーズペア収集装置、及びそれらのためのコンピュータプログラム
CN103377180A (zh) * 2012-04-28 2013-10-30 国际商业机器公司 数据粘贴的方法及装置
WO2014059655A1 (zh) * 2012-10-19 2014-04-24 东莞宇龙通信科技有限公司 终端和粘贴方法
JP6244676B2 (ja) * 2013-06-07 2017-12-13 コニカミノルタ株式会社 操作支援プログラム及び操作支援方法並びに情報処理装置
CN104750669A (zh) * 2013-12-30 2015-07-01 珠海金山办公软件有限公司 一种待粘贴对象的处理方法及装置
CN104866466A (zh) * 2014-02-21 2015-08-26 联想(北京)有限公司 一种显示方法和电子设备
JP6019074B2 (ja) * 2014-09-16 2016-11-02 京セラドキュメントソリューションズ株式会社 電子機器、及び、タッチパネルの操作方法
CN104503956A (zh) * 2014-12-24 2015-04-08 广东欧珀移动通信有限公司 粘贴数据的方法、装置及移动终端
JP6259780B2 (ja) * 2015-02-06 2018-01-10 株式会社文溪堂 データ移行システム、及びデータ移行プログラム
JP2017199057A (ja) * 2016-04-25 2017-11-02 京セラ株式会社 電子機器、電子機器の制御方法、電子機器の制御装置、制御プログラムおよび電子機器システム
JP6725693B2 (ja) 2016-04-28 2020-07-22 華為技術有限公司Ｈｕａｗｅｉ Ｔｅｃｈｎｏｌｏｇｉｅｓ Ｃｏ．，Ｌｔｄ． ヒューマンコンピュータインタラクション方法およびその装置
US10984318B2 (en) * 2016-06-15 2021-04-20 University Of Ulsan Foundation For Industry Cooperation Word semantic embedding apparatus and method using lexical semantic network and homograph disambiguating apparatus and method using lexical semantic network and word embedding
CN106126261A (zh) * 2016-06-30 2016-11-16 乐视控股（北京）有限公司 一种目标信息的处理方法及装置
US10901604B2 (en) * 2017-11-28 2021-01-26 Microsoft Technology Licensing, Llc Transformation of data object based on context
US20190309539A1 (en) * 2018-04-05 2019-10-10 Carrier Corporation Smart lock system with interior facing display screen
US11567789B2 (en) 2020-11-27 2023-01-31 International Business Machines Corporation Recommendations for user interface actions

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0520274A (ja) * 1991-07-10 1993-01-29 Canon Inc 電子情報機器
JPH0612411A (ja) * 1992-06-25 1994-01-21 Sanyo Electric Co Ltd 文書処理装置
JPH11306177A (ja) * 1998-04-20 1999-11-05 Sharp Corp 文字列記憶呼出装置及び文字列記憶呼出のためのプログラムを記録した記録媒体

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5544302A (en) * 1993-06-03 1996-08-06 Taligent, Inc. Object-oriented framework for creating and using container objects with built-in properties
US6295051B1 (en) * 1999-06-02 2001-09-25 International Business Machines Corporation Intelligent boundless computer mouse system
US6370259B1 (en) * 2000-02-04 2002-04-09 Engineered Support Systems, Inc. Automatic address extractor
US6704770B1 (en) * 2000-03-28 2004-03-09 Intel Corporation Method and apparatus for cut, copy, and paste between computer systems across a wireless network
US7143338B2 (en) * 2000-04-14 2006-11-28 International Business Machines Corporation Method and system in an electronic spreadsheet for handling absolute references in a copy/cut and paste operation according to different modes
US6981028B1 (en) * 2000-04-28 2005-12-27 Obongo, Inc. Method and system of implementing recorded data for automating internet interactions
US7712024B2 (en) * 2000-06-06 2010-05-04 Microsoft Corporation Application program interfaces for semantically labeling strings and providing actions based on semantically labeled strings
US7178098B2 (en) * 2000-07-13 2007-02-13 International Business Machines Corporation Method and system in an electronic spreadsheet for handling user-defined options in a copy/cut—paste operation
JP2002222039A (ja) * 2001-01-25 2002-08-09 Sony Computer Entertainment Inc 情報入力処理プログラム、情報入力処理プログラムを記録したコンピュータ読み取り可能な記録媒体、情報入力処理プログラムを実行するプログラム実行装置、情報入力装置、及び情報入力方法
BR0210589A (pt) * 2001-06-22 2005-04-26 Nosa Omoigui Sistema e método para a recuperação, o gerenciamento, a entrega e a apresentação do conhecimento
US6968504B2 (en) * 2001-06-29 2005-11-22 Microsoft Corporation Automated document formatting tool
US7036080B1 (en) * 2001-11-30 2006-04-25 Sap Labs, Inc. Method and apparatus for implementing a speech interface for a GUI
US6986105B2 (en) * 2003-01-30 2006-01-10 Vista Print Limited Methods employing multiple clipboards for storing and pasting textbook components
JP2007094818A (ja) * 2005-09-29 2007-04-12 Internatl Business Mach Corp <Ibm> 複数データの一括コピー及びペースト方法、装置、およびコンピュータ・プログラム

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0520274A (ja) * 1991-07-10 1993-01-29 Canon Inc 電子情報機器
JPH0612411A (ja) * 1992-06-25 1994-01-21 Sanyo Electric Co Ltd 文書処理装置
JPH11306177A (ja) * 1998-04-20 1999-11-05 Sharp Corp 文字列記憶呼出装置及び文字列記憶呼出のためのプログラムを記録した記録媒体

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
See also references of EP1662403A4 *

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7262089B2 (en) 2004-03-11 2007-08-28 Micron Technology, Inc. Methods of forming semiconductor structures
US10246801B2 (en) 2015-07-13 2019-04-02 Ets A. Deschamps Et Fils Method and machine for producing a woven structure
CN105975203A (zh) * 2016-04-28 2016-09-28 乐视控股（北京）有限公司 一种智能复制文本内容的终端及方法

Also Published As

Publication number Publication date
EP1662403A4 (en) 2007-12-26
AU2004256647A1 (en) 2005-01-20
CN1813252A (zh) 2006-08-02
US20070035745A1 (en) 2007-02-15
JP2005031979A (ja) 2005-02-03
EP1662403A1 (en) 2006-05-31

Similar Documents

Publication Publication Date Title
WO2005006211A1 (ja) 情報処理方法、情報処理プログラム、情報処理装置およびリモートコントローラ
JP3272288B2 (ja) 機械翻訳装置および機械翻訳方法
US20060080361A1 (en) Document information processing apparatus, document information processing method, and document information processing program
JPH0433069B2 (ja)
JPWO2006090732A1 (ja) 単語翻訳装置、翻訳方法および翻訳プログラム
JP2006506692A (ja) テンプレート・オートマトンとレイテント・セマンティック・インデックス原理に基づく新しいコンピュータ支援メモリ翻訳スキーム
CN101937459A (zh) 基于通用音节结构的藏文字符排序装置和方法
JPH08129554A (ja) 関係表現抽出装置および関係表現検索装置
JP2019211987A (ja) 検索文生成システム、及び検索文生成方法
Seneff et al. Formal and natural language generation in the Mercury conversational system
EP3553696B1 (en) Generating a structured document based on a machine readable document and artificial intelligence-generated annotations
JP2009289219A (ja) 翻訳メモリ翻訳装置および翻訳プログラム
JP2000148754A (ja) マルチリンガル・システム，マルチリンガル処理方法およびマルチリンガル処理のプログラムを記憶した媒体
US5551036A (en) Method and system for generating operation specification object information
JP2838984B2 (ja) 汎用参照装置
JP2943791B2 (ja) 言語識別装置，言語識別方法および言語識別のプログラムを記録した記録媒体
JPH06266769A (ja) 同義語情報作成装置
US20230409620A1 (en) Non-transitory computer-readable recording medium storing information processing program, information processing method, information processing device, and information processing system
JPWO2020157887A1 (ja) 文構造ベクトル化装置、文構造ベクトル化方法、及び文構造ベクトル化プログラム
JP3982726B2 (ja) 翻訳知識学習装置及び機械翻訳装置
JP2003022277A (ja) 文書検索装置及び文書検索方法
CN115587165A (zh) 一种语义解析方法、系统、电子设备及介质
JPH0561902A (ja) 機械翻訳システム
Mody et al. Formulating SQL Queries from Natural Language Processing for Students Using Mobile Learning
JP4773813B2 (ja) 読み付与装置、読み付与方法及びプログラム

Legal Events

Date Code Title Description
AK Designated states

Kind code of ref document: A1

Designated state(s): AE AG AL AM AT AU AZ BA BB BG BR BW BY BZ CA CH CN CO CR CU CZ DE DK DM DZ EC EE EG ES FI GB GD GE GH GM HR HU ID IL IN IS KE KG KP KR KZ LC LK LR LS LT LU LV MA MD MG MK MN MW MX MZ NA NI NO NZ OM PG PH PL PT RO RU SC SD SE SG SK SL SY TJ TM TN TR TT TZ UA UG US UZ VC VN YU ZA ZM ZW

AL Designated countries for regional patents

Kind code of ref document: A1

Designated state(s): BW GH GM KE LS MW MZ NA SD SL SZ TZ UG ZM ZW AM AZ BY KG KZ MD RU TJ TM AT BE BG CH CY CZ DE DK EE ES FI FR GB GR HU IE IT LU MC NL PL PT RO SE SI SK TR BF BJ CF CG CI CM GA GN GQ GW ML MR NE SN TD TG

121 Ep: the epo has been informed by wipo that ep was designated in this application
WWE Wipo information: entry into national phase

Ref document number: 20048184334

Country of ref document: CN

WWE Wipo information: entry into national phase

Ref document number: 2004747390

Country of ref document: EP

Ref document number: 6172/DELNP/2005

Country of ref document: IN

WWE Wipo information: entry into national phase

Ref document number: 2004256647

Country of ref document: AU

ENP Entry into the national phase

Ref document number: 2004256647

Country of ref document: AU

Date of ref document: 20040712

Kind code of ref document: A

WWP Wipo information: published in national office

Ref document number: 2004256647

Country of ref document: AU

WWP Wipo information: published in national office

Ref document number: 2004747390

Country of ref document: EP

WWE Wipo information: entry into national phase

Ref document number: 2007035745

Country of ref document: US

Ref document number: 10564032

Country of ref document: US

WWP Wipo information: published in national office

Ref document number: 10564032

Country of ref document: US