WO2015141101A1 - 情報処理装置、情報処理方法および情報処理プログラム - Google Patents

情報処理装置、情報処理方法および情報処理プログラム Download PDF

Info

Publication number
WO2015141101A1
WO2015141101A1 PCT/JP2014/084614 JP2014084614W WO2015141101A1 WO 2015141101 A1 WO2015141101 A1 WO 2015141101A1 JP 2014084614 W JP2014084614 W JP 2014084614W WO 2015141101 A1 WO2015141101 A1 WO 2015141101A1
Authority
WO
WIPO (PCT)
Prior art keywords
document
display
list
information processing
extraction
Prior art date
Application number
PCT/JP2014/084614
Other languages
English (en)
French (fr)
Inventor
理 石井
達士 安田
Original Assignee
日本電気株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 日本電気株式会社 filed Critical 日本電気株式会社
Priority to US15/127,318 priority Critical patent/US10067921B2/en
Priority to CN201480077138.XA priority patent/CN106104520B/zh
Publication of WO2015141101A1 publication Critical patent/WO2015141101A1/ja
Priority to US16/118,925 priority patent/US20190012301A1/en

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00—Handling natural language data
    • G06F40/10—Text processing
    • G06F40/166—Editing, e.g. inserting or deleting
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482—Interaction with lists of selectable items, e.g. menus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00—Handling natural language data
    • G06F40/20—Natural language analysis
    • G06F40/279—Recognition of textual entities
    • G06F40/289—Phrasal analysis, e.g. finite state techniques or chunking
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures

Definitions

  • the present invention relates to an information processing apparatus, an information processing method, and an information processing program.
  • Patent Document 1 discloses a technology for selecting a paragraph, a sentence, a phrase, and a word designated by a circle when the user surrounds the designated area on the display screen with a circle on the smartphone or tablet. Has been.
  • the target that the user wants to select from the display document does not always match the target that is actually selected.
  • An object of the present invention is to provide a technique for solving the above-described problems.
  • an apparatus provides: Extracting means for extracting a document element included in a selection range in the document based on an attribute of the document element; Display means for selectively displaying the extraction results by the extraction means; Is provided.
  • the method according to the present invention comprises: An extraction step of extracting a document element included in a selection range in the document based on an attribute of the document element; A display step for selectively displaying the extraction results in the extraction step; including.
  • a program provides: An extraction step of extracting a document element included in a selection range in the document based on an attribute of the document element; A display step for selectively displaying the extraction results in the extraction step; Is executed on the computer.
  • the object that the user wants to select from the display document can be matched with the object that is actually selected.
  • the word “document element” used in the present embodiment indicates a document constituent element having an attribute such as a word, a clause, a sentence, or a paragraph.
  • the word includes those having a prefix, a suffix, and a particle.
  • the word “document element” indicates a significant information element having an attribute such as name, place, telephone number, or mail address.
  • the attributes of the document element include kanji, kana, katakana, alphabet, numbers, symbols, and the like.
  • the attribute of the document element is not limited to the above as long as the document element can be extracted from the document.
  • the information processing apparatus 100 is an apparatus that controls range selection on the display screen.
  • the information processing apparatus 100 includes an extraction unit 110 and a display unit 120.
  • the extraction unit 110 extracts the document element 112 included in the selection range 122 in the document 121 based on the attribute 111 of the document element.
  • the display unit 120 displays a list 123 so that the extraction results by the extraction unit 110 can be selected.
  • the attribute of the document element includes a word, a phrase, a sentence or a paragraph, a name, a place, a telephone number or an e-mail address, a kanji, a kana, a katakana, an alphabet, a number or a symbol, etc.
  • Document elements are extracted based on one attribute. Further, the words may include those having prefixes, suffixes, and particles.
  • the user can select a desired document element from the list display, it is possible to match the target that the user wants to select from the displayed document with the actually selected target.
  • the information processing apparatus extracts significant information such as words, phrases, sentences, and numbers from the selection range on the document displayed on the display screen and displays the list. The user can select a desired document element from the list display.
  • FIG. 2 is a diagram illustrating an outline of processing of the information processing apparatus 200 according to the present embodiment.
  • FIG. 2 shows an overview of processing common to all embodiments of the present specification.
  • FIG. 2 shows several examples of processing of the present embodiment for user range selection on the touch panel 201 and the display panel 202 of the information processing apparatus 200.
  • the center diagram of FIG. 2 shows a case where the user designates a selection range 204 in the display document 203.
  • the word and phrase in the selection range 204 are extracted, and a list display 206 of the extracted word and phrase is displayed. Yes.
  • the extracted phrase is set higher in priority than the word.
  • the right diagram in FIG. 2 shows a case where the user designates a selection range 208 in the display document 207.
  • the name, facility name, telephone number, and home page address of the selection range 208 are extracted and a list display 209 is displayed. .
  • the user can select and specify a desired document element, thereby reliably selecting a target (document element) that cannot be narrowed down by the user's selection range 204 or 208. It becomes.
  • FIG. 3 is a diagram for explaining a list display of selection candidates in the information processing apparatus 200 according to the present embodiment.
  • FIG. 3 illustrates an example of extracting and displaying a list of document elements having a word attribute from the selection range, but the same applies to extraction and list display of document elements having other attributes or a plurality of attributes.
  • the same components as those in FIG. 2 are denoted by the same reference numerals.
  • the left diagram of FIG. 3 illustrates a state in which the selection range 204 is designated from the display document 203 selected by the user.
  • the designation of the selection range 204 is not limited.
  • any operation for specifying a range may be included, such as a touch by a user on the touch panel 201, a stroke surrounding the selection range 204, or a keyboard or pointing device.
  • FIG. 3 is a state in which document elements having a predetermined attribute of the selection range 204 are extracted and displayed in a list 205 in accordance with the designation of the selection range 204.
  • the document elements in the selection range 204 are extracted as “word” attributes, and the list display 205 is displayed in the order of extraction from the top of the selection range 204.
  • the right diagram in FIG. 3 shows a state in which the second “sense” 305 is selected from the list display 205 by the user.
  • “Sense” 305 is a word that the user wants to select, and even if the “sense” of the word cannot be selected and specified accurately from the display document 203, it is possible by the list display of this embodiment.
  • the selected “sense” 305 is stored in a selected element database (hereinafter referred to as “DB”), and used in a pasting process for creating a document in the subsequent processes.
  • DB selected element database
  • FIG. 4A is a diagram illustrating an appearance of the information processing apparatus 200 according to the present embodiment.
  • FIG. 4A shows the portable terminal using touch panels, such as a smart phone and a tablet, the information processing apparatus of a present Example is not limited to a smart phone and a tablet.
  • the touch panel 201 and the display panel 202 function as an operation unit and a display unit. Further, the information processing apparatus 200 includes a microphone 403 and a speaker 404 as voice input / output functions.
  • the information processing apparatus 200 includes a switch group 405 including a power switch. Further, the information processing apparatus 200 includes an external interface 406 used for external input / output device connection and communication connection.
  • FIG. 4B is a block diagram illustrating a configuration of the information processing apparatus 200 according to the present embodiment.
  • FIG. 4B shows a basic configuration of a mobile terminal using a touch panel such as a smartphone or a tablet, but is not limited thereto.
  • 4B may be realized by a single piece of hardware, or may be realized by software by having a unique processor and executing a program. Alternatively, it may be realized by firmware combining hardware and software.
  • each component in FIG. 4B is illustrated separately from other components so as to function independently. However, in reality, each component is realized by a combination of multilevel control from the lowest level control to the highest level control by the application program by basic hardware, OS (Operating System) and input / output control. It is.
  • OS Operating System
  • the processor 400 has at least one CPU (Central Processing Unit) and controls the entire information processing apparatus 200.
  • the processor 400 preferably has a built-in unique memory.
  • the screen operation processing unit 410 is a component that performs the processing of the present embodiment, receives a user operation input from the touch panel 201, changes a display screen corresponding to the user operation input, and displays it on the display panel 202.
  • the screen operation processing unit 410 may be realized by the processor 400 executing a related program, but it is desirable to provide an independent screen operation processor.
  • the voice processing unit 420 processes the voice input from the microphone 403 and transmits the voice input from the microphone 403, for example, or gives a user voice instruction that changes to a user operation input from the touch panel 201.
  • the audio processing unit 420 generates notification / warning to the user, video reproduction audio, and the like, and outputs the audio from the speaker. It is desirable that the sound processing unit 420 also includes a sound processing processor independent of the processor 400.
  • the switch processing unit 430 executes processing based on the switch input from the switch group 405.
  • the communication processing unit 440 transmits / receives data via a network.
  • the interface control unit 450 controls data input / output with an input / output device connected via the external interface 406. It is desirable that the communication processing unit 440 is also provided with an audio processing processor independent of the processor 400.
  • the memory control unit 460 controls the exchange of data and programs between the processor 400 and the ROM (Read Only Memory) 461, the RAM (Random Access Memory) 462, and the storage 463 configured by, for example, a flash memory.
  • the memory control unit 460 is also preferably provided with an audio processing processor independent of the processor 400.
  • FIG. 5 is a block diagram illustrating a functional configuration of the screen operation processing unit 410 according to the present embodiment.
  • the screen operation processing unit 410 includes an operation reception unit 520, an operation analysis unit 530, a list display generation unit 540, and a display control unit 550.
  • the operation reception unit 520 receives a user operation from the touch panel 201 and acquires a touch position, an operation, and the like.
  • the operation analysis unit 530 analyzes the operation content in consideration of information on the display screen from the operation and position of the user operation received by the operation reception unit 520. In the present embodiment, the operation analysis unit 530 particularly detects a range selected by the user from the display screen. In addition, the operation analysis unit 530 performs position detection designated by the user in order to select document elements displayed in a list.
  • the list display generation unit 540 extracts document elements having a predetermined attribute from the selection range detected by the operation analysis unit 530, and generates a list display thereof. Further, the list display generation unit 540 selects a document element designated by the user from the list display based on the position in the list detected by the operation analysis unit 530.
  • the display control unit 550 includes a display driver, reads out display information of the storage 463 and displays it on the display panel 202, and causes the display panel 202 to display the list generated by the list display generation unit 540. Further, the screen of the display panel 202 is controlled by changing the image memory so that the display of the selection range by the operation instructed by the user is realized on the display screen.
  • the list display generation unit 540, the display control unit 550, and the display panel 202 may be combined as a display unit.
  • 5 may be realized by the processing of the processor of the screen operation processing unit 410, or may be processed by a unique processor depending on the functional configuration unit for speeding up. 5 is limited to the operation of the screen operation processing unit 410.
  • These function configuration units exchange data with other components of the information processing apparatus 200 in FIG. 4B. May be performed.
  • FIG. 6 is a block diagram illustrating a functional configuration of the operation reception unit 520 according to the present embodiment.
  • the operation reception unit 520 receives a user operation from the touch panel 201 and acquires a touch position and an operation.
  • the operation reception unit 520 includes an event detection unit 601 and a touch position detection unit 602.
  • the event detection unit 601 detects the start of some operation from the user on the touch panel 201 and starts accepting operation data.
  • the touch position detection unit 602 detects position coordinates on the touch panel 201 touched by the user's finger.
  • FIG. 7 is a block diagram illustrating a functional configuration of the operation analysis unit 530 according to the present embodiment.
  • the operation analysis unit 530 analyzes the operation content in consideration of information on the display screen from the operation and position of the user operation received by the operation reception unit 520.
  • the operation analysis unit 530 includes a list position detection unit 701 and a selection range detection unit 702.
  • the list position detection unit 701 detects the position selected by the user from the list on which a plurality of document elements are displayed based on the touch position of the user from the operation reception unit 520.
  • the selection range detection unit 702 detects the range selected by the user from the display document based on the touch position of the user from the operation reception unit 520.
  • FIG. 8A is a block diagram illustrating a functional configuration of the list display generation unit 540 according to the present embodiment.
  • the list display generation unit 540 extracts a document element having a predetermined attribute from the selection range to generate a list display, and selects a document element designated by the user from the list display based on the position in the list.
  • the list display generation unit 540 includes a document element extraction unit 801, a list generation unit 802, and a document element selection unit 803.
  • the document element extraction unit 801 extracts and stores document elements having a predetermined attribute from the selection range of the display document.
  • the list generation unit 802 lists the document elements extracted by the document element extraction unit 801 so as to be selectable in a predetermined order, and generates data to be displayed at a predetermined position.
  • the document element selection unit 803 selects a desired document element from the list display based on the list position designated by the user from the operation analysis unit 530.
  • the document element selection unit 803 registers the document element selected by the user in the selection element DB 560. The registered document element is used, for example, in a subsequent paste operation.
  • FIG. 8B is a diagram showing a configuration of stored information of the list display generation unit 540 according to the present embodiment.
  • the storage unit of the list display generation unit 540 information used by the document element extraction unit 801, the list generation unit 802, and the document element selection unit 803 is stored.
  • the list storage unit 820 has the extraction element 821 extracted from the document in the document storage unit 810 based on the attribute by the document element extraction unit 801, the attribute 822 of the extraction element 821, and the document element selection unit 803 selecting And a selection flag 823 for indicating.
  • the selection flag 823 indicates that “1” is selected.
  • FIG. 9 is a block diagram illustrating a functional configuration of the display control unit 550 according to the present embodiment.
  • the display control unit 550 includes a display driver, reads out display information of the storage 463 and displays it on the display panel 202, and causes the display panel 202 to display the list generated by the list display generation unit 540.
  • the display control unit 550 includes a display position control unit 901, a list display control unit 902, and an identification display control unit 903.
  • the display position control unit 901 controls which position of the display information read from the storage 463 is displayed. In the present embodiment, the display position of the document is controlled.
  • the list display control unit 902 controls to display the document element list generated by the list generation unit 802 at a predetermined position on the display panel 202.
  • the identification display control unit 903 performs control so that a document element selected from a document selection range or list display is displayed on the display screen in an identifiable manner.
  • FIG. 10 is a flowchart showing a procedure of screen operation processing of the information processing apparatus 200 according to the present embodiment. This flowchart is executed by the processor 400 or the CPU of the screen operation processing unit 410 to realize each functional component of the screen operation processing unit 410. Here, a case where the CPU of the screen operation processing unit 410 executes will be described.
  • step S1001 the screen operation processing unit 410 displays a predetermined portion of the document designated by the user for display. For example, as shown in FIG. 3, the page of “Let's think” in the Japanese language dictionary is displayed.
  • step S1003 the screen operation processing unit 410 selects a range based on a selection operation in the document by the user using the touch panel 201 or the like, and displays the range in an identifiable manner.
  • the screen operation processing unit 410 executes element extraction processing for extracting document elements in the selected range based on a predetermined attribute in step S1005.
  • step S1007 the screen operation processing unit 410 executes list display processing for displaying a list of the extracted document elements in a predetermined order.
  • step S1009 the screen operation processing unit 410 waits for a user to specify a desired document element from the list display. If the user designates a document element, the screen operation processing unit 410 processes the selected document element in step S1011.
  • the processing of the selected document element may include, for example, paste processing in the copy mode.
  • FIG. 11A is a flowchart showing a procedure of selection range element extraction processing (S1005) according to the present embodiment.
  • step S1111 the screen operation processing unit 410 extracts a word from the selection range and stores it in the list storage unit 820. If the attribute is “phrase” in step S1113, the screen operation processing unit 410 extracts the phrase from the selection range and stores it in the list storage unit 820. If the attribute is “sentence” in step S1115, the screen operation processing unit 410 extracts the sentence from the selection range and stores it in the list storage unit 820. In step S 1117, the screen operation processing unit 410 extracts a document element having the attribute from the selection range according to the attribute such as “phone number” and stores the extracted document element in the list storage unit 820. If other attributes are specified in step S1119, the screen operation processing unit 410 extracts a document element having the attribute from the selection range and stores it in the list storage unit 820.
  • FIG. 11B is a flowchart illustrating a procedure of list display processing (S1007) according to the present embodiment.
  • step S1121 the screen operation processing unit 410 refers to the list storage unit 820, reads the document elements extracted from the selection range, and generates a list according to a predetermined order.
  • a predetermined order In this embodiment, as an example, document elements extracted in order from the start point of the selection range are listed.
  • step S1123 the screen operation processing unit 410 displays the generated list at a predetermined position on the display screen.
  • the user can select a desired document element from the list display by extracting the document element having a predetermined attribute from the selected document and displaying the list as a list, The target actually selected can be matched.
  • the information processing apparatus according to the present embodiment differs from the second embodiment in that the document elements extracted in the priority order set by the user or application are displayed in a list. Since other configurations and operations are the same as those of the second embodiment, the same configurations and operations are denoted by the same reference numerals, and detailed description thereof is omitted.
  • FIG. 12 is a diagram for explaining a list display of selection candidates in the information processing apparatus according to the present embodiment.
  • FIG. 12 illustrates an example in which document elements having attributes of words and phrases are extracted from the selection range and displayed in a list, but extraction and list display of document elements having other attributes or a plurality of attributes are the same.
  • the same components as those in FIGS. 2 and 3 are denoted by the same reference numerals.
  • FIG. 12 is a diagram showing a list display 205 and a list display 1205 with different words extracted from the selection range 204.
  • the list display 205 as in FIG. 3 of the second embodiment, words extracted in order from the top of the selection range 204 are listed.
  • the list display 1205 contrary to FIG. 3 of the second embodiment, words extracted in order from the tail of the selection range 204 are listed.
  • the list display 205 and the list display 1205 have the same extracted words, but have different priorities for display in the list.
  • the list order may be changed according to the setting of the user or application.
  • FIG. 12 is a diagram showing a list display 206 and a list display 1206 with different words and phrases extracted from the selection range 204.
  • the list display 206 document elements extracted in the order from clauses to words are listed in the same manner as in the central view of FIG.
  • the list display 1206 document elements extracted in the order from words to phrases are listed, contrary to the central view of FIG.
  • the list display 206 and the list display 1206 have the same extracted word and phrase, but have different priorities for display in the list.
  • the reverse case is shown, but the present invention is not limited to this, and it may be changed to a more complicated list order depending on the setting of the user or application.
  • FIG. 13 is a diagram showing a configuration of stored information of the list display generation unit 540 according to the present embodiment.
  • information used by the document element extraction unit 801, the list generation unit 802, and the document element selection unit 803 is stored.
  • FIG. 13 the same components as those in FIG. 8B are denoted by the same reference numerals, and description thereof is omitted.
  • the list storage unit 1320 includes an extraction element 1321 extracted from the document in the document storage unit 810 by the document element extraction unit 801 based on attributes, a priority 1322 for listing the extraction elements 821, and a document element selection unit 803 selected. And a selection flag 1323 indicating the above. For example, the selection flag 823 indicates that “1” is selected.
  • attributes may be stored corresponding to each extraction element 1321 as in FIG. 8B.
  • FIG. 14 is a flowchart showing a procedure of list display processing (S1007) according to the present embodiment.
  • step S1401 the screen operation processing unit 410 reads the extracted element 1321 extracted from the selected document as a list display candidate.
  • step S1403 the screen operation processing unit 410 rearranges the extraction elements 1321 according to the priority order 1322, and generates a list.
  • step S1405 the screen operation processing unit 410 displays a list of the extracted elements 1321 listed in the priority order 1322.
  • the list can be displayed so that the user can easily select a desired document element from the list display.
  • the information processing apparatus according to the present embodiment is different from the third embodiment in that a list is displayed in order from the center position of the selection range to the outer edge position. Since other configurations and operations are the same as those of the third embodiment, the same configurations and operations are denoted by the same reference numerals, and detailed description thereof is omitted.
  • FIG. 15 is a diagram for explaining a list display of selection candidates in the information processing apparatus according to the present embodiment.
  • FIG. 15 illustrates an example in which a document element having a word as an attribute is extracted from a selection range and displayed as a list, but extraction and list display of a document element having other attributes or a plurality of attributes are the same.
  • the same components as those in FIGS. 2 and 3 are denoted by the same reference numerals.
  • FIG. 15 is a diagram showing a word list display 1505 extracted from the selection range 204 and a word list display 1506 extracted from a different selection range 1504.
  • the list display 1505 the extracted words are listed in the order from the center portion of the selection range 204 toward the outer edge portion.
  • the list display 1506 the extracted words are listed in the order from the center portion of the selection range 1504 extending from the selection range 204 toward the outer edge portion.
  • the list can be displayed so that the user can easily select a desired document element from the list display by preferentially listing the central portion of the selection range that the user pays attention in the selection operation. .
  • FIG. 16 is a diagram showing a configuration of stored information of the list display generation unit 540 according to the present embodiment.
  • information used by the document element extraction unit 801, the list generation unit 802, and the document element selection unit 803 is stored.
  • the same components as those in FIG. 8B are denoted by the same reference numerals, and description thereof is omitted.
  • the list storage unit 1620 in FIG. 16 is a configuration example in the case of listing words extracted in order from the central part of the selection range 204 toward the outer edge part.
  • the list storage unit 1620 stores an extraction element 1621 extracted from the document in the document storage unit 810 by the document element extraction unit 801 based on attributes, and an element position 1622 of a selection range of the extraction element 1621. Further, the list storage unit 1620 stores a priority 1623 for listing the extracted elements 1621 based on the element positions 1622 and a selection flag 1624 indicating that the document element selection unit 803 has selected. For example, the selection flag 823 indicates that “1” is selected.
  • an attribute may be stored corresponding to each extraction element 1621 as in FIG. 8B.
  • FIG. 17 is a flowchart showing the procedure of the selection range element extraction processing (S1005) according to the present embodiment.
  • step S1701 the screen operation processing unit 410 extracts a document element having a predetermined attribute from the selection range.
  • step S1703 the screen operation processing unit 410 adds the position of the extracted selection range of the document element as the element position, and stores it in the list storage unit 1620.
  • step S1705 the screen operation processing unit 410 waits for the completion of extraction of the document element from the selected range. If the extraction of the document element from the selection range is completed, the screen operation processing unit 410 gives priority in the list to the document element extracted based on the element position in step S1707.
  • the list can be displayed so that the user can easily select a desired document element from the list display by preferentially listing the central portion of the selection range to which the user pays attention in the selection operation.
  • an information processing apparatus according to the fifth embodiment of the present invention will be described.
  • the information processing apparatus differs from the second to fourth embodiments in that it extracts document elements having attributes set by the user or application. Since other configurations and operations are the same as those in the second to fourth embodiments, the same configurations and operations are denoted by the same reference numerals, and detailed description thereof is omitted.
  • FIG. 18 is a diagram for explaining a list display of selection candidates in the information processing apparatus according to the present embodiment.
  • the same components as those in FIGS. 2 and 3 are denoted by the same reference numerals.
  • the left diagram of FIG. 18 shows a state in which a document element having attributes set by the user or application is extracted from the selection range 204 and the list display 1805 is performed.
  • the left diagram of FIG. 18 shows an example in which “word”, “word including particle” and “sentence” are set as attributes.
  • the right diagram in FIG. 18 shows a state in which a list element 1809 is extracted by extracting document elements having attributes set by the user or application from the selection range 208 in the display document 207.
  • the right diagram in FIG. 18 shows an example in which “name”, “facility name”, “address”, “phone number”, and “homepage address” are set as attributes.
  • the list can be displayed so that the user or application can easily select the document element that is desired now.
  • FIG. 19 is a diagram showing a configuration of stored information of the list display generation unit 540 according to the present embodiment.
  • information used by the document element extraction unit 801, the list generation unit 802, and the document element selection unit 803 is stored.
  • the document of the selection range is stored.
  • the list storage unit 1920 is associated with attribute 1 to attribute 1921 set by the user or application, and the extracted element 1922 extracted from the document in the document storage unit 1910 by the document element extraction unit 801 based on the attribute.
  • the list storage unit 1920 stores a selection flag 1923 indicating that the document element selection unit 803 has selected.
  • the list storage unit 1920 may store priorities.
  • FIG. 20 is a flowchart illustrating a procedure of selection range element extraction processing (S1005) according to the present embodiment.
  • step S2001 the screen operation processing unit 410 acquires the attribute of the document element extracted from the selection range set by the user or the application.
  • step S2003 if “word” is set in the attribute, the screen operation processing unit 410 extracts the word from the selection range, attaches the attribute, and stores it in the list storage unit 1920.
  • step S2005 if “phrase” is set in the attribute, the screen operation processing unit 410 extracts the phrase from the selection range, attaches the attribute, and stores it in the list storage unit 1920.
  • step S2007 if “sentence” is set in the attribute, the screen operation processing unit 410 extracts the sentence from the selection range, attaches the attribute, and stores it in the list storage unit 1920.
  • step S2009 the screen operation processing unit 410 extracts a document element having the attribute from the selection range, attaches the attribute, and stores the attribute in the list storage unit 1920.
  • step S2011 the screen operation processing unit 410 extracts a document element having the attribute from the selection range, attaches the attribute, and stores it in the list storage unit 1920.
  • a list can be displayed so that the user or application can easily select the document element that the user or application currently desires by freely setting the attribute of the document element that the user or application extracts from the selection range.
  • the information processing apparatus according to the present embodiment displays a list of document elements extracted from a selection range of display documents in accordance with a user's paste operation at the time of document creation. It differs in the point to do. Since other configurations and operations are the same as those in the second to fifth embodiments, the same configurations and operations are denoted by the same reference numerals, and detailed description thereof is omitted.
  • FIG. 21 is a diagram illustrating a list display of selection candidates in the information processing apparatus according to the present embodiment.
  • FIG. 21 illustrates an example in which document elements having words as attributes are extracted from the selection range and displayed in a list, but the same applies to extraction and list display of document elements having other attributes or a plurality of attributes.
  • the same components as those in FIGS. 2 and 3 are denoted by the same reference numerals.
  • Display screens 2111, 2113, 2121 and 2123 on the right in FIG. 21 are screens during document creation.
  • the display screen 2111 is a screen in a case where the user instructs the created document to paste after selecting the selection range 204 of the display document 203.
  • a list display 2112 of words extracted from the selection range 204 is superimposed on the display screen 2111.
  • the display screen 2113 is a state in which the user selects and designates the second “sense” 2115 from the list display 2112.
  • a “sense” 2115 selected and specified by the user is pasted on the display screen 2113 (see 2116).
  • the display screen 2121 is a screen in a case where the user instructs the created document to paste after selecting the selection range 204 of the display document 203.
  • a list display 2122 of words extracted from the selection range 204 and having a different priority from the list display 2112 is superimposed.
  • the display screen 2123 is a state in which the user selects and designates the second “narrow sense” 2125 from the list display 2122.
  • the display screen 2123 is pasted with “narrow sense” 2125 selected and designated by the user (see 2126).
  • FIG. 22 is a block diagram illustrating a functional configuration of the screen operation processing unit 2210 according to the present embodiment.
  • the same functional components as those in FIG. 5 are denoted by the same reference numerals, and description thereof is omitted.
  • the display information DB 2270 stores a document that is being created in addition to a display document in which a selection range is designated, and is displayed on the display panel 202 by the display control unit 550.
  • the document creation unit 2280 creates a document using functions including kana-kanji conversion processing and paste processing.
  • document creation unit 2280 may not be included in the screen operation processing unit 2210.
  • FIG. 23 is a block diagram illustrating a functional configuration of the document creation unit 2280 according to the present embodiment.
  • the document creation unit 2280 includes a predictive conversion control unit 2301, a paste control unit 2302, and a created document storage display control unit 2303.
  • the predictive conversion control unit 2301 performs predictive conversion processing such as kana-kanji conversion processing or word conversion processing from alphabets in response to user input.
  • the paste control unit 2302 controls the paste operation included in the copy operation from the user's range specification according to the present embodiment.
  • a created document storage display control unit 2303 controls storage of a document being created and display on the display panel 202.
  • FIG. 24 is a diagram showing a configuration of storage information of the list display generation unit 540 or the document creation unit 2280 according to the present embodiment.
  • the same components as those in FIG. 8B are denoted by the same reference numerals, and description thereof is omitted.
  • the created document storage unit 2410 stores a document being created.
  • a cursor 2411 indicates the cursor position before the copy operation.
  • the words extracted from the selected range are displayed as a list 2112 as in the display screen 2111 of FIG.
  • “sense” 2115 is designated, “sense” 2412 is pasted into the created document. Then, the cursor 2411 moves to the position of the cursor 2413.
  • FIG. 25 is a flowchart illustrating a procedure of screen operation processing including document creation processing of the information processing apparatus according to the present embodiment. This flowchart is executed by the processor 400 or the CPU of the screen operation processing unit 410 to realize each functional component of the screen operation processing unit 410. Here, a case where the CPU of the screen operation processing unit 410 executes will be described. In FIG. 25, steps similar to those in FIG. 10 are denoted by the same step numbers and description thereof is omitted.
  • step S2501 the screen operation processing unit 410 displays the copy source document.
  • the screen operation processing unit 410 selects a display document range in step S1003, and executes element extraction processing in step S1005.
  • step S2503 the screen operation processing unit 410 displays a document creation screen on the display panel 202 in accordance with a user instruction.
  • the screen operation processing unit 410 determines whether the instruction is a paste instruction. If it is a paste instruction, the screen operation processing unit 410 executes list display processing in step S1007.
  • step S1009 the screen operation processing unit 410 waits for user selection from the list display. If there is a user selection, in step S2507, the screen operation processing unit 410 pastes the document element selected by the user from the list display at the cursor position of the created document.
  • the screen operation processing unit 410 determines in step S2509 whether it is a document input by the user. If the input is a document, the screen operation processing unit 410 inserts the input character at the cursor position of the created document in step S2511.
  • step S2513 the screen operation processing unit 410 determines whether or not the document creation is finished. If the document creation is not finished, the screen operation processing unit 410 returns to step S2501 and repeats the process. If it is not a copy process from an existing original document, the list display is passed through.
  • the operability of the copy operation is improved by selecting a range including a necessary document element, displaying a list, selecting and pasting a desired document element.
  • the information processing apparatus prioritizes the document elements extracted from the selected range of the displayed document according to the input character conversion process at the time of document creation. It is different in that it is displayed in the prediction conversion squirrel. Since other configurations and operations are the same as those in the second to sixth embodiments, the same configurations and operations are denoted by the same reference numerals, and detailed description thereof is omitted.
  • FIG. 26 is a diagram for explaining a list display (predictive conversion list) of selection candidates in the information processing apparatus according to the present embodiment.
  • FIG. 26 illustrates an example in which a document element having a word as an attribute is extracted from a selection range and displayed in a list, but extraction and list display of a document element having other attributes or a plurality of attributes are the same.
  • the same components as those in FIGS. 2 and 3 are denoted by the same reference numerals.
  • 26 shows a selection range 204 of the display document 203.
  • the right display screens 2611, 2613, 2621, and 2123 in FIG. 26 are screens during document creation.
  • the display screen 2611 is a screen when the user inputs “?” To the created document after selecting the selection range 204 of the display document 203.
  • a list display 2612 of document elements including “” or “” as the head extracted from the selection range 204 is superimposed and displayed.
  • a list including words including “ka”, phrases, and words including “” is displayed.
  • a display screen 2613 is a state in which the user selects and designates the second “sense” or “2615” from the list display 2612.
  • the “sense” selected and designated by the user is predicted and converted to 2615 (see 2616).
  • the display screen 2621 is a screen when the user inputs “?” To the created document after selecting the selection range 204 of the display document 203.
  • a list display 2622 having a priority order different from that of the list display 2612 of the document element including “or“ or “” as the head extracted from the selection range 204 is superimposed and displayed.
  • a list including a phrase including “ka”, a word, and a word including “” is displayed in a list.
  • the display screen 2623 is a state in which the user selects and designates the first “sense or representation ...” 2625 from the list display 2622.
  • the display screen 2623 is predicted and converted to “sense and representation ...” 2625 selected and designated by the user (see 2626).
  • FIG. 27 is a diagram showing a configuration of storage information of the list display generation unit 540 or the document creation unit 2280 according to the present embodiment.
  • the created document storage unit 2410 stores a document being created.
  • a cursor 2711 indicates the cursor position before the character input operation.
  • words extracted from the selection range are displayed in a list 2612 as shown in a display screen 2611 in FIG. .
  • “sense or“ 2615 ” is designated,“ sense or “2612” is predicted converted into the created document and pasted.
  • “sensation” is shown, but “sensation” is not shown for the sake of explanation.
  • the cursor 2711 moves to the position of the cursor 2713.
  • the list storage unit 2720 also includes a conversion candidate 2721 including the input character “or” or “” at the head, a priority level 2722 for list display, a selection flag 1323 indicating that the document element selection unit 803 has selected,
  • the conversion candidate 2721 includes an extraction candidate 2725 extracted from the document in the document storage unit 810 by the document element extraction unit 801 based on the attribute, and a normal candidate 2726 based on the conversion dictionary. Then, extraction candidates 2725 are preferentially displayed in the list.
  • “ ⁇ ” indicates a higher priority order.
  • an attribute may be stored corresponding to each conversion candidate 2721 as in FIG. 8B.
  • the extraction candidate 2725 is effective for predictive conversion in the creation of this document. However, it is preferable that the extraction candidate 2725 is deleted after the processing because it returns and interferes with the subsequent processing.
  • FIG. 28 is a flowchart illustrating a procedure of screen operation processing including document creation processing of the information processing apparatus according to the present embodiment. This flowchart is executed by the processor 400 or the CPU of the screen operation processing unit 410 to realize each functional component of the screen operation processing unit 410. Here, a case where the CPU of the screen operation processing unit 410 executes will be described. In FIG. 28, steps similar to those in FIG. 10 or FIG. 25 are denoted by the same step numbers and description thereof is omitted.
  • step S2801 the screen operation processing unit 410 determines whether or not it is a character input to the created document. If it is a character input, in step S2803, the screen operation processing unit 410 extracts candidate elements based on the attributes from the copy source document, and displays them as a list above the candidate characters.
  • the screen operation processing unit 410 deletes the extracted element from the conversion candidate in step S2805.
  • a range is selected from a document created by the user or a related document
  • a list of document elements in the selected range corresponding to the input character is displayed and a desired document element is selected.
  • Predictive conversion Therefore, the operability of the predictive conversion operation is improved.
  • the operability is further improved by appropriately setting the relationship between the input character and the document element to be extracted or the attribute.
  • the present invention may be applied to a system composed of a plurality of devices, or may be applied to a single device. Furthermore, the present invention can also be applied to a case where an information processing program that implements the functions of the embodiments is supplied directly or remotely to a system or apparatus. Therefore, in order to realize the functions of the present invention on a computer, a program installed on the computer, a medium storing the program, and a WWW (World Wide Web) server that downloads the program are also included in the scope of the present invention. . In particular, at least a non-transitory computer readable medium storing a program for causing a computer to execute the processing steps included in the above-described embodiments is included in the scope of the present invention.

Abstract

　抽出部と、表示部と、を含む情報処理装置である。抽出部は、表示文書からユーザが選択したい対象と実際に選択された対象とを一致させるため、文書中の選択範囲に含まれる文書要素を、文書要素の属性に基づいて抽出する。また、表示部は、抽出部による抽出結果を選択可能にリスト表示する。これにより、ユーザがリスト表示から所望の文書要素を選択できるので、表示文書からユーザが選択したい対象と実際に選択された対象とを一致させることができる。

Description

情報処理装置、情報処理方法および情報処理プログラム
　本発明は、情報処理装置、情報処理方法および情報処理プログラムに関する。
　上記技術分野において、特許文献１には、スマートフォンやタブレットにおいて、表示画面上において指定領域をユーザが丸で囲むことにより、その丸で指定された段落、文、文節、単語を選択する技術が開示されている。
特開２０１３－１８６７２０号公報
　しかしながら、上記文献に記載の技術では、表示文書からユーザが選択したい対象と実際に選択された対象が必ずしも一致するとは限らない。特に、スマートフォンやタブレットなどのタッチパネルから表示文書に含まれる段落、文、文節、単語などの文書要素を正確に選択することができなかった。
　本発明の目的は、上述の課題を解決する技術を提供することにある。
　上記目的を達成するため、本発明に係る装置は、
　文書中の選択範囲に含まれる文書要素を、該文書要素の属性に基づいて抽出する抽出手段と、
　前記抽出手段による抽出結果を選択可能にリスト表示する表示手段と、
　を備える。
　上記目的を達成するため、本発明に係る方法は、
　文書中の選択範囲に含まれる文書要素を、該文書要素の属性に基づいて抽出する抽出ステップと、
　前記抽出ステップにおける抽出結果を選択可能にリスト表示する表示ステップと、
　を含む。
　上記目的を達成するため、本発明に係るプログラムは、
　文書中の選択範囲に含まれる文書要素を、該文書要素の属性に基づいて抽出する抽出ステップと、
　前記抽出ステップにおける抽出結果を選択可能にリスト表示する表示ステップと、
　をコンピュータに実行させる。
　本発明によれば、表示文書からユーザが選択したい対象と実際に選択された対象とを一致させることができる。
本発明の第１実施形態に係る情報処理装置の構成を示すブロック図である。 本発明の第２実施形態に係る情報処理装置の処理の概要を示す図である。 本発明の第２実施形態に係る情報処理装置における選択候補のリスト表示を説明する図である。 本発明の第２実施形態に係る情報処理装置の外観を示す図である。 本発明の第２実施形態に係る情報処理装置の構成を示すブロック図である。 本発明の第２実施形態に係る画面操作処理部の機能構成を示すブロック図である。 本発明の第２実施形態に係る操作受付部の機能構成を示すブロック図である。 本発明の第２実施形態に係る操作解析部の機能構成を示すブロック図である。 本発明の第２実施形態に係るリスト表示生成部の機能構成を示すブロック図である。 本発明の第２実施形態に係るリスト表示生成部の記憶情報の構成を示す図である。 本発明の第２実施形態に係る表示制御部の機能構成を示すブロック図である。 本発明の第２実施形態に係る情報処理装置の画面操作処理の手順を示すフローチャートである。 本発明の第２実施形態に係る選択範囲の要素抽出処理の手順を示すフローチャートである。 本発明の第２実施形態に係るリスト表示処理の手順を示すフローチャートである。 本発明の第３実施形態に係る情報処理装置における選択候補のリスト表示を説明する図である。 本発明の第３実施形態に係るリスト表示生成部の記憶情報の構成を示す図である。 本発明の第３実施形態に係るリスト表示処理の手順を示すフローチャートである。 本発明の第４実施形態に係る情報処理装置における選択候補のリスト表示を説明する図である。 本発明の第４実施形態に係るリスト表示生成部の記憶情報の構成を示す図である。 本発明の第４実施形態に係る選択範囲の要素抽出処理の手順を示すフローチャートである。 本発明の第５実施形態に係る情報処理装置における選択候補のリスト表示を説明する図である。 本発明の第５実施形態に係るリスト表示生成部の記憶情報の構成を示す図である。 本発明の第５実施形態に係る選択範囲の要素抽出処理の手順を示すフローチャートである。 本発明の第６実施形態に係る情報処理装置における選択候補のリスト表示を説明する図である。 本発明の第６実施形態に係る画面操作処理部の機能構成を示すブロック図である。 本発明の第６実施形態に係る文書作成部の機能構成を示すブロック図である。 本発明の第６実施形態に係るリスト表示生成部または文書作成部の記憶情報の構成を示す図である。 本発明の第６実施形態に係る情報処理装置の文書作成処理を含む画面操作処理の手順を示すフローチャートである。 本発明の第７実施形態に係る情報処理装置における選択候補のリスト表示を説明する図である。 本発明の第７実施形態に係るリスト表示生成部または文書作成部の記憶情報の構成を示す図である。 本発明の第７実施形態に係る情報処理装置の文書作成処理を含む画面操作処理の手順を示すフローチャートである。
　以下に、図面を参照して、本発明の実施の形態について例示的に詳しく説明する。ただし、以下の実施の形態に記載されている構成要素は単なる例示であり、本発明の技術範囲をそれらのみに限定する趣旨のものではない。なお、本実施形態において使用される文言「文書要素」は、単語、文節、文または段落などを属性とする文書構成要素を示す。ここで、単語には、接頭語、接尾語、助詞を有するものも含む。また、文言「文書要素」は、名前、場所、電話番号またはメールアドレスなどを属性とする有意情報要素を示す。また、文書要素の属性は、漢字、仮名、カタカナ、アルファベット、数字または記号などを含む。なお、文書要素の属性は、文書中から文書要素を抽出できるものであれば上記に限定されるものではない。
　［第１実施形態］
　本発明の第１実施形態としての情報処理装置１００について、図１を用いて説明する。情報処理装置１００は、表示画面における範囲選択を制御する装置である。
　図１に示すように、情報処理装置１００は、抽出部１１０と、表示部１２０と、を含む。抽出部１１０は、文書１２１中の選択範囲１２２に含まれる文書要素１１２を、文書要素の属性１１１に基づいて抽出する。表示部１２０は、抽出部１１０による抽出結果を選択可能にリスト表示１２３する。例えば、文書要素の属性としては、単語、文節、文または段落など、また、名前、場所、電話番号またはメールアドレスなど、また、漢字、仮名、カタカナ、アルファベット、数字または記号などを含み、少なくとも１つの属性に基づいた文書要素の抽出が行なわれる。さらに、単語には、接頭語、接尾語、助詞を有するものも含まれてもよい。
　本実施形態によれば、ユーザがリスト表示から所望の文書要素を選択できるので、表示文書からユーザが選択したい対象と実際に選択された対象とを一致させることができる。
　［第２実施形態］
　次に、本発明の第２実施形態に係る情報処理装置について説明する。本実施形態に係る情報処理装置は、表示画面に表示された文書上の選択範囲から単語、文節、文、番号などの有意情報を抽出してリスト表示する。ユーザは、リスト表示から所望の文書要素を選択することができる。
　《処理の概要》
　以下、図２および図３を参照して、本実施形態の情報処理装置の処理の概要を説明する。図２は、本実施形態に係る情報処理装置２００の処理の概要を示す図である。図２には、本明細書の全実施形態に共通する処理の概要が示されている。図２は、情報処理装置２００のタッチパネル２０１およびディスプレイパネル２０２における、ユーザの範囲選択に対する本実施形態の処理の数例を示す。
　図２の左図は、ユーザが表示文書２０３中の選択範囲２０４を指定した場合であり、選択範囲２０４の単語が抽出され、抽出された単語のリスト表示２０５がされている。図２の中央図は、ユーザが表示文書２０３中の選択範囲２０４を指定した場合であり、選択範囲２０４の単語と文節とが抽出され、抽出された単語と文節とのリスト表示２０６がされている。図２の中央図では、抽出された文節が単語よりも優先順位が高く設定されている。図２の右図は、ユーザが表示文書２０７中の選択範囲２０８を指定した場合であり、選択範囲２０８の氏名、施設名、電話番号およびホームページアドレスとが抽出され、リスト表示２０９がされている。
　これらのリスト表示２０５、２０６または２０９からは、ユーザが所望の文書要素を選択指定することで、ユーザの選択範囲２０４または２０８の指定では絞れない対象（文書要素）を確実に選択することが可能となる。
　（本実施形態のリスト表示）
　図３は、本実施形態に係る情報処理装置２００における選択候補のリスト表示を説明する図である。図３では、選択範囲から単語を属性とする文書要素を抽出してリスト表示する例を説明するが、他の属性あるいは複数の属性を有する文書要素の抽出やリスト表示も同様である。なお、図３において、図２と同様の構成要素には同じ参照番号を付している。
　図３の左図は、ユーザが選択した表示文書２０３中から選択範囲２０４が指定された状態を図示している。本実施形態においては、選択範囲２０４の指定を限定するものではない。例えば、タッチパネル２０１上のユーザのタッチによりもの、あるいは、選択範囲２０４を囲むストロークによるもの、あるいは、キーボードやポインティングデバイスによるものなど、範囲指定のあらゆる操作を含んでよい。
　図３の中央図は、選択範囲２０４の指定に応じて、選択範囲２０４の所定属性を有する文書要素を抽出してリスト表示２０５した状態である。図３の中央図においては、"単語"属性として選択範囲２０４の文書要素が抽出され、選択範囲２０４の先頭から抽出された順にリスト表示２０５されている。
　図３の右図は、ユーザにより、リスト表示２０５から２番目の"感覚"３０５が選択された状態である。"感覚"３０５は、ユーザが選択対象として望んだ単語であり、表示文書２０３中からからは正確に単語の"感覚"を選択指定できなくても、本実施形態のリスト表示により可能となった。例えば、選択された"感覚"３０５は選択要素データベース（以下、ＤＢ）に格納され、以降の処理で文書作成のペースト処理などで使用される。
　《情報処理装置》
　図４Ａは、本実施形態に係る情報処理装置２００の外観を示す図である。なお、図４Ａには、スマートフォンやタブレットなどのタッチパネルを用いた携帯端末を示すが、本実施例の情報処理装置は、スマートフォンやタブレットに限定されない。
　情報処理装置２００では、タッチパネル２０１とディスプレイパネル２０２とが操作部および表示部として機能する。また、情報処理装置２００は、音声入出力機能としてマイク４０３とスピーカ４０４とを有する。また、情報処理装置２００は、電源スイッチを含むスイッチ群４０５を有する。また、情報処理装置２００は、外部の入出力機器接続や通信接続に使用される外部インタフェース４０６を有する。
　（情報処理装置の機能構成）
　図４Ｂは、本実施形態に係る情報処理装置２００の構成を示すブロック図である。なお、図４Ｂには、スマートフォンやタブレットなどのタッチパネルを用いた携帯端末の基本的な構成を示すが、これに限定されない。また、図４Ｂの各構成要素は、単体のハードウェアで実現されても、独自のプロセッサを有してプログラムを実行することでソフトウェアにより実現されてもよい。あるいは、ハードウェアとソフトウェアとを組み合わせたファームウェアで実現されてもよい。また、図４Ｂの各構成要素は、独立して機能を果たすように他の構成要素と分離して図示されている。しかし、実際には、各構成要素は、ベーシックなハードウェアとＯＳ(Operating System)や入出力制御とにより最下層制御から、アプリケーションプログラムによる最上位制御までの重層的制御の組み合わせで実現されるものである。
　プロセッサ４００は、少なくとも１つのＣＰＵ(Central Processing Unit)を有し、情報処理装置２００の全体を制御する。なお、プロセッサ４００は固有のメモリを内蔵するものが望ましい。画面操作処理部４１０は、本実施形態の処理を行なう構成要素であり、タッチパネル２０１からのユーザ操作入力を受け付けて、ユーザ操作入力に対応する表示画面変更を行ない、ディスプレイパネル２０２に表示する。なお、画面操作処理部４１０は、プロセッサ４００が関連プログラムを実行することによって実現されてもよいが、独立した画面操作用プロセッサを設けるのが望ましい。音声処理部４２０は、マイク４０３からの音声入力を処理して、例えば、通信処理部４４０を介して送信したり、タッチパネル２０１からのユーザ操作入力に変わるユーザ音声指示を行なう。また、音声処理部４２０は、ユーザへの通知／警告や、映像再生音声などを生成して、スピーカから音声出力する。かかる音声処理部４２０も、プロセッサ４００とは独立した音声処理用プロセッサを設けるのが望ましい。
　スイッチ処理部４３０は、スイッチ群４０５からのスイッチ入力に基づいた処理を実行する。通信処理部４４０は、ネットワークを介して、データの送受信を行なう。インタフェース制御部４５０は、外部インタフェース４０６を介して接続された入出力機器とのデータ入出力を制御する。かかる通信処理部４４０も、プロセッサ４００とは独立した音声処理用プロセッサを設けるのが望ましい。メモリ制御部４６０は、例えば、フラッシュメモリなどで構成されたＲＯＭ(Read Only Memory)４６１、ＲＡＭ(Random Access Memory)４６２およびストレージ４６３と、プロセッサ４００とのデータやプログラムのやり取りを制御する。かかるメモリ制御部４６０も、プロセッサ４００とは独立した音声処理用プロセッサを設けるのが望ましい。
　以下、本実施形態における画面操作処理部４１０について、さらに詳細に説明する。
　（画面操作処理部）
　図５は、本実施形態に係る画面操作処理部４１０の機能構成を示すブロック図である。
　画面操作処理部４１０は、操作受付部５２０と、操作解析部５３０と、リスト表示生成部５４０と、表示制御部５５０と、を備える。操作受付部５２０は、タッチパネル２０１からのユーザの操作を受け付けて、タッチ位置や動作などを取得する。操作解析部５３０は、操作受付部５２０が受け付けたユーザ操作の動作や位置などから、表示画面の情報も考慮して操作内容を解析する。本実施形態においては、操作解析部５３０は、特に、表示画面からユーザが選択した範囲を検出する。また、操作解析部５３０は、リスト表示された文書要素を選択するためユーザが指定した位置検出を行なう。リスト表示生成部５４０は、操作解析部５３０が検出した選択範囲から所定の属性を有する文書要素を抽出して、それらのリスト表示を生成する。また、リスト表示生成部５４０は、操作解析部５３０が検出したリスト内の位置に基づいて、リスト表示からユーザが指定した文書要素を選択する。表示制御部５５０は、表示ドライバを含み、ストレージ４６３の表示情報を読み出してディスプレイパネル２０２に表示させると共に、リスト表示生成部５４０の生成したリストをディスプレイパネル２０２に表示させる。また、ユーザが指示した操作による選択範囲の表示などを表示画面上に実現するよう、画像メモリを変更してディスプレイパネル２０２の画面を制御する。ここで、リスト表示生成部５４０と表示制御部５５０とディスプレイパネル２０２とを、表示部としてまとめてもよい。
　なお、図５の機能構成部は、画面操作処理部４１０のプロセッサの処理により実現されても、高速化のため機能構成部によっては独自のプロセッサで処理されてもよい。また、図５の各機能構成部は、画面操作処理部４１０の動作に限定されて示されているが、これら機能構成部が図４Ｂの情報処理装置２００の他の構成要素とのデータのやり取りを行なってもよい。
　（操作受付部）
　図６は、本実施形態に係る操作受付部５２０の機能構成を示すブロック図である。操作受付部５２０は、タッチパネル２０１からのユーザの操作を受け付けて、タッチ位置や動作を取得する。
　操作受付部５２０は、イベント検出部６０１と、タッチ位置検出部６０２と、を備える。イベント検出部６０１は、タッチパネル２０１上でユーザからの何らかの操作開始を検出して、操作データの受付を開始する。タッチ位置検出部６０２は、ユーザの指がタッチしているタッチパネル２０１上の位置座標を検出する。
　（操作解析部）
　図７は、本実施形態に係る操作解析部５３０の機能構成を示すブロック図である。操作解析部５３０は、操作受付部５２０が受け付けたユーザ操作の動作や位置などから、表示画面の情報も考慮して操作内容を解析する。
　操作解析部５３０は、リスト位置検出部７０１と、選択範囲検出部７０２と、を備える。リスト位置検出部７０１は、複数の文書要素が表示されたリストからユーザが選択した位置を、操作受付部５２０からのユーザのタッチ位置に基づいて検出する。選択範囲検出部７０２は、表示文書からユーザが選択した範囲を、操作受付部５２０からのユーザのタッチ位置に基づいて検出する。
　（リスト表示生成部）
　図８Ａは、本実施形態に係るリスト表示生成部５４０の機能構成を示すブロック図である。リスト表示生成部５４０は、選択範囲から所定の属性を有する文書要素を抽出してリスト表示を生成すると共に、リスト内の位置に基づいてリスト表示からユーザが指定した文書要素を選択する。
　リスト表示生成部５４０は、文書要素抽出部８０１と、リスト生成部８０２と、文書要素選択部８０３と、を備える。文書要素抽出部８０１は、表示文書の選択範囲から所定属性を有する文書要素を抽出して記憶する。リスト生成部８０２は、文書要素抽出部８０１が抽出した文書要素を所定順序で選択可能にリストアップし、所定位置に表示するデータを生成する。文書要素選択部８０３は、操作解析部５３０からのユーザが指定したリスト位置に基づいて、リスト表示から所望の文書要素を選択する。文書要素選択部８０３は、ユーザが選択した文書要素を、選択要素ＤＢ５６０に登録する。登録された文書要素は、例えば、以降のペースト操作などで使用される。
　図８Ｂは、本実施形態に係るリスト表示生成部５４０の記憶情報の構成を示す図である。リスト表示生成部５４０の記憶部には、文書要素抽出部８０１、リスト生成部８０２、および、文書要素選択部８０３が使用する情報が記憶される。
　文書の選択範囲の文書記憶部８１０には、本例では選択範囲の"狭義には、...判断し、推"が記憶される。また、リスト記憶部８２０は、文書要素抽出部８０１が属性に基づいて文書記憶部８１０の文書から抽出した抽出要素８２１と、その抽出要素８２１の属性８２２と、文書要素選択部８０３が選択したことを示す選択フラグ８２３と、を記憶する。例えば、選択フラグ８２３は、"１"が選択されたことを示している。
　（表示制御部）
　図９は、本実施形態に係る表示制御部５５０の機能構成を示すブロック図である。表示制御部５５０は、表示ドライバを含み、ストレージ４６３の表示情報を読み出してディスプレイパネル２０２に表示させると共に、リスト表示生成部５４０の生成したリストをディスプレイパネル２０２に表示させる。
　表示制御部５５０は、表示位置制御部９０１と、リスト表示制御部９０２と、識別表示制御部９０３と、を備える。表示位置制御部９０１は、ストレージ４６３から読出された表示情報のどの位置を表示するかを制御する。本実施形態においては、文書の表示位置を制御する。リスト表示制御部９０２は、リスト生成部８０２が生成した文書要素のリストをディスプレイパネル２０２の所定位置に表示するよう制御する。識別表示制御部９０３は、表示画面上で文書の選択範囲やリスト表示から選択された文書要素を識別可能に表示するように制御する。
　《画面操作処理の手順》
　図１０は、本実施形態に係る情報処理装置２００の画面操作処理の手順を示すフローチャートである。このフローチャートは、プロセッサ４００、あるいは、画面操作処理部４１０のＣＰＵが実行することにより、画面操作処理部４１０の各機能構成部を実現する。ここでは、画面操作処理部４１０のＣＰＵが実行する場合を説明する。
　画面操作処理部４１０は、ステップＳ１００１において、ユーザが表示指定をした文書の所定部分を表示する。例えば、図３のように、国語辞書の"しこう（思考）"の頁を表示する。画面操作処理部４１０は、ステップＳ１００３において、タッチパネル２０１などを用いたユーザによる文書中の選択操作に基づいて範囲を選択し、識別可能に表示する。表示文書中の範囲が選択されると、画面操作処理部４１０は、ステップＳ１００５において、所定属性に基づいて選択範囲の文書要素を抽出する要素抽出処理を実行する。そして、画面操作処理部４１０は、ステップＳ１００７において、抽出された文書要素を所定順序でリスト表示するリスト表示処理を実行する。
　画面操作処理部４１０は、ステップＳ１００９において、リスト表示からのユーザによる所望の文書要素の指定を待つ。ユーザによる文書要素の指定があれば、画面操作処理部４１０は、ステップＳ１０１１において、選択された文書要素の処理を行なう。選択された文書要素の処理には、例えば、コピーモードの場合にペースト処理などが含まれてもよい。
　（選択範囲の要素抽出処理）
　図１１Ａは、本実施形態に係る選択範囲の要素抽出処理（Ｓ１００５）の手順を示すフローチャートである。
　画面操作処理部４１０は、ステップＳ１１１１において、属性が"単語"であれば、選択範囲から単語を抽出してリスト記憶部８２０に記憶する。また、画面操作処理部４１０は、ステップＳ１１１３において、属性が"文節"であれば、選択範囲から文節を抽出してリスト記憶部８２０に記憶する。また、画面操作処理部４１０は、ステップＳ１１１５において、属性が"文"であれば、選択範囲から文を抽出してリスト記憶部８２０に記憶する。また、画面操作処理部４１０は、ステップＳ１１１７において、"電話番号"などの属性に応じて、選択範囲からその属性を有する文書要素を抽出してリスト記憶部８２０に記憶する。また、画面操作処理部４１０は、ステップＳ１１１９において、その他の属性が指定されていれば、選択範囲からその属性を有する文書要素を抽出してリスト記憶部８２０に記憶する。
　（リスト表示処理）
　図１１Ｂは、本実施形態に係るリスト表示処理（Ｓ１００７）の手順を示すフローチャートである。
　画面操作処理部４１０は、ステップＳ１１２１において、リスト記憶部８２０を参照して、選択範囲から抽出した文書要素を読出して、所定順序に従ってリストを生成する。本実施形態においては、一例として、選択範囲の始点から順番に抽出した文書要素をリストしている。そして、画面操作処理部４１０は、ステップＳ１１２３において、生成したリストを表示画面の所定位置に表示する。
　本実施形態によれば、選択文書から所定の属性を持つ文書要素を抽出してリスト表示することによって、ユーザがリスト表示から所望の文書要素を選択できるので、表示文書からユーザが選択したい対象と実際に選択された対象とを一致させることができる。
　［第３実施形態］
　次に、本発明の第３実施形態に係る情報処理装置について説明する。本実施形態に係る情報処理装置は、上記第２実施形態と比べると、ユ－ザあるいはアプリケーションが設定した優先順位で抽出した文書要素をリスト表示する点で異なる。その他の構成および動作は、第２実施形態と同様であるため、同じ構成および動作については同じ符号を付してその詳しい説明を省略する。
　（本実施形態のリスト表示）
　図１２は、本実施形態に係る情報処理装置における選択候補のリスト表示を説明する図である。図１２では、選択範囲から単語や文節を属性とする文書要素を抽出してリスト表示する例を説明するが、他の属性あるいは複数の属性を有する文書要素の抽出やリスト表示も同様である。なお、図１２において、図２および図３と同様の構成要素には同じ参照番号を付している。
　図１２の上図は、選択範囲２０４から抽出した単語の異なるリスト表示２０５およびリスト表示１２０５を示す図である。リスト表示２０５においては、第２実施形態の図３と同様に、選択範囲２０４の先頭から順に抽出された単語がリストされている。一方、リスト表示１２０５においては、第２実施形態の図３と逆に、選択範囲２０４の後尾から順に抽出された単語がリストされている。すなわち、リスト表示２０５とリスト表示１２０５とでは、抽出された単語は同じだけれどもリスト内に表示する優先順位が異なっている。図１２の上図では、逆の場合を示したがこれに限定されず、ユーザあるいはアプリケーションの設定によりリスト順位を変更してもよい。
　図１２の下図は、選択範囲２０４から抽出した単語および文節の異なるリスト表示２０６およびリスト表示１２０６を示す図である。リスト表示２０６においては、図２の中央図と同様に、文節から単語への順に抽出された文書要素がリストされている。一方、リスト表示１２０６においては、図２の中央図と逆に、単語から文節への順に抽出された文書要素がリストされている。すなわち、リスト表示２０６とリスト表示１２０６とでは、抽出された単語と文節は同じだけれどもリスト内に表示する優先順位が異なっている。図１２の下図では、逆の場合を示したがこれに限定されず、ユーザあるいはアプリケーションの設定によりさらに複雑なリスト順位に変更してもよい。
　（リスト表示生成部）
　図１３は、本実施形態に係るリスト表示生成部５４０の記憶情報の構成を示す図である。リスト表示生成部５４０の記憶部には、文書要素抽出部８０１、リスト生成部８０２、および、文書要素選択部８０３が使用する情報が記憶される。なお、図１３において、図８Ｂと同様の構成要素には同じ参照番号を付して、説明を省略する。
　図１３のリスト記憶部１３２０は、図１２の上図の選択範囲２０４の後尾から順に抽出された単語をリストする場合の構成例である。リスト記憶部１３２０は、文書要素抽出部８０１が属性に基づいて文書記憶部８１０の文書から抽出した抽出要素１３２１と、その抽出要素８２１をリストする優先順位１３２２と、文書要素選択部８０３が選択したことを示す選択フラグ１３２３と、を記憶する。例えば、選択フラグ８２３は、"１"が選択されたことを示している。なお、図１３には図示しなかったが、図８Ｂと同様に各抽出要素１３２１に対応して属性を記憶してもよい。
　（リスト表示処理）
　図１４は、本実施形態に係るリスト表示処理（Ｓ１００７）の手順を示すフローチャートである。
　画面操作処理部４１０は、ステップＳ１４０１において、選択範囲の文書から抽出された抽出要素１３２１を、リスト表示候補として読み出す。次に、画面操作処理部４１０は、ステップＳ１４０３において、優先順位１３２２に従って抽出要素１３２１を並べ替えてリストを生成する。そして、画面操作処理部４１０は、ステップＳ１４０５において、優先順位１３２２でリストアップした抽出要素１３２１をリスト表示する。
　本実施形態によれば、ユーザがリスト表示から所望の文書要素を選択し易いようにリストを表示できる。
　［第４実施形態］
　次に、本発明の第４実施形態に係る情報処理装置について説明する。本実施形態に係る情報処理装置は、上記第３実施形態と比べると、選択範囲の中央位置から外縁位置への順にリスト表示する点で異なる。その他の構成および動作は、第３実施形態と同様であるため、同じ構成および動作については同じ符号を付してその詳しい説明を省略する。
　（本実施形態のリスト表示）
　図１５は、本実施形態に係る情報処理装置における選択候補のリスト表示を説明する図である。図１５では、選択範囲から単語を属性とする文書要素を抽出してリスト表示する例を説明するが、他の属性あるいは複数の属性を有する文書要素の抽出やリスト表示も同様である。なお、図１５において、図２および図３と同様の構成要素には同じ参照番号を付している。
　図１５は、選択範囲２０４から抽出した単語のリスト表示１５０５と、異なる選択範囲１５０４から抽出した単語のリスト表示１５０６を示す図である。リスト表示１５０５においては、選択範囲２０４の中央部分から外縁部分に向けた順に抽出された単語がリストされている。一方、リスト表示１５０６においては、選択範囲２０４より後部が延びた選択範囲１５０４の中央部分から外縁部分に向けた順に抽出された単語がリストされている。
　このように制御することで、ユーザが選択操作において注目する選択範囲の中央部分を優先してリストすることで、ユーザがリスト表示から所望の文書要素を選択し易いようにリストを表示できることになる。
　（リスト表示生成部）
　図１６は、本実施形態に係るリスト表示生成部５４０の記憶情報の構成を示す図である。リスト表示生成部５４０の記憶部には、文書要素抽出部８０１、リスト生成部８０２、および、文書要素選択部８０３が使用する情報が記憶される。なお、図１６において、図８Ｂと同様の構成要素には同じ参照番号を付して、説明を省略する。
　図１６のリスト記憶部１６２０は、選択範囲２０４の中央部分から外縁部分に向けて順に抽出された単語をリストする場合の構成例である。リスト記憶部１６２０は、文書要素抽出部８０１が属性に基づいて文書記憶部８１０の文書から抽出した抽出要素１６２１と、その抽出要素１６２１の選択範囲の要素位置１６２２と、を記憶する。また、リスト記憶部１６２０は、要素位置１６２２に基づいて、抽出要素１６２１をリストする優先順位１６２３と、文書要素選択部８０３が選択したことを示す選択フラグ１６２４と、を記憶する。例えば、選択フラグ８２３は、"１"が選択されたことを示している。なお、図１６には図示しなかったが、図８Ｂと同様に各抽出要素１６２１に対応して属性を記憶してもよい。
　（選択範囲の要素抽出処理）
　図１７は、本実施形態に係る選択範囲の要素抽出処理（Ｓ１００５）の手順を示すフローチャートである。
　画面操作処理部４１０は、ステップＳ１７０１において、選択範囲から所定属性を有する文書要素を抽出する。そして、画面操作処理部４１０は、ステップＳ１７０３において、抽出した文書要素の選択範囲の位置を、要素位置として付加してリスト記憶部１６２０に記憶する。
　画面操作処理部４１０は、ステップＳ１７０５において、選択範囲からの文書要素の抽出完了を待つ。選択範囲からの文書要素の抽出完了であれば、画面操作処理部４１０は、ステップＳ１７０７において、要素位置に基づいて抽出した文書要素にリストにおける優先順位を付与する。
　本実施形態によれば、ユーザが選択操作において注目する選択範囲の中央部分を優先してリストすることで、ユーザがリスト表示から所望の文書要素を選択し易いようにリストを表示できる
　［第５実施形態］
　次に、本発明の第５実施形態に係る情報処理装置について説明する。本実施形態に係る情報処理装置は、上記第２実施形態から第４実施形態と比べると、ユ－ザあるいはアプリケーションが設定する属性を有する文書要素を抽出する点で異なる。その他の構成および動作は、第２実施形態から第４実施形態と同様であるため、同じ構成および動作については同じ符号を付してその詳しい説明を省略する。
　（本実施形態のリスト表示）
　図１８は、本実施形態に係る情報処理装置における選択候補のリスト表示を説明する図である。なお、図１５において、図２および図３と同様の構成要素には同じ参照番号を付している。
　図１８の左図は、選択範囲２０４からユーザあるいはアプリケーションが設定した属性を有する文書要素を抽出して、リスト表示１８０５を行なった状態を示す。図１８の左図では、属性として"単語"、"助詞などを含む単語"および"文節"が設定された例を示す。
　図１８の右図は、表示文書２０７中の選択範囲２０８からユーザあるいはアプリケーションが設定した属性を有する文書要素を抽出して、リスト表示１８０９を行なった状態を示す。図１８の右図では、属性として"氏名"、"施設名"、"住所"、"電話番号"および"ホームページアドレス"が設定された例を示す。
　このように、ユーザあるいはアプリケーションが選択範囲から抽出する文書要素の属性を自在に設定することにより、ユーザあるいはアプリケーションが今所望としている文書要素を選択し易いようにリストを表示できることになる。
　（リスト表示生成部）
　図１９は、本実施形態に係るリスト表示生成部５４０の記憶情報の構成を示す図である。リスト表示生成部５４０の記憶部には、文書要素抽出部８０１、リスト生成部８０２、および、文書要素選択部８０３が使用する情報が記憶される。
　文書の選択範囲の文書記憶部１９１０には、選択範囲の文書が記憶される。また、リスト記憶部１９２０は、ユーザあるいはアプリケーションが設定した属性１から属性ｎの属性１９２１にそれぞれ対応付けて、文書要素抽出部８０１が属性に基づいて文書記憶部１９１０の文書から抽出した抽出要素１９２２を記憶する。また、リスト記憶部１９２０は、文書要素選択部８０３が選択したことを示す選択フラグ１９２３を記憶する。なお、リスト記憶部１９２０には、優先順位が記憶されてもよい。
　（選択範囲の要素抽出処理）
　図２０は、本実施形態に係る選択範囲の要素抽出処理（Ｓ１００５）の手順を示すフローチャートである。
　画面操作処理部４１０は、ステップＳ２００１において、ユーザあるいはアプリケーションが設定した、選択範囲から抽出する文書要素の属性を取得する。
　画面操作処理部４１０は、ステップＳ２００３において、属性に"単語"が設定されていれば、選択範囲から単語を抽出して属性を付してリスト記憶部１９２０に記憶する。また、画面操作処理部４１０は、ステップＳ２００５において、属性に"文節"が設定されていれば、選択範囲から文節を抽出して属性を付してリスト記憶部１９２０に記憶する。また、画面操作処理部４１０は、ステップＳ２００７において、属性に"文"が設定されていれば、選択範囲から文を抽出して属性を付してリスト記憶部１９２０に記憶する。また、画面操作処理部４１０は、ステップＳ２００９において、"電話番号"などの属性が設定されていれば、選択範囲からその属性を有する文書要素を抽出して属性を付してリスト記憶部１９２０に記憶する。また、画面操作処理部４１０は、ステップＳ２０１１において、その他の属性が設定されていれば、選択範囲からその属性を有する文書要素を抽出して属性を付してリスト記憶部１９２０に記憶する。
　本実施形態によれば、ユーザあるいはアプリケーションが選択範囲から抽出する文書要素の属性を自在に設定することにより、ユーザあるいはアプリケーションが今所望としている文書要素を選択し易いようにリストを表示できる
　［第６実施形態］
　次に、本発明の第６実施形態に係る情報処理装置について説明する。本実施形態に係る情報処理装置は、上記第２実施形態から第５実施形態と比べると、文書作成時のユーザのペースト操作に応じて、表示文書の選択範囲から抽出した文書要素のリスト表示を行なう点で異なる。その他の構成および動作は、第２実施形態から第５実施形態と同様であるため、同じ構成および動作については同じ符号を付してその詳しい説明を省略する。
　（本実施形態のリスト表示）
　図２１は、本実施形態に係る情報処理装置における選択候補のリスト表示を説明する図である。図２１では、選択範囲から単語を属性とする文書要素を抽出してリスト表示する例を説明するが、他の属性あるいは複数の属性を有する文書要素の抽出やリスト表示も同様である。なお、図２１において、図２および図３と同様の構成要素には同じ参照番号を付している。
　図２１の左図は、表示文書２０３の選択範囲２０４を示している。図２１の右の表示画面２１１１、２１１３、２１２１および２１２３は、それぞれ文書作成中の画面である。
　表示画面２１１１は、表示文書２０３の選択範囲２０４を選択した後、ユーザが作成文書にペーストを指示した場合の画面である。表示画面２１１１には、選択範囲２０４から抽出した単語のリスト表示２１１２が重畳表示さている。表示画面２１１３は、リスト表示２１１２からユーザが２番目の"感覚"２１１５を選択指定した状態である。表示画面２１１３には、ユーザが選択指定した"感覚"２１１５がペーストされている（２１１６参照）。
　表示画面２１２１は、表示文書２０３の選択範囲２０４を選択した後、ユーザが作成文書にペーストを指示した場合の画面である。表示画面２１２１には、選択範囲２０４から抽出した単語の、リスト表示２１１２とは優先順位の異なるリスト表示２１２２が重畳表示されている。表示画面２１２３は、リスト表示２１２２からユーザが２番目の"狭義"２１２５を選択指定した状態である。表示画面２１２３には、ユーザが選択指定した"狭義"２１２５がペーストされている（２１２６参照）。
　このように、文書作成時の他文書あるいは自文書などからのコピー操作において、細かな表示画面から単語などを正確に選択することなく、必要な単語を含む範囲選択を行ない単語を属性としてリスト表示して、所望の単語を選択する。このような処理により、コピー操作の操作性が改善されることになる。属性を適切に設定することで、操作性はより改善される。
　《画面操作処理部の機能構成》
　図２２は、本実施形態に係る画面操作処理部２２１０の機能構成を示すブロック図である。なお、図２２において、図５と同様の機能構成要素には同じ参照番号を付して、説明を省略する。
　表示情報ＤＢ２２７０は、選択範囲を指定される表示文書に加えて、作成中の文書も格納されて、表示制御部５５０によりディスプレイパネル２０２に表示される。文書作成部２２８０は、仮名漢字変換処理やペースト処理などを含む機能を用いて、文書を作成する。
　なお、文書作成部２２８０は、画面操作処理部２２１０に含まれなくてもよい。
　（文書作成部）
　図２３は、本実施形態に係る文書作成部２２８０の機能構成を示すブロック図である。
　文書作成部２２８０は、予測変換制御部２３０１と、ペースト制御部２３０２と、作成文書記憶表示制御部２３０３と、を備える。予測変換制御部２３０１は、ユーザの入力に対して、仮名漢字変換処理やアルファベットからのワード変換処理などの予測変換処理を行なう。ペースト制御部２３０２は、本実施形態に従って、ユーザの範囲指定からのコピー操作に含まれるペースト操作を制御する。作成文書記憶表示制御部２３０３は、作成中の文書の記憶およびディスプレイパネル２０２への表示を制御する。
　（リスト表示生成部または文書作成部）
　図２４は、本実施形態に係るリスト表示生成部５４０または文書作成部２２８０の記憶情報の構成を示す図である。なお、図２４において、図８Ｂと同様の構成要素には同じ参照番号を付して、説明を省略する。
　作成文書記憶部２４１０は、作成中の文書を記憶する。カーソル２４１１は、コピー操作前のカーソル位置を示す。選択範囲の文書記憶部８１０が選択された後のペースト操作において、図２１の表示画面２１１１のように、選択範囲から抽出された単語をリスト表示２１１２される。そして、"感覚"２１１５が指定されると、作成文書に"感覚"２４１２がペーストされる。そして、カーソル２４１１は、カーソル２４１３の位置に移動する。
　（文書作成処理を含む画面操作処理の手順）
　図２５は、本実施形態に係る情報処理装置の文書作成処理を含む画面操作処理の手順を示すフローチャートである。このフローチャートは、プロセッサ４００、あるいは、画面操作処理部４１０のＣＰＵが実行することにより、画面操作処理部４１０の各機能構成部を実現する。ここでは、画面操作処理部４１０のＣＰＵが実行する場合を説明する。なお、図２５において、図１０と同様のステップには同じステップ番号を付して、説明を省略する。
　画面操作処理部４１０は、ステップＳ２５０１において、コピー元の文書を表示する。次に、画面操作処理部４１０は、ステップＳ１００３において、表示文書の範囲を選択し、ステップＳ１００５において、要素抽出処理を実行する。
　次に、画面操作処理部４１０は、ステップＳ２５０３において、ユーザの指示に従い、文書作成画面をディスプレイパネル２０２に表示する。そして、画面操作処理部４１０は、ステップＳ２５０５において、ペースト指示であるか否かを判定する。ペースト指示であれば、画面操作処理部４１０は、ステップＳ１００７において、リスト表示処理を実行する。画面操作処理部４１０は、ステップＳ１００９において、リスト表示からのユーザ選択を待って、ユーザ選択があれば、ステップＳ２５０７において、リスト表示からユーザ選択された文書要素を作成文書のカーソル位置にペーストする。
　一方、ペースト指示でなければ、画面操作処理部４１０は、ステップＳ２５０９において、ユーザによる文書入力か否かを判定する。文書入力であれば、画面操作処理部４１０は、ステップＳ２５１１において、入力した文字を作成文書のカーソル位置に挿入する。
　画面操作処理部４１０は、ステップＳ２５１３において、文書作成の終了か否かを判定し、文書作成の終了でなければ、ステップＳ２５０１に戻って処理を繰り返す。なお、既存の元文書からのコピー処理でなければ、リスト表示はスルーされる。
　本実施形態によれば、必要な文書要素を含む範囲選択を行なってリスト表示し、所望の文書要素を選択してペーストすることにより、コピー操作の操作性が改善される。
　［第７実施形態］
　次に、本発明の第７実施形態に係る情報処理装置について説明する。本実施形態に係る情報処理装置は、上記第２実施形態から第６実施形態と比べると、文書作成時の入力文字の変換処理に応じて、表示文書の選択範囲から抽出した文書要素を優先的に予測変換リスに表示する点で異なる。その他の構成および動作は、第２実施形態から第６実施形態と同様であるため、同じ構成および動作については同じ符号を付してその詳しい説明を省略する。
　（本実施形態のリスト表示）
　図２６は、本実施形態に係る情報処理装置における選択候補のリスト表示（予測変換リスト）を説明する図である。図２６では、選択範囲から単語を属性とする文書要素を抽出してリスト表示する例を説明するが、他の属性あるいは複数の属性を有する文書要素の抽出やリスト表示も同様である。なお、図２６において、図２および図３と同様の構成要素には同じ参照番号を付している。
　図２６の左図は、表示文書２０３の選択範囲２０４を示している。図２６の右の表示画面２６１１、２６１３、２６２１および２１２３は、それぞれ文書作成中の画面である。
　表示画面２６１１は、表示文書２０３の選択範囲２０４を選択した後、ユーザが作成文書に"か"を入力した場合の画面である。表示画面２６１１には、選択範囲２０４から抽出した"か"あるいは"が"を先頭に含む文書要素のリスト表示２６１２が重畳表示さている。表示画面２６１１では、"か"を含む単語から文節、そして"が"を含む単語の順にリスト表示されている。表示画面２６１３は、リスト表示２６１２からユーザが２番目の"感覚や"２６１５を選択指定した状態である。表示画面２６１３には、ユーザが選択指定した"感覚が"２６１５に予測変換されている（２６１６参照）。
　表示画面２６２１は、表示文書２０３の選択範囲２０４を選択した後、ユーザが作成文書に"か"を入力した場合の画面である。表示画面２６２１には、選択範囲２０４から抽出した"か"あるいは"が"を先頭に含む文書要素の、リスト表示２６１２とは優先順位の異なるリスト表示２６２２が重畳表示されている。表示画面２６２１では、"か"を含む文節から単語、そして"が"を含む単語の順にリスト表示されている。表示画面２６２３は、リスト表示２６２２からユーザが１番目の"感覚や表象の..."２６２５を選択指定した状態である。表示画面２６２３には、ユーザが選択指定した"感覚や表象の..."２６２５に予測変換されている（２６２６参照）。
　このように、文書作成時の予測変換において、ユーザが作成している文書あるいは関連する文書から範囲選択を行なっておけば、入力された文字"か"に対応して単語を属性としてリスト表示して、所望の単語を選択して予測変換できる。このような処理により、予測変換操作の操作性が改善されることになる。入力文字と抽出する文書要素との関係、あるいは、属性を適切に設定することで、操作性はより改善される。
　（リスト表示生成部または文書作成部）
　図２７は、本実施形態に係るリスト表示生成部５４０または文書作成部２２８０の記憶情報の構成を示す図である。なお、図２７において、図８Ｂまたは図２４と同様の構成要素には同じ参照番号を付して、説明を省略する。
　作成文書記憶部２４１０は、作成中の文書を記憶する。カーソル２７１１は、文字入力操作前のカーソル位置を示す。選択範囲の文書記憶部８１０が選択された後の文字入力操作において、"か"が入力されると、図２６の表示画面２６１１のように、選択範囲から抽出された単語をリスト表示２６１２される。そして、"感覚や"２６１５が指定されると、作成文書に"感覚や"２６１２が予測変換されてペーストされる。なお、図２７には"感覚や"が示されているが、説明上、"感"は不図示となっている。そして、カーソル２７１１は、カーソル２７１３の位置に移動する。
　また、リスト記憶部２７２０は、入力文字"か"または"が"を先頭に含む変換候補２７２１と、リスト表示の優先順位２７２２と、文書要素選択部８０３が選択したことを示す選択フラグ１３２３と、を記憶する。ここで、変換候補２７２１は、文書要素抽出部８０１が属性に基づいて文書記憶部８１０の文書から抽出した抽出候補２７２５と、変換辞書に基づく通常候補２７２６とを含む。そして、抽出候補２７２５が優先的にリストに表示される。優先順位２７２２において、"－"はより高い優先順位を示している。なお、図２７には図示しなかったが、図８Ｂと同様に各変換候補２７２１に対応して属性を記憶してもよい。
　抽出候補２７２５は、本文書作成において予測変換に有効であるが、以降の処理においては返って邪魔になるので、処理後は削除されるのが望ましい。
　（文書作成処理を含む画面操作処理の手順）
　図２８は、本実施形態に係る情報処理装置の文書作成処理を含む画面操作処理の手順を示すフローチャートである。このフローチャートは、プロセッサ４００、あるいは、画面操作処理部４１０のＣＰＵが実行することにより、画面操作処理部４１０の各機能構成部を実現する。ここでは、画面操作処理部４１０のＣＰＵが実行する場合を説明する。なお、図２８において、図１０または図２５と同様のステップには同じステップ番号を付して、説明を省略する。
　画面操作処理部４１０は、ステップＳ２８０１において、作成文書への文字入力か否かを判定する。文字入力ならば、画面操作処理部４１０は、ステップＳ２８０３において、コピー元文書から属性に基づいて候補要素を抽出して、候補文字の上位にリスト表示する。
　そして、画面操作処理部４１０は、ステップＳ２８０５において、抽出要素を変換候補から削除する。
　本実施形態によれば、ユーザが作成している文書あるいは関連する文書から範囲選択を行なっておけば、入力文字に対応して選択範囲の文書要素をリスト表示して、所望の文書要素を選択して予測変換できる。したがって、予測変換操作の操作性が改善されることになる。入力文字と抽出する文書要素との関係、あるいは、属性を適切に設定することで、操作性はより改善される。
　［他の実施形態］
　上記実施形態においては、ユーザがタッチパネルを用いて入力または指示するスマートフォンやタブレットにおける表示文書からの文書要素の選択について説明したが、本発明の技術の適用は、スマートフォンやタブレットに限定されない。ユーザがタッチパネルを用いて入力または指示する他の情報処理装置、さらに、タッチパネルに限定されず、キーボードやポインティングデバイスを用いた表示文書からの文書要素の選択に対しても適用できる。
　また、実施形態を参照して本願発明を説明したが、本願発明は上記実施形態に限定されるものではない。本願発明の構成や詳細には、本願発明のスコープ内で当業者が理解し得る様々な変更をすることができる。また、それぞれの実施形態に含まれる別々の特徴を如何様に組み合わせたシステムまたは装置も、本発明の範疇に含まれる。
　また、本発明は、複数の機器から構成されるシステムに適用されてもよいし、単体の装置に適用されてもよい。さらに、本発明は、実施形態の機能を実現する情報処理プログラムが、システムあるいは装置に直接あるいは遠隔から供給される場合にも適用可能である。したがって、本発明の機能をコンピュータで実現するために、コンピュータにインストールされるプログラム、あるいはそのプログラムを格納した媒体、そのプログラムをダウンロードさせるＷＷＷ(World Wide Web)サーバも、本発明の範疇に含まれる。特に、少なくとも、上述した実施形態に含まれる処理ステップをコンピュータに実行させるプログラムを格納した非一時的コンピュータ可読媒体（non-transitory computer readable medium）は本発明の範疇に含まれる。
　この出願は、２０１４年３月２０日に出願された日本出願特願２０１４－０５９２３６を基礎とする優先権を主張し、その開示の全てをここに取り込む。

Claims (10)

  1. 　文書中の選択範囲に含まれる文書要素を、該文書要素の属性に基づいて抽出する抽出手段と、
    　前記抽出手段による抽出結果を選択可能にリスト表示する表示手段と、
    　を備える情報処理装置。
  2. 　前記文書要素は、前記選択範囲に含まれる単語、文節、文または段落を属性とする文書構成要素である請求項１に記載の情報処理装置。
  3. 　前記文書要素は、前記選択範囲に含まれる名前、場所、電話番号またはメールアドレスを属性とする情報要素である請求項１または２に記載の情報処理装置。
  4. 　前記文書要素の属性は、漢字、仮名、カタカナ、アルファベット、数字または記号を含む請求項１乃至３のいずれか１項に記載の情報処理装置。
  5. 　前記表示手段は、ユーザまたはアプリケーションが設定する優先順位に従って、前記抽出結果の文書要素をリスト表示する請求項１乃至４のいずれか１項に記載の情報処理装置。
  6. 　前記抽出手段が抽出すべき前記属性を設定する設定手段を、さらに備える請求項１乃至５のいずれか１項に記載の情報処理装置。
  7. 　前記抽出手段は、ユーザによる前記選択範囲の所定位置へのペースト操作に応じて、前記文書要素を抽出する請求項１乃至６のいずれか１項に記載の情報処理装置。
  8. 　前記表示手段は、文書入力への予測変換処理に応じて、前記抽出結果の前記文書要素を優先的に予測変換リストに表示する請求項１乃至７のいずれか１項に記載の情報処理装置。
  9. 　文書中の選択範囲に含まれる文書要素を、該文書要素の属性に基づいて抽出する抽出ステップと、
    　前記抽出ステップにおける抽出結果を選択可能にリスト表示する表示ステップと、
    　を含む情報処理方法。
  10. 　文書中の選択範囲に含まれる文書要素を、該文書要素の属性に基づいて抽出する抽出ステップと、
    　前記抽出ステップにおける抽出結果を選択可能にリスト表示する表示ステップと、
    　をコンピュータに実行させる情報処理プログラム。
PCT/JP2014/084614 2014-03-20 2014-12-26 情報処理装置、情報処理方法および情報処理プログラム WO2015141101A1 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
US15/127,318 US10067921B2 (en) 2014-03-20 2014-12-26 Information processing apparatus, information processing method, and information processing program
CN201480077138.XA CN106104520B (zh) 2014-03-20 2014-12-26 信息处理设备、信息处理方法和存储介质
US16/118,925 US20190012301A1 (en) 2014-03-20 2018-08-31 Information processing apparatus, information processing method, and information processing program

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2014-059236 2014-03-20
JP2014059236 2014-03-20

Related Child Applications (2)

Application Number Title Priority Date Filing Date
US15/127,318 A-371-Of-International US10067921B2 (en) 2014-03-20 2014-12-26 Information processing apparatus, information processing method, and information processing program
US16/118,925 Continuation US20190012301A1 (en) 2014-03-20 2018-08-31 Information processing apparatus, information processing method, and information processing program

Publications (1)

Publication Number Publication Date
WO2015141101A1 true WO2015141101A1 (ja) 2015-09-24

Family

ID=54144096

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2014/084614 WO2015141101A1 (ja) 2014-03-20 2014-12-26 情報処理装置、情報処理方法および情報処理プログラム

Country Status (3)

Country Link
US (2) US10067921B2 (ja)
CN (1) CN106104520B (ja)
WO (1) WO2015141101A1 (ja)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106033298A (zh) * 2016-05-03 2016-10-19 海致网络技术（北京）有限公司 一种用于数据提取的方法与系统
CN106909296A (zh) * 2016-06-07 2017-06-30 阿里巴巴集团控股有限公司 数据的提取方法、装置及终端设备

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6430793B2 (ja) * 2014-11-26 2018-11-28 京セラ株式会社 電子機器
US9858349B2 (en) * 2015-02-10 2018-01-02 Researchgate Gmbh Online publication system and method
US10282424B2 (en) 2015-05-19 2019-05-07 Researchgate Gmbh Linking documents using citations
CN104966708B (zh) 2015-07-01 2018-06-12 英特尔公司 半导体封装结构
US10691893B2 (en) * 2016-02-29 2020-06-23 International Business Machines Corporation Interest highlight and recommendation based on interaction in long text reading
JP7135399B2 (ja) * 2018-04-12 2022-09-13 富士通株式会社 特定プログラム、特定方法および情報処理装置

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0232455A (ja) * 1988-07-22 1990-02-02 Hitachi Ltd 項目抽出方式
JP2007272859A (ja) * 2005-08-30 2007-10-18 Zoo Corp 情報検索支援プログラム、情報検索支援機能を有するコンピュータ、サーバー・コンピュータ、プログラム格納媒体
JP2007272739A (ja) * 2006-03-31 2007-10-18 Nec Corp 文字入力変換装置、文字入力変換方法、プログラム
JP2008070942A (ja) * 2006-09-12 2008-03-27 Pioneer Electronic Corp メモページ情報登録システム、サーバ装置及びプログラム
JP2010244126A (ja) * 2009-04-01 2010-10-28 Kddi Corp 小型情報端末向け注目語推定方式および検索方式

Family Cites Families (32)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH05101052A (ja) * 1991-10-04 1993-04-23 Fuji Xerox Co Ltd 文書作成支援装置
JPH0785066A (ja) * 1993-09-10 1995-03-31 Matsushita Electric Ind Co Ltd 画像検索装置
JP2960340B2 (ja) * 1995-10-20 1999-10-06 富士ゼロックス株式会社 データ検索方法及び装置
US6003046A (en) * 1996-04-15 1999-12-14 Sun Microsystems, Inc. Automatic development and display of context information in structured documents on the world wide web
JP3579204B2 (ja) * 1997-01-17 2004-10-20 富士通株式会社 文書要約装置およびその方法
JP2001051997A (ja) * 1999-08-11 2001-02-23 Sony Corp 文書データ作成装置、文書データ作成方法、及び記録媒体
US6986324B2 (en) * 2001-10-19 2006-01-17 Hydropac/Lab Products, Inc. Fluid delivery valve system and method
WO2004001623A2 (en) * 2002-03-26 2003-12-31 University Of Southern California Constructing a translation lexicon from comparable, non-parallel corpora
US7254268B2 (en) * 2002-04-11 2007-08-07 Arcsoft, Inc. Object extraction
US7555711B2 (en) * 2005-06-24 2009-06-30 Hewlett-Packard Development Company, L.P. Generating a text layout boundary from a text block in an electronic document
CN100585591C (zh) 2005-07-15 2010-01-27 国际商业机器公司 用于实现交互式浏览的系统和方法
US20070038926A1 (en) * 2005-08-09 2007-02-15 Naohiro Harima Method for automatically embedding TabIndex attributes
JP2011181109A (ja) 2005-08-30 2011-09-15 Zoo Corp 情報検索支援プログラム、情報検索支援機能を有するコンピュータ、サーバー・コンピュータ、プログラム格納媒体
US7818810B2 (en) * 2005-10-07 2010-10-19 International Business Machines Corporation Control of document content having extraction permissives
EP1977335A4 (en) * 2006-01-27 2012-04-18 Unz Org Llc PRESENTATION OF DIGITAL CONTENT IN A NETWORK
US7810021B2 (en) * 2006-02-24 2010-10-05 Paxson Dana W Apparatus and method for creating literary macramés
JP4897520B2 (ja) * 2006-03-20 2012-03-14 株式会社リコー 情報配信システム
JP2008083856A (ja) * 2006-09-26 2008-04-10 Toshiba Corp 情報処理装置、情報処理方法及び情報処理プログラム
US8468244B2 (en) * 2007-01-05 2013-06-18 Digital Doors, Inc. Digital information infrastructure and method for security designated data and with granular data stores
US9015301B2 (en) * 2007-01-05 2015-04-21 Digital Doors, Inc. Information infrastructure management tools with extractor, secure storage, content analysis and classification and method therefor
JP2008192032A (ja) * 2007-02-07 2008-08-21 Fuji Xerox Co Ltd 文書処理装置、文書処理方法、プログラム
US8280885B2 (en) * 2007-10-29 2012-10-02 Cornell University System and method for automatically summarizing fine-grained opinions in digital text
JP4998219B2 (ja) * 2007-11-09 2012-08-15 富士通株式会社 帳票認識プログラム、帳票認識装置および帳票認識方法
US20100030765A1 (en) * 2008-07-30 2010-02-04 Yahoo! Inc. Automatic generation of attribution information for research documents
JP4935869B2 (ja) 2009-08-07 2012-05-23 カシオ計算機株式会社 電子機器及びプログラム
US9047283B1 (en) * 2010-01-29 2015-06-02 Guangsheng Zhang Automated topic discovery in documents and content categorization
JP5185402B2 (ja) * 2011-01-11 2013-04-17 株式会社東芝 文書検索装置、文書検索方法、及び文書検索プログラム
JP5810792B2 (ja) * 2011-09-21 2015-11-11 富士ゼロックス株式会社 情報処理装置及び情報処理プログラム
JP2013186720A (ja) 2012-03-08 2013-09-19 Sharp Corp 文字列選択装置
US9443005B2 (en) * 2012-12-14 2016-09-13 Instaknow.Com, Inc. Systems and methods for natural language processing
US20140201620A1 (en) * 2013-01-15 2014-07-17 Webezo Inc. Method and system for intelligent web site information aggregation with concurrent web site access
US9298689B2 (en) * 2013-05-02 2016-03-29 International Business Machines Corporation Multiple template based search function

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0232455A (ja) * 1988-07-22 1990-02-02 Hitachi Ltd 項目抽出方式
JP2007272859A (ja) * 2005-08-30 2007-10-18 Zoo Corp 情報検索支援プログラム、情報検索支援機能を有するコンピュータ、サーバー・コンピュータ、プログラム格納媒体
JP2007272739A (ja) * 2006-03-31 2007-10-18 Nec Corp 文字入力変換装置、文字入力変換方法、プログラム
JP2008070942A (ja) * 2006-09-12 2008-03-27 Pioneer Electronic Corp メモページ情報登録システム、サーバ装置及びプログラム
JP2010244126A (ja) * 2009-04-01 2010-10-28 Kddi Corp 小型情報端末向け注目語推定方式および検索方式

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106033298A (zh) * 2016-05-03 2016-10-19 海致网络技术（北京）有限公司 一种用于数据提取的方法与系统
CN106909296A (zh) * 2016-06-07 2017-06-30 阿里巴巴集团控股有限公司 数据的提取方法、装置及终端设备
WO2017211202A1 (zh) * 2016-06-07 2017-12-14 阿里巴巴集团控股有限公司 数据的提取方法、装置及终端设备
KR20190014082A (ko) * 2016-06-07 2019-02-11 알리바바 그룹 홀딩 리미티드 데이터를 추출하는 방법, 장치 및 단말 장치
EP3467633A4 (en) * 2016-06-07 2019-06-12 Alibaba Group Holding Limited METHOD, DEVICE, AND TERMINAL DEVICE FOR EXTRACTING DATA
JP2019522847A (ja) * 2016-06-07 2019-08-15 アリババ グループ ホウルディング リミテッド データを抽出するための方法、デバイス及び端末デバイス
TWI686717B (zh) * 2016-06-07 2020-03-01 香港商阿里巴巴集團服務有限公司 資料的提取方法、裝置及終端設備
KR102267849B1 (ko) 2016-06-07 2021-06-24 어드밴스드 뉴 테크놀로지스 씨오., 엘티디. 데이터를 추출하는 방법, 장치 및 단말 장치
US11175820B2 (en) 2016-06-07 2021-11-16 Advanced New Technologies Co., Ltd. Method, device, and terminal device for extracting data

Also Published As

Publication number Publication date
US20170147546A1 (en) 2017-05-25
US20190012301A1 (en) 2019-01-10
CN106104520B (zh) 2019-04-26
US10067921B2 (en) 2018-09-04
CN106104520A (zh) 2016-11-09

Similar Documents

Publication Publication Date Title
WO2015141101A1 (ja) 情報処理装置、情報処理方法および情報処理プログラム
US20130249832A1 (en) Mobile terminal
JP2013520878A (ja) 構成可能多言語キーボード
JP2006338667A (ja) ユーザ−マシン間通信方法、装置、インターフェイス・プロセッサ、及びプログラム
KR102337072B1 (ko) 이모티콘을 생성하는 방법 및 이를 지원하는 전자장치
KR20160060110A (ko) 온스크린 키보드에 대한 빠른 작업
CN109117463B (zh) 文本拼音标注方法、电子设备、存储介质
EP2804087A2 (en) Terminal and method for editing text using the same
JP6163839B2 (ja) 電子機器および複写制御プログラム
CN104133815A (zh) 输入和搜索的方法及系统
JP2014115894A (ja) 表示装置
EP2990925A1 (en) Apparatus and method for displaying a virtual keyboard
CN108052212A (zh) 一种输入文字的方法、终端及计算机可读介质
KR20170132643A (ko) 문자 디스플레이 방법 및 그 장치
CN106168880A (zh) 一种输入控制的方法及终端
WO2015141093A1 (ja) 情報処理装置、情報処理方法および情報処理プログラム
KR102263607B1 (ko) 한자 입력 장치 및 방법
CN101169686A (zh) 一种笔画输入法
JP2015191482A (ja) 電子機器、方法及びプログラム
US20150347004A1 (en) Indic language keyboard interface
US20160292140A1 (en) Associative input method and terminal
JP4999014B2 (ja) 拡大縮小可能フォントをサポートするテキストエディタを用いたオブジェクトの挿入
JP6227133B2 (ja) 記号イメージ検索サービス提供方法及びこれに用いる記号イメージ検索用サーバ
KR102138434B1 (ko) 문자 입력 방법
JP5563706B1 (ja) ドキュメントファイル生成装置、ドキュメントファイル生成方法およびドキュメントファイル生成プログラム

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 14886624

Country of ref document: EP

Kind code of ref document: A1

WWE Wipo information: entry into national phase

Ref document number: 15127318

Country of ref document: US

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 14886624

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: JP