WO2016129121A1 - プレゼンテーション支援装置、プレゼンテーション支援方法及びプレゼンテーション支援プログラム - Google Patents
プレゼンテーション支援装置、プレゼンテーション支援方法及びプレゼンテーション支援プログラム Download PDFInfo
- Publication number
- WO2016129121A1 WO2016129121A1 PCT/JP2015/054035 JP2015054035W WO2016129121A1 WO 2016129121 A1 WO2016129121 A1 WO 2016129121A1 JP 2015054035 W JP2015054035 W JP 2015054035W WO 2016129121 A1 WO2016129121 A1 WO 2016129121A1
- Authority
- WO
- WIPO (PCT)
- Prior art keywords
- marker
- display
- area
- unit
- displayed
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Ceased
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/16—Sound input; Sound output
Definitions
- the present invention relates to a presentation support device, a presentation support method, and a presentation support program.
- a display device As an example of a technology that supports presentation, there is a technique that presents a presenter or a listener with a part that the presenter is explaining. For example, a display device has been proposed that aims to suppress skipping of a document. This display device recognizes a phrase uttered by a speaker, identifies a read-out portion of a document being displayed on a display panel based on the recognized phrase, and displays a display state of the identified portion as a first state. The display state is changed to a second display state different from the first display state, for example, highlight display such as blinking.
- speech recognition is used to obtain a phrase uttered by a speaker.
- a portion that is not being explained by the speaker is highlighted as a result of misrecognition, and as a result, an incorrect portion may be highlighted for the listener.
- the display device may interfere with the progress of the presentation as a result of misleading the attention of the listener.
- an object of the present invention is to provide a presentation support apparatus, a presentation support method, and a presentation support program that can prevent an audience from highlighting an incorrect part.
- An aspect of the presentation support apparatus includes an acquisition unit that acquires a distance relationship between a screen on which a display device displays a document file, a presenter, and an audience, and an area included in a page of the document file that is displayed on the screen from the distance relationship.
- a setting unit that sets a display size of a marker that activates the highlight display relating to, a determination unit that determines a region that is a candidate for highlight display among regions included in a page displayed on the display device, and the display
- a marker display unit that displays the marker in association with a region that is a candidate for highlight display according to a size.
- FIG. 1 is a diagram illustrating the configuration of the presentation support system according to the first embodiment.
- FIG. 2 is a block diagram illustrating a functional configuration of the presentation support apparatus according to the first embodiment.
- FIG. 3 is a diagram illustrating an example of marker setting data.
- FIG. 4 is a diagram illustrating an example of a slide screen.
- FIG. 5 is a diagram illustrating an example of a slide screen.
- FIG. 6 is a flowchart illustrating the procedure of the time setting process according to the first embodiment.
- FIG. 7 is a flowchart illustrating the procedure of the marker setting process according to the first embodiment.
- FIG. 8 is a flowchart illustrating a procedure of marker display processing according to the first embodiment.
- FIG. 1 is a diagram illustrating the configuration of the presentation support system according to the first embodiment.
- FIG. 2 is a block diagram illustrating a functional configuration of the presentation support apparatus according to the first embodiment.
- FIG. 3 is a diagram illustrating an example of marker setting data.
- FIG. 9 is a flowchart illustrating a procedure of highlight display processing according to the first embodiment.
- FIG. 10 is a diagram illustrating a functional configuration of the presentation support apparatus 20 according to the second embodiment.
- FIG. 11 is a flowchart of the extracted word data generation process according to the second embodiment.
- FIG. 12 is a flowchart illustrating the procedure of the speech recognition process according to the second embodiment.
- FIG. 13 is a flowchart illustrating a procedure of marker display processing according to the second embodiment.
- FIG. 14 is a diagram illustrating a hardware configuration example of a computer that executes the presentation support program according to the first embodiment and the second embodiment.
- FIG. 1 is a diagram illustrating the configuration of the presentation support system according to the first embodiment.
- the presentation support system 1 shown in FIG. 1 provides a presentation support service that highlights a portion of the presentation screen on which a document file is displayed on the display device 5 that is presumed to be explained by the presenter.
- the presentation support system 1 sets the display size of the marker that activates the highlight display based on the distance relationship between the screen on which the slide is displayed as an example of the presentation screen, the presenter, and the listener, and highlights the highlight. Markers are displayed in association with regions that are candidates for display.
- the marker can be displayed in a size smaller than the highlight display, and the highlight display can be called in a state where the presenter can visually recognize the presentation participants but is difficult for the listener to view.
- the presenter recognizes the marker, whether or not the highlight display is appropriate can be selected. Accordingly, it is possible to suppress a situation in which a wrong place for the listener, for example, a place where the presenter is not explaining is highlighted.
- the presentation support system 1 accommodates a microphone 3, a display device 5, an input device 7, and a presentation support device 10.
- the peripheral devices such as the microphone 3, the display device 5 and the input device 7 and the presentation support device 10 are connected by wire or wirelessly.
- the microphone 3 is a device that converts sound into an electrical signal, and is sometimes called a microphone.
- the microphone 3 can be attached to a presenter who performs a presentation.
- a headset-type or tie-pin type microphone can be attached to a predetermined position of the presenter's body or clothes, or a hand-type microphone can be carried by the presenter.
- the microphone 3 can also be installed at a predetermined position in a range where the utterance of the presenter can be collected.
- the microphone 3 may be an attachment type or a stationary type microphone.
- a microphone having any type of directivity can be adopted as the microphone 3, but sounds other than the presenter's utterance, for example, the utterance of the listener and the noise such as noise are collected.
- the sensitivity of the microphone can be limited to the speaking direction of the presenter.
- the microphone 3 can employ any conversion method such as a dynamic type, an electret capacitor type, or a capacitor type.
- the analog signal obtained by collecting sound in the microphone 3 is converted into a digital signal and then input to the presentation support apparatus 10.
- the display device 5 is a device that displays various types of information.
- the display device 5 may be a liquid crystal display or an organic EL (electroluminescence) display that realizes display by light emission, or a projector that realizes display by projection.
- the number of installed display devices 5 is not necessarily limited to one, and a plurality of display devices 5 may be provided.
- a projector and a screen that displays an image projected by the projector are mounted as a shared display device that is viewed by both presenters and listeners who are participants of the presentation.
- the display device 5 displays a presentation screen according to an instruction from the presentation support device 10 as an example.
- the display device 5 displays a slide of a document file opened by presentation software that operates on the presentation support device 10.
- the display device 5 can display any slide specified by the presenter via the input device 7 among the slides included in the document file, and the slide show function of the presentation software is set to the ON state.
- the slides included in the document file can be switched and displayed in the order in which the slides are created.
- the input device 7 is a device that receives instruction inputs for various types of information.
- a laser pointer indicating the position on the screen projected on the screen can be mounted as the input device 7. That is, among laser pointers, there is also a laser pointer with a remote control function provided with an operation unit such as various buttons for advancing and returning a slide page.
- the operation unit of the laser pointer with a remote control function can be used as the input device 7.
- a predetermined part of the screen or presenter was imaged in order to adopt a mouse or keyboard as the input device 7, or to sense the position of the pointer pointed by the laser pointer, detect the gaze of the presenter, or recognize the gesture.
- An image sensor that inputs an image may be employed as the input device 7.
- the input device 7 may be a touch sensor bonded on the liquid crystal display.
- the input device 7 accepts a specification of a document file to be executed by the presentation software on the presentation support device 10, an operation of advancing a slide page, an operation of returning a slide page, and the like.
- the operation accepted through the input device 7 in this way is output to the presentation support device 10.
- the presentation support apparatus 10 is a computer on which presentation software is executed.
- the presentation support apparatus 10 may employ an information processing apparatus such as a desktop or notebook personal computer.
- the presentation support apparatus 10 can employ not only a stationary terminal such as the personal computer but also various portable terminal apparatuses.
- a stationary terminal such as the personal computer
- portable terminal apparatuses for example, as an example of the mobile terminal device, mobile communication terminals such as smartphones, mobile phones and PHS (Personal Handyphone System), and slate terminals such as PDA (Personal Digital Assistants) are included in the category.
- PHS Personal Handyphone System
- slate terminals such as PDA (Personal Digital Assistants) are included in the category.
- the presentation support apparatus 10 provides the above-described presentation support service in a stand-alone manner that independently executes the above-described presentation software without depending on external resources.
- the presentation support service is not limited to the implementation provided in a stand-alone manner.
- FIG. 2 is a block diagram illustrating a functional configuration of the presentation support apparatus 10 according to the first embodiment.
- the presentation support apparatus 10 includes an input / output I / F (InterFace) unit 11, a storage unit 13, and a control unit 15.
- I / F InterFace
- FIG. 2 shows a solid line representing the input / output relationship of data, but FIG. 2 shows only a minimum part for convenience of explanation.
- the input / output of data related to each processing unit is not limited to the illustrated example, and the input / output of data other than those illustrated, for example, between the processing unit and the processing unit, between the processing unit and the data, and between the processing unit and the external Data input / output between devices may be performed.
- the input / output I / F unit 11 is an interface for performing input / output with peripheral devices such as the microphone 3, the display device 5, and the input device 7.
- the input / output I / F unit 11 outputs various operations input from the input device 7 to the control unit 15. Further, the input / output I / F unit 11 outputs the slide image data output from the control unit 15 to the display device 5 or instructs to add a marker to a predetermined area on the slide output from the control unit 15. Or a highlight instruction for a region included in the slide or a cancel instruction thereof is output to the display device 5. Further, the input / output I / F unit 11 outputs the audio data input from the microphone 3 to the control unit 15.
- the storage unit 13 is a device that stores data used for various programs such as an OS (Operating System) and presentation software executed by the control unit 15 and application programs.
- OS Operating System
- presentation software executed by the control unit 15 and application programs.
- the storage unit 13 is implemented as a main storage device in the presentation support apparatus 10.
- various semiconductor memory elements such as RAM (Random Access Memory) and flash memory can be employed for the storage unit 13.
- the storage unit 13 can also be implemented as an auxiliary storage device. In this case, HDD (Hard Disk Drive), optical disk, SSD (Solid State Drive), etc. can be adopted.
- the storage unit 13 stores document data 13a, explanation time data 13b, and marker setting data 13c as an example of data used in a program executed by the control unit 15.
- the explanation time data 13b and the marker setting data 13c other than the document data 13a will be explained together with the explanation of the control unit 15.
- the storage unit 13 also includes other electronic data, for example, definition data in which the correspondence between the positions of the areas and the markers, such as the shape and color of the markers, is defined, and the highlight display. Definition data and the like can also be stored.
- Document data 13a is data relating to a document.
- a document file in which one or a plurality of slides are created using presentation software can be adopted as the document data 13a.
- Such slides can be imported with text and graphics as well as content created by other application programs. For example, you can import documents created with word processing software, tables and graphs created with spreadsheet software, images and movies taken with an imaging device, and images and movies edited with image editing software. And can be imported.
- meta information including a character string such as an explanatory word or a description of the content is added to the content other than the text before the presentation is started. Can do.
- the control unit 15 has an internal memory for storing various programs and control data, and executes various processes using these.
- control unit 15 is implemented as a central processing unit, a so-called CPU (Central Processing Unit).
- CPU Central Processing Unit
- the control unit 15 is not necessarily implemented as a central processing unit, and may be implemented as an MPU (Micro Processing Unit) or a DSP (Digital Signal Processor). Further, the control unit 15 can be realized by hard wired logic such as ASIC (Application Specific Integrated Circuit) or FPGA (Field Programmable Gate Array).
- ASIC Application Specific Integrated Circuit
- FPGA Field Programmable Gate Array
- the control unit 15 virtually implements the following processing unit by executing various programs.
- the control unit 15 includes a time setting unit 15 a, a condition acquisition unit 15 b, a marker setting unit 15 c, an area determination unit 15 d, and a display control unit 17.
- the time setting unit 15a is a processing unit that sets a scheduled time used for explaining each area of the slide included in the document file.
- the scheduled time used for explaining the area on the slide may be referred to as “explanation time”.
- the time setting unit 15a can automatically start the process of setting the above explanation time or can be started by manual setting. For example, when starting automatically, when the presentation software closes with the document file stored in the storage unit 13, or when the document file is overwritten and stored in the storage unit 13 while editing the document file via the presentation software. , Can start the process.
- the processing can be activated when an instruction to execute presentation pre-processing is received via the input device 7. In any case, the processing is started by reading out the document file corresponding to the save or execution instruction from the document files included in the document data 13a stored in the storage unit 13.
- the time setting unit 15a is a document file that has been saved among the document files included in the document data 13a stored in the storage unit 13, or a document that has received an instruction to execute the pre-processing of the presentation. Read the file.
- the time setting unit 15a can also acquire a document file from an auxiliary storage device such as a hard disk or an optical disk, or a removable medium such as a memory card or a USB (Universal Serial Bus) memory.
- the time setting unit 15a can also obtain a document file by receiving it from an external device via a network.
- the time setting unit 15a divides the slide included in the previously read document file into a plurality of areas. For example, the time setting unit 15a divides the slide in units of one sentence, line, paragraph, or the like. In this case, the time setting unit 15a scans the character string included in the slide, detects a delimiter character corresponding to a space, a punctuation point, or a line feed, and sets the delimiter character as the boundary of the region. The time setting unit 15a divides the character string included in the slide before and after such a boundary. Thus, the slide is divided into a plurality of areas for each delimiter character. After that, the time setting unit 15a assigns an index for identifying the area to the area obtained by dividing the slide.
- the slide may be divided by manual setting by designating the boundary of the area via the input device 7 or the like.
- the time setting unit 15a selects one area from the plurality of areas included in the slide. Subsequently, the time setting unit 15a counts the character strings included in the previously selected area, and sets the explanation time for the area according to the number of characters. For example, the time setting unit 15a can set a longer explanation time as the number of characters in the region increases. As an example, the time setting unit 15a can calculate the description time for each area by multiplying the required description time for each character, for example, the required description time set for each character by the number of characters in the area. Thereafter, the time setting unit 15a repeatedly executes the setting of the above explanation time until all the areas included in the slide are selected.
- the case where the explanation time of the area is associated with the area is illustrated as an example.
- the elapsed time from the start of the presentation can be associated with the area as the start time of the explanation of the area.
- the cumulative value of the explanation time of the region up to the previous region is associated as the explanation start time.
- the time setting unit 15a registers the explanation time data 13b in which the area index and the explanation time are associated with each other in the storage unit 13. Note that the above-described setting of the explanation time is executed over all slides included in the document file.
- the condition acquisition unit 15b is a processing unit that acquires conditions used for setting the display size of the marker.
- condition acquisition unit 15b can start processing at an arbitrary timing in a period from when the generation of the explanation time data 13b is started by the time setting unit 15a to when a presentation start instruction is received.
- the condition acquisition unit 15b is either a document file that has been saved by presentation software, a document file that has received an instruction to execute presentation preprocessing, or a document file that has received an instruction to start a presentation.
- the identification information of the venue where the presentation is held such as a conference room or a hall, is acquired. By using such venue identification information as a search key, information such as the screen size, the distance between the presenter and the screen, and the distance between the listener and the screen can be automatically specified by searching or the like.
- the venue identification information includes the equipment available at the venue, for example, the model number of the projector installed at the venue and the product number of the screen, and the seat arrangement at the venue, for example, from the screen where the projector displays the slide to the place where the presenter is located May be managed as venue information in a state associated with the distance between the screen and the distance from the screen to the auditorium.
- the condition acquisition unit 15b obtains product information on the screen (not shown) such as the screen size and the applicable projector model number. By referring to the information associated with the product number of the screen, the size of the screen associated with the product number is retrieved. As a result, the size of the screen on which the display device 5 projects the slide is acquired.
- the condition acquisition unit 15b can use it as the distance between the presenter and the screen.
- the distance from the screen to the auditorium can be searched, as an example, the distance from the screen to the nearest auditorium is used as the distance between the listener and the screen, or as another example, from the screen to each auditorium.
- a predetermined statistical value for example, the mode value, the median value, or the average value can be used as the distance between the listener and the screen.
- the condition acquisition unit 15b acquires the size of the slide document included in the document file by referring to the property of the document file.
- the screen size or slide document size is acquired for each document file.
- the process of acquiring the screen or slide document size is omitted. You can also
- the visual acuity information of at least one of the presenter and the audience can be acquired.
- the average value of the visual acuity of all the audience can be acquired as the visual acuity information, or the visual acuity of the audience located in the front row is acquired as the visual acuity information from the screen.
- the marker setting unit 15c is a processing unit that sets the display size of the marker that activates the highlight display related to the area included in the slide displayed on the screen from the conditions acquired by the condition acquisition unit 15b.
- the marker setting unit 15c includes, among the marker display sizes defined in the marker setting data 13c, the condition acquisition unit when various conditions used for marker setting are acquired by the condition acquisition unit 15b.
- the display size corresponding to the size of the screen acquired by 15b, the size of the slide document, and the distance relationship between the screen, the presenter, and the listener is set as the display size of the marker used for highlight display of the slide.
- the marker setting data 13c corresponds to the marker display size according to the screen size of the display device 5, the size of the slide document, the distance between the presenter and the screen, and the distance between the listener and the screen.
- the attached data can be adopted.
- the marker is rectangular and the length (mm) of one side is defined as the size is illustrated, but the figure employed as the marker may be any shape.
- the diameter and radius may be defined, and in the case of other shapes, the width and height may be defined.
- the marker is not limited to a graphic, and a symbol or a character can be employed as the marker.
- one side of the marker that can be visually recognized by the presenter but is difficult for the listener to define can be defined as the display size of the above marker from the relationship between the visual acuity of the presentation participants and the eye resolution.
- the length T (mm) of one side of the marker can be defined according to the following formula (1).
- S refers to the size of the screen
- s refers to the size of the slide document
- X refers to the distance between the presenter and the screen
- Y refers to the distance between the listener and the screen.
- V0 indicates the visual acuity of the presenter
- V1 indicates the visual acuity of the listener.
- the length T (mm) of one side of the marker is set so as to satisfy the inequality condition.
- the marker setting data 13c shown in FIG. 3 can be defined as an example.
- FIG. 3 is a diagram illustrating an example of the marker setting data 13c.
- FIG. 3 shows the marker display size when the screen size is equivalent to 85 inches, ie, 1800 mm ⁇ 200 mm, and the slide document size is equivalent to A4 size, ie, 300 mm ⁇ 200 mm.
- FIG. 3 shows the presenter for each combination of the case where the distance between the presenter and the screen is 1 m, 1.5 m or 2 m and the case where the distance between the listener and the screen is 3 m, 5 m, 7 m or 10 m.
- the display size is shown so that the marker display on the screen can be visually recognized and it is difficult for the listener to visually recognize the marker display on the screen.
- the marker display size is set to 0.07 mm, and the distance between the listener and the screen is set. If the distance is 5 m, the marker display size is set to 0.1 mm. If the distance between the listener and the screen is 7 m, the marker display size is set to 0.13 mm. If the distance between them is 10 m, it is defined that the display size of the marker is set to 0.18 mm.
- marker setting data 13c for setting the display size of the marker, even when the screen size, the size of the slide document, the distance between the presenter and the screen, the distance between the listener and the screen, and the like change, In accordance with the change, the presenter can visually recognize the marker display on the screen, and the audience can set a display size that makes it difficult for the listener to visually recognize the marker display on the screen.
- FIG. 3 shows an example in which the screen size is equivalent to 85 inches and the slide document size is equivalent to A4 size.
- the display size is stored in a state where the computer can realize the above-described visibility as in the example of FIG.
- the region determination unit 15d is a processing unit that determines a region that is a candidate for highlight display.
- the area determination unit 15d activates the process when receiving a presentation start instruction via the input device 7.
- the area determination unit 15d reads out the explanation time data 13b related to the document file that has received the instruction to start the presentation from the explanation time data 13b stored in the storage unit 13.
- the area determination unit 15d selects one area index according to the progress of the presentation among the areas included in the explanation time data 13b. For example, when the presentation is started, the first area of one page of the slide is selected. Thereafter, subsequent areas are sequentially selected as the presentation progresses. That is, after the first area of the first page of the slide, the second area, the third area,..., All the areas of the first page are selected, the first area of the second page. The area is repeatedly selected until the last area of the last page is selected.
- the area determination unit 15d measures the elapsed time from the time when the area is selected, and whether or not the elapsed time exceeds the explanation time associated with the previously selected index, that is, elapsed time> explanation. Judge the time. At this time, if elapsed time> explanation time, the region determination unit 15d selects the next region following the previously selected region from the regions included in the explanation time data 13b, and continues monitoring the elapsed time. To do. Until the last region is selected, the region determination unit 15d repeatedly executes selection of a region and start of elapsed time.
- the display control unit 17 is a processing unit that executes various display controls for the display device 5. As shown in FIG. 2, the display control unit 17 includes a slide display unit 17a, a marker display unit 17b, and a highlight display unit 17c.
- the slide display unit 17a is a processing unit that executes display control related to the slide.
- the slide display unit 17a when a document file is opened by presentation software, the slide display unit 17a causes the display device 5 to display a slide included in the document file. At this time, the slide display unit 17a may display the slide of the first page among the slides included in the document file, or may display the slide of the page edited last. Thereafter, the slide display unit 17a receives a presentation start instruction, and then causes the display device 5 to display a slide related to the region selected by the region determination unit 15d. In addition, when the slide display unit 17 a receives a page switching instruction via the input device 7, the slide display unit 17 a changes the slide displayed on the display device 5.
- the slide display unit 17a causes the display device 5 to display a slide on the next page of the slide being displayed.
- the slide display unit 17a causes the display device 5 to display the slide of the previous page of the currently displayed slide.
- the marker display unit 17b is a processing unit that executes display control related to the marker.
- the marker display unit 17b is selected as a highlight display candidate according to the display size set by the marker setting unit 15c each time a region to be highlighted is selected by the region determination unit 15d. Markers are displayed in association with areas.
- the marker display unit 17b can display a marker at a position that is inscribed or circumscribed to the bullet or bullet of the area, in addition to the isolated point close to the area that is a candidate for highlight display and the edge of the screen. .
- FIG. 4 is a diagram showing an example of the slide screen.
- the slide screen 200 shown in FIG. 4 includes two areas. That is, in the first area, there are rectangular bullets “ ⁇ ” and “technical points” used for bullets, and bullets such as “1: ⁇ ” and “2: ⁇ ⁇ ”. included.
- the second area includes rectangular bullets “ ⁇ ” and “assumed service” used for bullets, and bullets such as “ ⁇ ” and “ ⁇ ”.
- the marker 210A and the marker 210B are markers associated with the first region.
- the marker 210A is displayed at an isolated point near the bullet 210 included in the first area.
- the marker 210B is displayed on the upper end of the slide screen 200. Both of these markers 210A and 210B can be displayed, or any one of them can be displayed alternatively.
- a pointer identified by a mouse, a laser pointer, or a line-of-sight detection is brought close to any of these markers via the input device 7, the highlight display of the first area is executed. become.
- the markers 220A to 220E are markers associated with the second area.
- the marker 220A is displayed at a position circumscribing the bullet 220 included in the second area, while the marker 220B is displayed at a position inscribed in the bullet 220 included in the second area. Is done.
- the marker 220C is displayed at the left end of the slide screen 200, the marker 220D is displayed at the lower end of the slide screen 200, and the marker 220E is displayed at the right end of the slide screen 200. All of these markers 220A to 220E can be displayed, or any one or more of them can be displayed.
- highlight display of the second area is executed. become.
- the marker display unit 17b can leave the marker once displayed on the slide without erasing it. However, when the predetermined condition is satisfied, the marker being displayed can be erased. For example, the marker display unit 17b can erase the marker when a predetermined period, for example, 30 seconds or 1 minute has elapsed since the marker was displayed. As another example, the marker display unit 17b can also delete the marker in the area where the highlight display is finished. As a further example, when the erasing operation is accepted via the input device 7, the marker display unit 17 b can also erase the marker that has accepted the erasing operation.
- the highlight display unit 17c is a processing unit that executes display control related to highlighting.
- the highlight display unit 17c repeatedly executes the following processing from receiving a presentation start instruction until receiving a presentation end instruction. That is, the highlight display unit 17c monitors pointers such as a mouse, a laser pointer, and a line-of-sight detection input via the input device 7. When the pointer moves, the highlight display unit 17c selects one marker that is being displayed. Then, the highlight display unit 17c determines whether or not the position of the pointer is within a predetermined range from the marker. At this time, when the position of the pointer is within a predetermined range from the marker, it is considered that the presenter intends to highlight the area corresponding to the marker. In this case, the highlight display unit 17c highlights an area corresponding to the marker.
- pointers such as a mouse, a laser pointer, and a line-of-sight detection input via the input device 7.
- the highlight display unit 17c selects one marker that is being displayed. Then, the highlight display unit 17c determines whether or not the position of the pointer is within a pre
- highlight display here means not only narrow highlight display, that is, display control in a broad sense, but also display control that brightens or reverses the background color.
- highlighting in general can be arbitrarily executed, such as emphasizing area filling and emphasizing fonts (font size, underline and italic).
- FIG. 5 is a diagram showing an example of the slide screen.
- the slide screen 300 shown in FIG. 5 is the same as the slide screen 200 shown in FIG. 4, and shows a case where highlight display is executed in the first area.
- the highlight display 310 shown in FIG. 5 the first area is brightly displayed by increasing the luminance of the background of the first area. As a result, the first area is emphasized, so that the audience's attention can be gathered in the first area.
- the highlight display can be returned to the normal display after a predetermined time by a timer, or can be returned to the normal display when a cancel operation is received via the input device 7.
- FIG. 6 is a flowchart illustrating the procedure of the time setting process according to the first embodiment.
- This process can be started automatically or manually. For example, when starting automatically, when the presentation software closes with the document file stored in the storage unit 13, or when the document file is overwritten and stored in the storage unit 13 while editing the document file via the presentation, Processing can be started. In addition, when starting with manual setting, the processing can be activated when an instruction to execute presentation pre-processing is received via the input device 7. In any case, the processing is started by reading out the document file corresponding to the save or execution instruction from the document files included in the document data 13a stored in the storage unit 13.
- the time setting unit 15a divides a slide included in a document file that has been stored or a document file that has received an instruction to execute pre-processing of a presentation into a plurality of regions (step S101). Then, the time setting unit 15a assigns an index for identifying the area to each area obtained by the division in step S101 (step S102).
- the time setting unit 15a selects one area from among a plurality of areas included in the slide (step S103). And the time setting part 15a counts the character string contained in the area
- the time setting unit 15a repeatedly executes the processes of steps S103 and S104 described above until all the areas included in the slide are selected (No in step S105).
- the time setting unit 15a registers the explanation time data 13b in which the index of the area and the explanation time are associated with the storage unit 13 (step S106). The process ends.
- step S103 and step S104 among the processes shown in FIG. 6 can be performed in parallel between a plurality of areas.
- FIG. 7 is a flowchart illustrating the procedure of the marker setting process according to the first embodiment. This process can be started at an arbitrary timing in a period from when the time setting process shown in FIG. 6 is started until when a presentation start instruction is received.
- condition acquisition unit 15b relates to any one of a document file that has been saved by presentation software, a document file that has received an instruction to execute presentation pre-processing, or a document file that has received a presentation start instruction.
- Identification information of the venue where the presentation is performed is acquired (step S201).
- the condition acquisition unit 15b acquires the size of the screen on which the display device 5 projects the slide, the distance between the presenter and the screen, the distance between the listener and the screen, and the like through a search using the identification information of the venue. (Step S202, Step S203 and Step S204).
- condition acquisition unit 15b acquires the size of the slide document included in the document file by referring to the properties of the document file (step S205).
- the marker setting unit 15c among the display sizes of the markers defined in the marker setting data 13c, the screen size acquired in steps S202 to S204, and the distance relationship between the screen, the presenter, and the listener.
- the display size corresponding to the size of the slide document acquired in step S205 is set as the marker display size used for highlight display of the slide (step S206), and the process ends.
- step S202 to step S205 in the processing shown in FIG. 7 can be executed in any order or can be executed in parallel with each other.
- FIG. 8 is a flowchart illustrating a procedure of marker display processing according to the first embodiment. This process is started when a presentation start instruction is received via the input device 7.
- step S301 when a presentation start instruction is accepted (step S301), the explanation time data 13b related to the document file that has accepted the presentation start instruction is read from the explanation time data 13b stored in the storage unit 13 (step S301). S302). After that, the region determination unit 15d selects one region index according to the progress of the presentation among the regions included in the explanation time data 13b (step S303).
- the marker display unit 17b displays the marker in association with the area selected in step S303 according to the display size set in the marker setting process shown in FIG. 7, that is, the area to be a highlight display candidate. (Step S304).
- the area determination unit 15d measures the elapsed time from the time when the area is selected in step S303, and whether or not the elapsed time exceeds the explanation time associated with the index selected in step S303, that is, Elapsed time> explanation time is determined (step S305).
- step S305 the area determination unit 15d continues to monitor the elapsed time.
- step S305 Yes the area determination unit 15d Until the last area is selected (No in step S306), the next area following the previously selected area is selected from the areas included in the explanation time data 13b (step S303), and the processes in steps S304 and S305 are performed. Repeatedly. Thereafter, when the last region is selected (step S306 Yes), the process is terminated.
- FIG. 9 is a flowchart illustrating the procedure of highlight display processing according to the first embodiment. This process is repeatedly executed from when the presentation start instruction is received until the presentation end instruction is received.
- the highlight display unit 17c monitors a mouse, a pointer such as a laser pointer or a line-of-sight detection input via the input device 7 (step S401).
- a pointer such as a laser pointer or a line-of-sight detection input via the input device 7
- the highlight display unit 17c selects one marker being displayed (step S402).
- the pointer is stopped (No at step S401)
- monitoring of the pointer is continued.
- the highlight display unit 17c determines whether or not the position of the pointer is within a predetermined range from the marker (step S403). At this time, if the position of the pointer is within a predetermined range from the marker (Yes in step S403), it is considered that the presenter intends to highlight the area corresponding to the marker. In this case, the highlight display unit 17c highlights an area corresponding to the marker (step S404).
- step S403 when the position of the pointer does not exist within a predetermined range from the marker (No in step S403), it is considered that the presenter does not intend to highlight the area corresponding to the marker. In this case, the highlight display is not executed and the process proceeds to step S405.
- step S405 the highlight display unit 17c repeatedly executes the processing from step S402 to step S404. Thereafter, when all the displayed markers are selected (Yes in step S405), the process returns to step S401 to monitor the pointer.
- the presentation support apparatus 10 sets the display size of the marker that activates the highlight display based on the distance relationship between the screen on which the slide is displayed as an example of the presentation screen, the presenter, and the audience.
- the marker is displayed in association with the area that is a candidate for highlight display.
- the marker can be displayed in a size smaller than the highlight display, and the highlight display can be called in a state where the presenter can visually recognize the presentation participants but is difficult for the listener to view.
- the presenter recognizes the marker, whether or not the highlight display is appropriate can be selected. Therefore, according to the presentation support apparatus 10 according to the present embodiment, it is possible to suppress a situation where highlights are displayed in a wrong place for the listener, for example, a place where the presenter is not explaining.
- the region that is a candidate for highlight display is advanced over time is exemplified, but the region that is the candidate for highlight display can also be determined by other methods. Therefore, in this embodiment, as an example, a case will be described in which a region to be a highlight display candidate is determined by voice recognition.
- FIG. 10 is a diagram illustrating a functional configuration of the presentation support apparatus 20 according to the second embodiment.
- the presentation support apparatus 20 shown in FIG. 10 is different from the presentation support apparatus 10 shown in FIG. 2 in that some of the data stored in the storage unit 21, that is, the extracted word data 21a and the recognized word data 21b are different.
- Some of the processing units virtually realized by the unit 23, that is, the extraction unit 23a, the recognition unit 23b, and the region determination unit 23c are different.
- the explanation time data 13b and the time setting unit 15a can be omitted. 10 parts different from the data or function shown in FIG. 1 are denoted by different reference numerals, and parts having the same data or function are denoted by the same reference numerals and description thereof is omitted.
- the extraction unit 23a is a processing unit that extracts words registered in the dictionary data used for speech recognition from the slides included in the document file as extracted word data 21a.
- the extraction unit 23a can automatically start the process of extracting the extracted word data 21a or can be started manually.
- the processing can be activated when an instruction to execute presentation pre-processing is received via the input device 7. In any case, the processing is started by reading out the document file corresponding to the save or execution instruction among the document files included in the document data 13a stored in the storage unit 21.
- the extraction unit 23a has received an instruction to execute a preprocessing of a document file that has been saved or a presentation among document files included in the document data 13a stored in the storage unit 21.
- Read a document file a document file.
- the extraction unit 23a can also acquire a document file from an auxiliary storage device such as a hard disk or an optical disk or a removable medium such as a memory card or a USB memory.
- the extraction unit 23a can also acquire a document file by receiving it from an external device via a network.
- the extraction unit 23a divides the slide included in the previously read document file into a plurality of areas. For example, the extraction unit 23a divides the slide in units of one sentence, line, paragraph, and the like. In this case, the extraction unit 23a scans the character string included in the slide, detects a delimiter character corresponding to a space, a punctuation point, or a line feed, and sets the delimiter character as the boundary of the region. The extraction unit 23a divides a character string included in the slide before and after such a boundary. Thus, the slide is divided into a plurality of areas for each delimiter character. In addition, the extraction unit 23a assigns an index for identifying the area to the area obtained by dividing the slide.
- the slide may be divided by manual setting by designating the boundary of the area via the input device 7 or the like.
- the extraction unit 23a selects one area from among a plurality of areas included in the slide. Subsequently, the extraction unit 23a extracts words and their readings by executing natural language processing on the character string included in the previously selected region. For example, the extraction unit 23a extracts a word whose word of speech is a noun and a reading of the word from morphemes obtained by executing morphological analysis or the like on a character string in the region. Thereafter, the extraction unit 23a repeatedly executes the above-described extraction of words and word readings until all the regions included in the slide are selected. In addition, the extraction unit 23 a registers the extracted word data 21 a in which the word, the reading of the word, and the index of the region including the word are associated with the storage unit 21.
- the recognition unit 23b is a processing unit that performs voice recognition.
- the recognition unit 23b is activated when the presentation software receives a presentation start instruction with the document file opened, and waits until an audio signal having a predetermined time length is input from the microphone 3. For example, it waits for an audio signal having a time length of at least one frame, for example, 10 msec.
- the recognizing unit 23b performs voice recognition such as word spotting on the voice signal every time a voice signal having a predetermined time length is input from the microphone 3.
- the recognizing unit 23b is the extracted word data relating to the slide that is included in the document file that is being executed by the presentation software among the extracted word data 21a stored in the storage unit 21 and that is being displayed on the display device 5. Apply to word spotting.
- the recognition unit 23b recognizes whether or not a word extracted from each region included in the slide being displayed exists in the utterance of the presenter. Then, when the reading of the word is recognized from the voice signal, the recognition unit 23b registers the recognition word data 21b in which the word and the time when the word is recognized are associated with each other in the storage unit 21. When the same word is recognized multiple times as time passes, the last, that is, the latest recognized time is registered in the storage unit 21.
- the recognizing unit 23b determines whether or not there is a word for which a predetermined period has elapsed since registration in the storage unit 21 in the recognized word data 21b stored in the storage unit 21. For example, for each word included in the recognition word data 21b, the recognition unit 23b has a difference between the time registered in association with the word and the time when the recognition unit 23b refers to the recognition word data 21b, that is, the current time. It is determined whether or not a predetermined threshold is exceeded. At this time, the recognizing unit 23b can change the threshold value used for the above determination according to a unit in which the slide is divided, for example, one sentence, line, paragraph or the like.
- the slide when the slide is divided in units of lines, it can be assumed that the number of characters read out in one area is approximately 20 to 30 characters. In this case, 3 seconds can be used as an example of the above threshold. Further, when the slide is divided in units of paragraphs, it can be assumed that a time longer than the line unit is devoted to reading. In this case, 20 to 30 seconds can be used as an example of the above threshold.
- the recognition unit 23b deletes the record related to the word from the recognized word data 21b stored in the storage unit 21.
- the recognition unit 23b leaves the word included in the recognized word data 21b stored in the storage unit 21 without deleting it.
- the recognition unit 23b determines whether or not the slide page displayed on the display device 5 has been changed. For example, the recognizing unit 23b determines whether a slide is switched by a slide show, or an operation for advancing a slide page or an operation for returning a slide page is received via the input device 7. At this time, when the slide page displayed on the display device 5 is changed, it is highly possible that the description of the presenter is switched from the slide of the page before the change to the slide of the page after the change. In this case, the recognition unit 23b deletes the recognized word data 21b stored in the storage unit 21. On the other hand, when the slide page displayed on the display device 5 is not changed, there is a high possibility that the page explained by the presenter will not change. In this case, the recognition unit 23b leaves the word included in the recognized word data 21b stored in the storage unit 21 without deleting it.
- the recognizing unit 23b recognizes a word that is highly likely to be explained by the presenter in the slide being displayed.
- a word included in the extracted word data 21a is referred to as an “extracted word”, and a word included in the recognized word data 21b is referred to as a “recognized word” to distinguish the labels from each other. is there.
- the region determination unit 23c calculates a score between the region in the slide being displayed and the word obtained as a speech recognition result, and determines the region having the highest score as a highlight execution target.
- the region determination unit 23c calculates a score for each region according to the following formula (2) as an example only.
- “W” in the above equation (2) is a vectorization of the frequency of recognition words recognized within a certain period of t seconds, for example, 3 seconds from the time when the score is calculated, and “D” This is a vectorization of the appearance frequency of extracted words included in the area to be calculated.
- the score obtained from equation (2) is normalized to a value of 0 ⁇ score ⁇ 1.
- the region determination unit 23c determines the region having the highest score as a candidate for highlight display.
- the region having the highest score is determined as the region that is a candidate for highlight display.
- the highest score value is a predetermined threshold, for example, 0.75 or more.
- An area having the highest score value may be determined as an area to be highlighted.
- marker display processing and highlight display processing are executed through the same processing as in the first embodiment.
- FIG. 11 is a flowchart illustrating a procedure of extracted word data generation processing according to the second embodiment.
- This process can be started automatically or manually. For example, when starting automatically, when the presentation software saves the document file in the storage unit 21 and then closes, or when the document file is saved in the storage unit 21 while editing the document file via the presentation, Can be activated.
- the processing can be activated when an instruction to execute presentation pre-processing is received via the input device 7. In any case, the processing is started by reading out the document file corresponding to the save or execution instruction among the document files included in the document data 13a stored in the storage unit 21.
- the extraction unit 23a divides a slide included in a document file into a plurality of regions in units of one sentence, line, paragraph, or the like (step S501). Subsequently, the extraction unit 23a assigns an index for identifying each region to the region obtained in step S501 (step S502).
- the extraction part 23a selects one index among the indexes allocated by step S502 (step S503). Subsequently, the extracting unit 23a extracts a word whose part of speech is a noun from the morpheme obtained by executing morpheme analysis or the like on the character string in the index region selected in step S503 and its reading (step). S504).
- the extraction unit 23a repeatedly executes the processes from step S503 to step S504 until all the indexes assigned in step S502 are selected (No in step S505).
- step S505 when all the indexes assigned in step S502 are selected (step S505 Yes), the extraction unit 23a stores the extracted word data 21a in which the word, the reading of the word, and the index of the region including the word are associated with each other. 21 is registered (step S506), and the process is terminated.
- FIG. 12 is a flowchart illustrating the procedure of voice recognition processing according to the second embodiment. This processing is started when the presentation software receives a presentation start instruction with the document file opened, and is repeatedly executed until a presentation end instruction is received.
- the recognition unit 23b waits until an audio signal having a predetermined time length is input from the microphone 3, for example, until an audio signal having a time length of at least one frame, for example, 10 msec is input (step S601).
- step S601 Yes When a voice signal having a predetermined time length is input from the microphone 3 (step S601 Yes), the recognition unit 23b performs voice recognition such as word spotting on the voice signal (step S602).
- word spotting is executed in step S602
- the slide is included in the document file in which the presentation software is being executed among the extracted word data 21a stored in the storage unit 21 and is being displayed on the display device 5. Extracted word data relating to a certain slide is applied as dictionary data.
- Step S603 when a word is recognized from the voice signal (Yes in step S603), the recognition unit 23b stores the recognized word data 21b in which the word recognized in step S602 and the time when the word is recognized are associated with each other. (Step S604), and the process proceeds to Step S605.
- Step S603 when a voice signal having a predetermined time length is not input from the microphone 3 or when a word is not recognized from the voice signal (No in Step S601 or Step S603), the subsequent process is skipped and the process proceeds to Step S605. .
- the recognizing unit 23b determines whether or not there is a word for which a predetermined period has elapsed since registration in the storage unit 21 in the recognized word data 21b stored in the storage unit 21 (step S605). Then, when there is a word for which a predetermined period has elapsed since registration in the storage unit 21 (step S605 Yes), the recognition unit 23b deletes the record related to the word from the recognized word data 21b stored in the storage unit 21. (Step S606). If there is no word for which a predetermined period has elapsed since registration in the storage unit 21 (No in step S605), the process of step S606 is skipped and the process proceeds to step S607.
- the recognizing unit 23b determines whether or not the slide page displayed on the display device 5 has been changed (step S607). At this time, when the slide page displayed on the display device 5 is changed (Yes in step S607), the recognizing unit 23b deletes the recognized word data 21b stored in the storage unit 21 (step S608), and in step S601. Return to processing. If the slide page displayed on the display device 5 has not been changed (No at step S607), the process returns to the process of step S601 without executing the process of step S608.
- FIG. 13 is a flowchart illustrating a procedure of marker display processing according to the second embodiment. This processing is started when the presentation software receives a presentation start instruction with the document file opened, and is repeatedly executed until a presentation end instruction is received. The cycle in which the execution of the process is repeated may be the same as or different from the voice recognition process shown in FIG. 12, and is executed in synchronization with the voice recognition process shown in FIG. It can also be executed asynchronously.
- the region determining unit 23 c selects one region from among the regions included in the slide being displayed (step S ⁇ b> 701). Subsequently, the region determination unit 23c calculates the score for each region selected in step S701 according to the above equation (2) (step S702).
- the area determining unit 23c repeatedly executes the processes in steps S701 and S702 described above.
- the region determining unit 23c highlights the region having the highest score among the scores calculated for each region. Is determined as a candidate area (step S704).
- the marker display unit 17b displays the marker in association with the area determined in step S704 according to the display size set in the marker setting process shown in FIG. Step S705) and the process is terminated.
- the region that is a candidate for highlight display is determined through voice recognition, so that the situation where the marker is displayed at an incorrect location can also be suppressed.
- the presentation support device 10 generates extracted word data in the same manner as in the first embodiment by extracting words from character strings included in meta information set in graphs, tables, images, and moving images. be able to.
- the presentation support apparatus 10 provides the presentation support service in a stand-alone manner in which the presentation software 10 is independently executed without depending on an external resource.
- a client server system can be constructed by providing a server that provides the presentation support service to a client that executes presentation software.
- the server device can be implemented by installing a presentation support program for realizing the above presentation support service as package software or online software.
- the server device may be implemented as a Web server that provides the presentation support service, or may be implemented as a cloud that provides the presentation support service by outsourcing.
- the client starts the presentation after uploading the document file used for the presentation and the identification information of the venue where the presentation is performed to the server device.
- the client uploads the audio signal collected from the microphone 3 in real time, and uploads the slide page information every time the slide page being displayed on the display device 5 is switched.
- the server apparatus can execute the processes shown in FIGS. 6 to 9 and FIGS. 11 to 13.
- the client can also be constructed as a thin client system by transmitting operation information related to the input device 7 to the server and causing the display device 5 to display only the processing results transmitted from the server.
- various resources such as document data are also held by the server, and the presentation software is also implemented as a virtual machine on the server.
- the presentation support program is added to the presentation software.
- FIG. 14 is a diagram illustrating a hardware configuration example of a computer that executes the presentation support program according to the first and second embodiments.
- the computer 100 includes an operation unit 110a, a speaker 110b, a camera 110c, a display 120, and a communication unit 130. Further, the computer 100 includes a CPU 150, a ROM 160, an HDD 170, and a RAM 180. These units 110 to 180 are connected via a bus 140.
- the HDD 170 stores a presentation support program 170 a that exhibits the same function as the processing unit shown in the first and second embodiments.
- the presentation support program 170a may be integrated or separated as with each component of the processing unit shown in FIG. That is, the HDD 170 does not necessarily have to store all the data shown in the first embodiment, and data used for processing may be stored in the HDD 170.
- the CPU 150 reads the presentation support program 170a from the HDD 170 and develops it on the RAM 180.
- the presentation support program 170a functions as a presentation support process 180a as shown in FIG.
- the presentation support process 180a expands various data read from the HDD 170 in an area allocated to the presentation support process 180a in the storage area of the RAM 180, and executes various processes using the expanded data.
- examples of processing executed by the presentation support process 180a include the processing shown in FIGS. 6 to 9 and FIGS. 11 to 13.
- the CPU 150 does not necessarily operate all the processing units described in the first embodiment, and the processing unit corresponding to the process to be executed may be virtually realized.
- the presentation support program 170a may not necessarily be stored in the HDD 170 or the ROM 160 from the beginning.
- each program is stored in a “portable physical medium” such as a flexible disk inserted into the computer 100, so-called FD, CD-ROM, DVD disk, magneto-optical disk, or IC card. Then, the computer 100 may acquire and execute each program from these portable physical media.
- each program is stored in another computer or server device connected to the computer 100 via a public line, the Internet, a LAN, a WAN, etc., and the computer 100 acquires and executes each program from these. It may be.
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Health & Medical Sciences (AREA)
- Audiology, Speech & Language Pathology (AREA)
- General Health & Medical Sciences (AREA)
- User Interface Of Digital Computer (AREA)
- Controls And Circuits For Display Device (AREA)
Abstract
プレゼンテーション支援装置(10)は、表示装置(5)が文書ファイルを表示するスクリーン、プレゼンタ及び聴講者の距離関係を取得する条件取得部(15b)と、距離関係からスクリーンに表示される文書ファイルのページに含まれる領域に関するハイライト表示を起動するマーカの表示サイズを設定するマーカ設定部(15c)と、表示装置に表示されたページに含まれる領域のうちハイライト表示の候補とする領域を決定する領域決定部(15d)と、表示サイズにしたがってハイライト表示の候補とする領域に対応付けてマーカを表示させるマーカ表示部(17b)とを有する。
Description
本発明は、プレゼンテーション支援装置、プレゼンテーション支援方法及びプレゼンテーション支援プログラムに関する。
プレゼンテーションを支援する技術の一例として、プレゼンタが説明中である箇所をプレゼンタや聴講者に提示するものがある。例えば、原稿の読み飛ばしを抑制することを目的とする表示装置が提案されている。この表示装置では、話者が発声した語句を認識し、認識した語句をもとに、表示パネルに表示中の原稿のうち読み上げられた部分を特定し、この特定した部分の表示状態を、第1の表示状態とは異なる第2の表示状態、例えば点滅等のハイライト表示に変化させる。
しかしながら、上記の技術では、次に説明するように、聴講者に誤った箇所がハイライト表示される場合がある。
すなわち、上記の表示装置では、話者が発声する語句を得るために音声認識が用いられる。ところが、音声認識で誤認識が発生する場合、誤認識に伴って話者が説明中でない箇所がハイライト表示される結果、聴講者に誤った箇所がハイライト表示される場合がある。この場合、表示装置は、聴講者の注意をミスリードする結果、プレゼンテーションの進行を妨げてしまうことがある。
1つの側面では、聴講者に誤った箇所がハイライト表示されるのを抑制できるプレゼンテーション支援装置、プレゼンテーション支援方法及びプレゼンテーション支援プログラムを提供することを目的とする。
一態様のプレゼンテーション支援装置は、表示装置が文書ファイルを表示するスクリーン、プレゼンタ及び聴講者の距離関係を取得する取得部と、前記距離関係から前記スクリーンに表示される文書ファイルのページに含まれる領域に関するハイライト表示を起動するマーカの表示サイズを設定する設定部と、前記表示装置に表示されたページに含まれる領域のうち前記ハイライト表示の候補とする領域を決定する決定部と、前記表示サイズにしたがって前記ハイライト表示の候補とする領域に対応付けて前記マーカを表示させるマーカ表示部とを有する。
聴講者に誤った箇所がハイライト表示されるのを抑制できる。
以下に添付図面を参照して本願に係るプレゼンテーション支援装置、プレゼンテーション支援方法及びプレゼンテーション支援プログラムについて説明する。なお、この実施例は開示の技術を限定するものではない。そして、各実施例は、処理内容を矛盾させない範囲で適宜組み合わせることが可能である。
[システム構成]
図1は、実施例1に係るプレゼンテーション支援システムの構成を示す図である。図1に示すプレゼンテーション支援システム1は、文書ファイルが表示装置5に表示されたプレゼンテーション画面のうちプレゼンタが説明中であると推定される箇所をハイライト表示させるプレゼンテーション支援サービスを提供する。
図1は、実施例1に係るプレゼンテーション支援システムの構成を示す図である。図1に示すプレゼンテーション支援システム1は、文書ファイルが表示装置5に表示されたプレゼンテーション画面のうちプレゼンタが説明中であると推定される箇所をハイライト表示させるプレゼンテーション支援サービスを提供する。
かかるプレゼンテーション支援サービスの一環として、プレゼンテーション支援システム1は、プレゼンテーション画面の一例としてスライドが表示されるスクリーン、プレゼンタ及び聴講者の距離関係からハイライト表示を起動するマーカの表示サイズを設定し、ハイライト表示の候補とする領域に対応付けてマーカを表示させる。
これによって、一例として、ハイライト表示よりも小さなサイズでマーカの表示を実現すると共に、プレゼンテーションの参加者のうちプレゼンタが視認できる一方で聴講者が視認しづらい状態でハイライト表示を呼び出すことができるマーカを表示する表示制御を実現する。この結果、プレゼンタがマーカを認識した段階でハイライト表示の適否を取捨選択できる。もって、聴講者に誤った箇所、例えばプレゼンタが説明中でない箇所等がハイライト表示される事態を抑制する。
ここで、以下では、一例として、上記の表示制御に関する機能がプレゼンテーションソフトにアドオンされる場合を想定し、当該プレゼンテーションソフトを用いて作成された文書ファイルが含む1または複数のスライドを表示装置5に表示させることによってプレゼンテーションが進行される場合を想定する。かかるスライドには、テキストや図形を始め、他のアプリケーションプログラムによって作成されたコンテンツをインポートすることができる。例えば、ワープロソフトで作成された文書、表計算ソフトで作成された表やグラフをインポートしたり、撮像装置で撮像された画像や動画、さらには、画像編集ソフトで編集された画像や動画などをインポートしたりすることができる。
図1に示すように、プレゼンテーション支援システム1には、マイク3と、表示装置5と、入力装置7と、プレゼンテーション支援装置10とが収容される。これらマイク3、表示装置5及び入力装置7などの周辺機器と、プレゼンテーション支援装置10との間は、有線または無線により接続される。
マイク3は、音声を電気信号に変換する装置であり、マイクロフォンと呼ばれることもある。例えば、マイク3は、プレゼンテーションを実施するプレゼンタに装着させることができる。この場合、ヘッドセット型やタイピン型のマイクをプレゼンタの身体や衣服の所定位置に装着させたり、ハンド型のマイクをプレゼンタに携帯させたりすることができる。また、マイク3は、プレゼンタの発話が集音できる範囲の所定位置に設置することもできる。この場合、マイク3には、取付け型や据置き型のマイクを採用することもできる。これらいずれの場合においても、マイク3には、任意のタイプの指向性を持つマイクを採用できるが、プレゼンタの発話以外の音声、例えば聴講者等の発話や騒音などの雑音が集音されるのを抑制するために、マイクの感度をプレゼンタの発声方向に限定することもできる。なお、マイク3には、ダイナミック型、エレクトレットコンデンサ型、コンデンサ型などの任意の変換方式を採用することができる。
このマイク3に音声を採取することにより得られたアナログ信号は、デジタル信号へ変換された上でプレゼンテーション支援装置10へ入力される。
表示装置5は、各種の情報を表示する装置である。例えば、表示装置5には、発光により表示を実現する液晶ディスプレイや有機EL(electroluminescence)ディスプレイなどを採用することもできるし、投影により表示を実現するプロジェクタを採用することもできる。また、表示装置5の設置台数は、必ずしも1台に限定されずともよく、複数の台数であってかまわない。以下では、一例として、プレゼンテーションの参加者であるプレゼンタ及び聴講者の両者が閲覧する共用の表示装置としてプロジェクタ及びプロジェクタが投影する画像を映すスクリーンが実装される場合を想定する。
この表示装置5は、一例として、プレゼンテーション支援装置10からの指示にしたがってプレゼンテーション画面を表示する。例えば、表示装置5は、プレゼンテーション支援装置10上で動作するプレゼンテーションソフトが開く文書ファイルのスライドを表示する。この場合、表示装置5は、文書ファイルが含むスライドのうちプレゼンタが入力装置7を介して指定する任意のスライドを表示させることもできるし、プレゼンテーションソフトが有するスライドショーの機能がON状態に設定された場合、各スライドが作成されたページ順に文書ファイルが含むスライドを切り替えて表示させることもできる。
入力装置7は、各種の情報に対する指示入力を受け付ける装置である。例えば、表示装置5がプロジェクタとして実装される場合、スクリーンに映し出された画面上の位置を指し示すレーザポインタを入力装置7として実装することもできる。すなわち、レーザポインタの中には、スライドのページを進めたり、戻したりする各種のボタンなどの操作部が設けられたリモコン機能付きのレーザポインタも存在する。このリモコン機能付きのレーザポインタが有する操作部を入力装置7として援用することもできる。この他、マウスやキーボードを入力装置7として採用したり、レーザポインタによって指し示されたポインタの位置のセンシング、プレゼンタの視線検出やジェスチャ認識を行うためにスクリーンまたはプレゼンタの所定の部位が撮像された画像を入力する画像センサを入力装置7として採用することもできる。なお、表示装置5が液晶ディスプレイとして実装される場合、入力装置7には、液晶ディスプレイ上に貼り合わせられたタッチセンサを採用することもできる。
この入力装置7は、一例として、プレゼンテーション支援装置10上でプレゼンテーションソフトに実行させる文書ファイルの指定、スライドのページを進める操作やスライドのページを戻す操作などを受け付ける。このように入力装置7を介して受け付けられた操作は、プレゼンテーション支援装置10へ出力されることになる。
プレゼンテーション支援装置10は、プレゼンテーションソフトが実行されるコンピュータである。
一実施形態として、プレゼンテーション支援装置10には、デスクトップ型またはノート型のパーソナルコンピュータなどの情報処理装置を採用することができる。この他、プレゼンテーション支援装置10には、上記のパーソナルコンピュータなどの据置き型の端末のみならず、各種の携帯端末装置を採用することもできる。例えば、携帯端末装置の一例として、スマートフォン、携帯電話機やPHS(Personal Handyphone System)などの移動体通信端末、さらには、PDA(Personal Digital Assistants)などのスレート端末などがその範疇に含まれる。
なお、本実施例では、あくまで一例として、プレゼンテーション支援装置10が上記のプレゼンテーションソフトを外部のリソースに依存せずに単独で実行するスタンドアローンで上記のプレゼンテーション支援サービスを提供する場合を想定する。詳細は後述するが、上記のプレゼンテーション支援サービスは、スタンドアローンで提供される実装に限定されない。例えば、プレゼンテーションソフトを実行するクライアントに対し、上記のプレゼンテーション支援サービスを提供するサーバを設けることによってクライアントサーバシステムとして構築したり、シンクライアントシステムとして構築したりすることもできる。
[プレゼンテーション支援装置10の構成]
続いて、本実施例に係るプレゼンテーション支援装置10の機能的構成について説明する。図2は、実施例1に係るプレゼンテーション支援装置10の機能的構成を示すブロック図である。図2に示すように、プレゼンテーション支援装置10は、入出力I/F(InterFace)部11と、記憶部13と、制御部15とを有する。なお、図2には、データの入出力の関係を表す実線が示されているが、図2には、説明の便宜上、最小限の部分について示されているに過ぎない。すなわち、各処理部に関するデータの入出力は、図示の例に限定されず、図示以外のデータの入出力、例えば処理部及び処理部の間、処理部及びデータの間、並びに、処理部及び外部装置の間のデータの入出力が行われることとしてもかまわない。
続いて、本実施例に係るプレゼンテーション支援装置10の機能的構成について説明する。図2は、実施例1に係るプレゼンテーション支援装置10の機能的構成を示すブロック図である。図2に示すように、プレゼンテーション支援装置10は、入出力I/F(InterFace)部11と、記憶部13と、制御部15とを有する。なお、図2には、データの入出力の関係を表す実線が示されているが、図2には、説明の便宜上、最小限の部分について示されているに過ぎない。すなわち、各処理部に関するデータの入出力は、図示の例に限定されず、図示以外のデータの入出力、例えば処理部及び処理部の間、処理部及びデータの間、並びに、処理部及び外部装置の間のデータの入出力が行われることとしてもかまわない。
入出力I/F部11は、マイク3、表示装置5及び入力装置7などの周辺機器との間で入出力を行うインタフェースである。
一実施形態として、入出力I/F部11は、入力装置7から入力された各種の操作を制御部15へ出力する。また、入出力I/F部11は、制御部15から出力されたスライドの画像データを表示装置5へ出力したり、制御部15から出力されたスライド上の所定の領域にマーカを付加する指示やスライドに含まれる領域に対するハイライト指示またはそのキャンセル指示を表示装置5へ出力したりする。また、入出力I/F部11は、マイク3から入力された音声データを制御部15へ出力する。
記憶部13は、制御部15で実行されるOS(Operating System)やプレゼンテーションソフトを始め、アプリケーションプログラムなどの各種プログラムに用いられるデータを記憶するデバイスである。
一実施形態として、記憶部13は、プレゼンテーション支援装置10における主記憶装置として実装される。例えば、記憶部13には、各種の半導体メモリ素子、例えばRAM(Random Access Memory)やフラッシュメモリを採用できる。また、記憶部13は、補助記憶装置として実装することもできる。この場合、HDD(Hard Disk Drive)、光ディスクやSSD(Solid State Drive)などを採用できる。
記憶部13は、制御部15で実行されるプログラムに用いられるデータの一例として、文書データ13a、説明時間データ13b及びマーカ設定用データ13cを記憶する。なお、上記の文書データ13a以外の説明時間データ13b及びマーカ設定用データ13cは、制御部15の説明で併せて説明することとする。また、記憶部13には、上記のデータ以外にも、他の電子データ、例えばマーカの形状や色を始め、領域とマーカとの位置に関する対応関係などが定義された定義データやハイライト表示に関する定義データなども併せて記憶することもできる。
文書データ13aは、文書に関するデータである。
一実施形態として、文書データ13aには、プレゼンテーションソフトを用いて1または複数のスライドが作成された文書ファイルを採用できる。かかるスライドには、テキストや図形を始め、他のアプリケーションプログラムによって作成されたコンテンツをインポートすることができる。例えば、ワープロソフトで作成された文書、表計算ソフトで作成された表やグラフをインポートしたり、撮像デバイスで撮像された画像や動画、さらには、画像編集ソフトで編集された画像や動画などをインポートしたりすることができる。このように、テキスト以外のコンテンツには、音声認識によるキーワード検索を実現するために、プレゼンテーションの開始前までに当該コンテンツの説明語句や説明文などの文字列を含むメタ情報を付与しておくことができる。
制御部15は、各種のプログラムや制御データを格納する内部メモリを有し、これらによって種々の処理を実行するものである。
一実施形態として、制御部15は、中央処理装置、いわゆるCPU(Central Processing Unit)として実装される。なお、制御部15は、必ずしも中央処理装置として実装されずともよく、MPU(Micro Processing Unit)やDSP(Digital Signal Processor)として実装されることとしてもよい。また、制御部15は、ASIC(Application Specific Integrated Circuit)やFPGA(Field Programmable Gate Array)などのハードワイヤードロジックによっても実現できる。
制御部15は、各種のプログラムを実行することによって下記の処理部を仮想的に実現する。例えば、制御部15は、図2に示すように、時間設定部15aと、条件取得部15bと、マーカ設定部15cと、領域決定部15dと、表示制御部17とを有する。
時間設定部15aは、文書ファイルに含まれるスライドの領域ごとに当該領域の説明に用いる予定時間を設定する処理部である。以下では、スライド上の領域の説明に用いる予定時間のことを「説明時間」と記載する場合がある。
一実施形態として、時間設定部15aは、上記の説明時間を設定する処理を自動的に開始することもできるし、手動設定で開始することもできる。例えば、自動的に開始する場合、プレゼンテーションソフトが文書ファイルを記憶部13に保存した状態で閉じる場合、あるいはプレゼンテーションソフトを介する文書ファイルの編集中に文書ファイルが記憶部13に上書き保存された場合に、処理を起動させることができる。また、手動設定で開始する場合、入力装置7を介してプレゼンテーションの前処理の実行指示を受け付けた場合に、処理を起動させることができる。いずれの場合においても、記憶部13に記憶された文書データ13aが含む文書ファイルのうち、保存または実行指示に対応する文書ファイルを読み出すことによって処理が開始される。
かかる説明時間の設定について説明すると、時間設定部15aは、記憶部13に記憶された文書データ13aが含む文書ファイルのうち保存が実行された文書ファイルあるいはプレゼンテーションの前処理の実行指示を受け付けた文書ファイルを読み出す。ここでは、一例として、時間設定部15aが記憶部13から文書ファイルを読み出す場合を例示したが、文書ファイルの入手経路はこれに限定されない。例えば、時間設定部15aは、ハードディスクや光ディスクなどの補助記憶装置またはメモリカードやUSB(Universal Serial Bus)メモリなどのリムーバブルメディアから文書ファイルを取得することもできる。また、時間設定部15aは、外部装置からネットワークを介して受信することによって文書ファイルを取得することもできる。
続いて、時間設定部15aは、先に読み出した文書ファイルに含まれるスライドを複数の領域へ分割する。例えば、時間設定部15aは、一文、行、段落などの単位でスライドを分割する。この場合、時間設定部15aは、スライドが含む文字列を走査して、スペース、句点または改行に対応する区切り文字を検出し、当該区切り文字を領域の境界に設定する。かかる境界を前後に、時間設定部15aは、スライドが含む文字列を区切る。これによって、スライドが複数の領域へ区切り文字ごとに分割される。その上で、時間設定部15aは、スライドの分割によって得られた領域に当該領域を識別するインデックスを割り当てる。なお、ここでは、スライドを自動的に分割する場合を例示したが、入力装置7等を介して領域の境界を指定させることによってスライドを手動設定で分割することとしてもかまわない。
スライドの分割後に、時間設定部15aは、当該スライドに含まれる複数の領域のうち領域を1つ選択する。続いて、時間設定部15aは、先に選択された領域に含まれる文字列を計数し、その文字数に応じて当該領域の説明時間を設定する。例えば、時間設定部15aは、領域内の文字数が多いほど長い説明時間を設定することができる。一例として、時間設定部15aは、文字単位の説明所要時間、例えば一文字あたりに設定された説明所要時間に領域の文字数を乗算することにより、当該領域の説明時間を算出することができる。その後、時間設定部15aは、スライドが含む領域が全て選択されるまで上記の説明時間の設定を繰り返し実行する。なお、ここでは、一例として、領域に当該領域の説明時間を対応付ける場合を例示したが、当該領域の説明を開始する時刻としてプレゼンテーションの開始からの経過時間を領域に対応付けることもできる。この場合、領域ごとに当該領域の1つ前までの領域の説明時間の累積値が説明の開始時刻として対応付けられることになる。
このようにして全ての領域に説明時間が設定された後に、時間設定部15aは、領域のインデックス及び説明時間が対応付けられた説明時間データ13bを記憶部13へ登録する。なお、上記の説明時間の設定は、文書ファイルに含まれる全てのスライドにわたって実行される。
条件取得部15bは、マーカの表示サイズを設定するのに用いる条件を取得する処理部である。
一実施形態として、条件取得部15bは、時間設定部15aにより説明時間データ13bの生成が開始される時点からプレゼンテーションの開始指示を受け付けるまでの期間の任意のタイミングで処理を起動できる。
かかる条件の取得について説明すると、条件取得部15bは、プレゼンテーションソフトにより保存が実行された文書ファイル、プレゼンテーションの前処理の実行指示を受け付けた文書ファイルあるいはプレゼンテーションの開始指示を受け付けた文書ファイルのいずれかに関するプレゼンテーションが実施される会場、例えば会議室やホールなどの識別情報を取得する。このような会場の識別情報を検索キーに利用することにより、スクリーンのサイズ、プレゼンタ及びスクリーン間の距離、及び、聴講者及びスクリーン間の距離などの情報が検索等により自動的に特定できる。
例えば、上記の会場の識別情報は、会場で利用可能な設備、例えば会場に設置されたプロジェクタの型番やスクリーンの製品番号と、会場における座席配置、例えばプロジェクタがスライドを映し出すスクリーンからプレゼンタの持ち場までの距離やスクリーンから聴講席までの距離などと対応付けられた状態で会場情報として管理される場合がある。
かかる会場情報から会場に設置される表示装置5のスクリーンの製品番号の検索に成功した場合、条件取得部15bは、図示しないスクリーンの製品情報、例えばスクリーンのサイズ、適用可能なプロジェクタの型番などがスクリーンの製品番号に対応付けられた情報を参照することにより、製品番号に対応付けられたスクリーンのサイズを検索する。これによって、表示装置5がスライドを投影するスクリーンのサイズが取得されることになる。
また、スクリーンからプレゼンタの持ち場、例えば席や壇上までの距離が検索できた場合、条件取得部15bは、それをプレゼンタ及びスクリーン間の距離として用いることができる。さらに、スクリーンから聴講席までの距離が検索できた場合、一例として、スクリーンから最も近い聴講席までの距離を聴講者及びスクリーン間の距離として用いたり、他の一例として、スクリーンから各聴講席までの距離のうち所定の統計値、例えば最頻値、中央値や平均値などを聴講者及びスクリーン間の距離として用いたりすることもできる。
これらの情報の取得後、条件取得部15bは、文書ファイルのプロパティ等を参照することにより、当該文書ファイルが含むスライド原稿のサイズを取得する。なお、ここでは、文書ファイルごとにスクリーンのサイズやスライド原稿のサイズを取得する場合を例示したが、スクリーンやスライド原稿の寸法が固定である場合、スクリーンやスライド原稿のサイズを取得する処理を省略することもできる。
なお、ここでは、一例として、スクリーン、プレゼンタ及び聴講者の距離関係の他、スクリーンのサイズやスライド原稿のサイズを条件として取得する場合を例示したが、これらの条件以外にも、他の条件を取得することとしてもかまわない。例えば、プレゼンタ及び聴講者のうち少なくとも一方の視力情報を取得することもできる。このとき、聴講者の視力情報を取得する場合、全ての聴講者の視力の平均値を視力情報として取得することもできるし、スクリーンから最前列に位置する聴講者の視力を視力情報として取得することもできるし、聴講者が持つ視力のうち最良の視力を視力情報として取得することもできる。また、ここでは、会場の識別情報を取得することにより、各種の条件を自動的に取得する場合を例示したが、条件の取得方法はこれに限定されない。例えば、各種の条件の入力、選択または選択を実行可能なGUIコンポーネント、例えばテキストボックス、プルダウンメニューやラジオボタンなどを通じて各種の条件を入力させることとしてもかまわない。
マーカ設定部15cは、条件取得部15bにより取得される条件からスクリーンに表示されるスライドに含まれる領域に関するハイライト表示を起動するマーカの表示サイズを設定する処理部である。
一実施形態として、マーカ設定部15cは、条件取得部15bによりマーカの設定に用いる各種の条件が取得された場合に、マーカ設定用データ13cに定義されたマーカの表示サイズのうち、条件取得部15bにより取得されたスクリーンのサイズと、スライド原稿のサイズと、スクリーン、プレゼンタ及び聴講者の距離関係とに対応する表示サイズを、当該スライドのハイライト表示に用いるマーカの表示サイズとして設定する。
かかるマーカ設定用データ13cには、一例として、表示装置5のスクリーンのサイズ別、スライド原稿のサイズ別、プレゼンタ及びスクリーン間の距離別、聴講者及びスクリーン間の距離別に、マーカの表示サイズが対応付けられたデータを採用できる。なお、ここでは、一例として、マーカを矩形とし、その一辺の長さ(mm)がサイズとして定義される場合を例示するが、マーカとして採用する図形は任意の形状であってもかまわない。例えば、円の場合には、直径や半径を定義すればよく、その他の形状の場合には、幅と高さを定義すればよい。また、マーカは、図形に限らず、記号や文字をマーカとして採用することもできる。
ここで、上記のマーカは、上記の条件の下、プレゼンテーションの参加者の視力と目の解像度の関係から、プレゼンタが視認できる一方で聴講者が視認しづらいマーカの一辺を表示サイズとして定義できる。例えば、下記の式(1)にしたがってマーカの一辺の長さT(mm)を定義できる。
上記の式(1)における「S」は、スクリーンのサイズを指し、また、「s」は、スライド原稿のサイズを指し、また、「X」は、プレゼンタ及びスクリーン間の距離を指し、また、「Y」は、聴講者及びスクリーン間の距離を指す。なお、「V0」は、プレゼンタの視力を指し、「V1」は、聴講者の視力を指すが、これらは一般の健常視力、例えば「1.5」、「1.0」や「0.7」などをみなし入力することもできる。
このような式(1)にしたがってマーカの一辺の長さT(mm)が不等式の条件を満たすように設定される。この結果、一例として、図3に示すマーカ設定用データ13cを定義できる。
図3は、マーカ設定用データ13cの一例を示す図である。図3には、スクリーンのサイズが85インチ相当、すなわち1800mm×200mmであり、かつスライド原稿のサイズがA4サイズ相当、すなわち300mm×200mmである場合のマーカの表示サイズが示されている。図3には、プレゼンタ及びスクリーン間の距離が1m、1.5mまたは2mである場合と、聴講者及びスクリーン間の距離が3m、5m、7mまたは10mである場合との各組合せに関し、プレゼンタがスクリーン上のマーカ表示を視認でき、かつ聴講者がスクリーン上のマーカ表示を視認しづらい表示サイズが示されている。
例えば、プレゼンタ及びスクリーン間の距離が1mである場合を例に挙げれば、聴講者及びスクリーン間の距離が3mであれば、マーカの表示サイズが0.07mmに設定され、聴講者及びスクリーン間の距離が5mであれば、マーカの表示サイズが0.1mmに設定され、聴講者及びスクリーン間の距離が7mであれば、マーカの表示サイズが0.13mmに設定され、また、聴講者及びスクリーン間の距離が10mであれば、マーカの表示サイズが0.18mmに設定されることが定義されている。
このようなマーカ設定用データ13cをマーカの表示サイズの設定に用いることにより、スクリーンのサイズ、スライド原稿のサイズ、プレゼンタ及びスクリーン間の距離、聴講者及びスクリーン間の距離などが変化する場合でも、その変化に合わせてプレゼンタがスクリーン上のマーカ表示を視認でき、かつ聴講者がスクリーン上のマーカ表示を視認しづらい表示サイズをマーカに設定できる。
なお、図3には、スクリーンのサイズが85インチ相当であり、かつスライド原稿のサイズがA4サイズ相当であるについて例示したが、他のスクリーンのサイズ及び他のスライド原稿のサイズについても各項目の値は異なれども図3の例と同様にコンピュータが上記の視認性を実現できる状態で表示サイズが記憶される。
領域決定部15dは、ハイライト表示の候補とする領域を決定する処理部である。
一実施形態として、領域決定部15dは、入力装置7を介してプレゼンテーションの開始指示を受け付けた場合に処理を起動する。この場合、領域決定部15dは、記憶部13に記憶された説明時間データ13bのうちプレゼンテーションの開始指示を受け付けた文書ファイルに関する説明時間データ13bを読み出す。その上で、領域決定部15dは、説明時間データ13bに含まれる領域のうちプレゼンテーションの進行度にしたがって領域のインデックスを1つ選択する。例えば、プレゼンテーションが開始された段階では、スライドの1ページの1番目の領域が選択される。その後、プレゼンテーションの進行に伴って後続する領域が順番に選択される。すなわち、スライドの1ページの1番目の領域に続いて、2番目の領域、3番目の領域、・・・、1ページ目の領域が全て選択されると、2ページの1番目の領域といった要領で最終ページの最後の領域が選択されるまで領域が繰り返し選択される。
その後、領域決定部15dは、領域が選択された時点からの経過時間を計測し、その経過時間が先に選択されたインデックスに対応付けられた説明時間を超えたか否か、すなわち経過時間>説明時間を判定する。このとき、経過時間>説明時間である場合、領域決定部15dは、説明時間データ13bに含まれる領域のうち先に選択された領域に後続する次の領域を選択し、経過時間の監視を継続する。最後の領域が選択されるまで、領域決定部15dは、領域の選択、及び、経過時間の開始を繰り返し実行する。
表示制御部17は、表示装置5に対する各種の表示制御を実行する処理部である。この表示制御部17は、図2に示す通り、スライド表示部17aと、マーカ表示部17bと、ハイライト表示部17cとを有する。
このうち、スライド表示部17aは、スライドに関する表示制御を実行する処理部である。
一実施形態として、スライド表示部17aは、プレゼンテーションソフトにより文書ファイルが開かれた場合、当該文書ファイルが含むスライドを表示装置5に表示させる。このとき、スライド表示部17aは、文書ファイルが含むスライドのうち最初のページのスライドを表示させることとしてもよいし、最後に編集が行われたページのスライドを表示させることとしてもよい。その後、スライド表示部17aは、プレゼンテーションの開始指示を受け付けた後、領域決定部15dにより選択された領域に関するスライドを表示装置5に表示させる。また、スライド表示部17aは、入力装置7を介してページの切替え指示を受け付けた場合、表示装置5に表示させるスライドを変更する。例えば、ページを進める操作を受け付けた場合、スライド表示部17aは、表示中のスライドの次ページのスライドを表示装置5に表示させる。また、ページを戻る操作を受け付けた場合、スライド表示部17aは、表示中のスライドの前ページのスライドを表示装置5に表示させる。
マーカ表示部17bは、マーカに関する表示制御を実行する処理部である。
一実施形態として、マーカ表示部17bは、領域決定部15dによりハイライト表示の候補とする領域が選択される度に、マーカ設定部15cにより設定された表示サイズにしたがってハイライト表示の候補とする領域に対応付けてマーカを表示させる。例えば、マーカ表示部17bは、ハイライト表示の候補とする領域に近接する孤立点、画面の端の他、領域の行頭文字や行頭記号に内接または外接する位置にマーカを表示させることができる。
図4は、スライド画面の一例を示す図である。図4に示すスライド画面200には、2つの領域が含まれる。すなわち、1つ目の領域には、箇条書きに用いる矩形の行頭記号「□」と「技術ポイント」という文字列と、「1:○○」及び「2:△△」などの箇条書きとが含まれる。また、2つ目の領域には、箇条書きに用いる矩形の行頭記号「□」と「想定サービス」という文字列と、「□□」及び「☆☆」などの箇条書きとが含まれる。
例えば、マーカ210A及びマーカ210Bは、1つ目の領域に対応付けられたマーカである。このうち、マーカ210Aは、1つ目の領域に含まれる行頭記号210の近傍の孤立点に表示される。また、マーカ210Bは、スライド画面200の上端に表示させる。これらマーカ210A及びマーカ210Bは、両方とも表示させることもできるし、いずれか1つを択一的に表示させることもできる。これらのうちいずれかのマーカに対し、入力装置7を介してマウス、レーザポインタや視線検出などで識別されるポインタが近付けられた場合、当該1つ目の領域のハイライト表示が実行されることになる。
また、マーカ220A~マーカ220Eは、2つ目の領域に対応付けられたマーカである。このうち、マーカ220Aは、2つ目の領域に含まれる行頭記号220に外接する位置に表示される一方で、マーカ220Bは、2つ目の領域に含まれる行頭記号220に内接する位置に表示される。また、マーカ220Cは、スライド画面200の左端に表示され、マーカ220Dは、スライド画面200の下端に表示され、マーカ220Eは、スライド画面200の右端に表示される。これらマーカ220A~マーカ220Eは、全てを表示させることもできるし、いずれか1つまたは複数を表示させることもできる。これらのうちいずれかのマーカに対し、入力装置7を介してマウス、レーザポインタや視線検出などで識別されるポインタが近付けられた場合、当該2つ目の領域のハイライト表示が実行されることになる。
図4に示したように、孤立点にマーカを表示させる場合、プレゼンタにマーカを視認させやすくできる。また、スライド画面の端部にマーカを表示させる場合、行頭記号に内接または外接する位置にマーカを表示させる場合、聴講者にマーカをより視認させにくくできる。
また、マーカ表示部17bは、スライド上に一旦表示させたマーカを消去せずにそのまま残しておくこともできるが、所定の条件を満たす場合には、表示中のマーカを消去することもできる。例えば、マーカ表示部17bは、マーカを表示させてから所定の期間、例えば30秒間や1分間を経過した場合に、当該マーカを消去することができる。他の一例として、マーカ表示部17bは、ハイライト表示が終了した領域のマーカを消去することもできる。更なる一例として、マーカ表示部17bは、入力装置7を介して消去操作を受け付けた場合に当該消去操作を受け付けたマーカを消去することもできる。
ハイライト表示部17cは、ハイライトに関する表示制御を実行する処理部である。
一実施形態として、ハイライト表示部17cは、プレゼンテーションの開始指示を受け付けてからプレゼンテーションの終了指示を受け付けるまで下記の処理を繰り返し実行する。すなわち、ハイライト表示部17cは、入力装置7を介して入力されるマウス、レーザポインタや視線検出などのポインタを監視する。そして、ポインタが移動した場合、ハイライト表示部17cは、表示中のマーカを1つ選択する。その上で、ハイライト表示部17cは、ポインタの位置がマーカから所定の範囲内に存在するか否かを判定する。このとき、ポインタの位置がマーカから所定の範囲内に存在する場合、プレゼンタが当該マーカに対応する領域をハイライト表示させる意思があるとみなす。この場合、ハイライト表示部17cは、当該マーカに対応する領域をハイライト表示する。一方、ポインタの位置がマーカから所定の範囲内に存在しない場合、プレゼンタが当該マーカに対応する領域をハイライト表示させる意思がないとみなす。そして、ハイライト表示部17cは、このようなポインタ及びマーカの位置関係に関する判定を表示中の全てのマーカが選択されるまで繰り返し実行する。なお、ここで言う「ハイライト表示」は、狭義のハイライト表示、すなわち背景色を明るくしたり、反転したりする表示制御に留まらず、広義のハイライト表示を意味する。例えば、領域の塗りつぶしの強調、フォント(フォントサイズ、下線や斜体)の強調などのように、強調表示の全般を任意に実行することができる。
図5は、スライド画面の一例を示す図である。図5に示すスライド画面300は、図4に示したスライド画面200と同様のものであり、1つ目の領域にハイライト表示が実行された場合が示されている。図5に示すハイライト表示310では、1つ目の領域の背景の輝度を上げることにより1つ目の領域が明るく表示されている。これによって、1つ目の領域が強調される結果、1つ目の領域に聴講者の注目を集めることができるようにしている。なお、ハイライト表示は、タイマにより所定時間後に通常表示へ戻すこともできるし、入力装置7を介してキャンセル操作を受け付けた場合に通常表示へ戻すこととしてもかまわない。
[処理の流れ]
次に、本実施例に係るプレゼンテーション支援装置10の処理の流れについて説明する。なお、ここでは、プレゼンテーション支援装置10によって実行される(1)時間設定処理、(2)マーカ設定処理、(3)マーカ表示処理、(4)ハイライト表示処理の順に説明することとする。
次に、本実施例に係るプレゼンテーション支援装置10の処理の流れについて説明する。なお、ここでは、プレゼンテーション支援装置10によって実行される(1)時間設定処理、(2)マーカ設定処理、(3)マーカ表示処理、(4)ハイライト表示処理の順に説明することとする。
(1)時間設定処理
図6は、実施例1に係る時間設定処理の手順を示すフローチャートである。この処理は、自動的に開始することもできるし、手動設定で開始することもできる。例えば、自動的に開始する場合、プレゼンテーションソフトが文書ファイルを記憶部13に保存した状態で閉じる場合、あるいはプレゼンテーションを介する文書ファイルの編集中に文書ファイルが記憶部13に上書き保存された場合に、処理を起動させることができる。また、手動設定で開始する場合、入力装置7を介してプレゼンテーションの前処理の実行指示を受け付けた場合に、処理を起動させることができる。いずれの場合においても、記憶部13に記憶された文書データ13aが含む文書ファイルのうち、保存または実行指示に対応する文書ファイルを読み出すことによって処理が開始される。
図6は、実施例1に係る時間設定処理の手順を示すフローチャートである。この処理は、自動的に開始することもできるし、手動設定で開始することもできる。例えば、自動的に開始する場合、プレゼンテーションソフトが文書ファイルを記憶部13に保存した状態で閉じる場合、あるいはプレゼンテーションを介する文書ファイルの編集中に文書ファイルが記憶部13に上書き保存された場合に、処理を起動させることができる。また、手動設定で開始する場合、入力装置7を介してプレゼンテーションの前処理の実行指示を受け付けた場合に、処理を起動させることができる。いずれの場合においても、記憶部13に記憶された文書データ13aが含む文書ファイルのうち、保存または実行指示に対応する文書ファイルを読み出すことによって処理が開始される。
図6に示すように、時間設定部15aは、保存が実行された文書ファイルあるいはプレゼンテーションの前処理の実行指示を受け付けた文書ファイルに含まれるスライドを複数の領域へ分割する(ステップS101)。その上で、時間設定部15aは、ステップS101の分割によって得られた各領域に当該領域を識別するインデックスを割り当てる(ステップS102)。
続いて、時間設定部15aは、スライドに含まれる複数の領域のうち領域を1つ選択する(ステップS103)。そして、時間設定部15aは、ステップS103で選択された領域に含まれる文字列を計数し、その文字数に応じて当該領域の説明時間を設定する(ステップS104)。
その後、時間設定部15aは、スライドが含む領域が全て選択されるまで(ステップS105No)、上記のステップS103及びステップS104の処理を繰り返し実行する。そして、スライドが含む領域が全て選択された場合(ステップS105Yes)、時間設定部15aは、領域のインデックス及び説明時間が対応付けられた説明時間データ13bを記憶部13へ登録し(ステップS106)、処理を終了する。
なお、図6に示した処理のうちステップS103及びステップS104の処理は、複数の領域間で並列して実行することができる。
(2)マーカ設定処理
図7は、実施例1に係るマーカ設定処理の手順を示すフローチャートである。この処理は、図6に示した時間設定処理が開始される時点からプレゼンテーションの開始指示を受け付けるまでの期間の任意のタイミングで処理を起動できる。
図7は、実施例1に係るマーカ設定処理の手順を示すフローチャートである。この処理は、図6に示した時間設定処理が開始される時点からプレゼンテーションの開始指示を受け付けるまでの期間の任意のタイミングで処理を起動できる。
図7に示すように、条件取得部15bは、プレゼンテーションソフトにより保存が実行された文書ファイル、プレゼンテーションの前処理の実行指示を受け付けた文書ファイルあるいはプレゼンテーションの開始指示を受け付けた文書ファイルのいずれかに関するプレゼンテーションが実施される会場の識別情報を取得する(ステップS201)。
続いて、条件取得部15bは、会場の識別情報を用いた検索などを通じて、表示装置5がスライドを投影するスクリーンのサイズ、プレゼンタ及びスクリーン間の距離、聴講者及びスクリーン間の距離などを取得する(ステップS202,ステップS203及びステップS204)。
さらに、条件取得部15bは、文書ファイルのプロパティ等を参照することにより、当該文書ファイルが含むスライド原稿のサイズを取得する(ステップS205)。
その上で、マーカ設定部15cは、マーカ設定用データ13cに定義されたマーカの表示サイズのうち、ステップS202~ステップS204で取得されたスクリーンのサイズ、並びに、スクリーン、プレゼンタ及び聴講者の距離関係と、ステップS205で取得されたスライド原稿のサイズとに対応する表示サイズを、当該スライドのハイライト表示に用いるマーカの表示サイズとして設定し(ステップS206)、処理を終了する。
なお、図7に示した処理のうちステップS202~ステップS205の処理は、順不同で実行することもできるし、互いに並列して実行することもできる。
(3)マーカ表示処理
図8は、実施例1に係るマーカ表示処理の手順を示すフローチャートである。この処理は、入力装置7を介してプレゼンテーションの開始指示を受け付けた場合に処理を起動する。
図8は、実施例1に係るマーカ表示処理の手順を示すフローチャートである。この処理は、入力装置7を介してプレゼンテーションの開始指示を受け付けた場合に処理を起動する。
図8に示すように、プレゼンテーションの開始指示を受け付けると(ステップS301)、記憶部13に記憶された説明時間データ13bのうちプレゼンテーションの開始指示を受け付けた文書ファイルに関する説明時間データ13bを読み出す(ステップS302)。その上で、領域決定部15dは、説明時間データ13bに含まれる領域のうちプレゼンテーションの進行度にしたがって領域のインデックスを1つ選択する(ステップS303)。
続いて、マーカ表示部17bは、図7に示したマーカ設定処理で設定された表示サイズにしたがってステップS303で選択された領域、すなわちハイライト表示の候補とする領域に対応付けてマーカを表示させる(ステップS304)。
その後、領域決定部15dは、ステップS303で領域が選択された時点からの経過時間を計測し、その経過時間がステップS303で選択されたインデックスに対応付けられた説明時間を超えたか否か、すなわち経過時間>説明時間を判定する(ステップS305)。
このとき、経過時間>説明時間となるまで(ステップS305No)、領域決定部15dは、経過時間の監視を継続し、経過時間>説明時間となった場合(ステップS305Yes)、領域決定部15dは、最後の領域が選択されるまで(ステップS306No)、説明時間データ13bに含まれる領域のうち先に選択された領域に後続する次の領域を選択し(ステップS303)、ステップS304及びステップS305の処理を繰り返し実行する。その後、最後の領域が選択された場合(ステップS306Yes)、処理を終了する。
(4)ハイライト表示処理
図9は、実施例1に係るハイライト表示処理の手順を示すフローチャートである。この処理は、プレゼンテーションの開始指示を受け付けてからプレゼンテーションの終了指示を受け付けるまで繰り返し実行される。
図9は、実施例1に係るハイライト表示処理の手順を示すフローチャートである。この処理は、プレゼンテーションの開始指示を受け付けてからプレゼンテーションの終了指示を受け付けるまで繰り返し実行される。
図9に示すように、ハイライト表示部17cは、入力装置7を介して入力されるマウス、レーザポインタや視線検出などのポインタを監視する(ステップS401)。そして、ポインタが移動した場合(ステップS401Yes)、ハイライト表示部17cは、表示中のマーカを1つ選択する(ステップS402)。なお、ポインタが停止している場合(ステップS401No)、ポインタの監視が継続される。
その上で、ハイライト表示部17cは、ポインタの位置がマーカから所定の範囲内に存在するか否かを判定する(ステップS403)。このとき、ポインタの位置がマーカから所定の範囲内に存在する場合(ステップS403Yes)、プレゼンタが当該マーカに対応する領域をハイライト表示させる意思があるとみなす。この場合、ハイライト表示部17cは、当該マーカに対応する領域をハイライト表示する(ステップS404)。
一方、ポインタの位置がマーカから所定の範囲内に存在しない場合(ステップS403No)、プレゼンタが当該マーカに対応する領域をハイライト表示させる意思がないとみなす。この場合、ハイライト表示は実行されずにステップS405へ移行する。
そして、表示中の全てのマーカが選択されるまで(ステップS405No)、ハイライト表示部17cは、ステップS402~ステップS404までの処理を繰り返し実行する。その後、表示中の全てのマーカが選択された場合(ステップS405Yes)、ステップS401へ戻り、ポインタの監視を行う。
[効果の一側面]
上述してきたように、本実施例に係るプレゼンテーション支援装置10は、プレゼンテーション画面の一例としてスライドが表示されるスクリーン、プレゼンタ及び聴講者の距離関係からハイライト表示を起動するマーカの表示サイズを設定し、ハイライト表示の候補とする領域に対応付けてマーカを表示させる。これによって、一例として、ハイライト表示よりも小さなサイズでマーカの表示を実現すると共に、プレゼンテーションの参加者のうちプレゼンタが視認できる一方で聴講者が視認しづらい状態でハイライト表示を呼び出すことができるマーカを表示する表示制御を実現する。この結果、プレゼンタがマーカを認識した段階でハイライト表示の適否を取捨選択できる。したがって、本実施例に係るプレゼンテーション支援装置10によれば、聴講者に誤った箇所、例えばプレゼンタが説明中でない箇所等がハイライト表示される事態を抑制できる。
上述してきたように、本実施例に係るプレゼンテーション支援装置10は、プレゼンテーション画面の一例としてスライドが表示されるスクリーン、プレゼンタ及び聴講者の距離関係からハイライト表示を起動するマーカの表示サイズを設定し、ハイライト表示の候補とする領域に対応付けてマーカを表示させる。これによって、一例として、ハイライト表示よりも小さなサイズでマーカの表示を実現すると共に、プレゼンテーションの参加者のうちプレゼンタが視認できる一方で聴講者が視認しづらい状態でハイライト表示を呼び出すことができるマーカを表示する表示制御を実現する。この結果、プレゼンタがマーカを認識した段階でハイライト表示の適否を取捨選択できる。したがって、本実施例に係るプレゼンテーション支援装置10によれば、聴講者に誤った箇所、例えばプレゼンタが説明中でない箇所等がハイライト表示される事態を抑制できる。
さて、上記の実施例1では、ハイライト表示の候補とする領域を時間経過によって進行させる場合を例示したが、他の方法によりハイライト表示の候補とする領域を決定することもできる。そこで、本実施例では、一例として、音声認識によりハイライト表示の候補とする領域を決定する場合について説明する。
[プレゼンテーション支援装置20の構成]
図10は、実施例2に係るプレゼンテーション支援装置20の機能的構成を示す図である。図10に示すプレゼンテーション支援装置20は、図2に示したプレゼンテーション支援装置10に比べて、記憶部21に記憶されるデータの一部、すなわち抽出単語データ21a及び認識単語データ21bが異なる他、制御部23が仮想的に実現する処理部の一部、すなわち抽出部23a、認識部23b及び領域決定部23cが異なる。この場合、説明時間データ13bや時間設定部15aは省略できる。なお、図10には、図1に示したデータ又は機能と異なる部分に異なる符号を付すと共に、同一のデータ又は機能である部分には同一の符号を付し、その説明を省略する。
図10は、実施例2に係るプレゼンテーション支援装置20の機能的構成を示す図である。図10に示すプレゼンテーション支援装置20は、図2に示したプレゼンテーション支援装置10に比べて、記憶部21に記憶されるデータの一部、すなわち抽出単語データ21a及び認識単語データ21bが異なる他、制御部23が仮想的に実現する処理部の一部、すなわち抽出部23a、認識部23b及び領域決定部23cが異なる。この場合、説明時間データ13bや時間設定部15aは省略できる。なお、図10には、図1に示したデータ又は機能と異なる部分に異なる符号を付すと共に、同一のデータ又は機能である部分には同一の符号を付し、その説明を省略する。
抽出部23aは、文書ファイルに含まれるスライドから音声認識で用いる辞書データに登録する単語を抽出単語データ21aとして抽出する処理部である。
一実施形態として、抽出部23aは、上記の抽出単語データ21aを抽出する処理を自動的に開始することもできるし、手動設定で開始することもできる。例えば、自動的に開始する場合、プレゼンテーションソフトが文書ファイルを記憶部21に保存した上で閉じる場合、あるいはプレゼンテーションを介する文書ファイルの編集中に文書ファイルが記憶部21に保存された場合に、処理を起動させることができる。また、手動設定で開始する場合、入力装置7を介してプレゼンテーションの前処理の実行指示を受け付けた場合に、処理を起動させることができる。いずれの場合においても、記憶部21に記憶された文書データ13aが含む文書ファイルのうち、保存または実行指示に対応する文書ファイルを読み出すことによって処理が開始される。
かかる抽出単語データ21aの生成について説明すると、抽出部23aは、記憶部21に記憶された文書データ13aが含む文書ファイルのうち保存が実行された文書ファイルあるいはプレゼンテーションの前処理の実行指示を受け付けた文書ファイルを読み出す。ここでは、一例として、抽出部23aが記憶部21から文書ファイルを読み出す場合を例示したが、文書ファイルの入手経路はこれに限定されない。例えば、抽出部23aは、ハードディスクや光ディスクなどの補助記憶装置またはメモリカードやUSBメモリなどのリムーバブルメディアから文書ファイルを取得することもできる。また、抽出部23aは、外部装置からネットワークを介して受信することによって文書ファイルを取得することもできる。
続いて、抽出部23aは、先に読み出した文書ファイルに含まれるスライドを複数の領域へ分割する。例えば、抽出部23aは、一文、行、段落などの単位でスライドを分割する。この場合、抽出部23aは、スライドが含む文字列を走査して、スペース、句点または改行に対応する区切り文字を検出し、当該区切り文字を領域の境界に設定する。かかる境界を前後に、抽出部23aは、スライドが含む文字列を区切る。これによって、スライドが複数の領域へ区切り文字ごとに分割される。その上で、抽出部23aは、スライドの分割によって得られた領域に当該領域を識別するインデックスを割り当てる。なお、ここでは、スライドを自動的に分割する場合を例示したが、入力装置7等を介して領域の境界を指定させることによってスライドを手動設定で分割することとしてもかまわない。
スライドの分割後に、抽出部23aは、当該スライドに含まれる複数の領域のうち領域を1つ選択する。続いて、抽出部23aは、先に選択された領域が含む文字列に対し、自然言語処理を実行することによって単語及びその読みを抽出する。例えば、抽出部23aは、領域内の文字列に形態素解析等を実行することにより得られた形態素のうち品詞が名詞である単語及び単語の読みを抽出する。その後、抽出部23aは、スライドが含む領域が全て選択されるまで上記の単語及び単語の読みの抽出を繰り返し実行する。その上で、抽出部23aは、単語、単語の読み及び単語が含まれる領域のインデックスが対応付けられた抽出単語データ21aを記憶部21へ登録する。
認識部23bは、音声認識を実行する処理部である。
一実施形態として、認識部23bは、プレゼンテーションソフトが文書ファイルを開いた状態でプレゼンテーションの開始指示を受け付けた場合に起動し、マイク3から所定時間長の音声信号が入力されるまで待機する。例えば、少なくとも1フレーム分の時間長、例えば10msecの音声信号が入力されるのを待機する。そして、認識部23bは、マイク3から所定時間長の音声信号が入力される度に、当該音声信号にワードスポッティングなどの音声認識を実行する。このとき、認識部23bは、記憶部21に記憶された抽出単語データ21aのうちプレゼンテーションソフトが実行中である文書ファイルが含むスライドであり、かつ表示装置5に表示中であるスライドに関する抽出単語データをワードスポッティングに適用する。これによって、認識部23bは、プレゼンタの発話の中に表示中のスライドに含まれる各領域から抽出された単語が存在するか否かを認識する。そして、認識部23bは、音声信号から単語の読みが認識された場合、当該単語及びその単語が認識された時間が対応付けられた認識単語データ21bを記憶部21へ登録する。なお、同一の単語が時間経過に伴って複数回にわたって認識される場合には、最後、すなわち最新に認識された時刻が記憶部21へ登録される。
その後、認識部23bは、記憶部21に記憶された認識単語データ21bのうち記憶部21へ登録されてから所定の期間が経過した単語が存在するか否かを判定する。例えば、認識部23bは、認識単語データ21bに含まれる単語ごとに、当該単語に対応付けて登録された時間と、認識部23bが認識単語データ21bを参照する時間、すなわち現時間との差が所定の閾値を超過するか否かを判定する。このとき、認識部23bは、スライドが分割された単位、例えば一文、行や段落などによって上記の判定に用いる閾値を変えることができる。例えば、スライドが行単位で分割される場合、1つの領域で読み上げられる文字数はおよそ20~30文字であると想定できる。この場合、上記の閾値の一例として、3秒を用いることができる。また、スライドが段落単位で分割される場合、行単位よりも長い時間が読み上げに割かれると想定できる。この場合、上記の閾値の一例として、20~30秒を用いることができる。
ここで、記憶部21へ登録されてから所定の期間、例えば3秒間が経過した単語が存在する場合、当該単語を含むスライドの領域に関する説明が終了している可能性が高まる。このような単語を残しておくと、説明が終了している領域がハイライトで表示される可能性も高まる。よって、認識部23bは、記憶部21に記憶された認識単語データ21bから当該単語に関するレコードを削除する。一方、記憶部21へ登録されてから所定の期間が経過した単語が存在しない場合、認識単語データ21bに含まれる単語が出現するスライドの領域に関する説明が終了していない可能性が高まる。この場合、説明が終了している領域がハイライトで表示される可能性は低い。よって、認識部23bは、記憶部21に記憶された認識単語データ21bに含まれる単語を削除せずにそのまま残す。
また、認識部23bは、表示装置5に表示されるスライドのページが変更されたか否かを判定する。例えば、認識部23bは、スライドショーによりスライドが切り替えられたり、入力装置7を介してスライドのページを進める操作またはスライドのページを戻す操作を受け付けたりしたかを判定する。このとき、表示装置5に表示されるスライドのページが変更された場合、プレゼンタの説明も変更前のページのスライドから変更後のページのスライドへ切り替わった可能性が高い。この場合、認識部23bは、記憶部21に記憶された認識単語データ21bを削除する。一方、表示装置5に表示されるスライドのページが変更されていない場合、プレゼンタが説明するページにも変りがない可能性が高い。この場合、認識部23bは、記憶部21に記憶された認識単語データ21bに含まれる単語を削除せずにそのまま残す。
これら一連の動作により、認識部23bは、表示中であるスライドの中でプレゼンタが説明中である可能性が高い単語を認識する。以下では、抽出単語データ21aに含まれる単語のことを「抽出単語」と記載すると共に、認識単語データ21bに含まれる単語のことを「認識単語」と記載し、互いのラベルを区別する場合がある。
領域決定部23cは、表示中であるスライド内の領域と、音声認識結果として得られた単語との間でスコアを算出し、スコアが最高である領域をハイライトの実行対象として決定する。
一実施形態として、領域決定部23cは、あくまで一例として、下記の式(2)にしたがって領域別にスコアを算出する。
上記の式(2)における「W」は、スコアを算出する時点から一定期間t秒、例えば3秒間の間に認識された認識単語の頻度をベクトル化したもので、「D」は、スコアの算出対象とする領域に含まれる抽出単語の出現頻度をベクトル化したものである。式(2)により求まるスコアは、0≦score≦1の値に正規化される。例えば、音声認識辞書に「今回、技術、ポイント、想定、サービス、本日、課題」の7つの単語が登録されており、3秒間の間に音声認識により単語「技術、ポイント」を認識し、スコア算出対象の領域からは単語「今回、技術、ポイント」を抽出した場合、W、Dは7次元ベクトル、すなわちW=[0,1,1,0,0,0,0]、D=[1,1,1,0,0,0,0]で表すことができるため、上記の式(2)より、下記の式(3)の通りに、当該領域のスコアが「0.82」と求まる。
このように、式(2)を用いて領域別にスコアが算出された後、領域決定部23cは、スコアが最高である領域をハイライト表示の候補とする領域として決定する。なお、ここでは、スコアが最高である領域をハイライト表示の候補とする領域として決定する場合を例示したが、スコアの最高値が所定の閾値、例えば0.75以上である場合に絞って当該スコアの最高値を持つ領域をハイライト表示の候補とする領域として決定することとしてもよい。
このようにしてハイライト表示の候補とする領域が決定された後は、上記の実施例1と同様の処理を経てマーカ表示処理やハイライト表示処理が実行されることになる。
[処理の流れ]
次に、本実施例に係るプレゼンテーション支援装置20の処理の流れについて説明する。なお、ここでは、プレゼンテーション支援装置20によって実行される(1)抽出単語データの生成処理、(2)音声認識処理、(3)マーカ表示処理の順に説明することとする。
次に、本実施例に係るプレゼンテーション支援装置20の処理の流れについて説明する。なお、ここでは、プレゼンテーション支援装置20によって実行される(1)抽出単語データの生成処理、(2)音声認識処理、(3)マーカ表示処理の順に説明することとする。
(1)抽出単語データの生成処理
図11は、実施例2に係る抽出単語データの生成処理の手順を示すフローチャートである。この処理は、自動的に開始することもできるし、手動設定で開始することもできる。例えば、自動的に開始する場合、プレゼンテーションソフトが文書ファイルを記憶部21に保存した上で閉じる場合、あるいはプレゼンテーションを介する文書ファイルの編集中に文書ファイルが記憶部21に保存された場合に、処理を起動させることができる。また、手動設定で開始する場合、入力装置7を介してプレゼンテーションの前処理の実行指示を受け付けた場合に、処理を起動させることができる。いずれの場合においても、記憶部21に記憶された文書データ13aが含む文書ファイルのうち、保存または実行指示に対応する文書ファイルを読み出すことによって処理が開始される。
図11は、実施例2に係る抽出単語データの生成処理の手順を示すフローチャートである。この処理は、自動的に開始することもできるし、手動設定で開始することもできる。例えば、自動的に開始する場合、プレゼンテーションソフトが文書ファイルを記憶部21に保存した上で閉じる場合、あるいはプレゼンテーションを介する文書ファイルの編集中に文書ファイルが記憶部21に保存された場合に、処理を起動させることができる。また、手動設定で開始する場合、入力装置7を介してプレゼンテーションの前処理の実行指示を受け付けた場合に、処理を起動させることができる。いずれの場合においても、記憶部21に記憶された文書データ13aが含む文書ファイルのうち、保存または実行指示に対応する文書ファイルを読み出すことによって処理が開始される。
図11に示すように、抽出部23aは、文書ファイルに含まれるスライドを一文、行または段落などの単位で複数の領域へ分割する(ステップS501)。続いて、抽出部23aは、ステップS501で得られた領域に各領域を識別するインデックスを割り当てる(ステップS502)。
そして、抽出部23aは、ステップS502で割り当てられたインデックスのうちインデックスを1つ選択する(ステップS503)。続いて、抽出部23aは、ステップS503で選択されたインデックスの領域内の文字列に形態素解析等を実行することにより得られた形態素のうち品詞が名詞である単語及びその読みを抽出する(ステップS504)。
そして、抽出部23aは、ステップS502で割り当てられたインデックスが全て選択されるまで(ステップS505No)、上記のステップS503~ステップS504までの処理を繰り返し実行する。
その後、ステップS502で割り当てられたインデックスが全て選択された場合(ステップS505Yes)、抽出部23aは、単語、単語の読み及び単語が含まれる領域のインデックスが対応付けられた抽出単語データ21aを記憶部21へ登録し(ステップS506)、処理を終了する。
(2)音声認識処理
図12は、実施例2に係る音声認識処理の手順を示すフローチャートである。この処理は、プレゼンテーションソフトが文書ファイルを開いた状態でプレゼンテーションの開始指示を受け付けた場合に起動し、プレゼンテーションの終了指示を受け付けるまで繰り返し実行される。
図12は、実施例2に係る音声認識処理の手順を示すフローチャートである。この処理は、プレゼンテーションソフトが文書ファイルを開いた状態でプレゼンテーションの開始指示を受け付けた場合に起動し、プレゼンテーションの終了指示を受け付けるまで繰り返し実行される。
図12に示すように、認識部23bは、マイク3から所定時間長の音声信号が入力されるまで、例えば少なくとも1フレーム分の時間長、例えば10msecの音声信号が入力されるまで待機する(ステップS601)。
そして、マイク3から所定時間長の音声信号が入力されると(ステップS601Yes)、認識部23bは、当該音声信号にワードスポッティングなどの音声認識を実行する(ステップS602)。かかるステップS602でワードスポッティングが実行される場合には、記憶部21に記憶された抽出単語データ21aのうちプレゼンテーションソフトが実行中である文書ファイルが含むスライドであり、かつ表示装置5に表示中であるスライドに関する抽出単語データが辞書データとして適用される。
このとき、音声信号から単語が認識された場合(ステップS603Yes)、認識部23bは、ステップS602で認識された単語及びその単語が認識された時間が対応付けられた認識単語データ21bを記憶部21へ登録し(ステップS604)、ステップS605の処理へ移行する。
一方、マイク3から所定時間長の音声信号が入力されていない場合、あるいは音声信号から単語が認識されなかった場合(ステップS601NoまたはステップS603No)、以降の処理を飛ばしてステップS605の処理へ移行する。
ここで、認識部23bは、記憶部21に記憶された認識単語データ21bのうち記憶部21へ登録されてから所定の期間が経過した単語が存在するか否かを判定する(ステップS605)。そして、記憶部21へ登録されてから所定の期間が経過した単語が存在する場合(ステップS605Yes)、認識部23bは、記憶部21に記憶された認識単語データ21bから当該単語に関するレコードを削除する(ステップS606)。なお、記憶部21へ登録されてから所定の期間が経過した単語が存在しない場合(ステップS605No)には、ステップS606の処理を飛ばしてステップS607の処理へ移行する。
その後、認識部23bは、表示装置5に表示されるスライドのページが変更されたか否かを判定する(ステップS607)。このとき、表示装置5に表示されるスライドのページが変更された場合(ステップS607Yes)、認識部23bは、記憶部21に記憶された認識単語データ21bを削除し(ステップS608)、ステップS601の処理へ戻る。なお、表示装置5に表示されるスライドのページが変更されていない場合(ステップS607No)、ステップS608の処理を実行せずにステップS601の処理へ戻る。
(3)マーカ表示処理
図13は、実施例2に係るマーカ表示処理の手順を示すフローチャートである。この処理は、プレゼンテーションソフトが文書ファイルを開いた状態でプレゼンテーションの開始指示を受け付けた場合に起動し、プレゼンテーションの終了指示を受け付けるまで繰り返し実行される。なお、処理の実行が繰り返される周期は、図12に示した音声認識処理と同様であってもよいし、異なってもよく、図12に示した音声認識処理と同期して実行されることとしてもよいし、非同期で実行されることとしてもかまわない。
図13は、実施例2に係るマーカ表示処理の手順を示すフローチャートである。この処理は、プレゼンテーションソフトが文書ファイルを開いた状態でプレゼンテーションの開始指示を受け付けた場合に起動し、プレゼンテーションの終了指示を受け付けるまで繰り返し実行される。なお、処理の実行が繰り返される周期は、図12に示した音声認識処理と同様であってもよいし、異なってもよく、図12に示した音声認識処理と同期して実行されることとしてもよいし、非同期で実行されることとしてもかまわない。
図13に示すように、領域決定部23cは、表示中であるスライドに含まれる領域のうち領域を1つ選択する(ステップS701)。続いて、領域決定部23cは、上記の式(2)にしたがってステップS701で選択された領域別のスコアを算出する(ステップS702)。
そして、表示中であるスライドに含まれる全ての領域のインデックスを選択するまで(ステップS703No)、領域決定部23cは、上記のステップS701及びステップS702の処理を繰り返し実行する。
その後、表示中であるスライドに含まれる全ての領域のインデックスが選択された場合(ステップS703Yes)、領域決定部23cは、領域別に算出されたスコアのうち最高値のスコアを持つ領域をハイライト表示の候補とする領域として決定する(ステップS704)。
そして、マーカ表示部17bは、図7に示したマーカ設定処理で設定された表示サイズにしたがってステップS704で決定された領域、すなわちハイライト表示の候補とする領域に対応付けてマーカを表示させ(ステップS705)、処理を終了する。
[効果の一側面]
上述してきたように、本実施例に係るプレゼンテーション支援装置20においても、上記の実施例1と同様、聴講者に誤った箇所、例えばプレゼンタが説明中でない箇所等がハイライト表示される事態を抑制できる。
上述してきたように、本実施例に係るプレゼンテーション支援装置20においても、上記の実施例1と同様、聴講者に誤った箇所、例えばプレゼンタが説明中でない箇所等がハイライト表示される事態を抑制できる。
さらに、本実施例に係るプレゼンテーション支援装置20では、ハイライト表示の候補とする領域を音声認識を通じて決定するので、マーカが誤った箇所に表示される事態も抑制できる。
さて、これまで開示の装置に関する実施例について説明したが、本発明は上述した実施例以外にも、種々の異なる形態にて実施されてよいものである。そこで、以下では、本発明に含まれる他の実施例を説明する。
[テキスト以外のハイライト表示]
上記の実施例1や実施例2では、スライドのうち文字列を含む領域をハイライト表示させる場合を例示したが、スライドには、文字列以外にも、グラフ、表、画像や動画などが含まれていてもかまわない。この場合、例えば、プレゼンテーション支援装置10は、グラフ、表、画像や動画に設定されたメタ情報に含まれる文字列から単語を抽出することによって上記の実施例1と同様に抽出単語データを生成することができる。
上記の実施例1や実施例2では、スライドのうち文字列を含む領域をハイライト表示させる場合を例示したが、スライドには、文字列以外にも、グラフ、表、画像や動画などが含まれていてもかまわない。この場合、例えば、プレゼンテーション支援装置10は、グラフ、表、画像や動画に設定されたメタ情報に含まれる文字列から単語を抽出することによって上記の実施例1と同様に抽出単語データを生成することができる。
[操作の応用例]
上記の実施例1や実施例2では、入力装置7を介してポインタがマーカに近付ける操作を受け付けることにより、マーカに対応する領域をハイライト表示させる場合を例示したが、他の操作を受け付けることもできる。例えば、実施例2のように、スライド上に1つのマーカが択一的に表示される場合、マーカの正解または不正解を指定する操作を受け付け、その結果に応じて処理を実行することもできる。一例として、表示中のマーカに対する回答として、正解(OK)が指定された場合には、当該マーカに対応する領域をハイライト表示させる。一方、不正解(NG)が指定された場合には、当該マーカに対応する領域の次にスコアが上位であった領域に対応付けて新たなマーカを表示させる。
上記の実施例1や実施例2では、入力装置7を介してポインタがマーカに近付ける操作を受け付けることにより、マーカに対応する領域をハイライト表示させる場合を例示したが、他の操作を受け付けることもできる。例えば、実施例2のように、スライド上に1つのマーカが択一的に表示される場合、マーカの正解または不正解を指定する操作を受け付け、その結果に応じて処理を実行することもできる。一例として、表示中のマーカに対する回答として、正解(OK)が指定された場合には、当該マーカに対応する領域をハイライト表示させる。一方、不正解(NG)が指定された場合には、当該マーカに対応する領域の次にスコアが上位であった領域に対応付けて新たなマーカを表示させる。
[文書ファイルの応用例]
上記の実施例1では、プレゼンテーションソフトによって作成された文書ファイルを用いる場合を例示したが、他のアプリケーションプログラムによって作成された文書ファイルを用いることができる。すなわち、表示時に画面単位で表示されるページを含む文書ファイルであれば、ワープロソフトの文書ファイルが有するページをスライドに読み替えたり、表計算ソフトの文書ファイルが有するシートをスライドに読み替えることによって図7~図9に示した処理を同様に適用できる。
上記の実施例1では、プレゼンテーションソフトによって作成された文書ファイルを用いる場合を例示したが、他のアプリケーションプログラムによって作成された文書ファイルを用いることができる。すなわち、表示時に画面単位で表示されるページを含む文書ファイルであれば、ワープロソフトの文書ファイルが有するページをスライドに読み替えたり、表計算ソフトの文書ファイルが有するシートをスライドに読み替えることによって図7~図9に示した処理を同様に適用できる。
[他の実装例]
上記の実施例1では、プレゼンテーション支援装置10が上記のプレゼンテーションソフトを外部のリソースに依存せずに単独で実行するスタンドアローンで上記のプレゼンテーション支援サービスを提供する場合を例示したが、他の実装形態を採用することもできる。例えば、プレゼンテーションソフトを実行するクライアントに対し、上記のプレゼンテーション支援サービスを提供するサーバを設けることによってクライアントサーバシステムとして構築することもできる。
上記の実施例1では、プレゼンテーション支援装置10が上記のプレゼンテーションソフトを外部のリソースに依存せずに単独で実行するスタンドアローンで上記のプレゼンテーション支援サービスを提供する場合を例示したが、他の実装形態を採用することもできる。例えば、プレゼンテーションソフトを実行するクライアントに対し、上記のプレゼンテーション支援サービスを提供するサーバを設けることによってクライアントサーバシステムとして構築することもできる。
この場合、パッケージソフトウェアやオンラインソフトウェアとして上記のプレゼンテーション支援サービスを実現するプレゼンテーション支援プログラムをインストールさせることによってサーバ装置を実装できる。例えば、サーバ装置は、上記のプレゼンテーション支援サービスを提供するWebサーバとして実装することとしてもよいし、アウトソーシングによって上記のプレゼンテーション支援サービスを提供するクラウドとして実装することとしてもかまわない。
このとき、クライアントは、サーバ装置に対し、プレゼンテーションに用いる文書ファイル及びプレゼンテーションを実施する会場の識別情報をアップロードした後に、プレゼンテーションが開始される。プレゼンテーションが開始されると、クライアントは、マイク3から採取された音声信号をリアルタイムでアップロードし、表示装置5に表示中のスライドのページが切り替わる度にスライドのページ情報をアップロードする。これによって、サーバ装置は、図6~図9や図11~図13に示した処理が実行可能となる。
さらに、クライアントは、入力装置7に関する操作情報をサーバへ伝送し、サーバから伝送される処理結果だけを表示装置5に表示させることにより、シンクライアントシステムとして構築することもできる。この場合には、各種のリソース、例えば文書データもサーバにより保持されると共に、プレゼンテーションソフトもサーバで仮想マシンとして実装されることになる。
なお、上記の実施例1や実施例2では、プレゼンテーション支援プログラムがプレゼンテーションソフトにアドオンされる場合を想定したが、ライセンス権限を有するクライアントからプレゼンテーション支援プログラムをライブラリとして参照する要求を受け付けた場合に、プレゼンテーション支援プログラムをプラグインさせることもできる。
[プレゼンテーション支援プログラム]
また、上記の実施例で説明した各種の処理は、予め用意されたプログラムをパーソナルコンピュータやワークステーションなどのコンピュータで実行することによって実現することができる。そこで、以下では、図14を用いて、上記の実施例と同様の機能を有するプレゼンテーション支援プログラムを実行するコンピュータの一例について説明する。
また、上記の実施例で説明した各種の処理は、予め用意されたプログラムをパーソナルコンピュータやワークステーションなどのコンピュータで実行することによって実現することができる。そこで、以下では、図14を用いて、上記の実施例と同様の機能を有するプレゼンテーション支援プログラムを実行するコンピュータの一例について説明する。
図14は、実施例1及び実施例2に係るプレゼンテーション支援プログラムを実行するコンピュータのハードウェア構成例を示す図である。図14に示すように、コンピュータ100は、操作部110aと、スピーカ110bと、カメラ110cと、ディスプレイ120と、通信部130とを有する。さらに、このコンピュータ100は、CPU150と、ROM160と、HDD170と、RAM180とを有する。これら110~180の各部はバス140を介して接続される。
HDD170には、図14に示すように、上記の実施例1や実施例2で示した処理部と同様の機能を発揮するプレゼンテーション支援プログラム170aが記憶される。このプレゼンテーション支援プログラム170aは、図2または図10に示した処理部の各構成要素と同様、統合又は分離してもかまわない。すなわち、HDD170には、必ずしも上記の実施例1で示した全てのデータが格納されずともよく、処理に用いるデータがHDD170に格納されればよい。
このような環境の下、CPU150は、HDD170からプレゼンテーション支援プログラム170aを読み出した上でRAM180へ展開する。この結果、プレゼンテーション支援プログラム170aは、図14に示すように、プレゼンテーション支援プロセス180aとして機能する。このプレゼンテーション支援プロセス180aは、RAM180が有する記憶領域のうちプレゼンテーション支援プロセス180aに割り当てられた領域にHDD170から読み出した各種データを展開し、この展開した各種データを用いて各種の処理を実行する。例えば、プレゼンテーション支援プロセス180aが実行する処理の一例として、図6~図9や図11~図13に示す処理などが含まれる。なお、CPU150では、必ずしも上記の実施例1で示した全ての処理部が動作せずともよく、実行対象とする処理に対応する処理部が仮想的に実現されればよい。
なお、上記のプレゼンテーション支援プログラム170aは、必ずしも最初からHDD170やROM160に記憶されておらずともかまわない。例えば、コンピュータ100に挿入されるフレキシブルディスク、いわゆるFD、CD-ROM、DVDディスク、光磁気ディスク、ICカードなどの「可搬用の物理媒体」に各プログラムを記憶させる。そして、コンピュータ100がこれらの可搬用の物理媒体から各プログラムを取得して実行するようにしてもよい。また、公衆回線、インターネット、LAN、WANなどを介してコンピュータ100に接続される他のコンピュータまたはサーバ装置などに各プログラムを記憶させておき、コンピュータ100がこれらから各プログラムを取得して実行するようにしてもよい。
1 プレゼンテーション支援システム
3 マイク
5 表示装置
7 入力装置
10 プレゼンテーション支援装置
11 入出力I/F部
13 記憶部
13a 文書データ
13b 説明時間データ
13c マーカ設定用データ
15 制御部
15a 時間設定部
15b 条件取得部
15c マーカ設定部
15d 領域決定部
17 表示制御部
17a スライド表示部
17b マーカ表示部
17c ハイライト表示部
3 マイク
5 表示装置
7 入力装置
10 プレゼンテーション支援装置
11 入出力I/F部
13 記憶部
13a 文書データ
13b 説明時間データ
13c マーカ設定用データ
15 制御部
15a 時間設定部
15b 条件取得部
15c マーカ設定部
15d 領域決定部
17 表示制御部
17a スライド表示部
17b マーカ表示部
17c ハイライト表示部
Claims (15)
- 表示装置が文書ファイルを表示するスクリーン、プレゼンタ及び聴講者の距離関係を取得する取得部と、
前記距離関係から前記スクリーンに表示される文書ファイルのページに含まれる領域に関するハイライト表示を起動するマーカの表示サイズを設定する設定部と、
前記表示装置に表示されたページに含まれる領域のうち前記ハイライト表示の候補とする領域を決定する決定部と、
前記表示サイズにしたがって前記ハイライト表示の候補とする領域に対応付けて前記マーカを表示させるマーカ表示部と
を有することを特徴とするプレゼンテーション支援装置。 - 音声認識を実行する認識部と、
前記表示装置に表示中であるページ内の領域ごとに当該領域から抽出された第1の単語と前記音声認識の結果として得られる第2の単語とから関連度を算出する算出部とをさらに有し、
前記決定部は、前記表示装置に表示中であるページ内の領域のうち前記関連度が最高である領域を前記ハイライトの実行対象とする領域として決定することを特徴とする請求項1に記載のプレゼンテーション支援装置。 - 前記マーカに対する操作を受け付けた場合に、当該マーカに対応する領域に関するハイライト表示を実行するハイライト表示部をさらに有することを特徴とする請求項1に記載のプレゼンテーション支援装置。
- 前記マーカに対応する回答として正解が選択された場合に、当該マーカに対応する領域に関するハイライト表示を実行するハイライト表示部をさらに有することを特徴とする請求項1に記載のプレゼンテーション支援装置。
- 前記マーカ表示部は、前記ハイライト表示の候補とする領域に近接する孤立点、前記ページの画面の端、または、領域の行頭文字または行頭記号に内接または外接する位置に前記マーカを表示させることを特徴とする請求項1に記載のプレゼンテーション支援装置。
- コンピュータが、
表示装置が文書ファイルを表示するスクリーン、プレゼンタ及び聴講者の距離関係を取得する処理と、
前記距離関係から前記スクリーンに表示される文書ファイルのページに含まれる領域に関するハイライト表示を起動するマーカの表示サイズを設定する処理と、
前記表示装置に表示されたページに含まれる領域のうち前記ハイライト表示の候補とする領域を決定する処理と、
前記表示サイズにしたがって前記ハイライト表示の候補とする領域に対応付けて前記マーカを表示させる処理と
を実行することを特徴とするプレゼンテーション支援方法。 - 前記コンピュータが、
音声認識を実行する処理と、
前記表示装置に表示中であるページ内の領域ごとに当該領域から抽出された第1の単語と前記音声認識の結果として得られる第2の単語とから関連度を算出する処理とをさらに実行し、
前記決定する処理は、前記表示装置に表示中であるページ内の領域のうち前記関連度が最高である領域を前記ハイライトの実行対象とする領域として決定することを特徴とする請求項6に記載のプレゼンテーション支援方法。 - 前記コンピュータが、
前記マーカに対する操作を受け付けた場合に、当該マーカに対応する領域に関するハイライト表示を実行する処理をさらに実行することを特徴とする請求項6に記載のプレゼンテーション支援方法。 - 前記コンピュータが、
前記マーカに対応する回答として正解が選択された場合に、当該マーカに対応する領域に関するハイライト表示を実行する処理をさらに実行することを特徴とする請求項6に記載のプレゼンテーション支援方法。 - 前記表示する処理は、前記ハイライト表示の候補とする領域に近接する孤立点、前記ページの画面の端、または、領域の行頭文字または行頭記号に内接または外接する位置に前記マーカを表示させることを特徴とする請求項6に記載のプレゼンテーション支援方法。
- コンピュータに、
表示装置が文書ファイルを表示するスクリーン、プレゼンタ及び聴講者の距離関係を取得する処理と、
前記距離関係から前記スクリーンに表示される文書ファイルのページに含まれる領域に関するハイライト表示を起動するマーカの表示サイズを設定する処理と、
前記表示装置に表示されたページに含まれる領域のうち前記ハイライト表示の候補とする領域を決定する処理と、
前記表示サイズにしたがって前記ハイライト表示の候補とする領域に対応付けて前記マーカを表示させる処理と
を実行させることを特徴とするプレゼンテーション支援プログラム。 - 前記コンピュータに、
音声認識を実行する処理と、
前記表示装置に表示中であるページ内の領域ごとに当該領域から抽出された第1の単語と前記音声認識の結果として得られる第2の単語とから関連度を算出する処理とをさらに実行させ、
前記決定する処理は、前記表示装置に表示中であるページ内の領域のうち前記関連度が最高である領域を前記ハイライトの実行対象とする領域として決定することを特徴とする請求項11に記載のプレゼンテーション支援プログラム。 - 前記コンピュータに、
前記マーカに対する操作を受け付けた場合に、当該マーカに対応する領域に関するハイライト表示を実行する処理をさらに実行させることを特徴とする請求項11に記載のプレゼンテーション支援プログラム。 - 前記コンピュータに、
前記マーカに対応する回答として正解が選択された場合に、当該マーカに対応する領域に関するハイライト表示を実行する処理をさらに実行させることを特徴とする請求項11に記載のプレゼンテーション支援プログラム。 - 前記表示する処理は、前記ハイライト表示の候補とする領域に近接する孤立点、前記ページの画面の端、または、領域の行頭文字または行頭記号に内接または外接する位置に前記マーカを表示させることを特徴とする請求項11に記載のプレゼンテーション支援プログラム。
Priority Applications (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| PCT/JP2015/054035 WO2016129121A1 (ja) | 2015-02-13 | 2015-02-13 | プレゼンテーション支援装置、プレゼンテーション支援方法及びプレゼンテーション支援プログラム |
| JP2016574611A JP6350682B2 (ja) | 2015-02-13 | 2015-02-13 | プレゼンテーション支援装置、プレゼンテーション支援方法及びプレゼンテーション支援プログラム |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| PCT/JP2015/054035 WO2016129121A1 (ja) | 2015-02-13 | 2015-02-13 | プレゼンテーション支援装置、プレゼンテーション支援方法及びプレゼンテーション支援プログラム |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| WO2016129121A1 true WO2016129121A1 (ja) | 2016-08-18 |
Family
ID=56614541
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| PCT/JP2015/054035 Ceased WO2016129121A1 (ja) | 2015-02-13 | 2015-02-13 | プレゼンテーション支援装置、プレゼンテーション支援方法及びプレゼンテーション支援プログラム |
Country Status (2)
| Country | Link |
|---|---|
| JP (1) | JP6350682B2 (ja) |
| WO (1) | WO2016129121A1 (ja) |
Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2008027080A (ja) * | 2006-07-19 | 2008-02-07 | Casio Comput Co Ltd | プレゼンテーションシステム |
| JP2009063636A (ja) * | 2007-09-04 | 2009-03-26 | Sharp Corp | 表示装置 |
| JP2009271814A (ja) * | 2008-05-09 | 2009-11-19 | Seiko Epson Corp | 表示装置、および、表示装置における表示方法 |
Family Cites Families (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2006106845A (ja) * | 2004-09-30 | 2006-04-20 | Seiko Epson Corp | 文書概要作成装置、表示装置、情報処理装置、プレゼンテーションシステム、文書概要作成プログラム、文書概要作成装置制御プログラム、表示装置制御プログラム、情報処理装置制御プログラム、文書概要作成方法、文書概要作成装置制御方法、表示装置制御方法及び情報処理装置制御方法 |
-
2015
- 2015-02-13 JP JP2016574611A patent/JP6350682B2/ja not_active Expired - Fee Related
- 2015-02-13 WO PCT/JP2015/054035 patent/WO2016129121A1/ja not_active Ceased
Patent Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2008027080A (ja) * | 2006-07-19 | 2008-02-07 | Casio Comput Co Ltd | プレゼンテーションシステム |
| JP2009063636A (ja) * | 2007-09-04 | 2009-03-26 | Sharp Corp | 表示装置 |
| JP2009271814A (ja) * | 2008-05-09 | 2009-11-19 | Seiko Epson Corp | 表示装置、および、表示装置における表示方法 |
Also Published As
| Publication number | Publication date |
|---|---|
| JPWO2016129121A1 (ja) | 2017-09-21 |
| JP6350682B2 (ja) | 2018-07-04 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP6432405B2 (ja) | プレゼンテーション支援装置、プレゼンテーション支援方法及びプレゼンテーション支援プログラム | |
| US10114809B2 (en) | Method and apparatus for phonetically annotating text | |
| JP6361351B2 (ja) | 発話ワードをランク付けする方法、プログラム及び計算処理システム | |
| US20080193015A1 (en) | Contextual input method | |
| US20190213261A1 (en) | Translation device, translation method, and recording medium | |
| EP4440127A2 (en) | Video generating method and apparatus, electronic device, and readable storage medium | |
| KR20150048751A (ko) | 피처 기반 후보 선택 | |
| CN104866308A (zh) | 一种场景图像的生成方法及装置 | |
| TW201510774A (zh) | 以語音辨識來選擇控制客體的裝置及方法 | |
| EP2897055A1 (en) | Information processing device, information processing method, and program | |
| JP2014229091A (ja) | 文字入力用のプログラム | |
| US20190213998A1 (en) | Method and device for processing data visualization information | |
| CN116579013A (zh) | 数据处理的方法、装置、设备和存储介质 | |
| JP2017146672A (ja) | 画像表示装置、画像表示方法、画像表示プログラム及び画像表示システム | |
| US12164528B2 (en) | Information processing apparatus, information processing method, and storage medium for obtaining annotated training data | |
| CN110546634A (zh) | 翻译装置 | |
| JP2018005011A (ja) | プレゼンテーション支援装置、プレゼンテーション支援システム、プレゼンテーション支援方法及びプレゼンテーション支援プログラム | |
| US20160292140A1 (en) | Associative input method and terminal | |
| JP6790886B2 (ja) | 情報処理プログラム、情報処理方法および情報処理装置 | |
| JP6372577B2 (ja) | プレゼンテーション支援方法、プレゼンテーション支援プログラム及びプレゼンテーション支援装置 | |
| TW201506685A (zh) | 以語音辨識來選擇控制客體的裝置及方法 | |
| JP6350682B2 (ja) | プレゼンテーション支援装置、プレゼンテーション支援方法及びプレゼンテーション支援プログラム | |
| JP6304396B2 (ja) | プレゼンテーション支援方法、プレゼンテーション支援プログラム及びプレゼンテーション支援装置 | |
| US20210165540A1 (en) | Information processing device, information processing method, and program | |
| CN112307866A (zh) | 用于生成信息的方法和装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| 121 | Ep: the epo has been informed by wipo that ep was designated in this application |
Ref document number: 15881995 Country of ref document: EP Kind code of ref document: A1 |
|
| ENP | Entry into the national phase |
Ref document number: 2016574611 Country of ref document: JP Kind code of ref document: A |
|
| NENP | Non-entry into the national phase |
Ref country code: DE |
|
| 122 | Ep: pct application non-entry in european phase |
Ref document number: 15881995 Country of ref document: EP Kind code of ref document: A1 |
